Problèmes de compatibilité entre fabricants de stockages, ancienneté du stockage source, importantes quantités de données à déplacer… Au moment de choisir une solution de migration de fichiers, la liste des éléments à prendre en considération complique la prise de décision.
Le marché de la solution de migration de fichiers est en plein développement. Par leur budget et leur mise en place complexe, de nombreuses offres s’adressent avant tout aux grands groupes. D’autres visent les PME, mais se limitent aux faibles nombres ou volumes de fichiers à transférer.
La solution Miria for Migration d’Atempo relève le défi auquel font face de plus en plus d’organisations confrontées à l’explosion de leurs volumes de données : manipuler plusieurs centaines de milliers voir des millions de fichiers, allant de plusieurs centaines de téraoctets à plusieurs pétaoctets de données dans des environnements IT complexes, car hétérogènes et multi-constructeurs.
Nous avons fait le tour de la question : pour contrôler les migrations de fichiers, l’outil que vous choisirez doit proposer 8 fonctionnalités essentielles. Objectif : une migration de fichiers agile, qui garantit l’intégrité des données et donne la priorité aux utilisateurs !
- * -
La plupart des solutions de migration de fichiers procèdent d’abord à la collecte des données, puis lorsque cette étape est enfin finalisée, à leur transfert. Le problème reste que sur de très nombreux systèmes, dès quelques centaines de milliers de fichiers, la collecte des fichiers à migrer peut prendre plusieurs semaines ! Pendant ce temps, votre équipe de migration et votre stockage cible attendent avec impatience les premiers octets.
Avec sa fonctionnalité de multi-threading intelligent, Miria for Migration rend la migration de fichiers à la fois plus souple et plus rapide. Pas d’attente inactive : vos fichiers commencent à être en mouvement en quelques heures, la collecte et la migration sont parallélisées en bonne intelligence. La solution accède en même temps aux deux stockages, et procède simultanément à l’analyse de la source et au transfert vers la cible.
- * -
Qui dit importante quantité de fichiers à migrer, dit souvent arborescences complexes et bien garnies. Avant même de gérer le poids individuel de chaque fichier, le parcours d’arborescence (tree walk) nécessaire à la construction de la liste des fichiers à déplacer allonge les délais de la migration. La situation se complique encore d’un cran lorsqu’il faut maintenir la production sur le stockage source, car les utilisateurs modifient l’arborescence tout au long du projet de migration et qu’il faut impérativement détecter ces modifications et les prendre en compte dans le projet.
La fonctionnalité FastScan de Miria for Migration détecte rapidement les fichiers à migrer depuis le stockage source. Chaque cycle de migration recense ainsi grâce au FastScan chaque fichier créé, modifié, ou supprimé depuis le dernier cycle de migration. Le FastScan permet ainsi non seulement de gagner du temps lors de la création de la liste initiale des fichiers à migrer, mais aussi tout au long du projet, jour après jour en aidant à l’identification du « reste-à-migrer ». Cette fonctionnalité unique à un impact très fort sur la rapidité du processus de migration.
- * -
Le maintien de la production pendant la migration met en concurrence les utilisateurs et la solution de migration. La bande passante devient un enjeu d’affrontement !
Miria for Migration laisse la priorité à la production. Les flux de données liés à la migration sont limités pendant les plages horaires prédéfinies afin de garantir le service aux utilisateurs. Hors de ces plages réservées, Miria va accélérer les transferts en utilisant le maximum de bande passante afin de respecter au mieux les délais.
- * -
Dans les domaines tels que la Recherche ou l’IoT, il est fréquent d’assister à une croissance exponentielle des volumes de données gérés par des organisations, et ce quel que soit leur taille. Les utilisateurs font alors face au soudain besoin de migrer plusieurs millions de fichiers voir parfois même des pétaoctets de données vers des stockages plus capacitifs.
Pour rendre accessible le transfert d’un tel volume, Miria for Migration fait appel au data movement modulaire. À tout moment, les storage managers peuvent ajouter ou supprimer des Data Movers Miria, selon la puissance nécessaire à chaque étape de la migration de fichiers. Associé au multithreading et à la parallélisation des tâches, le data movement modulaire assure la régulation agile des flux de données.
- * -
Une telle souplesse dans la migration de grands volumes de fichiers ne peut pas se gérer de façon linéaire ! Pour maintenir le contrôle sur les flux de données et consolider progressivement l’architecture cible, Miria for Migration procède par cycles de migration itératifs. À chaque étape, Miria détecte les modifications apportées au stockage source, et les reproduit sur le stockage cible.
Grâce à cette synchronisation en « boucles successives », les stockages source et cible convergent avec fluidité vers la bascule finale. Grâce à ce processus cyclique, la bascule devient une formalité qui se limite à synchroniser un delta-fichiers en une énième opération d’un processus déjà répété et connu : la convergence est ainsi grandement facilitée et prévisible.
- * -
La bascule entre stockages source et cible cristallise les enjeux de la migration de fichiers. Cette étape se déroule bien souvent sous la pression de la production mise en attente et des utilisateurs impatients de récupérer l’accès à leurs précieuses données. Pression maximum pour les storage managers, le temps est compté, la liste des points à valider est infinie. Cette approche à elle seule est source d’omissions involontaires ou d’impasses faites sur les contrôles.
Miria for Migration démystifie l’étape de la bascule, il ne s’agit plus d’un « saut de la foi » dans l’inconnu, mais d’un processus continu, méthodique et contrôlé : une succession de migrations et de phases de contrôles.
Non seulement cette approche vous permet de concilier production et migration, mais elle vous permet également de réduire le cutover final à un énième cycle d’une migration, un cycle final, déroulant une méthode déjà répétée et maîtrisée, un cycle bien plus court et plus simple que les précédents. Une fois les derniers contrôles validés, la bascule réseau finale est ensuite un jeu d’enfant.
- * -
Les projets de migrations à l’échelle pétaoctets s’étirent souvent sur plusieurs semaines pour les plus rapides d’entre eux. Impossible de tout consigner à la main, il faut impérativement que la solution de migration dispose d’un journal historisant tous les transferts.
C’est le cas avec Miria qui permet ainsi pendant et bien après la migration de fichiers, de retrouver dans le journal des transferts la trace de tous les transferts, chacune des versions d’un fichier y est soigneusement consignée. En cas de besoin, il est ainsi possible de retrouver l’histoire individuelle de chaque fichier.
- * -
Les meilleurs outils ne sont rien, si l’on hésite sur la façon de les utiliser. La gestion des données est un métier ; et celle de leur transfert en est un autre. C’est pourquoi Atempo met à la disposition de ses clients des experts en migration de fichiers. Aux côtés des équipes métier et des storage managers, ils auditent le stockage et déploient Miria for Migration, optimisent son data mouvement pour correspondre au mieux aux besoins de chaque migration. À la fin du processus, les équipes de nos clients sont formées :
- à chaque étape de la migration de fichiers : préparation, implication des utilisateurs, préparation de la validation, découpage en sous-projets / zones homogènes… ;
- et à la prise en main de la solution Miria for Migration - avant, pendant, et après l’opération.
Grâce à l’accompagnement proposé par Atempo, la migration de fichiers se double toujours d’un transfert de compétences.
***
Vous souhaitez en savoir plus sur Miria ?
***
A lire aussi :