AWS DataSync : L'accélérateur de migration de données

Le besoin

Tu as des millions de fichiers (des téraoctets ou pétaoctets) en local et tu veux les migrer massivement et rapidement vers AWS, ou mettre en place une synchronisation régulière (ex: toutes les nuits).

Le contexte & Fonctionnement

DataSync est un outil de transfert de données à grande vitesse, optimisé pour saturer proprement ta bande passante réseau et aller 10 fois plus vite que des outils classiques (comme rsync ou un simple script de copie).

On-Prem vers AWS : Tu as besoin d'installer un Agent (sous forme de VM) dans ton centre de données local pour lire les fichiers et les compresser/chiffrer avant l'envoi.
AWS vers AWS : Si tu synchronises des données entre deux services AWS (ex: d'un compte AWS à un autre, ou d'une région à une autre), aucun agent n'est requis, AWS gère tout en interne.
Vers quels services AWS peut-il synchroniser ?
- Amazon S3
- Amazon EFS
- AWS FSx (toutes les versions : Windows, Lustre, ONTAP, OpenZFS).
Préservation des métadonnées : C'est capital pour l'examen. DataSync préserve les permissions des fichiers, les dates de modification, les ownerships (UID/GID pour Linux, ACL pour Windows).