96 votes

Transfert de 10 To de fichiers des États-Unis vers un centre de données au Royaume-Uni

Je suis en train de migrer mon serveur des États-Unis vers le Royaume-Uni, d'un centre de données à un autre. Mon hôte m'a dit que je devrais pouvoir atteindre 11 mégaoctets par seconde.

Le système d'exploitation est Windows Server 2008 aux deux extrémités.

La taille moyenne de mes fichiers est d'environ 100 Mo et les données sont réparties sur cinq disques de 2 To.

Quelle serait la méthode recommandée pour transférer ces fichiers ?

  • FTP
  • SMB
  • Rsync / Robocopy
  • Autre ?

Je ne suis pas trop préoccupé par la sécurité car il s'agit de fichiers publics de toute façon, mais je veux juste une solution qui puisse pousser le taux de transfert à 11 Mo/s au maximum pour minimiser le temps de transfert total.

173voto

Shane Madden Points 112034

Expédiez plutôt les disques durs à travers l'océan.

À 11 Mbps avec une utilisation complète, il faut un peu moins de 90 jours pour transférer 10 To.


11 Mbps = 1.375 MBps = 116,015 Go/jour .

10240 GB / 116.015 GB/jour = ~88.3 jours .

26voto

Lucas Kauffman Points 16740

Je dirais rsync, à 11 MB/s vous aurez 10-14 jours et même si vous êtes interrompu, rsync reprendra facilement là où il s'est arrêté la dernière fois.

A 11 Mbps, j'expédierais les disques durs comme suggéré ci-dessus :)

15voto

Korjavin Ivan Points 2200

Rsync bien sûr.

Au moins, vous pouvez continuer à tout moment après une pause, et ce, sans aucune douleur.

12voto

David Locke Points 4419

Ne jamais sous-estimer la largeur de bande d'un break rempli de cassettes.

-- Trad.

Dans votre cas, il s'agit de disques ou de bandes envoyés par coursier, mais le principe reste valable. Si vous n'êtes pas préoccupé par la latence, cette solution sera beaucoup moins chère que la bande passante du réseau nécessaire pour transférer 10 To de données dans un délai raisonnable.

10voto

Will Points 229

Vous devriez utiliser rsync. Il va compresser les données et dé-dupliquer avant de l'envoyer. Il peut également reprendre des transferts partiels, ce qui est très important pour tout transfert important.

Il est probable qu'il ne transfère pas 10 To ; s'il s'agit de journaux et de textes, par exemple, cela pourrait bien être inférieur à 1 To, voire très inférieur à 1 To.

Il existe des outils qui font un meilleur travail de compression que rsync et trouvent probablement plus de correspondances. Vous pouvez utiliser lrzip etc.

Il existe des types de données spécifiques qui ne se compressent pas bien et ne contiennent pas de doublons littéraux - les vidéos et autres médias par exemple. Dans ces cas-là, FTP et rsync font à peu près le même effort.

SistemesEz.com

SystemesEZ est une communauté de sysadmins où vous pouvez résoudre vos problèmes et vos doutes. Vous pouvez consulter les questions des autres sysadmins, poser vos propres questions ou résoudre celles des autres.

Powered by:

X