Apparemment, Robocopy ne comprend pas la déduplication de Windows Server 2016. Existe-t-il un moyen de le faire fonctionner sans corrompre le volume ?

Deux commutateurs de ligne de commande utilisés ont conduit à cela : /MIR y /ZB . Comme la documentation ( robocopy /??? ) décrit :

/MIR : : MIRror un arbre de répertoire (équivalent à /E plus /PURGE).
/ZB : : utiliser le mode redémarrable ; si l'accès est refusé, utiliser le mode Backup.

C'est la combinaison qui t'a fait plonger : /MIR supprimera (comme indiqué lorsque vous exécutez robocopy sans arguments) et "Backup mode" défait la plupart des permissions afin de pouvoir lire des fichiers "normalement" illisibles afin d'effectuer des sauvegardes complètes.

"Mode de sauvegarde" est notamment non défini dans la description de l'"aide". Il faut savoir que le système Windows CreateFile API supporte un drapeau appelé FILE_FLAG_BACKUP_SEMANTICS qui, en combinaison avec un certain droit d'accès SE_BACKUP_NAME (qui est donné au groupe des administrateurs par défaut - également le groupe Backup Operators, duh) contourne la sécurité normale des fichiers.

Vous ne le saviez pas ? Alors vous ne savez peut-être pas non plus que robocopy ne faisait pas du tout partie de Windows à l'origine - il faisait partie d'un supplément appelé "Windows Resource Kit" qui était utilisé principalement par les programmeurs et les sysadmins purs et durs à l'époque, et bien qu'il ait été intégré à la distribution de Windows à partir de Windows Server 2008, il n'a jamais fait l'objet d'une quelconque attention - à l'exception d'options de performance supplémentaires, wouhou ! En particulier, aucune attention de la part des gestionnaires de programme consacrée à l'interface utilisateur ou à la convivialité . Il s'agit donc d'une puissance brute qui peut être utilisée - ou mal utilisée ! - à vos risques et périls.

(Une bonne règle de base : N'utilisez pas les options de la ligne de commande que vous ne comprenez pas vraiment).

Informations que vous aimeriez connaître sur l'accès aux fichiers en "mode sauvegarde" :

https://isc.sans.edu/forums/diary/Use+The+Privilege/20483/

https://docs.microsoft.com/en-us/Windows/desktop/api/FileAPI/nf-fileapi-createfilea

https://docs.microsoft.com/en-us/Windows/desktop/FileIO/file-security-and-access-rights

Voici les résultats du suivi en utilisant les autres réponses fournies, et en testant avec une destination dédupliquée. ( Méta : Je ne sais pas si je dois inclure ceci comme une modification au bas de ma question originale. )

La ligne de commande de Robocopy a évolué pour finalement ressembler à ceci :

robocopy \\OLD-SERVER\e$\ \\NEW-SERVER\e$\ /MIR /COPYALL /DCOPY:DAT /NP /Z /B /J /SL /MT:128 /R:1 /W:10 /LOG+:robocopy-log.txt /TEE /XD "Recycler" "Recycled" "$Recycle.bin" "System Volume Information" /XF "pagefile.sys" "swapfile.sys" "hiberfil.sys"

Options et objectif :

• /MIR - Créer un miroir de la source vers la destination, et supprimer les fichiers et les répertoires sur la destination, s'ils ne sont plus présents sur la source.
• /COPYALL - Copie toutes les informations sur les fichiers : données, attributs et horodatages, ACLs de sécurité NTFS, informations sur le propriétaire, informations d'audit (pas toutes incluses par défaut).
• /DCOPY:DAT - Copie toutes les informations du répertoire - données, attributs, horodatages (l'horodatage de la création originale n'est pas copié par défaut ; normalement, il est remplacé par la date à laquelle il a été copié par Robocopy).
• /NP - Ne pas afficher la progression
• /Z - Utiliser le mode redémarrable
• /B - Copie les fichiers en mode Backup (je ne sais pas si cela est nécessaire pour les répertoires d'utilisateurs où ils sont le propriétaire exclusif, à l'exclusion de l'administrateur. Cette option détruira un volume de destination dédupliqué sans exclure "System Volume Information")
• /J - Copie en utilisant des E/S non tamponnées (copie plus rapide de gros fichiers de plusieurs gigas)
• /SL - Copie les liens symboliques plutôt que la cible
• /MT:128 - Utiliser le maximum de threads du CPU (meilleure utilisation de l'Ethernet 10 gigabits et de nombreux cœurs de CPU)
• /R:1 - Si erreur d'accès au fichier, réessayer 1 fois
• /W:10 - En cas d'erreur d'accès au fichier, attendez 10 secondes avant de réessayer.
• /LOG+ - Enregistre la sortie dans un fichier texte, l'ajoute si le fichier journal existe déjà.
• /TEE - Imprimer les résultats à l'écran et dans un fichier journal
• /XD - Exclure les répertoires, et tout ce qu'ils contiennent. Les noms comportant des espaces doivent être mis entre guillemets : "Recycler" "Recyclé" "$Recycle.bin" "Informations sur le volume du système"
• /XF - Exclure les fichiers : mémoire virtuelle et fichiers d'hibernation s'ils sont présents sur la source : "pagefile.sys" "swapfile.sys" "hiberfil.sys"

Répétition finale :

            Total    Copied   Skipped  Mismatch    FAILED    Extras 
 Dirs :    158189    153466    158186         0         0         0
Files :   1116292         0   1116296         0         0         0
Bytes :   1.350 t         0   1.350 t         0         0         0
Times :   0:01:04   0:00:00                       0:00:00   0:01:04

,

Par ailleurs, je ne connais pas les canaux appropriés pour signaler les bogues à Microsoft, mais j'ai créé un lien vers cette discussion au bas de la documentation de Microsoft sur la déduplication, sur leur site Web. Centre IT Pro Windows site web :

https://docs.microsoft.com/en-us/Windows-server/storage/data-deduplication/overview

Le problème est que vous ne copiez pas les dossiers dont vous avez besoin mais le volume entier, qui contient le dossier système caché "System Volume Information" qui est utilisé pour tout ce qui concerne le système de fichiers. La déduplication et le gestionnaire de ressources du serveur de fichiers y stockent également leurs données. En copiant le volume sur un autre et en utilisant le /MIR*, ainsi qu'en utilisant le /B**, vous utilisez le mode de sauvegarde qui peut copier des dossiers que votre compte administrateur ne peut pas copier, vous remplacez en fait les informations du volume système sur le disque dur. Cible et cela détruit le magasin de chunk du Dedup. Je déconseille ce type de copie, il est préférable de le faire par dossier OU d'exclure complètement le dossier "System Volume Information" (cela évitera beaucoup d'arrachage de cheveux et de jurons à court/long terme).

"*" Miroir du contenu de la source vers la cible, supprime de la cible les fichiers n'existant pas dans la source. ** Mode sauvegarde, copie les fichiers qui ne sont pas accessibles par un compte administrateur (utilise le SeBackupPrivilege pour la lecture de la source et le SeRestorePrivilege pour copier dans le dossier cible).

Peut-être que c'est juste moi, mais ma première pensée a été - n'essayez jamais de copier le lecteur lui-même "e$". Je ne ferais une Robocopie que des dossiers spécifiques créés pour le contenu utilisateur, et non des dossiers système créés par Windows lui-même.