Est-il préférable d'acheter les disques RAID à l'unité ou en vrac ?

En pratique, les personnes qui achètent auprès des fournisseurs d'entreprise (HPE, Dell, etc.) ne t'inquiète pas pour ça .

Les lecteurs fournis par ces vendeurs sont déjà répartis entre plusieurs fabricants sous le même numéro de pièce.

Un disque HP sous une UGS particulière peut être HGST ou Seagate ou Western Digital.

Même numéro de pièce HP, variation selon le fabricant, le numéro de lot et le micrologiciel.

Vous ne devriez pas essayer de surpasser la probabilité d'échec du lot, cependant. Vous pouvez essayer si cela vous rassure, mais cela ne vaut peut-être pas la peine.

Les bonnes pratiques telles que la mise en grappe, la réplication et les sauvegardes solides constituent la véritable protection contre les pannes de lot. Ajoutez des pièces de rechange à chaud et à froid. Surveillez vos systèmes de près. Tirez parti des systèmes de fichiers intelligents comme ZFS :)

Et n'oubliez pas que les pannes de disque dur ne sont pas toujours mécaniques...

Par respect pour la réponse de ewwhite, certains administrateurs système commandent par lots. Je ne commanderais jamais, moi-même, des disques sur une base individuelle, mais les opérations standard du dernier endroit où j'ai travaillé dans une telle capacité étaient de commander des disques par lots. Pour une machine à douze disques, la procédure standard exigeait que les disques soient divisés en trois lots, donnant à la machine un profil de redondance à trois niveaux.

Cependant, d'autres petites entreprises que j'ai consultées ont suivi des protocoles différents, certaines ne se préoccupant pas du lot, et d'autres divisant les lots en deux ou quatre réseaux. En résumé, la réponse est la suivante faites ce qui vous semble approprié pour le niveau de service que vous devez atteindre.

Note complémentaire : le dernier endroit où j'ai travaillé faisait certainement ce qu'il fallait. La machine de stockage d'applications a décidé de tomber en panne sur un lot entier de disques, et nous avons découvert que ce lot particulier avait tous le même défaut. Si nous n'avions pas suivi un protocole de lot, nous aurions subi une perte catastrophique de données.

Réponse honnête de quelqu'un qui a passé beaucoup de temps à s'occuper de matrices Raid mourantes et de disques difficiles : N'ayez pas tous vos disques du même lot si vous pouvez l'éviter.

Mon expérience ne s'applique qu'aux disques rotatifs, les disques SSD ont leurs propres problèmes et avantages à prendre en compte lors d'une commande groupée.

La meilleure façon de gérer les choses dépend principalement de la taille de la matrice sur laquelle vous travaillez. Si vous travaillez avec quelque chose comme des matrices de 6 disques avec une redondance de 2 disques, vous pouvez probablement acheter en toute sécurité des disques similaires de 3 fabricants et diviser la matrice de cette façon.

Si vous utilisez un disque étrange ou si vous travaillez avec des matrices qui ne peuvent pas être facilement partitionnées de cette manière, vous pouvez essayer d'autres approches, comme acheter le même disque auprès de différents fournisseurs, ou si vous achetez en gros, vous pouvez regarder et essayer de séparer les disques en fonction de la probabilité qu'ils soient fabriqués ensemble.

Si vous exploitez une matrice suffisamment petite avec la bonne technologie sous-jacente, cela peut même valoir la peine de la construire progressivement à partir de disques hétérogènes. Commencez avec le nombre minimum de disques dont vous pouvez vous passer et achetez l'approvisionnement suivant un ou deux mois plus tard, ou lorsque vous remplissez le système. Cela vous permet également de vous faire une idée des problèmes que peuvent poser les modèles que vous avez choisis.

La raison de ce conseil est la combinaison de deux particularités des lecteurs.

1. Le MTBF est remarquablement cassé lorsque vous avez beaucoup de disques ayant des origines similaires. En statistiques, nous appellerions cela un biais d'échantillonnage, en raison de la similarité de vos échantillons, les effets de moyenne auront tendance à être moins utiles. S'il y a un défaut dans le lot ou même dans la conception elle-même, et que cela se produit plus souvent qu'on ne le pense, les disques de ce lot tomberont en panne plus tôt que le MTBF ne le suggère.

   Si les disques sont répartis, vous pouvez obtenir [50 %, 90 %, 120 %, 200 %] de MTBF, mais si tous les disques proviennent de ce lot de 50 %, vous avez un problème sur les bras.

2. Le réassemblage d'une matrice Raid tue les disques. Non, vraiment. Si vous avez une défaillance de disque et que la matrice se reconstruit, cela va mettre une charge supplémentaire sur les autres disques pendant qu'ils analysent les données. Si vous avez un disque proche de la défaillance, la reconstruction peut très bien le supprimer, ou il peut déjà avoir un emplacement de défaillance dont vous n'étiez pas conscient parce que cette section n'avait pas été lue récemment.

   Si vous avez beaucoup de disques durs du même lot, les chances que ce type de panne en cascade se produise sont beaucoup plus élevées que si elles sont différentes. Vous pouvez atténuer ce risque en effectuant régulièrement des scans de patrouille, des nettoyages, des resilverings, selon les pratiques recommandées pour le type de baie que vous utilisez, mais l'inconvénient est que cela aura un impact sur les performances et peut prendre des heures.

Pour avoir une idée de l'ampleur des variations de la longévité des disques, Backblaze publie régulièrement un rapport sur les défaillances des disques... Je ne suis pas affilié à la société de quelque manière que ce soit, mais ils devraient savoir de quoi ils parlent au sujet de la fiabilité des disques. Voici un exemple https://www.backblaze.com/blog/hard-drive-failure-rates-q1-2017/ ... votre ensemble d'échantillons sera probablement plus petit, de sorte que les données aberrantes peuvent perturber votre propre expérience, mais cela reste une bonne référence.

J'ai dû examiner cette question pour un client il y a quelques années. Je dispose d'une combinaison d'expériences pratiques et de recherches pour étayer la recommandation de recourir au multisource.

En mettant de côté vos avantages et inconvénients pour le moment, ainsi que L'excellente réponse de ewwhite Par prudence, si vous achetez les disques vous-même, vous devriez les acheter en plusieurs fois. Un rapide coup d'œil à la discussion de Wikipedia sur les faiblesses du RAID permet de trouver deux références intéressantes.

La première référence est le document ACM RAID : stockage secondaire fiable et à haute performance (Chen, Lee, Gibson, Katz et Patterson. ACM Computing Surveys. 26:145-185). Dans la section 3.4.4, les auteurs soulignent que les défaillances matérielles ne sont pas toujours des événements statistiquement indépendants, et en donnent les raisons. Au moment où j'écris cette réponse, l'article est disponible en ligne ; les pages 19 à 22 traitent de la fiabilité ( http://citeseerx.ist.psu.edu/viewdoc/summary?doi=10.1.1.41.3889 ).

La deuxième référence est Les défaillances de disque dans le monde réel : Que signifie pour vous un MTTF de 1 000 000 d'heures ? (Schroeder, Gibson. 5th USENIX Conference on File and Storage Technologies.) Les auteurs présentent des données statistiques pour étayer l'affirmation selon laquelle les pannes de disque peuvent être regroupées dans le temps à un taux supérieur à celui prévu pour des événements indépendants. Au moment où j'écris cette réponse, cet article est également disponible en ligne ( https://www.usenix.org/legacy/events/fast07/tech/schroeder/schroeder_html/index.html ).

En 2012, Dell a explicitement déconseillé le système RAID 5 en raison de la corrélation des pannes de disque dans les environnements de gros disques. Selon les prévisions, le système RAID 6 ne sera plus fiable pour des raisons similaires aux alentours de 2019 (article de ZDNet intitulé "why-raid-6-stops-working-in-2019" : http://www.zdnet.com/article/why-raid-6-stops-working-in-2019/ ). Bien que la taille des disques et les temps de reconstruction soient des éléments clés de ces deux types d'applications, les disques de plus petite taille et les temps de reconstruction plus longs sont plus efficaces. multisourcing avait été recommandé comme moyen d'atténuer le problème du RAID 5.

Donc oui, achetez les disques en plusieurs exemplaires si vous le pouvez ; si vous achetez auprès d'un fournisseur d'entreprise comme décrit dans le document La réponse de ewwhite cela peut se produire pour vous de manière transparente. Cependant... mon client a acheté 16 disques de 2 To à un fournisseur d'entreprise. Il se trouve qu'ils provenaient du même fabricant et semblaient avoir été fabriqués en même temps. Deux des disques sont tombés en panne dans les deux semaines qui ont suivi la configuration des matrices RAID01. Vérifiez donc les disques lorsque vous les recevez. (Vous les vérifiez déjà de toute façon, non ?)

L'emballage et la manutention constituent un autre inconvénient potentiel de la commande de disques individuels.

Les disques durs ne sont presque jamais fournis dans un emballage de détail. Si vous les achetez un par un, ils seront presque certainement reconditionnés par le vendeur. J'ai constaté que ce reconditionnement est très variable. Parfois, vous obtenez une belle boîte avec beaucoup de rembourrage, mais d'autres fois, vous n'obtenez pratiquement aucun rembourrage.

Une boîte plus petite est également plus vulnérable au fait d'être ballottée par les transporteurs sans dommage extérieur évident.