Quelqu'un a-t-il fait l'expérience d'une surcharge de trafic involontaire due à l'utilisation de wget par des clients ?

Wget ne fait ni plus ni moins qu'un vrai navigateur web, à la seule exception qu'on peut lui demander d'aspirer un site entier, ce qu'il peut faire sans délai et ce qu'il est pratiquement impossible de faire rapidement avec un vrai navigateur web. Je l'utilise souvent, par exemple, pour récupérer des données dans un répertoire particulier hébergé sur un site car pour certains travaux, c'est beaucoup plus efficace que d'utiliser le FTP - l'URL le dirige vers le bon sous-répertoire. Cette utilisation réduit en fait l'utilisation totale des ressources et elle est tout à fait légitime.

Par conséquent, s'il est justifié de faire de la navigation web ou du FTP, l'utilisation de wget devrait être considérée comme une forme de navigation comme une autre ; je ne la bloquerais pas, non, du moins pas sans discernement.

Je rechercherais les utilisateurs individuels qui peuvent causer un problème et j'en discuterais avec eux. Ou bien, faites passer le problème à un niveau de priorité inférieur en utilisant les outils du système d'exploitation.

Cela dépend vraiment de votre site. S'il est rempli d'informations que l'on peut vouloir consulter par gros morceaux mais que l'on n'a pas de FTP, vous ne devriez probablement pas le bloquer. En revanche, s'il s'agit d'un forum, d'un blog ou d'un site Web de produits, il faut absolument le bloquer s'il cause des problèmes. Il est certain que personne ne prévoit qu'une multitude d'utilisateurs s'emparent de l'ensemble de votre site d'un seul coup, et si cela surcharge votre site, même s'il existe des cas limites légitimes, je le bloquerais.

En bref, en tant qu'administrateur, vous devez prendre les mesures nécessaires pour assurer la disponibilité de vos serveurs, si cela signifie bloquer wget, alors c'est ce qu'il faut faire.