Plus de 1 Go d'upload sur un seul serveur linux

Pourquoi ne pas créer un disque RAM et y mettre le contenu ? Vous pouvez exécuter rsync pour sauvegarder les données sur le disque physique et éviter toute perte de données.

Je suppose que lorsque le nombre de clients est faible, le serveur est en mesure de mettre en cache la plupart des données nécessaires dans la mémoire vive, de sorte qu'il les sert presque exclusivement à partir de la mémoire vive.

Mais lorsque de plus en plus de clients sont servis, la plupart des données ne tiennent pas dans votre mémoire vive et votre serveur doit les lire à partir de votre sous-système d'entrée/sortie. Le cache est beaucoup moins utilisé, car la plupart du temps, les données nécessaires ne sont tout simplement pas là. Et les disques mécaniques doivent chercher beaucoup.

Je ne sais pas combien de données vous avez et comment est configuré votre IO, mais je pense que les disques mécaniques ne suffiront pas. Aussi, tout cache SSD est plus petit que les données que vous utilisez.

Vous pourriez utiliser plusieurs disques SSD à haute performance de lecture aléatoire en RAID1. Ou peut-être pourriez-vous "partager" vos données - au lieu d'utiliser un énorme système de fichiers, divisez vos fichiers sur un grand nombre de petits disques SSD en vous basant par exemple sur les critères suivants crc32(filepath) % 8 pour 8 SSD.