RAID 5 30TB Stockage de fichiers - Système de fichiers et taille de bande pour les gros fichiers

Actuellement mon stockage est 6 TB, et depuis après quelques mois, je grandis à 30 TB, j'aimerais entendre quelques conseils / Recommandations pour le système de fichiers et la taille de la bande d'élément afin de ne pas avoir de problèmes à l'avenir. 90% Les fichiers sont de taille 700–4 Gb (Essentiellement gros fichiers vidéo et archives)

Maintenant j'utilise ext4 et la taille de la bande 64 KB. Vaut-il la peine d'augmenter la taille de la bande à 128 Kb / 256 KB? Est-ce que cela va zfs ou xfs c'est mieux ext4? L'utilisation réelle est 85% Lire I. 15% Entrées. À l'avenir, lorsque le logement est rempli, la lecture sera 100%, Et j'aimerais avoir une meilleure vitesse de passe.
Invité:

Alice

Confirmation de:

Essayez ce qui suit: N'utilisez pas Raid 5 Capacité des disques 2 Gb ou plus;) Pour 30 Tb je voudrais même utiliser une image miroir Raid 6 (celles. 2 Copies dans le raid du programme), Assurez-vous que je sauvegarde les données en cas de dommages.

Maintenant j'utilise ext4 et la taille de la bande 64 KB. Vaut-il la peine d'augmenter la taille de la bande à 128 Kb / 256 KB? >

Matériel ou logiciel? En général, oui - En savoir plus Les données sont beaucoup plus faciles que de retourner plus tard. Ne pas gars Linux ici - mais SQL Server, Par exemple, lit les extensions sur 64 KB, mais tente de sauvegarder des données de table dans des blocs linéaires afin de réduire la conclusion d'intrants. Un bon système de fichiers essaie de faire la même chose qui signifie que la taille du segment d'E / S est plus grande. 64 Gb - c'est bon.

Je me souviens de l'analyse des contrôleurs RAID de niveau d'entreprise, qui a montré une augmentation de la bande passante sur 512 Kb / 256 kg par rapport aux tailles plus petites. Surtout si vous avez suffisamment de mise en cache afin qu'il soit "bloqué" au niveau du contrôleur RAID.

Beaucoup plus dépend de la lecture. Archives et fichiers LArge Ont essentiellement un accès linéaire non aléatoire. Cela volera. J'ai un système plus petit, mais nous effectuons une lecture redondante de presque 200 processus sur plus de machines, voitures avec 1 Gb, stockage avec 10 - Donc, c'est une introduction aléatoire lourde, et maintenant j'utilise Raid 6 de 8 Vocileptors. Ceci est un demi-gigaoctet par seconde. 256 Kb Stripe, Raid 6, 1 GB KESH Mémoire sur Adaptec 71605Q. SSD Comme un cache est disponible, mais n'est pas actif pour ce groupe;)

Beaucoup dépend des modèles de lecture.

Mais restez loin de Raid 5 Pour les grands disques. Ceci est un jeu avec des données - Sauf si vous pouvez vivre sans Raid (Au cours d'une restructuration complète, lorsque le raid est déclenché pendant la restructuration due à une défaillance de disque) et avoir une autre Source Sauvegarde (Par exemple, des rubans). D'un point de vue mathématique, vous pouvez vous attendre à des problèmes avec un tel nombre de capacités de disques 4 Tb.

Pour répondre aux questions, connectez-vous ou registre