UNRAID. Un OS multifacette.

» 02 Mai 2020 18:22

Polopretress a écrit:Tu me l'avais déjà dit mais je voulais me rassurer une dernière fois
Je vais donc faire la modification en ayant préalablement fait des tests de transfert en xfs afin de comparer ensuite (meme si sans disque de sécu, les résuktat peuvent etre biaisés mais ca donne un point de référence)

A priori, sur des gros fichiers (8Go), je suis a :

Sens PC distant ==> disque de la grappe = 110-120 Mo/sec donc limitation de ma connexion Gbit
Sens disque de la grappe ==> PC distant = pareil
Copie Disque grappe==> cache SSD = 750-800 Mo/sec
Copie Cache SSD ==> disque de la grappe = 700-750 Mo/sec
Copie entre user-share du meme disque a partir du pc distant = 400-410 Mo/sec

EDIT
Sur des petits fichiers. (67Mo - 8200 fichiers)

Sens PC distant ==> disque de la grappe = 100-400 Ko/sec (pas + long que de disque a disque de mon PC)
Sens disque de la grappe ==> PC distant = 200 - 400 Ko/sec
Copie Disque grappe==> cache SSD = 200-400 Ko/sec
Copie Cache SSD ==> disque de la grappe = idem
Copie entre user-share du meme disque a partir du pc distant = 100-300 Ko/sec

Quels disques utilises-tu capables de débiter 800 Mo/s

Et c'est seulement 400 Ko/s du PC à la grappe :oops:

Si je remplace Ko par Mo je ne comprends pas plus :-?

Michel

» 02 Mai 2020 19:03

Je confirme:

- disque de la grappe <> cache SSD NVME, c'est annoncé a 700-800Mo/sec sur des gros fichiers.

- Et 400ko/s (mais + souvent vers 200Ko), c'est seulement sur une multitude de petits fichiers (+ de 8000 petits fichiers. ce ttemps de transfert est normal. j'ai pareil en local sur mon PC. Les petits fichiers de moins de 1k, c'est le pire !
Meme leur suppression dans la corbeille prend du temps...

tu veux une video ?

» 02 Mai 2020 21:29

J'ai un benchmark que je fais sur trois répertoires de profils différents avec chargement comparaison déchargement et suppression.
Les performances sont effectivement très différentes suivant le profil du répertoire.
Je n'ai pas retenu un cas de figure avec que de très petits fichiers.
D'où ma surprise.

Reste le cas des 800 Mo/s :-?

.
En RAID traditionnel avec 4 disques on peut atteindre ces débits, sachant qu'un RED ou un IRON-WOLF plafonne à 210 Mo/s.
Mais unRaid ne peut pas aller au-delà de la performance d'un seul disque.
Il est possible que la mémoire cache fausse les mesures.

Michel

» 02 Mai 2020 23:04

Franchement, je ne sais pas comment expliquer
Tu peux mesurer le temps et constater que les débits annoncés ne sont pas déconnants.

Edit : il doit y avoir un effet de la flash du disque. Si je prend un fichier + gros , on retrouve des valeurs plus normales.
Ex sur un 8Go a venir
là on est + sur 200/210 dans tous les sens.
A part qq pointes au début.
Et une ecriture du cache sur lui même rapide mais perturbée..

» 03 Mai 2020 10:07

Merci pour les vidéos.
On est d'accord !

Je me suis si souvent fait piéger que j'ai pris l'habitude de lancer des batchs avec log de l'heure de début et de fin.

Michel

» 03 Mai 2020 17:19

Les débit sont très bon !

» 03 Mai 2020 17:22

Finalement pour mes ssd je pense faire une installation comme ça:

SSD 256Go SATA: Windows
SSD 500Go NVME: Cache
SSD RAID 1 500Go SATA: Docker, VM, plex etc...
SSD 64Go: ?
SSD 120Go SATA: ?

A votre avis ça vaut le coup de placer plex sur le ssd de 64 ou 120 pour le stockage des infos, image etc. et aussi comme dossier de transcodage ?
pour pas saturer le raid de ssd 500go au cas ou...

» 03 Mai 2020 17:51

Le TRIM est géré par unRaid uniquement dans le cache.
D'après ce que j'ai compris il n'y a pas toujours des zéros sur les secteurs libres après la fin de l'opération.
Mais tant que les disques ne sont pas dans la grappe RAID, où si ils y sont sans qu'on utilise de disque de parité, je ne vois aucune raison pour que cela ne fonctionne pas.

Michel

» 03 Mai 2020 17:56

ok, je vient de commander un autre ssd de 512go pour pouvoir faire un raid 1

donc j'espère que ça va fonctionner.

» 03 Mai 2020 17:57

Le RAID-1 il faut le faire dans le cache en BTRFS obligatoirement.

Michel

» 03 Mai 2020 17:58

ok, merci pour l'info

» 03 Mai 2020 18:02

Sinon on peut se construire une solution sur mesure, mais comme dans le cas des partages imbriqués testés par Polopretress, la problème peut-être plus complexe à résoudre qu'on ne le pensait initialement.

Michel

» 03 Mai 2020 18:05

JamesAdams a écrit:Les débit sont très bon !

Les disques sont vides.
Ceci explique cela. Quand ils seront quasi pleins, les débits chuteront, je pense.

De +, j'ai pas encore de disque de Parité !

****************
Sinon, 2 video tuto supplémentaires dispo en premiere page.

video 8 : User share (compléments) ==> pour creer un "rootshare" et un "user share" dans un user share existant
video 9 : passer d'un systeme de formatage xfs a btrfs sans perte de données.

La prochaine sur le plupgin "Unassigned Devices" et ensuite le Docker "Krusader".

+ ca va; + je kiff UNRAID :

Sinon, ca y est ! Je commence a transferer mes données pour construire la grappe au fur et a mesure avec 4 disques de 10To. :love:

» 03 Mai 2020 20:13

Ha ha la chance,

moi j'attend une promo sur des disques dur externe 10 ou 12to pour en acheter 4

» 04 Mai 2020 8:35

impatient ce soir de voir tes deux autre vidéos,

j'attends encore mon câble pour mes HDDs et ensuite c'est parti aussi pour moi.
par contre toujours des soucis pour avoir mes températures , je suis un post sur le forum UnRaid , mais je pense plus a un bug actuel, car beaucoup de personnes ont le même soucis.

Phil