Nouveau serveur (putain encore !) :lxd: :docker: :truenerd:

[Mortal]

Bon y’a une couille dans le potage : les IO sont relativement lents alors que tout est en SSD. Je me demande si c’est pas un des SSD qui est en train de crever et donc de ralentir tout le reste.

Je vais voir aussi, si c’est pas dû au RAIDZ1 mais le souci, c’est que pour vérifier ça, faut que je réinstalle tout et ça m’arrange pas vraiment. Donc, je vais me contenter de faire du palliatif pour le moment et essayer de creuser un peu plus.

[Zerg Killer]

Je pense que c'est l'actualité du Night Fever qui est trop chaude pour le serveur.

[Mortal]

J’ai surtout l’impression que le SSD que j’ai acheté est un peu cheapos

Je ne crois pas avoir un autre SSD en rab pour tester, mais quand je vois les graphes :

Screenshot 2022-11-08 at 18-13-10 disk (Munin).png

sdb est pratiquement à l’arrêt tout le temps (c’est un SanDisk Pro), sda est en roue libre complète (Samsung Pro) et sdc est le petit dernier est autant à la rue.

EDIT:

putain, mais c’est ouf quoi, sda/c sont en PLS et sdb, il est à la plage

Screenshot 2022-11-08 at 18-17-17 disk (Munin).png

[Cyrare]

Il te faudrait quoi comme ssd pour tester ? J'ai un ou 2 SSD à la maison.

[Mortal]

Me faudrait des SSD 512G. Si vous en avez qui traîne, je suis preneur

Bon après, sinon, vu le prix que ça coûte et comme j’ai du rab de budget (j’ai encore vendu des pièces de l’ancien serveur), je peux ptet me permettre de prendre un SSD Samsung Pro (ça doit être 50€).

[Mortal]

Bon, c’est définitivement un souci de stockage, mais je ne comprends pas si c’est un souci matériel ou logiciel. J’entrevois plusieurs sorties possibles :
* remplacer les disques qui sont à la traîne (visiblement sda et sdc sont à la traîne alors que sdb se roule les pouces, je ne comprends pas pourquoi) -> ça va coûter un peu mais pas tant que ça, ça prend surtout du temps et des interruptions de service pour chaque disque remplacé (et il faut que je maquette ça avant histoire d’être sûr des commandes à taper côté ZFS)
* ajouter un 4ème disque et reconfigurer l’ensemble en RAID10 (RAID1+0) -> y’a encore de la place sur la CM et dans le boîtier mais il faut tout réinstaller (donc grosse interruption de service et le risque que ça ne redémarre plus derrière évidemment)
* reconfigurer le tout en RAID1 -> pareil, faut tout réinstaller, mais en plus, je perdrais 500G de disque au total et ça m’arrange pas des masses (même si no drama), aucune garantie que ça marche mieux mais ça coûterait 0€
* acheter un adaptateur PCIe NVMe, 2 NVMe 500G ou 1T et profiter du slot NVMe déjà présent sur la CM pour faire un RAID1 qui butte la gueule en terme de débit -> faut tout réinstaller aussi, j’ai aucune garantie sur la partie PCIe-NVMe (et aucune confiance non plus : je ne sais pas si la CM va le supporter, je ne sais pas si on va pouvoir booter dessus, etc…) et question budget, ça va piquer sévère.

J’ai la sensation que quoiqu’il arrive, j’aurais fortement intérêt à remplacer les SSD qui sont à la rue

Bref, je vais essayer d’évaluer plus en détails chaque solution pour voir

EDIT: si vous avez des suggestions/conseils sur le sujet, je suis preneur, je ne sais vraiment pas dans quelle direction partir pour le moment

[Golden cube]

Limite monte un des SSD qui tire la gueule sur une autre machine et fait un test de perfs dessus avant de tout changer?
Ça devrait t'isoler d'un éventuel problème logiciel.

[Konino]

[Mortal]

Limite monte un des SSD qui tire la gueule sur une autre machine et fait un test de perfs dessus avant de tout changer?
Ça devrait t'isoler d'un éventuel problème logiciel.

J’ai déjà les quelques stats de munin qui me font dire qu’il ne va pas bien. Donc de toutes manières, je pense qu’il va falloir le remplacer

Le seul souci derrière, c’est que je ne sais pas quelle proportion de responsabilité ce disque un peu moins bon que les autres a dans l’ensemble de l’impact aux performances

[Golden cube]

Disons que vu que tu as un raid en place, tester un des disques unitairement en direct c'est un peu plus fiable que de tester les perfs dans le cluster. Tu as peut être un problème soft ou de bus niveau CM qui fout la merde
Mais clairement ça a toutes les chances de donner le même résultat
Après tu as sûrement plus d'expérience que moi dans le truc si il faut ça sert à rien ce que je dis

[Cyrare]

J'étais sûr d'avoir un 1To neuf mais je le retrouve pas. Je ne retrouve qu'un 120 Go

[Mortal]

Je vais voir auprès de mes collègues ce qu’ils en pensent/s’ils ont du stock.

Après, je pense sincèrement qu’un RAID10 fonctionnera mieux quoiqu’il arrive, j’ai juste pas vraiment envie de faire l’investissement maintenant

[Mortal]

Bon, je vais définitivement kicker ce disque :

https://munin.mateu.be/dmz.mateu.be/ser ... index.html

C’est n’importe quoi putain

Je vais commencer par ça. Si ça ne résoud pas suffisamment le problème, je réaviserais, mais là, de toutes évidence, c’est pas avec des perfs de merde comme ça que ça va marcher.

[Mortal]

Bon, j’ai commandé un autre disque, remplacement pending. Je retesterais derrière pour voir si les choses s’améliorent (beaucoup, peu, pas assez), je pense avoir suffisamment de données dans Proxmox lui-même et dans Munin pour comparer le avant/après de manière à peu près fiable.

[Mortal]

Coupure du serveur entre 16h et 17h ajd pour changement de disque

Si vous avez des doigts, croisez-en un max, va y avoir besoin.

[Mortal]

Bon, ça a l’air de vachement mieux marcher quand même

Maintenant, j’ai sda qui apparaît comme une sorte d’anomalie, mais ça plombe pas suffisamment les pertes pour que ça me fasse chier pour le moment. Je vais laisser faire pendant qqs jours pour voir si c’est effectivement « mieux ».

[Mortal]

Bon, je peux dire avec un taux de confiance certains que le problème est réglé :

Screenshot 2022-11-22 at 09-00-15 disk (Munin).png

Si l’on fait abstraction de sdd (c’est un disque mécanique en USB qui sert pour la sauvegarde), c’est maintenant sda qui est à la rue alors que je le considèrait comme « valable ».

Donc pire des cas, je changerais ptet ce disque début d’année prochaine et on devrait dépoter grave

[meduz']

On a donc l’infra pour racheter GameKult et le transformer en DojoKult.

[P@B]

Ça a l'air d'avoir été galère à gérer les problèmes d'hier... Bravo Mortal pour avoir tout remis d'aplomb ?

[Mortal]

Bah c’est surtout les techos d’Orange qui sont des branques

Ma fibre avait un pète (ça arrive), le service client de Free a pris en charge le truc dès le lendemain matin. 2h plus tard, Orange essaie de relier un client dans le quartier et ma fibre repète.

Le technicien de Free revient : la fibre avait été cassée à un autre endroit. Donc bon, visiblement chez Orange, on fait pas dans le détail…

[Zwarf]

Ils sous traitent tout à des boîtes qui sont payées à la presta donc en général ils font vite fait mal fait. Les pires sont SFR il parait

[Mortal]

Bon, il va quand même falloir que je trouve une solution pour le stockage. Là, depuis que j’ai changé le 3ème disque qui déconnait complètement c’est « acceptable » en opération normale.

Par contre, dès que je dois faire une grosse opération de fichiers, c’est juste insupportablement lent. Je suppose que le RAID5 n’aide pas beaucoup (rétrospectivement, c’était très probablement une connerie).

Du coup, je pensais à mettre 2 NVMe : le premier dans le slot prévu à cet effet et le second dans un adaptateur pour port PCIe. Le truc, c’est que j’ai jamais essayé ces machins et je ne sais pas trop ce que ça va donner en terme de perf

[Golden cube]

Vu que le NVMe utilise le bus PCIe j'imagine que ça fait exactement pareil qu'un port natif?

[Cyrare]

Juste au cas où, j'ai retrouvé celui que je t'avais proposé, c'est un Samsung 860 QVO 1To tout neuf, jamais servi. Si ça peut t'aider je te l'envoie.

[Mortal]

Je te remercie pour l’offre mais garde-le pour l’instant . Je vais essayer de voir ce que je peux faire durant les soldes et 1T, ça ne va pas rentrer dans le RAID actuel.

(bon par contre, c’est un excellent disque, pire des cas revends-le, t’en tireras toujours qqch).