Page 11 sur 20

Re: Nouveau serveur (putain encore !) :lxd: :docker: :truenerd:

Publié : 05 nov. 2022 00:42
par Mortal
Bon y’a une couille dans le potage : les IO sont relativement lents alors que tout est en SSD. Je me demande si c’est pas un des SSD qui est en train de crever et donc de ralentir tout le reste.

Je vais voir aussi, si c’est pas dû au RAIDZ1 mais le souci, c’est que pour vérifier ça, faut que je réinstalle tout et ça m’arrange pas vraiment. Donc, je vais me contenter de faire du palliatif pour le moment et essayer de creuser un peu plus.

Re: Nouveau serveur (putain encore !) :lxd: :docker: :truenerd:

Publié : 07 nov. 2022 19:58
par Zerg Killer
Je pense que c'est l'actualité du Night Fever qui est trop chaude pour le serveur.

Re: Nouveau serveur (putain encore !) :lxd: :docker: :truenerd:

Publié : 08 nov. 2022 19:15
par Mortal
J’ai surtout l’impression que le SSD que j’ai acheté est un peu cheapos :roll:

Je ne crois pas avoir un autre SSD en rab pour tester, mais quand je vois les graphes :
Screenshot 2022-11-08 at 18-13-10 disk (Munin).png
sdb est pratiquement à l’arrêt tout le temps (c’est un SanDisk Pro), sda est en roue libre complète (Samsung Pro) et sdc est le petit dernier est autant à la rue.

EDIT:

putain, mais c’est ouf quoi, sda/c sont en PLS et sdb, il est à la plage :oscar:
Screenshot 2022-11-08 at 18-17-17 disk (Munin).png

Re: Nouveau serveur (putain encore !) :lxd: :docker: :truenerd:

Publié : 08 nov. 2022 20:00
par Cyrare
Il te faudrait quoi comme ssd pour tester ? J'ai un ou 2 SSD à la maison.

Re: Nouveau serveur (putain encore !) :lxd: :docker: :truenerd:

Publié : 10 nov. 2022 17:05
par Mortal
Me faudrait des SSD 512G. Si vous en avez qui traîne, je suis preneur :nerd:

Bon après, sinon, vu le prix que ça coûte et comme j’ai du rab de budget (j’ai encore vendu des pièces de l’ancien serveur), je peux ptet me permettre de prendre un SSD Samsung Pro (ça doit être 50€).

Re: Nouveau serveur (putain encore !) :lxd: :docker: :truenerd:

Publié : 11 nov. 2022 11:07
par Mortal
Bon, c’est définitivement un souci de stockage, mais je ne comprends pas si c’est un souci matériel ou logiciel. J’entrevois plusieurs sorties possibles :
* remplacer les disques qui sont à la traîne (visiblement sda et sdc sont à la traîne alors que sdb se roule les pouces, je ne comprends pas pourquoi) -> ça va coûter un peu mais pas tant que ça, ça prend surtout du temps et des interruptions de service pour chaque disque remplacé (et il faut que je maquette ça avant histoire d’être sûr des commandes à taper côté ZFS)
* ajouter un 4ème disque et reconfigurer l’ensemble en RAID10 (RAID1+0) -> y’a encore de la place sur la CM et dans le boîtier mais il faut tout réinstaller (donc grosse interruption de service et le risque que ça ne redémarre plus derrière évidemment)
* reconfigurer le tout en RAID1 -> pareil, faut tout réinstaller, mais en plus, je perdrais 500G de disque au total et ça m’arrange pas des masses (même si no drama), aucune garantie que ça marche mieux mais ça coûterait 0€
* acheter un adaptateur PCIe NVMe, 2 NVMe 500G ou 1T et profiter du slot NVMe déjà présent sur la CM pour faire un RAID1 qui butte la gueule en terme de débit -> faut tout réinstaller aussi, j’ai aucune garantie sur la partie PCIe-NVMe (et aucune confiance non plus : je ne sais pas si la CM va le supporter, je ne sais pas si on va pouvoir booter dessus, etc…) et question budget, ça va piquer sévère.

J’ai la sensation que quoiqu’il arrive, j’aurais fortement intérêt à remplacer les SSD qui sont à la rue :(

Bref, je vais essayer d’évaluer plus en détails chaque solution pour voir :teptep:

EDIT: si vous avez des suggestions/conseils sur le sujet, je suis preneur, je ne sais vraiment pas dans quelle direction partir pour le moment

Re: Nouveau serveur (putain encore !) :lxd: :docker: :truenerd:

Publié : 11 nov. 2022 23:54
par Golden cube
Limite monte un des SSD qui tire la gueule sur une autre machine et fait un test de perfs dessus avant de tout changer?
Ça devrait t'isoler d'un éventuel problème logiciel.

Re: Nouveau serveur (putain encore !) :lxd: :docker: :truenerd:

Publié : 12 nov. 2022 09:57
par Konino
Image

Re: Nouveau serveur (putain encore !) :lxd: :docker: :truenerd:

Publié : 12 nov. 2022 10:58
par Mortal
Golden cube a écrit : 11 nov. 2022 23:54 Limite monte un des SSD qui tire la gueule sur une autre machine et fait un test de perfs dessus avant de tout changer?
Ça devrait t'isoler d'un éventuel problème logiciel.
J’ai déjà les quelques stats de munin qui me font dire qu’il ne va pas bien. Donc de toutes manières, je pense qu’il va falloir le remplacer :(

Le seul souci derrière, c’est que je ne sais pas quelle proportion de responsabilité ce disque un peu moins bon que les autres a dans l’ensemble de l’impact aux performances :oscar:

Re: Nouveau serveur (putain encore !) :lxd: :docker: :truenerd:

Publié : 12 nov. 2022 13:03
par Golden cube
Disons que vu que tu as un raid en place, tester un des disques unitairement en direct c'est un peu plus fiable que de tester les perfs dans le cluster. Tu as peut être un problème soft ou de bus niveau CM qui fout la merde :nerdhum:
Mais clairement ça a toutes les chances de donner le même résultat :oscar:
Après tu as sûrement plus d'expérience que moi dans le truc si il faut ça sert à rien ce que je dis :oscar:

Re: Nouveau serveur (putain encore !) :lxd: :docker: :truenerd:

Publié : 13 nov. 2022 21:19
par Cyrare
J'étais sûr d'avoir un 1To neuf mais je le retrouve pas. Je ne retrouve qu'un 120 Go :(

Re: Nouveau serveur (putain encore !) :lxd: :docker: :truenerd:

Publié : 14 nov. 2022 09:45
par Mortal
Je vais voir auprès de mes collègues ce qu’ils en pensent/s’ils ont du stock.

Après, je pense sincèrement qu’un RAID10 fonctionnera mieux quoiqu’il arrive, j’ai juste pas vraiment envie de faire l’investissement maintenant :oscar:

Re: Nouveau serveur (putain encore !) :lxd: :docker: :truenerd:

Publié : 14 nov. 2022 18:01
par Mortal
Bon, je vais définitivement kicker ce disque :

https://munin.mateu.be/dmz.mateu.be/ser ... index.html

C’est n’importe quoi putain :oscar:

Je vais commencer par ça. Si ça ne résoud pas suffisamment le problème, je réaviserais, mais là, de toutes évidence, c’est pas avec des perfs de merde comme ça que ça va marcher.

Re: Nouveau serveur (putain encore !) :lxd: :docker: :truenerd:

Publié : 17 nov. 2022 13:16
par Mortal
Bon, j’ai commandé un autre disque, remplacement pending. Je retesterais derrière pour voir si les choses s’améliorent (beaucoup, peu, pas assez), je pense avoir suffisamment de données dans Proxmox lui-même et dans Munin pour comparer le avant/après de manière à peu près fiable.

Re: Nouveau serveur (putain encore !) :lxd: :docker: :truenerd:

Publié : 19 nov. 2022 11:28
par Mortal
Coupure du serveur entre 16h et 17h ajd pour changement de disque :kikoo:

Si vous avez des doigts, croisez-en un max, va y avoir besoin.

Re: Nouveau serveur (putain encore !) :lxd: :docker: :truenerd:

Publié : 19 nov. 2022 19:56
par Mortal
Bon, ça a l’air de vachement mieux marcher quand même :napo:

Maintenant, j’ai sda qui apparaît comme une sorte d’anomalie, mais ça plombe pas suffisamment les pertes pour que ça me fasse chier pour le moment. Je vais laisser faire pendant qqs jours pour voir si c’est effectivement « mieux ».

Re: Nouveau serveur (putain encore !) :lxd: :docker: :truenerd:

Publié : 22 nov. 2022 10:01
par Mortal
Bon, je peux dire avec un taux de confiance certains que le problème est réglé :
Screenshot 2022-11-22 at 09-00-15 disk (Munin).png
Si l’on fait abstraction de sdd (c’est un disque mécanique en USB qui sert pour la sauvegarde), c’est maintenant sda qui est à la rue alors que je le considèrait comme « valable ».

Donc pire des cas, je changerais ptet ce disque début d’année prochaine et on devrait dépoter grave :nerd:

Re: Nouveau serveur (putain encore !) :lxd: :docker: :truenerd:

Publié : 22 nov. 2022 10:16
par meduz'
On a donc l’infra pour racheter GameKult et le transformer en DojoKult. :n8rd:

Re: Nouveau serveur (putain encore !) :lxd: :docker: :truenerd:

Publié : 28 déc. 2022 11:13
par P@B
Ça a l'air d'avoir été galère à gérer les problèmes d'hier... Bravo Mortal pour avoir tout remis d'aplomb ?

Re: Nouveau serveur (putain encore !) :lxd: :docker: :truenerd:

Publié : 29 déc. 2022 16:58
par Mortal
Bah c’est surtout les techos d’Orange qui sont des branques :oscar:

Ma fibre avait un pète (ça arrive), le service client de Free a pris en charge le truc dès le lendemain matin. 2h plus tard, Orange essaie de relier un client dans le quartier et ma fibre repète.

Le technicien de Free revient : la fibre avait été cassée à un autre endroit. Donc bon, visiblement chez Orange, on fait pas dans le détail…

Re: Nouveau serveur (putain encore !) :lxd: :docker: :truenerd:

Publié : 30 déc. 2022 15:28
par Zwarf
Ils sous traitent tout à des boîtes qui sont payées à la presta donc en général ils font vite fait mal fait. Les pires sont SFR il parait

Re: Nouveau serveur (putain encore !) :lxd: :docker: :truenerd:

Publié : 06 janv. 2023 21:04
par Mortal
Bon, il va quand même falloir que je trouve une solution pour le stockage. Là, depuis que j’ai changé le 3ème disque qui déconnait complètement c’est « acceptable » en opération normale.

Par contre, dès que je dois faire une grosse opération de fichiers, c’est juste insupportablement lent. Je suppose que le RAID5 n’aide pas beaucoup (rétrospectivement, c’était très probablement une connerie).

Du coup, je pensais à mettre 2 NVMe : le premier dans le slot prévu à cet effet :napo: et le second dans un adaptateur pour port PCIe. Le truc, c’est que j’ai jamais essayé ces machins et je ne sais pas trop ce que ça va donner en terme de perf :oscar:

Re: Nouveau serveur (putain encore !) :lxd: :docker: :truenerd:

Publié : 06 janv. 2023 22:55
par Golden cube
Vu que le NVMe utilise le bus PCIe j'imagine que ça fait exactement pareil qu'un port natif? :oscar:

Re: Nouveau serveur (putain encore !) :lxd: :docker: :truenerd:

Publié : 07 janv. 2023 10:20
par Cyrare
Juste au cas où, j'ai retrouvé celui que je t'avais proposé, c'est un Samsung 860 QVO 1To tout neuf, jamais servi. Si ça peut t'aider je te l'envoie.

Re: Nouveau serveur (putain encore !) :lxd: :docker: :truenerd:

Publié : 09 janv. 2023 10:32
par Mortal
Je te remercie pour l’offre mais garde-le pour l’instant ;). Je vais essayer de voir ce que je peux faire durant les soldes et 1T, ça ne va pas rentrer dans le RAID actuel.

(bon par contre, c’est un excellent disque, pire des cas revends-le, t’en tireras toujours qqch).