Bonjour, cela fait presque 24h que j'ai lancé un xcms.group mais celui-ci est toujours en attente. Y a-t-il un soucis ou de nouveau un engorgement au niveau des jobs longs ?
Merci, Céline
Bonjour Céline,
Notre hébergeur doit procéder à un arrêt électrique:
Arrêt électrique de l'IDRIS du 2 au 5 février 2024
Du coup, les jobs qui tourneraient encore ce vendredi 2 (ce qui est souvent le cas des jobs longs), ne sont pas lancés (puisque dans tous les cas ils seraient interrompus le 2).
Il va donc falloir attendre quelques jours (le 5/02 en soirée).
Désolé pour ces désagréments que nous subissons également.
Plus d'infos: Jobs PENDING depuis plusieurs jours - #3 par dbenaben
Re-bonjour,
j'avais vu l'info pour l'arrêt total en fin de semaine mais je ne pensais pas que ces jobs ne seraient pas lancés ces jours-ci.
Je vais patienter, merci.
Céline
Bonjour,
Je sais que normalement c'est un problème = un ticket, mais quand même je m’interroge depuis un moment.
Il est fait mention ici de jobs qui tourneraient encore ce vendredi 2, et dans le ticket Jobs PENDING depuis plusieurs jours - #3 par dbenaben on parle quand même de jobs potentiellement de 30j de temps d'exécution.
Sauf qu'un outil comme xcms.group, je peux le dire pour avoir fait des tests sur des datasets de gros nombres d'échantillons avec des paramètres testés volontairement plus ou moins généreux, et on n'est pas sur ce pas de temps. Si l'outil met 2h à tourner on est déjà sur du gros gros travaux (je ne l'ai atteint que 2 fois sur tous les tests), en général c'est plutôt du 15 à 45 min (voire moins évidemment pour des petites séries ou des paramétrages optimisés).
Du coup, je suis perplexe ?
Mélanie
Les jobs "xcms" via galaxy semblent configurés pour durer max 7j (cf ci-dessous les jobs "pending")
C'est donc bien la réservation (pour cause d'interruption de service) qui bloque ces jobs.
A vous de voir s'il faut réduire ce temps (Timelimit
) par défaut pour les outils xcms.
$ sacct -s pending --format=JobID%10,JobName%30,Account,Partition,Submit,Timelimit%15,ReqCPUS,ReqMem,State%10,Reason -u galaxy
JobID JobName Account Partition Submit Timelimit ReqCPUS ReqMem State Reason
---------- ------------------------------ ---------- ---------- ------------------- --------------- -------- ---------- ---------- ----------------------
37559111 g3855921_trinity galaxy long 2024-01-25T09:30:39 10-00:00:00 8 224Gn PENDING Reservation
37570225 g3857441_trinity galaxy long 2024-01-25T14:38:46 10-00:00:00 8 224Gn PENDING ReqNodeNotAvail
37571869 g3857900_trinity galaxy long 2024-01-25T15:54:29 10-00:00:00 8 224Gn PENDING ReqNodeNotAvail
37573773 g3858405_trinity galaxy long 2024-01-25T17:01:41 10-00:00:00 8 224Gn PENDING ReqNodeNotAvail
37578163 g3859301_abims_xcms_group galaxy long 2024-01-26T11:14:55 7-00:00:00 1 12Gn PENDING Reservation
37581731 g3860076_trinity galaxy long 2024-01-26T18:59:50 10-00:00:00 40 224Gn PENDING Reservation
37581741 g3860071_trinity galaxy long 2024-01-26T19:01:08 10-00:00:00 40 224Gn PENDING None
37582101 g3860129_trinity galaxy long 2024-01-27T02:17:12 10-00:00:00 40 224Gn PENDING Reservation
37582284 g3860315_trinity galaxy long 2024-01-27T11:59:09 10-00:00:00 8 224Gn PENDING Reservation
37583297 g3860614_trinity galaxy long 2024-01-27T19:13:01 10-00:00:00 8 224Gn PENDING Reservation
37586526 g3860948_trinity galaxy long 2024-01-28T22:57:13 10-00:00:00 8 224Gn PENDING Reservation
37587002 g3861359_abims_xcms_group galaxy long 2024-01-29T08:58:34 7-00:00:00 1 12Gn PENDING Reservation
37587005 g3861361_abims_xcms_group galaxy long 2024-01-29T09:00:31 7-00:00:00 1 12Gn PENDING Reservation
37587100 g3861387_abims_xcms_group galaxy long 2024-01-29T09:20:42 7-00:00:00 1 12Gn PENDING Reservation
37589494 g3862896_abims_xcms_group galaxy long 2024-01-29T13:29:08 7-00:00:00 1 12Gn PENDING Reservation
37589512 g3860256_trinity galaxy long 2024-01-29T13:33:51 10-00:00:00 40 224Gn PENDING Reservation
37589885 g3863135_abims_xcms_group galaxy long 2024-01-29T14:54:47 7-00:00:00 1 12Gn PENDING Reservation
37591586 g3864096_alphafold galaxy gpu 2024-01-29T19:22:36 3-00:00:00 10 32Gn PENDING ReqNodeNotAvail
37591587 g3864097_alphafold galaxy gpu 2024-01-29T19:22:50 3-00:00:00 10 32Gn PENDING ReqNodeNotAvail
37591589 g3864098_alphafold galaxy gpu 2024-01-29T19:23:01 3-00:00:00 10 32Gn PENDING ReqNodeNotAvail
37592395 g3864259_abims_xcms_group galaxy long 2024-01-29T22:21:45 7-00:00:00 1 12Gn PENDING None
37592839 g3864415_abims_xcms_group galaxy long 2024-01-29T23:45:49 7-00:00:00 1 12Gn PENDING ReqNodeNotAvail
37592841 g3864416_abims_xcms_group galaxy long 2024-01-29T23:49:23 7-00:00:00 1 12Gn PENDING Reservation
37593073 g3864581_abims_xcms_group galaxy long 2024-01-30T05:08:42 7-00:00:00 1 12Gn PENDING Reservation
37593082 g3864586_abims_xcms_group galaxy long 2024-01-30T07:41:48 7-00:00:00 1 12Gn PENDING Reservation
37593083 g3864587_abims_xcms_group galaxy long 2024-01-30T07:47:30 7-00:00:00 1 12Gn PENDING Reservation
37593154 g3864662_abims_xcms_group galaxy long 2024-01-30T08:39:16 7-00:00:00 1 12Gn PENDING Reservation
37593260 g3864740_abims_xcms_group galaxy long 2024-01-30T09:05:40 7-00:00:00 1 12Gn PENDING None
37593820 g3865138_abims_xcms_group galaxy long 2024-01-30T11:19:39 7-00:00:00 1 12Gn PENDING Reservation
37593827 g3865140_abims_xcms_group galaxy long 2024-01-30T11:23:51 7-00:00:00 1 12Gn PENDING Reservation
37594915 g3865908_abims_xcms_group galaxy long 2024-01-30T12:58:06 7-00:00:00 1 12Gn PENDING Reservation
37595366 g3865930_trinity galaxy long 2024-01-30T13:32:28 10-00:00:00 8 224Gn PENDING Reservation
37595398 g3865931_abims_xcms_group galaxy long 2024-01-30T13:38:10 7-00:00:00 1 12Gn PENDING Reservation
37595400 g3865932_abims_xcms_group galaxy long 2024-01-30T13:38:11 7-00:00:00 1 12Gn PENDING None
37595407 g3865958_abims_xcms_group galaxy long 2024-01-30T13:39:07 7-00:00:00 1 12Gn PENDING None
37595408 g3865933_abims_xcms_group galaxy long 2024-01-30T13:39:07 7-00:00:00 1 12Gn PENDING None
37600524 g3866719_abims_xcms_group galaxy long 2024-01-30T16:55:59 7-00:00:00 1 12Gn PENDING Reservation