Jobs longs en attente

Bonjour, cela fait presque 24h que j'ai lancé un xcms.group mais celui-ci est toujours en attente. Y a-t-il un soucis ou de nouveau un engorgement au niveau des jobs longs ?
Merci, Céline

Bonjour Céline,

Notre hébergeur doit procéder à un arrêt électrique:

:warning: :warning: Arrêt électrique de l'IDRIS du 2 au 5 février 2024 :warning: :warning:

Du coup, les jobs qui tourneraient encore ce vendredi 2 (ce qui est souvent le cas des jobs longs), ne sont pas lancés (puisque dans tous les cas ils seraient interrompus le 2).

Il va donc falloir attendre quelques jours (le 5/02 en soirée).
Désolé pour ces désagréments que nous subissons également.

Plus d'infos: Jobs PENDING depuis plusieurs jours - #3 par dbenaben

Re-bonjour,

j'avais vu l'info pour l'arrêt total en fin de semaine mais je ne pensais pas que ces jobs ne seraient pas lancés ces jours-ci.

Je vais patienter, merci.

Céline

Bonjour,

Je sais que normalement c'est un problème = un ticket, mais quand même je m’interroge depuis un moment.
Il est fait mention ici de jobs qui tourneraient encore ce vendredi 2, et dans le ticket Jobs PENDING depuis plusieurs jours - #3 par dbenaben on parle quand même de jobs potentiellement de 30j de temps d'exécution.

Sauf qu'un outil comme xcms.group, je peux le dire pour avoir fait des tests sur des datasets de gros nombres d'échantillons avec des paramètres testés volontairement plus ou moins généreux, et on n'est pas sur ce pas de temps. Si l'outil met 2h à tourner on est déjà sur du gros gros travaux (je ne l'ai atteint que 2 fois sur tous les tests), en général c'est plutôt du 15 à 45 min (voire moins évidemment pour des petites séries ou des paramétrages optimisés).

Du coup, je suis perplexe ?

Mélanie

Les jobs "xcms" via galaxy semblent configurés pour durer max 7j (cf ci-dessous les jobs "pending")
C'est donc bien la réservation (pour cause d'interruption de service) qui bloque ces jobs.

A vous de voir s'il faut réduire ce temps (Timelimit) par défaut pour les outils xcms.

$ sacct -s pending --format=JobID%10,JobName%30,Account,Partition,Submit,Timelimit%15,ReqCPUS,ReqMem,State%10,Reason -u galaxy
     JobID                        JobName    Account  Partition              Submit       Timelimit  ReqCPUS     ReqMem      State                 Reason 
---------- ------------------------------ ---------- ---------- ------------------- --------------- -------- ---------- ---------- ---------------------- 
  37559111               g3855921_trinity     galaxy       long 2024-01-25T09:30:39     10-00:00:00        8      224Gn    PENDING            Reservation 
  37570225               g3857441_trinity     galaxy       long 2024-01-25T14:38:46     10-00:00:00        8      224Gn    PENDING        ReqNodeNotAvail 
  37571869               g3857900_trinity     galaxy       long 2024-01-25T15:54:29     10-00:00:00        8      224Gn    PENDING        ReqNodeNotAvail 
  37573773               g3858405_trinity     galaxy       long 2024-01-25T17:01:41     10-00:00:00        8      224Gn    PENDING        ReqNodeNotAvail 
  37578163      g3859301_abims_xcms_group     galaxy       long 2024-01-26T11:14:55      7-00:00:00        1       12Gn    PENDING            Reservation 
  37581731               g3860076_trinity     galaxy       long 2024-01-26T18:59:50     10-00:00:00       40      224Gn    PENDING            Reservation 
  37581741               g3860071_trinity     galaxy       long 2024-01-26T19:01:08     10-00:00:00       40      224Gn    PENDING                   None 
  37582101               g3860129_trinity     galaxy       long 2024-01-27T02:17:12     10-00:00:00       40      224Gn    PENDING            Reservation 
  37582284               g3860315_trinity     galaxy       long 2024-01-27T11:59:09     10-00:00:00        8      224Gn    PENDING            Reservation 
  37583297               g3860614_trinity     galaxy       long 2024-01-27T19:13:01     10-00:00:00        8      224Gn    PENDING            Reservation 
  37586526               g3860948_trinity     galaxy       long 2024-01-28T22:57:13     10-00:00:00        8      224Gn    PENDING            Reservation 
  37587002      g3861359_abims_xcms_group     galaxy       long 2024-01-29T08:58:34      7-00:00:00        1       12Gn    PENDING            Reservation 
  37587005      g3861361_abims_xcms_group     galaxy       long 2024-01-29T09:00:31      7-00:00:00        1       12Gn    PENDING            Reservation 
  37587100      g3861387_abims_xcms_group     galaxy       long 2024-01-29T09:20:42      7-00:00:00        1       12Gn    PENDING            Reservation 
  37589494      g3862896_abims_xcms_group     galaxy       long 2024-01-29T13:29:08      7-00:00:00        1       12Gn    PENDING            Reservation 
  37589512               g3860256_trinity     galaxy       long 2024-01-29T13:33:51     10-00:00:00       40      224Gn    PENDING            Reservation 
  37589885      g3863135_abims_xcms_group     galaxy       long 2024-01-29T14:54:47      7-00:00:00        1       12Gn    PENDING            Reservation 
  37591586             g3864096_alphafold     galaxy        gpu 2024-01-29T19:22:36      3-00:00:00       10       32Gn    PENDING        ReqNodeNotAvail 
  37591587             g3864097_alphafold     galaxy        gpu 2024-01-29T19:22:50      3-00:00:00       10       32Gn    PENDING        ReqNodeNotAvail 
  37591589             g3864098_alphafold     galaxy        gpu 2024-01-29T19:23:01      3-00:00:00       10       32Gn    PENDING        ReqNodeNotAvail 
  37592395      g3864259_abims_xcms_group     galaxy       long 2024-01-29T22:21:45      7-00:00:00        1       12Gn    PENDING                   None 
  37592839      g3864415_abims_xcms_group     galaxy       long 2024-01-29T23:45:49      7-00:00:00        1       12Gn    PENDING        ReqNodeNotAvail 
  37592841      g3864416_abims_xcms_group     galaxy       long 2024-01-29T23:49:23      7-00:00:00        1       12Gn    PENDING            Reservation 
  37593073      g3864581_abims_xcms_group     galaxy       long 2024-01-30T05:08:42      7-00:00:00        1       12Gn    PENDING            Reservation 
  37593082      g3864586_abims_xcms_group     galaxy       long 2024-01-30T07:41:48      7-00:00:00        1       12Gn    PENDING            Reservation 
  37593083      g3864587_abims_xcms_group     galaxy       long 2024-01-30T07:47:30      7-00:00:00        1       12Gn    PENDING            Reservation 
  37593154      g3864662_abims_xcms_group     galaxy       long 2024-01-30T08:39:16      7-00:00:00        1       12Gn    PENDING            Reservation 
  37593260      g3864740_abims_xcms_group     galaxy       long 2024-01-30T09:05:40      7-00:00:00        1       12Gn    PENDING                   None 
  37593820      g3865138_abims_xcms_group     galaxy       long 2024-01-30T11:19:39      7-00:00:00        1       12Gn    PENDING            Reservation 
  37593827      g3865140_abims_xcms_group     galaxy       long 2024-01-30T11:23:51      7-00:00:00        1       12Gn    PENDING            Reservation 
  37594915      g3865908_abims_xcms_group     galaxy       long 2024-01-30T12:58:06      7-00:00:00        1       12Gn    PENDING            Reservation 
  37595366               g3865930_trinity     galaxy       long 2024-01-30T13:32:28     10-00:00:00        8      224Gn    PENDING            Reservation 
  37595398      g3865931_abims_xcms_group     galaxy       long 2024-01-30T13:38:10      7-00:00:00        1       12Gn    PENDING            Reservation 
  37595400      g3865932_abims_xcms_group     galaxy       long 2024-01-30T13:38:11      7-00:00:00        1       12Gn    PENDING                   None 
  37595407      g3865958_abims_xcms_group     galaxy       long 2024-01-30T13:39:07      7-00:00:00        1       12Gn    PENDING                   None 
  37595408      g3865933_abims_xcms_group     galaxy       long 2024-01-30T13:39:07      7-00:00:00        1       12Gn    PENDING                   None 
  37600524      g3866719_abims_xcms_group     galaxy       long 2024-01-30T16:55:59      7-00:00:00        1       12Gn    PENDING            Reservation