Tu pregunta: ¿falla la parte que categoriza o distribuye?
No. Repartir anda: de 111 trabajos nuevos hoy, la mitad arrancó en menos de 1 minuto. Lo que falla es lo que rodea al reparto: un cerrojo único en la cola, cadenas que no siguen, publicar sobre un main roto y una box sin tope de RAM hasta las 13:07.
0,9 minmediana en fila hasta arrancar
64 minel 10 % más lento esperó esto o más (máx. 169)
97 minacumulados esperando el cerrojo de la cola (26 veces)
42 %de los cierres verificados de hoy no pasaron un comando
No medí si el reparto elige siempre el asiento ideal; solo que reparte rápido y que las esperas largas vienen de frenos (build pesado, carga, tope) y de las trabas de abajo.
El mapa de hoy · 9 puntos rojos
núcleofuncionase traba (número = tarjeta de abajo)
Dónde se traba, con lo que pasó hoy
1
El cerrojo de la cola es uno solo
12:03 a 12:52
Todo lo que toca la cola (altas, cierres, lanzamientos, el vigilante) pasa por un solo cerrojo, y cada cambio reescribe el archivo entero: 38 MB, 7.843 ítems, 99 % ya cerrados. Con el disco lento (presión de IO 84 %) cada vuelta tardó minutos.
26 esperas de 10 s o más: 97 min acumulados entre 12:03 y 12:52
4 altas rechazadas por tope de 240 s (12:06, 12:12, 12:17, 12:22), sin encolar nada
el que tenía el cerrojo cambiaba: Shockley, el arreglo del propio cerrojo, Qarawiyyin y SODI (sodi-e441, 12:22). El SODI fue uno de varios, no el único culpable
De los 93 trabajos cerrados como verificados hoy, 54 pasaron un comando de verificación real. 29 se dieron por buenos solo con el reporte del propio trabajador, y 10 no dejaron ni el dato de cómo se verificó.
54 con comando PASS (58 %)
29 solo reporte del motor (31 %)
10 sin dato (11 %) → 42 % sin comando
además 4 comandos de verificación rechazados al alta a las 09:13 y 16 avisos por rutas distintas entre tarea y verificación
Arreglos de infra: desbordan al asiento equivocado y no llegan al vivo
11:45 y todo el día
Cuando el asiento de infra pasa el 70 % de su ventana, sus arreglos ceden y se desvían al asiento de contenido. Aparte, 12 entregas de arreglos terminaron bloqueadas porque el cambio quedó listo pero nunca se instaló en la box viva (otra pieza había cambiado el vivo mientras tanto).
11:45: 3 arreglos de infra desviados a contenido (cola-io, velador, motor-ing) con infra al 74 %
7 ítems de infra esperaron por 'cede a los arquitectos'
12 cierres 'entrega lista sin integrar' hoy (02:49, 03:03, 11:17, 11:42, 11:43, 12:03, 12:19 x2, 12:54 x2, 13:00, 13:18)
Cuando un paso de una cadena termina bloqueado o fallado, el siguiente no arranca y nadie lo avisa como dueño. Qarawiyyin tuvo su último paso verificado a las 02:15 y quedó 9 h 07 min parado hasta que alguien dio de alta uno a mano a las 11:22. Ese terminó bloqueado a las 12:31: el juez dio 7,2 y 7,1 a la v2 contra 7,6 de la v1, con ruido de ±0,5 entre jueces.
6 ítems esperan a un padre muerto: contenido-historia-9127, vortex-0870, vortex-f170, sodi-282c (bloqueados), vortex-growth-fdbc y camp-voces2 (fallados)
12:31: el aviso de línea quieta nombra 4 videos de Shorts parados
lo que sí anda: 4 timeouts con trabajo sin subir generaron su continuación -r1 solos (01:04, 01:53, 09:05, 12:46)
La regla 'no pushear a main si el último deploy está en failure' es correcta, pero hoy convirtió a casi todos los trabajos de publicación en 'bloqueados' mientras el build seguía roto. Vortex: el deploy 366d811a6 falló a las 02:53; 16 de los 20 trabajadores bloqueados hoy lo citan, el primero a las 02:55. SODI: el deploy 150c4ef falla en Cloudflare Workers Builds y bloqueó a sodi-5582 (12:51) y sodi-282c (13:09).
16 de 20 bloqueos de trabajadores hoy citan un main roto
el ítem que arregla el deploy de Vortex (vortex-growth-c032) figura agregado a las 12:59 y lanzado a las 13:19; no verifiqué si hubo uno antes
5 ítems de publicación listos esperando en la cola (relecturas que vencen 19/11)
Fuente: eventos.jsonl · reportes de trabajadores · gh check-runs de 366d811a6 (failure 05:53Z)
6
Voces de Ju: mucho armado antes de la GPU
11:22 a 12:59
El trabajo de las voces de Ju arrancó a las 11:22 y la primera corrida de GPU salió recién a las 11:56. La segunda (12:52) esperó 6 min 41 s a que terminara de apagarse la máquina anterior antes de prender la nueva, que arrancó a las 12:59. De 29,9 minutos de corrida, 13,6 fueron gestión y 16,2 máquina pagando.
11:22 lanzado camp-voz-experto → 11:56 primera corrida de lote (34 min)
12:52 → 12:58: 'espero estados estables (shutting-down)', 401 s
gestión 13,6 min de 29,9 (45 %), USD 0,20 en total
Fuente: lote-resultados/voz-partitura-1118 (ficha y run-*.log), voz-auditoria-1118
7
Los vigilantes se caen justo cuando más se los necesita
11:30 a 12:27
Cuatro servicios de apoyo fallaron hoy. Tres de ellos coinciden con las horas del cerrojo bloqueado (inferencia, no probada); la cuarta es distinta.
lagos-turno-vigilar: 3 fallas (11:40, 12:10, 12:25) por timeout de 10 min
lagos-turno-velar: 1 falla (12:25) por timeout de 3 min
lagos-molestias: 2 fallas (11:55, 12:27); la segunda es un TimeoutExpired llamando a 'lagos-turno agregar'
lagos-contrato-resellar: 1 falla (11:30): box/CLAUDE.md con cambios sin commitear. Esta no tiene que ver con la cola
Tope de CPU sí, tope de RAM recién desde las 13:07
pico 12:27
Los trabajadores tenían un tope conjunto de CPU (600 % de 8 núcleos) desde el 17/11, pero no de RAM. A las 12:27 la carga llegó a 55 con presión de memoria del 55,8 % y la box usó swap; a las 12:25 se bajaron los trabajadores de 8 a 3 como freno de emergencia. El tope de RAM (55 %, unos 17 GiB, swap máx 2 GB) se instaló a las 13:07, después de que ese arreglo figurara bloqueado a las 12:03.
12:27:51: load 55, presión de memoria 55,8 %, presión de disco 84,6 %
9 trabajos vivos a la vez ahora, con el tope puesto en 3 de Claude desde las 12:25 (temporal)
lagos-trabajo.slice: MemoryMax=55 % desde 13:07:52
Los 157 títulos cortados están en las ramas noche20/educa-titles-2 y -3 y el HANDOFF de Educa los marca como pendientes del sí de Manuel o Ju desde el 23/10 00:25. No hay ninguna cola ni aviso que los vuelva a mostrar: son trabajo terminado que nadie recoge.
23/10 00:25: anotado en el HANDOFF de Educa
hoy 18/11: sigue pendiente, 26 días
no verifiqué si hay una tarjeta o issue abierto aparte
Fuente: projects/educachubi/HANDOFF.md línea 374
Cómo debería quedar
Cola 17Un archivo por ítem, o una base, y un cerrojo por ítem. Quien lee (velar, vigilar, molestias) no pide cerrojo.
Cierre 2Un cierre sin comando de verificación no cuenta como hecho: queda 'por revisar' a la vista.
Cadenas 4Si un paso se traba, el padre muerto avisa a un dueño y la cadena sigue o se corta sola con motivo.
Main roto 5Un main en failure abre solo un arreglo con prioridad 0 que destraba todo lo demás.
Infra 3El arreglo se prueba y se instala sobre el vivo en el mismo paso; el desborde no lo manda a otro asiento.
GPU 6Ver la máquina apagándose en paralelo y reusar la que ya está; contar el armado aparte.
Box 8Topes de CPU y de RAM juntos desde el alta (la RAM ya está desde las 13:07).
Sí de Manuel 9Una tarjeta con fecha para todo lo que espera un sí; a los 7 días vuelve a la vista.
Lo de arriba son propuestas, no cambios hechos (salvo el tope de RAM, instalado a las 13:07:52). Los 9 trabajos vivos de ahora son ítems del turno, no pestañas de tu Mac: el tope de trabajadores Claude está en 3 desde las 12:25 (freno temporal). Datos: turno-noche/eventos.jsonl, cola.jsonl, journalctl --user, reportes de los trabajadores. Fuente de esta página: projects/lagos-box/wiki/mapa-hoy/.