fix(timeout): tick_timeout уровня по умолчанию 300с (max с every*0.8) — LLM-тик с инструментами не влезает в 120с; requeue из running (задача не висит при смерти тика-владельца)
This commit is contained in:
parent
413ee7a14d
commit
bdccf3f903
2 changed files with 10 additions and 4 deletions
|
|
@ -97,12 +97,16 @@ def promote_task(task_id: str, reason: str = "manual promote"):
|
||||||
|
|
||||||
|
|
||||||
def requeue_task(task_id: str, reason: str = "manual requeue"):
|
def requeue_task(task_id: str, reason: str = "manual requeue"):
|
||||||
"""Вернуть failed/прерванную задачу в очередь (TaskPromoted → ready)."""
|
"""Вернуть failed/running/прерванную задачу в очередь (TaskPromoted → ready).
|
||||||
|
|
||||||
|
running тоже возвращаем: если тик-владелец умер (рестарт демона, таймаут),
|
||||||
|
TaskFailed/TaskCompleted не будет — иначе задача зависает в running навсегда.
|
||||||
|
"""
|
||||||
model = es.run_projections()
|
model = es.run_projections()
|
||||||
t = model["tasks"].get(task_id)
|
t = model["tasks"].get(task_id)
|
||||||
if t is None:
|
if t is None:
|
||||||
raise ValueError(f"задача {task_id} не найдена")
|
raise ValueError(f"задача {task_id} не найдена")
|
||||||
if t["status"] not in ("failed", "done"):
|
if t["status"] not in ("failed", "done", "running"):
|
||||||
raise ValueError(f"задача {task_id} в статусе {t['status']} — requeue не нужен")
|
raise ValueError(f"задача {task_id} в статусе {t['status']} — requeue не нужен")
|
||||||
es.append_event("task", task_id, "TaskPromoted",
|
es.append_event("task", task_id, "TaskPromoted",
|
||||||
{"to": t["size"], "from": t["size"], "reason": reason})
|
{"to": t["size"], "from": t["size"], "reason": reason})
|
||||||
|
|
|
||||||
|
|
@ -39,8 +39,10 @@ def run_llm_tick(level_cfg, prompt: str, session_id=None, trace_prefix=None, tim
|
||||||
env = dict(os.environ)
|
env = dict(os.environ)
|
||||||
env["SIMBIOT_DB"] = env.get("SIMBIOT_DB", os.path.join(_HARNESS_DIR, "harness", "harness.db"))
|
env["SIMBIOT_DB"] = env.get("SIMBIOT_DB", os.path.join(_HARNESS_DIR, "harness", "harness.db"))
|
||||||
if timeout is None:
|
if timeout is None:
|
||||||
# таймаут чуть меньше интервала уровня, чтобы тик не наезжал на границу
|
# таймаут уровня: тик может быть длиннее интервала — занятый уровень
|
||||||
timeout = max(120, min(int(level_cfg.every * 0.8), 900))
|
# просто поглощает такты (TickAbsorbed), это норма архитектуры
|
||||||
|
timeout = getattr(level_cfg, "tick_timeout", 300)
|
||||||
|
timeout = max(timeout, int(level_cfg.every * 0.8))
|
||||||
try:
|
try:
|
||||||
proc = subprocess.run(
|
proc = subprocess.run(
|
||||||
[_VENV_PY, _WORKER],
|
[_VENV_PY, _WORKER],
|
||||||
|
|
|
||||||
Loading…
Reference in a new issue