Scope retention fault injection to the synthetic attachment

This commit is contained in:
Artyom
2026-11-06 09:31:58 +03:00
parent b159899d73
commit e9ce6d0afa
3 changed files with 36 additions and 6 deletions
@@ -17,3 +17,7 @@
## Risks / Trade-offs
Ошибки диагностики сохраняются с ненулевым exit code. DLQ имеет исходные сообщения; проверяется приращение, volumes не очищаются. Сбои исполняются только на собственном стенде. Миграции и схема не меняются.
## Безопасность fault injection
Первый прогон прерван на replay_failed до failed_retention (level4.txt, exit -2). Для проверки retention изменяются created_at/updated_at только созданного suite failed-вложения по id+chat_id, на действующий retention+1 секунд. Остальные строки и глобальные настройки не меняются. После штатной уборки проверяется replay=expired.
@@ -13,3 +13,5 @@
## Impact
Только scripts/pipeline_suite.py (evidence), evidence/sqlalchemy-2026-11-06/grade4 и OpenSpec. Итоговый REPORT, contracts, публичные tests и соседние лабы не меняются. Новое поведение versioned pipeline — следующий цикл.
Обнаружен major в диагностике: failed_retention уменьшал глобальный retention до 1 s и мог удалить чужой failed staging. До исполнения этого шага прогон остановлен; исправление ограничивает состаривание одной синтетической строкой по id и chat_id без изменения глобального retention.
+30 -6
View File
@@ -602,15 +602,39 @@ class Suite:
self.api.final[ident] = {"failed"}
kept = self.record(ident)["staging_key"]
check(kept is not None, "failed staging was removed before the retention period")
try:
self.stack.launch(self.args.relay, FAULT_STAGING_RETENTION_SECONDS="1")
poll(lambda: self.record(ident)["staging_key"] is None, 30, "failed staging cleanup")
finally:
self.stack.launch(self.args.relay)
retention = int(
self.stack.dc("exec", "-T", self.args.relay, "printenv", "STAGING_RETENTION_SECONDS")
)
aged = self.stack.dc(
"exec",
"-T",
self.args.postgres,
"sh",
"-c",
PSQL,
"sh",
"-v",
"id=" + ident,
"-v",
"chat=" + self.api.chat["id"],
"-v",
"age=" + str(retention + 1),
stdin="UPDATE attachments SET created_at = created_at - :age * interval '1 second', "
"updated_at = updated_at - :age * interval '1 second' "
"WHERE id = :'id' AND chat_id = :'chat' AND status = 'failed' RETURNING id;\n",
)
check(aged.strip() == ident, "did not age exactly the suite's failed attachment")
poll(lambda: self.record(ident)["staging_key"] is None, 30, "failed staging cleanup")
replay = self.stack.admin("replay", "--attachment-id", ident)
check(replay["result"] == "expired", f"replay after retention gave {replay}")
check(self.api.get(ident)["status"] == "failed", "expired replay changed the status")
return {"attachment_id": ident, "staging_before": "kept", "replay": replay}
return {
"attachment_id": ident,
"staging_before": "kept",
"retention_seconds": retention,
"aged_only": ident,
"replay": replay,
}
def image_matrix(self):
folder = Path(self.args.images)