Files
mtusi2026lab6/REPORT.md
T

35 KiB
Raw Blame History

Отчёт — лабораторная 6

Медведев Андрей Михайлович, БПИ2303. Цель — уровни3–4 и трек2 уровня5 «SLO и обнаружение инцидентов». Текущий checkpoint содержит приложение, SDK, Collector/OpenObserve и настоящий Grafana13.3.1:18 панелей, trace42 spans/41 parents, оба UI links и реальные переходы алертов при отказах PostgreSQL/worker. Fresh-volume startup, исходный smoke, реальные faults/retry и native source checks выполнены; final artifact и независимый итоговый обзор готовятся. Оценка и принятие преподавателем не заявляются.

Архитектура и сохранённая основа

По решению владельца Prometheus/Loki/Tempo заменены OpenObserve1.1.2. Две API, worker, PostgreSQL18.6, Valkey9, RustFS и HAProxy сохраняются. API/worker передают native OTLP HTTP/protobuf в отдельный Collector-k8s0.163.2, затем все три сигнала идут в изолированную организацию default OpenObserve. Его локальный persistent volume независим от БД приложения; это временный инженерный default, а не заимствование Azur S3/Litestream.

Backend95 остался побайтно прежним на Mac и Linux. Исходный manifest — BACKEND-READY.json; текущая проверка95/95 находится в evidence/openobserve/backend-unchanged.json. Ранее проверенные Go1.27.2 race/vet/lint/build/format, настоящий OTLP protobuf, PostgreSQL SLO cohort/pool regressions остаются исторической основой. Новые запросы к storage проверены отдельно. Архив5 и source112 лабораторной7 не менялись.

Перед миграцией49 config/scripts/docs/evidence файлов сохранены и проверены в private .local/history/pre-openobserve-2026-11-15T224455797Z. Прежние storage-конфиги перенесены в docs/archive/pre-openobserve и не используются текущими callers. Общий контракт включён внутрь пакета в docs/reference/OPENOBSERVE-BOUNDARY.md с проверенной provenance.

Фактические результаты

Все runtime операции выполнялись на Linux omarchy в /mnt/data/home/bench-saves/mtuci-vp-remaining-20261115/lab6, project mtuci-vp6-medvedev, в background.slice с низкими CPU/IO weights. Это проверки поведения, не бенчмарки.

Проверка Наблюдение Доказательство
Настоящие API/worker → Collector → OpenObserve Все3 сигнала; одна цепочка42 spans/41 parents и3 связанных лога API/worker с request_id evidence/openobserve/native-signals.json, native-signals-sa.json
Native schema/PromQL Реальные имена без messenger_ и автоматических _total/_seconds; histogram p95 вычислен из buckets schema-discovery.json, OPENOBSERVE-CONTRACT.json
Query identity Два service_account, search/ingest200, административная rotation403; native роль не read-only native-identities.json, OPENOBSERVE-IDENTITIES.json
Штатный HAProxy gateway Query/search/editor/PromQL доступны; ingest/admin/иная организация запрещены; лимиты запроса и parser cases проверены gateway-green.json, parser-green.json
Подготовленные панели/правила 23 native parse/content checks; отдельные17 positive controls проверяют реальные labels, конечные histogram percentiles, error/burn0 и зрелую когорту1/1 provisioned-queries.json, positive-queries-red/green.json; это не Grafana evaluation
Отказ OpenObserve Процесс не работал примерно114,541с; полный публичный API smoke с async image/original/thumbnail прошёл runtime-checks.json, collector-before/down/recovered.json
Очередь/память Collector 177781 байт во время отказа, после восстановления0; capacity25165824 байт суммарно по3 сигналам; working memory36,78 →36,88 →41,36МиБ при hard limit256МиБ, OOMfalse collector snapshots; RSS является отдельной метрикой
Persistent history Прежние42 spans,3 лога и point-in-time HTTP counter127 сохранились с тем же fingerprint bf0e595e… persistence-before.json, persistence-after.json
Обе API реплики Каждая отдельно остановлена/восстановлена; сессия и4 подтверждённых сообщения сохранены, дублей нет both-replicas.json

Observed checks27/35ms при остановке реплик относятся только к конкретному fault-сценарию после stop, а не к performance SLO. У отказа telemetry зафиксированы exporter send_failed counters; они не объявляются точным числом уникальных потерянных событий. После восстановления очередь пуста, новые сигналы доставляются. Конечный тест и hard container limit не доказывают отсутствие OOM при произвольной нагрузке.

Имена, единицы и корреляция

OPENOBSERVE-CONTRACT.json и TELEMETRY-SCHEMA.json описывают actual mapping. Counters называются http_requests/jobs_processed/process_cpu; histogram families — http_duration, job_duration, time_to_ready, db_pool_acquire_duration, их _bucket/_count/_sum. Duration instruments измеряются в секундах. Native trace start_time/end_time — наносекунды, duration/_timestamp — микросекунды; проверены численно по настоящим строкам. Parent — reference_parent_span_id. Logs имеют body/event/outcome/service_name/request_id/trace_id/span_id.

Пример сохранённой цепочки — ca31fa667ee8a9b15a40d3cc904f6683. В ней есть API upload, postgres.acquire/query, s3.put/get/stat, attachment.publish и attachment.process. Секреты и тела сообщений не являются telemetry attributes. request_id присутствует в HTTP-логе и не становится metric label. Resources нормализованы в service_name/service_instance_id/service_version/deployment_environment_name. Native start_time различается между OTLP instruments: SLO subtraction/division и availability joins явно сопоставляют service_name/service_instance_id. Исходный empty-series RED сохранён;17 positive controls на прежнем workload прошли, включая finite p50/p95/p99 и зрелую когорту1/1. Idle NaN/NoData не объявляются успешным percentile.

Native instant PromQL проверен с отсутствующим time, integer/fractional Unix seconds, milliseconds/microseconds и RFC3339: все200/status success. Дробные Unix seconds parser этой версии усекает до целой секунды. Это отдельно от SQL start_time/end_time, которые должны быть целыми микросекундами; для persisted readback они получены через BigInt из сохранённых span timestamps. evidence/openobserve/instant-time-grammar.json.

Доступ и ограничения

Начальный owner нужен только bootstrap/operator reader. POST /api/{org}/users в Community принудительно назначает Admin, поэтому Grafana так не создаётся. Используется native POST /api/{org}/service_accounts с email/first_name/last_name; token/user сохраняются вне git в том же процессе. Native SA позволяет и read, и ingest, поэтому права query principal дополнительно ограничивает HAProxy по identity, методам и exact paths. Root/admin не передаются Grafana. Grafana состоит только в отдельной сети grafana-query-v2 с HAProxy; raw OpenObserve и Collector к ней не подключены. Сетевой RED воспроизвёл raw read/write и Collector bypass; final GREEN сохранил query200 с реальной строкой, raw-IP/read/write/host-loopback-route/Collector недоступны из этой сети. Operator edge остаётся для опубликованных loopback endpoints. Доступность UI28306 теперь проверена настоящим Grafana и authenticated Chromium. Anonymous Viewer сохранён; обычная форма owner login временно включена как default, без расширения ролей.

Collector получает dedicated ingest SA через file-provider Authorization; файл содержит точные Basic bytes без CR/LF. Есть memory_limiter128МиБ, batch64/128,8МиБ queue на каждый сигнал и retry максимум5с. SDK queues128, batches32, export timeout1с, retry выключен, metric interval2с. Эти SDK параметры не менялись.

Gateway допускает native search requested size0–1000 либо отсутствие size, SQL time window до3600с, _values size1–1000 и окно до3600с, request inspection64КиБ. Это лимиты параметров запроса, не универсальный предел SQL результата: native SQL LIMIT2 при query.size1 возвращает2 строки. Provisioned SQL должен иметь явный LIMIT; отдельно подготовлен Grafana data-proxy response cap1МиБ, OpenObserve query timeout5с, DataFusion budget256МиБ, metrics series/points bounds и gateway concurrency/queue limits. Plugin Go SDK отклонил2МиБ response при1048576, однако browser proxy вернул2097625байт. Поэтому существующий HAProxy принудительно запрашивает identity и пропускает только распознанный одиночный normalized Content-Length≤1048576 без Content-Encoding/Transfer-Encoding. После reload тот же browser request получил502/35байт, ordinary metadata/search/Prom controls остались успешными.14 native framing classes проверены отдельно; это bounded known-Content-Length контракт, не универсальный streaming/decompression counter. Public tag и deployed image имеют разные commit, поэтому исходная причина browser setting остаётся unknown.

Prometheus range gateway консервативно допускает floor(end)-floor(start) от1 до3599с: дробные timestamps работают, реальное окно строго меньше3600с, same-second/inverted ranges отклоняются. Duplicate protected URL parameters отклоняются400, duplicate JSON keys native backend отклоняет422. Complete chunked JSON проходит; oversized body отклонён413, incomplete408, delayed prefix+padding после2,2с закрылся408. Первая узкая oracle ожидала только413; её FAIL сохранён отдельно, bypass200 не наблюдался.

Фабрика account HTTP с обязательными fake ports воспроизвела parse-before-capture RED4fail/1pass и дала GREEN5pass/22expect на Linux Bun1.4.4. Сырой/частичный ответ теперь записывается в wx0600 private file до JSON parsing; network/body/cap uncertainty сохраняется, POST автоматически не повторяется. ACCOUNT-HTTP-CASES.md и evidence/openobserve/account-http-*.

SLI/SLO и подготовка Grafana

SLI API — доля бизнес-запросов без5xx, health исключён; учебная цель99%. Readiness SLI — доля accepted files, впервые ready≤10с; цель99% в5-минутной созревшей когорте. Immutable accepted_at/first_ready_at не переписываются Replay/Advance. Failed/stuck входят в denominator, legacy без acceptance исключены. Time-to-ready histogram измеряет завершённые попытки; он не заменяет denominator.

Панели показывают RPS/errors/p50/p95/p99, job outcomes/duration, backlog/age, DB used/pending/capacity, worker saturation, memory/CPU и readiness cohort. Instant gauges старше10с исключаются, чтобы старый service.instance.id после рестарта не удерживал ложный backlog/SLO. Гистограммы при нулевой активности могут давать NaN; это не подменяется нулевой latency.

Подготовлены Grafana-managed high-error, queue-lag, database-observer и два multiwindow burn alerts10/30с с for15с. Bool-сумма двух окон даёт0/1/2, оба плохих окна означают2 и threshold>1,5. NoData/Error не считаются здоровым SLO. Правила загружены и исполняются настоящим Grafana. Native scheduler отверг1с group и min_interval1с; обе неуспешные попытки сохранены. Canonical group10с работает без experimental flags. Фактические переходы и измерения приведены ниже.

Metrics datasource — native Prometheus type с явным jsonData.httpMethod=GET, UID prometheus и URL query gateway /api/default/prometheus. Logs/traces — готовый сторонний Windforce17/openobserve-grafana-plugin1.0.1, exact commit e10214739827dda9318705d49db262b28d67bcfe, unsigned только id openobserve. Verified release binary загружен без изменений; actual Chromium отрисовал canonical trace и оба navigation links.42 unique span IDs/41 parents сверены по реальному browser response; raw ns→UI duration проверены с точностью отображения. Официальным OpenObserve plugin он не называется. Native supplementary Logs volume query вообще не передаёт size. Native missing/0 дают корректную агрегацию; узкий9-case RED/GREEN исправил только request policy, не plugin. Optional service-map10000 не входит в принимаемый путь; row-size параметр не объявляется hard byte/work limit. Самодельный shim/plugin не создаётся.

Запуск и остановка

Проверенная среда: Docker29.9.2, Compose5.6.1, Bun1.4.4, Linux amd64. Новые images сначала требуют разрешения. IMAGE-MANIFEST.json содержит public pinned refs/digests/sizes; текущие OpenObserve/Collector импортированы из проверенного OCI cache в локальные aliases. Повторный scripts/up.sh проверен на имеющихся volumes. Каждый полученный account token сохраняется отдельным checkpoint до создания следующего аккаунта. Intent записывается до POST и связывается с raw capture; при неоднозначном исходе POST автоматически не повторяется. Сохранённые tokens обязаны дать search200 с известным event, ingest200 и admin403 до публикации derived файлов/успешного старта;401/503 и другие статусы закрываются. Начальная PostgreSQL readiness использует TCP; Grafana env_file optional при первичном Compose parse, затем provisioner публикует dedicated query env до её старта. up.sh теперь включает Grafana, exact cached image/plugin checks и encrypted-first owner archival. Bounded warm/cold wait600с введён после измеренного fresh deadline120с:641 успешная миграция/ошибок0, HTTP ещё не слушал. Новый first boot с пустыми volumes прошёл целиком; предыдущие две неуспешные попытки сохранены отдельно.

После подготовки проверенных images рабочие команды из корня lab6:

./scripts/up.sh
bun scripts/check-backend-unchanged.ts
make check
make test BASE_URL=http://127.0.0.1:28206
bun student-tests/openobserve-gateway.ts
bun student-tests/openobserve-provisioned-queries.ts
bun student-tests/both-replicas.ts
./scripts/stop.sh

Все Compose helpers закрепляют absolute manifest и project, stop сохраняет volumes. Приложение —127.0.0.1:28206, OpenObserve operator endpoint28406, query gateway28906, Collector OTLP28706/internal metrics28806; Grafana28306. .local содержит generated synthetic credentials/cache/private receipts и исключена из git, Docker context и архива. Исходные задания/contracts/public tests сохраняются.

Для нового Docker29 host можно получить exact public amd64 refs из IMAGE-MANIFEST.json и после разрешения загрузить их обычным docker image pull, затем присвоить два проверенных local aliases из OPENOBSERVE-IDENTITIES.json. Никакие Azur данные/credentials/node metadata для развёртывания не нужны. Cache-discovery helpers относятся только к provenance текущего повторного использования и не входят в обязательный startup path.

Настоящий Grafana и инциденты

Одобренная загрузка ограничена Grafana13.3.1 и готовым OpenObserve plugin1.0.1. Фактически получено559001001байт, меньше600000000; exact SHA/imageID находятся в evidence/grafana/download-ready.json и cache-ready.json. Дополнительные модели, браузер и образы не скачивались. Native health сообщает commit da3aa3ff574e7dbbf808c66b6daa744defed0441; публичный tag13.3.1 указывает5db6ba887630c7fa12e5bfd063f2fa854025468c. Tag readers служат reference, а не доказательством исходников compiled binary. Native startup/auth/failure outcomes остаются измеренными фактами.

Authenticated Chromium проверил18/18 dashboard panels с реальными finite active samples, а не толькоHTTP200; evidence/grafana/dashboard-panels.json и dashboard-panel18.png. Инертные NaN остаются отдельно. Trace33513303fdb8cdefbd4ff24c8394f3d3 визуально содержит API/publish/process/DB/S3,42 spans/41 parents/2 services. API188.030423мс отображается188.03мс, publisher68.126923→68.13мс, worker1153.117322мс→1.15с. См. trace-ui-first-readback.json, trace-first.png и linked-worker-tree.png.

Штатная ссылка в HTTP log details открывает тот же trace. Обратная находится в Span details → View logs for trace; worker span задаёт своё окно1794784791672000–1794784792825000мкс и находит одну matching worker.job строку с тем же trace/span. Исходный более широкий logs view содержит3 записи и HTTP request_id3cfa3390-ed20-4116-aa2f-9edefd0b38ab. Это два разных проверенных окна; требование3 строк для узкого span-window было ошибкой test oracle и его FAIL сохранён. evidence/grafana/both-native-links.json и PNG подтверждают реальные клики, без ручной подстановки обратной ссылки.

Обычный operator login работает. Доставленный в image frontend UserStorage.fetchResource возвращает null именно при missing-state404, а PageHistorySrv.load трактует это как empty и запускает обычное сохранение. На проверенном owner key были два cold GET404/console error; normal dashboard visit после throttle30с сделал POST201, reload того же ключа GET200 и unexpected errors0. Никаких seeding fixtures, vendor flags или blanket404 whitelist не применялось; literal raw console0 не заявляется. Точные route/status/count и bundle/map/source SHA находятся в history-normal-ui.json и history-source-binding.json.

Для SLO-трека использовались исходные5 правил без изменения порогов: group10с, bounded traffic2запроса/с и максимум4 одновременных,34 настоящих accepted uploads. PostgreSQL оставался живым/Ping200; ACCESS EXCLUSIVE lock на messages вызвал реальные application503 с UUID и postgres.query failure, поэтому LB503 не подменял app5xx. Короткий lock4.099с вызвал Pending и восстановился без Alerting. Длительный lock41.594с дал HighError Alerting через20.534с, FastBurn через28.585с; после release они стали Normal через19.126/17.114с. Наблюдения относятся к этому сценарию, не к performance benchmark.

Worker stop оставил обе API ready200. QueueLag стал Alerting через35.878с после остановки. Процесс worker запущен04:15:16.526UTC, ReadyBurn стал Alerting04:15:19.275, пока принятая очередь ещё не обработана; process start не означает бизнес-восстановление.34/34 файла достигли ready за47.89558–55.210172с; последний first_ready04:15:55.958UTC. ReadyBurn Normal04:15:39.294 отражает moving10/30с cohort, а не завершение всех файлов; QueueLag Normal04:16:07.400, финальные queue_depth/age0. Observer краткоPending, но неAlerting; API error rules при worker fault оставалисьNormal. Это observed false-positive check, не статистическая гарантия.

Исходная whole incident command закончиласьexit1 из-за phase-name oracle, который искал ReadyBurn только до запуска процесса. RESULT иVALIDATIONS сохранены как FAIL: incidents-original-command-fail.json и incidents-original-validations.json. Отдельный bounded readback тех же captured jobs/snapshots далexit0: incidents-causal-readback.json; он не повторял faults и не менял thresholds. Исправленная oracle требует complete same-ID accepted cohort и конечное причинное окно; empty queue samples больше не считаютсяdrained. RED3fail/1pass → GREEN4pass/9expect. Worker/PG восстановлены, own fault holders0, синтетическая сессия отозвана; encrypted private captures сохранены, plaintext secrets в evidence отсутствуют.

Гипотеза и пределы SLO-трека

Учебные defaults99% API availability и99% first-ready≤10с заданы как engineering targets, а не результаты пользовательского исследования или обещанный production SLA.99% даёт бюджет1 неуспешный business request/file из100. Контролируемый обычный upload trace завершался примерно1.39с, поэтому10с оставляют запас для асинхронной доставки/планирования; это проверенный пример, не распределение всей нагрузки. Health исключён из API denominator,4xx не считаются dependency failure. Failed/stuck accepted files входят в readiness denominator.

Гипотеза: сочетание двух окон10/30с с for15с подавляет короткий spike, но обнаруживает длительную деградацию; queue-age alert отдельно обнаруживает worker outage при здоровом API. Burn threshold14.4 означает превышение допустимой1% доли нарушений в14.4раза, то есть более14.4% в обоих окнах. Короткие окна сжаты для ограниченного учебного эксперимента; это не рекомендация production paging policy. Методика и исходные случаи сохранены в student-tests/GRAFANA-CASES.md, исполняемый workload — grafana-incidents.ts.

Одна последовательность healthy→short DB lock→recovery→long DB lock→recovery→worker stop/uploads→recovery подтвердила ожидаемые переходы. Короткий spike действительно ухудшил availability, хотя alert не дошёл до firing: это сознательный обмен скорости обнаружения на меньший шум, а не отсутствие ошибки сервиса. Краткий observer Pending не превратился в ложный firing. Выборка по одному эпизоду не оценивает статистическую частоту ложных срабатываний.

Readiness burn использует moving matured acceptance cohorts, а не очередь незавершённых задач. Поэтому его Normal04:15:39 не доказывает завершение backlog: последняя job ready04:15:55, а QueueLag Normal04:16:07. Runbook требует одновременно проверять actual job facts и свежую queue age. Конечные budgets SDK/Collector не гарантируют бесконечное хранение при outage; send_failed counters не равны уникально потерянным событиям.

Retry одной задачи

Для отдельного synthetic upload447122be-664f-4fef-8abf-4452676494a0 worker был временно приостановлен. После durable202 проверены точные111817байт staging fixture и сохранён W3C traceparent. Только этот объект временно отсутствовал; S3 и остальные файлы не останавливались/не менялись. Первая попытка записала processing_failed/queued, attempt1; точные байты восстановлены, автоматическая attempt2 опубликовала ready и исходный content остался byte-identical. Session отозвана, объект и worker восстановлены; исходный backend95 не менялся.

Grafana query того же trace3b58d0b8144926719059857bf888bada вернул58 spans с двумя publishers/consumers и правильными parent links, ERRORs3.get и worker.job outcomes retry/ready. Оба jobs_processed outcome counters положительны. Counter измеряет processing attempts, а не число уникальных файлов; retry означает неуспешную попытку с повтором, failed — отдельный terminal outcome, дополнительный permanent-failure job не запускался. Chromium отрисовал оба consumer attempts и красные S3 error children; retry-two-attempts.png/retry-storage-child.png показывают representative first errored attempt и начало следующего publisher, а не все58 строк одновременно. См. retry-owned-job.json и retry-telemetry.json.

Чистый запуск и итоговые проверки

Fresh project mtuci-vp6-fresh-adf8b95f получил новые credentials и все новые named volumes, используя verified immutable image/plugin cache. В disposable copy согласованно изменены только Compose project/network, pinned compose wrapper и literal ownership guard startup provisioner. Production canonical selectors не ослаблены до inherited environment. Canonical volumes сохранены и остановлены перед повторным использованием своих loopback ports.

Whole command завершиласьexit0: full up.sh → original make check → original public make test → actual fresh all3 signals/parent/ns units → Grafana datasource health/dashboard18/exact5 rules → backend95 unchanged → stop. См. fresh-volume-green.json. Первая attempt отклонила несогласованное имя disposable project доSAcreate; вторая остановилась по120с deadline при продолжающихся успешных SQLite migrations. Обе FAIL сохранены и не переименованы; третья с600с bounded wait началась с новых пустых volumes. Это cold HDD/background correctness run, не benchmark.

Независимый обзор усилил metadata reader: HTTP200 с пустым/wrong UID/duplicate panels/rules теперь отклоняется. RED1pass/2fail → GREEN3pass/11expect; actual strict reader сверил UIDmessenger,18 configured panel IDs/titles и5 exact rule UIDs. Его PASS — metadata/content acceptance, а визуальное подтверждение18 панелей хранится отдельно.

Базовый native checkpoint имел31 tests/88 assertions и58 TS files. После подтверждённого source finding OO6-LIFECYCLE-1 проверены41 tests/136 assertions и все60 maintained TS helpers на Bun1.4.4/TypeScript7.0.2 без сетевых зависимостей; текущие receipts перечислены в evidence/grafana/final-source-checks.json и browser-lifecycle-delta.json. Неизменяемый backend95 сохраняет прежние native Go1.27.2 checks; финальный SHA guard подтверждён отдельно. Original README/COURSE/CONTRIBUTING/Makefile/contracts/tests/examples/CI не изменены. Авторские tests не подменяют независимый review.

Исправление browser lifecycle по независимому review

В проверяемом helper был подтверждён code path, где newContext/newPage либо ошибка записи RESULT могли миновать close. Это source finding, а не наблюдавшаяся утечка текущего Chromium. Отдельная required-port factory теперь защищает весь setup/run немедленно после успешного acquire, закрывает ресурс до result reporting и сохраняет primary error отдельно от secondary close/report failures. Настоящий entrypoint не вызывается с optional fakes; зависимости тестов обязательны и явно синтетические.

Genuine native RED извлечённого старого порядка дал9fail/1pass, GREEN10pass/48 assertions; полный native suite41pass/136 assertions и typecheck60files PASS. Неизменность business scenario core подтверждена побайтно. Старые native UI/fault/retry receipts сохраняются как результаты прежнего checkpoint; browser, workload и faults после lifecycle fix не повторялись по согласованному ограничению. Текущий source closure подтверждён независимым reviewer; окончательная проверка нового ZIP выполняется отдельно. См. evidence/grafana/browser-lifecycle-delta.json.

Явный предел browser acceptance

Новый three-scenario Chromium helper действительно выполнил оба canonical log↔trace clicks и retry trace render, console errors/warnings0. Обе aggregate команды оставлены FAIL, потому что browser Network сообщил один canceled static fetch /public/build/img/icons/unicons/sync.svg. Bounded single logs-init leaf измерил ERR_ABORTED/canceled:true, runtime initiator fetchFromPersistentCache; независимый GET того же asset дал200/image/svg+xml/343байта. Shipped react-inlinesvg provider использует CacheAPI.add(new Request(...)) с AbortSignal и имеет cleanup abort, но точный cleanup trigger динамически не доказан. Это nonblocking static asset cancellation limitation, не clean-network/wholeUI PASS; vendor не менялся, общий whitelist ERR_ABORTED не вводился. См. browser-three-functional-icon-aborted.json и icon-cancellation-diagnostic.json.

Готовность пакета

Обязательные функциональные runtime сценарии подготовлены с указанным nonblocking browser пределом. Финальный ZIP формируется после проверки полного source freeze независимым reviewer; CRC, список entries и каждый source SHA проверяются отдельной native unzip командой. Все owned services/browser/listeners остановлены, volumes/private receipts/cache сохранены; подтверждение final-stop.json. Прежние113/8/16-file freezes, неуспешные команды и архивы сохраняются как история. Работа не отправлялась преподавателю; оценка и принятие не выдумываются.