mirror of
https://github.com/Matysh/houseplan-card
synced 2026-09-29 03:09:36 +00:00
The full registry run proves that tests can fail, not that the product works; 4 of its 5 runs since 02.09 were manual dispatches tied to releases. Owner decision 09.09: a daily schedule (01:00 UTC, before the 02:30 nightly Validate), failures reported as an issue by the existing #472 job, no place in the development or release flow. Docs and the workflow comments say so; the test pins the daily cron. Issue: #513 User-Visible: no
199 lines
10 KiB
YAML
199 lines
10 KiB
YAML
name: Мутационный гейт
|
||
|
||
# Реестр известных поломок (issue #85): каждый мутант ломает продуктовый код
|
||
# известным способом, и объявленный тест ОБЯЗАН на этом покраснеть. Тест,
|
||
# оставшийся зелёным на сломанном коде, ничего не защищает — он лишь выглядит
|
||
# защитой, и это хуже его отсутствия.
|
||
#
|
||
# Прогон дорогой и проверяет не продукт, а тесты, поэтому он не входит ни в
|
||
# Validate, ни в цикл разработки, ни в релизный гейт (#513, решение владельца
|
||
# 09.09): каждую ночь по расписанию, отказ — issue с отчётом (#472).
|
||
# Мутанты, задетые диффом, конвейер ревью гоняет отдельно на кандидате (#510).
|
||
# Дешёвая половина — «якоря патчей живы, guard-файлы существуют» — идёт с
|
||
# обычными юнитами: test/mutation-gate.test.mjs.
|
||
#
|
||
# #332: бандл собирается только мутантам с браузерным гвардом (guardNeedsBundle),
|
||
# компиляция тестов в worktree стартует с тёплого test-build (инкрементальный
|
||
# tsc), а реестр режется на четыре чересполосных шарда — полный прогон
|
||
# укладывается в десятки минут вместо часов. Локальный дифф-режим:
|
||
# node scripts/mutation-gate.mjs --changed origin/dev..HEAD
|
||
|
||
on:
|
||
workflow_dispatch:
|
||
inputs:
|
||
ref:
|
||
description: Git ref whose mutation guards must be proved
|
||
required: false
|
||
default: dev
|
||
schedule:
|
||
# Каждую ночь, 01:00 UTC (04:00 MSK) — после суток правок и до ночного
|
||
# полного Validate (nightly.yml, 02:30 UTC), чтобы не делить раннеры (#513).
|
||
- cron: '0 1 * * *'
|
||
|
||
permissions:
|
||
contents: read
|
||
|
||
# Группа зависит от события (#472). Прежде она была одна на всё, и ручной
|
||
# запуск (отладка гейта) отменял идущий по расписанию — так 24.08 погиб
|
||
# еженедельный прогон, а отменённый в списке выглядит «не красным». Поймать
|
||
# отмену изнутри нельзя: вместе с прогоном отменяются и не начавшиеся job,
|
||
# включая любой репортёр. Значит отмену надо не ловить, а не допускать.
|
||
concurrency:
|
||
group: mutation-gate-${{ github.event_name }}
|
||
cancel-in-progress: true
|
||
|
||
jobs:
|
||
mutants:
|
||
name: "Мутанты: каждый обязан красить тесты (шард ${{ matrix.shard }} из 4)"
|
||
runs-on: ubuntu-latest
|
||
strategy:
|
||
fail-fast: false
|
||
matrix:
|
||
shard: [1, 2, 3, 4]
|
||
# Шард ~64 мутантов × свой guard; бандл собирают только браузерные гварды.
|
||
# Час — потолок против зависшего Chromium.
|
||
timeout-minutes: 60
|
||
steps:
|
||
- uses: actions/checkout@v7
|
||
with:
|
||
ref: ${{ github.event_name == 'workflow_dispatch' && inputs.ref || 'dev' }}
|
||
fetch-depth: 0
|
||
|
||
- uses: actions/setup-node@v7
|
||
with:
|
||
node-version: 22
|
||
cache: npm
|
||
|
||
- run: npm ci
|
||
|
||
- uses: actions/setup-python@v7
|
||
with:
|
||
python-version: '3.14'
|
||
|
||
- name: Установить backend test dependencies
|
||
run: |
|
||
# Точные версии — в tests_backend/requirements.txt (#392): без них
|
||
# резолвер выбирает набор сам, и «зелёный backend» значит разное
|
||
# в разные дни.
|
||
pip install -r tests_backend/requirements.txt
|
||
pip list --format=columns | grep -Ei 'homeassistant|voluptuous|^pytest '
|
||
|
||
- name: Кэш браузеров Playwright
|
||
id: pw
|
||
uses: actions/cache@v6
|
||
with:
|
||
path: ~/.cache/ms-playwright
|
||
key: playwright-${{ runner.os }}-${{ hashFiles('package-lock.json') }}
|
||
|
||
- name: Установить Chromium
|
||
if: steps.pw.outputs.cache-hit != 'true'
|
||
run: npx playwright install --with-deps chromium
|
||
|
||
- name: Реестр применим к текущему коду
|
||
run: node scripts/mutation-gate.mjs --check
|
||
|
||
- name: Тёплый test-build для инкрементальной компиляции мутантов
|
||
run: npx tsc -p tsconfig.test.json && node scripts/fix-test-build.mjs
|
||
|
||
# Вывод шарда сохраняется артефактом (#472): строки
|
||
# `FAIL <id>: тест остался зелёным…` — единственное место, где названо,
|
||
# ЧТО сбежало. Без артефакта отказ безымянный. `PIPESTATUS` — чтобы
|
||
# `tee` не съел код выхода раннера.
|
||
- name: Каждый тест ловит свою поломку
|
||
run: |
|
||
mkdir -p artifacts
|
||
set -o pipefail
|
||
node scripts/mutation-gate.mjs --shard=${{ matrix.shard }}/4 2>&1 | tee artifacts/mutation-shard-${{ matrix.shard }}.log
|
||
- name: Сохранить лог шарда
|
||
if: always()
|
||
uses: actions/upload-artifact@v7
|
||
with:
|
||
name: mutation-shard-${{ matrix.shard }}
|
||
path: artifacts/mutation-shard-${{ matrix.shard }}.log
|
||
if-no-files-found: warn
|
||
retention-days: 30
|
||
|
||
# Адресат у отказа (#472). Только по расписанию: ручной dispatch остаётся
|
||
# для отладки самого гейта, его результат смотрят в прогоне — issue на
|
||
# каждый такой отказ был бы шумом, который снова перестанут читать.
|
||
#
|
||
# Права job-уровня ЗАМЕНЯЮТ права workflow, а не дополняют (прецедент —
|
||
# validate.yml, job с actions: read): перечислены все три.
|
||
report:
|
||
name: "Отказ расписания: issue и Telegram"
|
||
needs: mutants
|
||
if: always() && github.event_name == 'schedule' && needs.mutants.result != 'success'
|
||
runs-on: ubuntu-latest
|
||
permissions:
|
||
contents: read
|
||
actions: read
|
||
issues: write
|
||
steps:
|
||
- uses: actions/checkout@v7
|
||
with:
|
||
ref: dev
|
||
- uses: actions/setup-node@v7
|
||
with:
|
||
node-version: 22
|
||
- name: Забрать логи шардов
|
||
uses: actions/download-artifact@v7
|
||
with:
|
||
pattern: mutation-shard-*
|
||
path: artifacts/mutation-logs
|
||
- name: Собрать отчёт
|
||
id: report
|
||
env:
|
||
RUN_URL: ${{ github.server_url }}/${{ github.repository }}/actions/runs/${{ github.run_id }}
|
||
run: |
|
||
# SHA — того дерева, которое чекаутили и гоняли (dev), а не
|
||
# github.sha: для расписания это вершина default-ветки main, и отчёт
|
||
# называл бы «dev @ <SHA main>» (ревью r1). Образец — process.yml.
|
||
SHA=$(git rev-parse HEAD)
|
||
mkdir -p artifacts
|
||
node scripts/mutation-gate-report.mjs \
|
||
--logs=artifacts/mutation-logs --shards=4 \
|
||
--run-url="$RUN_URL" --ref=dev --sha="$SHA" \
|
||
--body-out=artifacts/mutation-report.md \
|
||
--telegram-out=artifacts/mutation-telegram.txt >> "$GITHUB_OUTPUT"
|
||
# Одно issue, а не одно на неделю: открытое с тем же маркером в заголовке
|
||
# получает комментарий, новое заводится только если открытого нет.
|
||
- name: Issue — создать или дописать
|
||
id: issue
|
||
env:
|
||
GH_TOKEN: ${{ github.token }}
|
||
REPO: ${{ github.repository }}
|
||
MARKER: ${{ steps.report.outputs.marker }}
|
||
TITLE: ${{ steps.report.outputs.title }}
|
||
run: |
|
||
existing=$(gh issue list --repo "$REPO" --state open --search "\"$MARKER\" in:title" \
|
||
--json number,title --jq '[.[] | select(.title | startswith(env.MARKER))][0].number // empty')
|
||
if [ -n "$existing" ]; then
|
||
gh issue comment "$existing" --repo "$REPO" --body-file artifacts/mutation-report.md
|
||
url="${{ github.server_url }}/$REPO/issues/$existing"
|
||
else
|
||
url=$(gh issue create --repo "$REPO" --title "$TITLE" \
|
||
--label infra --label process --label tests \
|
||
--body-file artifacts/mutation-report.md)
|
||
fi
|
||
echo "url=$url" >> "$GITHUB_OUTPUT"
|
||
echo "issue: $url"
|
||
# Тот же канал, что у релизов (announce.yml). Нет секретов — не отказ:
|
||
# issue уже заведено, а Telegram — второй адресат, не единственный.
|
||
- name: Telegram
|
||
if: always() && steps.issue.outcome == 'success'
|
||
env:
|
||
TOKEN: ${{ secrets.TELEGRAM_BOT_TOKEN }}
|
||
CHAT: ${{ secrets.TELEGRAM_CHAT_ID }}
|
||
ISSUE_URL: ${{ steps.issue.outputs.url }}
|
||
run: |
|
||
if [ -z "$TOKEN" ] || [ -z "$CHAT" ]; then
|
||
echo "::warning::TELEGRAM_BOT_TOKEN/TELEGRAM_CHAT_ID не заданы — оповещение пропущено, issue заведено"
|
||
exit 0
|
||
fi
|
||
TEXT=$(sed "s|(issue)|$ISSUE_URL|" artifacts/mutation-telegram.txt)
|
||
curl -sS --fail-with-body -X POST \
|
||
"https://api.telegram.org/bot$TOKEN/sendMessage" \
|
||
--data-urlencode "chat_id=$CHAT" \
|
||
--data-urlencode "text=$TEXT" \
|
||
-d disable_web_page_preview=true
|