Skip to content

Commit abe0058

Browse files
PhysShellclaude
andcommitted
C01-PRECISION-1: results (dev sets, holdout, regressions, status)
Before/after on MAUI 10.0.0 and OpenSilver (scanbox, unchanged revisions): exactly the 5 preregistered warnings removed, 0 added, 0 confirmed defects lost; sealed holdout (Stylet, gong-wpf-dragdrop, shadowsocks-windows): no change. Status PASS-ENGINEERING (narrow). Co-Authored-By: Claude Opus 5.5 (1M context) <noreply@anthropic.com>
1 parent 3c98df2 commit abe0058

38 files changed

Lines changed: 10261 additions & 2 deletions
Lines changed: 59 additions & 0 deletions
Original file line numberDiff line numberDiff line change
@@ -0,0 +1,59 @@
1+
# C01-PRECISION-1 — итог
2+
3+
**Статус: `PASS-ENGINEERING` (узкий).** `PASS-PRECISION` — не достигнут и не оценивался. `NO-MERGE / NO-UPSTREAM`:
4+
push, PR, merge, issues и сообщений нет.
5+
6+
## В одной строке
7+
Найден и устранён один доказуемый механизм ложных C01: teardown-замыкание #278 не проходило через вызов собственной
8+
реализации интерфейса через приведение `this` (`Dispose(bool) → (this as IDisconnectable).Disconnect() → -=`).
9+
На MAUI снято 5 из 405 C01, все 5 BENIGN; потерь TP 0; на OpenSilver и на трёх holdout-репозиториях изменений нет.
10+
Основная масса ложных C01 этим и любым маленьким доказательным патчем не снимается.
11+
12+
## Почему именно этот статус (критерии владельца §10)
13+
| критерий PASS-ENGINEERING | выполнен? | основание |
14+
|---|---|---|
15+
| устранён обобщаемый, семантически доказанный механизм | да, узкий | символ реализации (`FindImplementationForInterfaceMember`), не имена; 6 отрицательных контролей держат предупреждение (`hypothesis-preregistration.md`, `controls/`) |
16+
| патч уменьшает число подтверждённых FP на dev-данных | да, на 5 | H1-024, H1-065 (слепая разметка H1 до патча) + 3 от независимого оценщика (`holdout.md` ч. 3) |
17+
| все критичные подтверждённые дефекты обнаруживаются | да | 41/41 C01-K, 25/25 ACTIONABLE, полнота 22/6/5 без изменений (`regressions.md`) |
18+
| все обязательные тесты проходят | да, с одной оговоркой | 3 контроля round7 apparatus падают при собранном release `own-cli` — **так же на baseline** (зависимость от тулчейна) |
19+
| нет необъяснённых регрессий | да | снято ровно 5 предсказанных до прогона; новых 0; OWN050 без изменений |
20+
| воспроизводимо | да | baseline повторил замороженный SARIF H1 и OpenSilver побайтно; скрипты и job-каталоги — `artifacts/` |
21+
22+
Почему не KILL: механизм не опирается на неподтверждённое время жизни (это не R5); снятые не являются условными
23+
дефектами (все 5 BENIGN, `depends_on_app=false`); ни один подтверждённый дефект не исчез.
24+
Почему «узкий»: эффект 1,2% вывода MAUI; на holdout механизм не встретился, т. е. **независимого улучшения нет**.
25+
26+
## Phase 0 — Rust parity
27+
На замороженных `facts.json` H1 и OpenSilver Rust `own-cli` и Python побайтно одинаковы (SARIF и текст, rule, место,
28+
severity, resource kind, сообщения, число находок), то же — на фактах патча. Подробно — `parity.md`.
29+
30+
## Главный вывод для владельца (факты → вывод)
31+
- Факт: у 21 из 25 подтверждённых ACTIONABLE на MAUI в том же файле есть `-=` (`diagnosis.md` §1).
32+
- Факт: основная масса REL-ложных стоит на `DisconnectHandler`/`Disconnect`/`OnParentChangedCore`/`UntrackTarget`,
33+
вызов которых при уничтожении владельца в коде фреймворка не доказан; среди ACTIONABLE есть случай с `-=` именно в
34+
`DisconnectHandler` (H1-076).
35+
- Вывод: Own.NET может доказательно отличать безопасное от опасного только там, где отписка стоит на доказанном
36+
teardown-пути того же объекта. Для большинства предупреждений MAUI это требует модели жизненного цикла платформы или
37+
знания приложения — следующего решения владельца, не ещё одного фильтра.
38+
39+
## Оговорки
40+
- Унаследованные допущения: корень `Dispose` действительно вызывается (AX4); переприсваивание поля между `+=` и `-=`
41+
не отслеживается (AX6/#163). Новая оговорка того же рода: для не-`sealed` класса наследник может заново реализовать
42+
интерфейс — та же дыра, что у существующего ребра `M()` для `virtual`-методов (`result.md` п. 4). В области MAUI
43+
наследников трёх классов нет.
44+
- Все анализы — Python reference engine; Rust равен ему на этих входах. Конфигурация — Linux loose-mode без reference
45+
packs (как H1); у gong-wpf-dragdrop из-за этого 0 предупреждений (все подписки OWN050).
46+
- Оценщик и разметчики H1 — та же модель (`claude-opus-5-5`); «независимый» = другой контекст без доступа к патчу и
47+
гипотезе. Его список открытых файлов — с его слов; журнал вызовов не проверялся.
48+
- Метрика A H1 не пересчитывалась (выборка изменилась).
49+
- Не запускались: полный `cargo test`, clippy, formal/Kani, Windows-джобы CI, oracle/mine, `owen --engine` Stage-контроли.
50+
51+
## Где что
52+
`baseline.md`, `parity.md`, `diagnosis.md`, `hypothesis-preregistration.md`, `controls/` (17 программ + `run_controls.py`),
53+
`before-after.json`, `regressions.md`, `holdout.md`, `result.md`, `artifacts/` (скрипты из `work/` — там `.py`
54+
сохранены как `.py.txt`, чтобы не попадать под ruff; журналы шагов; ключ и ответы оценщика; parity).
55+
Коммиты: `978161c` (всё до кода), `3c98df2` (патч), затем коммит с результатами.
56+
57+
Время: 17:57Z (baseline) – ~19:00Z 2026-10-23, около 1,5 ч активной работы из бюджета одного агент-дня.
58+
59+
C01P1-DONE
Lines changed: 69 additions & 0 deletions
Original file line numberDiff line numberDiff line change
@@ -0,0 +1,69 @@
1+
"""Assemble before-after.json and copy reproducibility artifacts into the evidence dir."""
2+
import json
3+
import os
4+
import shutil
5+
6+
W = os.path.expanduser("~/Documents/ownnet-eng/work")
7+
E = os.path.expanduser("~/Documents/ownnet-eng/Own.NET/docs/evidence/c01-precision-2026-10")
8+
A = f"{E}/artifacts"
9+
os.makedirs(A, exist_ok=True)
10+
11+
12+
def bm(p):
13+
d = json.load(open(p))
14+
cases = d.get("cases", [])
15+
norm = sorted(json.dumps({k: v for k, v in c.items() if "second" not in k and "time" not in k},
16+
sort_keys=True) for c in cases)
17+
return d, norm
18+
19+
20+
b, bc = bm(f"{W}/logs/baseline/benchmark.json")
21+
p, pc = bm(f"{W}/logs/patched/benchmark.json")
22+
print("benchmark top keys", list(b)[:15], "cases", len(bc), "per-case identical:", bc == pc)
23+
dev = json.load(open(f"{W}/dev-diff.json"))
24+
ho = json.load(open(f"{W}/holdout-diff.json"))
25+
key = json.load(open(f"{W}/eval-key/key.json"))
26+
labels = [json.loads(line) for line in open(f"{W}/eval-labels.jsonl")]
27+
ctl = {ph: json.load(open(f"{W}/logs/{d}/controls-{ph}.json"))
28+
for ph, d in (("before", "baseline"), ("after", "patched"))}
29+
out = {
30+
"baseline_sha": "175076925058b6b4eb60087a3b1e834e7315ebad",
31+
"patch_sha": open(f"{W}/sb-dev/PATCH_SHA").read().strip(),
32+
"extractor_dll_sha256": {
33+
"base": "e169519b5d9aaf6df80b119952bbbbb50bc73a727f9a4c4e91cd94436369caf6",
34+
"patched": "92e1d5f858ef8e3977cf5b4cbf4732bec34356efc12046d93daa1e6931945591"},
35+
"engine": "Python reference core; Rust own-cli byte-identical on base and patched MAUI facts",
36+
"dev_sets": dev,
37+
"holdout": ho,
38+
"independent_evaluator": {
39+
"packet_sha256": "37f93776c57ed34081b2cbf17e13d0bd0ddfc79974d7909084d88d420ed9d4ef",
40+
"key": key, "labels": labels},
41+
"controls": {ph: {"mismatches": c["mismatches"],
42+
"rows": [{"file": x["file"], **r} for x in c["cases"] for r in x["rows"]]}
43+
for ph, c in ctl.items()},
44+
"corpus_benchmark": {"baseline": {k: v for k, v in b.items() if k != "cases"},
45+
"patched": {k: v for k, v in p.items() if k != "cases"},
46+
"per_case_identical": bc == pc},
47+
}
48+
json.dump(out, open(f"{E}/before-after.json", "w"), indent=1, ensure_ascii=False)
49+
for f in ["gates.sh", "ci_samples.sh", "mk_ci_samples.py", "parity.py", "classify_minus.py",
50+
"tpl_census.py", "iface_calls.sh", "used_repos.py", "check_candidates.sh", "mk_jobs.sh",
51+
"sb-lib.sh", "diff_runs.py", "mk_packet.py", "controls.sh", "round7_check.sh",
52+
"round7_base.sh", "assemble.py"]:
53+
shutil.copy(f"{W}/{f}", f"{A}/{f}")
54+
for j in ("sb-dev", "sb-holdout"):
55+
os.makedirs(f"{A}/{j}", exist_ok=True)
56+
shutil.copy(f"{W}/{j}/run.sh", f"{A}/{j}/run.sh")
57+
shutil.copy(f"{W}/sb-holdout/holdout.tsv", f"{A}/sb-holdout/holdout.tsv")
58+
for n, s in (("steps-dev.log", "sb-dev-out/steps.log"), ("steps-holdout.log", "sb-holdout-out/steps.log"),
59+
("isolation-dev.txt", "sb-dev-out/isolation.txt"),
60+
("isolation-holdout.txt", "sb-holdout-out/isolation.txt"),
61+
("gates-baseline-steps.log", "logs/baseline/steps.log"),
62+
("gates-patched-steps.log", "logs/patched/steps.log"),
63+
("minus-triage.json", "minus-triage.json"),
64+
("eval-packet.jsonl", "../eval-packet/packet.jsonl"),
65+
("eval-labels.jsonl", "eval-labels.jsonl"), ("eval-key.json", "eval-key/key.json")):
66+
shutil.copy(f"{W}/{s}", f"{A}/{n}")
67+
for t in ("h1", "opensilver", "maui-patched"):
68+
shutil.copy(f"{W}/parity/{t}/parity.json", f"{A}/parity-{t}.json")
69+
print("ok")
Lines changed: 9 additions & 0 deletions
Original file line numberDiff line numberDiff line change
@@ -0,0 +1,9 @@
1+
#!/usr/bin/env bash
2+
# For each candidate owner/repo: is it (or its repo name) mentioned anywhere in prior research / mining?
3+
cd ~/Documents/ownnet-eng/work || exit 1
4+
for r in "$@"; do
5+
repo=${r#*/}
6+
exact=$(grep -ic "^${r} " used-repos.tsv)
7+
byname=$(grep -iE "/${repo} " used-repos.tsv | head -3 | cut -f1 | tr '\n' ' ')
8+
printf '%-34s exact=%s byname=[%s]\n' "$r" "$exact" "$byname"
9+
done

0 commit comments

Comments
 (0)