feat(halacha): panel safety-net audit (selective-prediction monitoring) #136

chaim · 2026-06-08T05:01:24Z

chaim commented

2026-06-08 05:01:24 +00:00

רשת-ביטחון תקופתית לפאנל-האישור: דוגם הלכות שאושרו ע"י הפאנל, מריץ עליהן שוב את הצבעת-ה-KEEP של 3 השופטים, ומציף כל מקרה שכעת נוטה DROP (false-keep פוטנציאלי). report-only; --flag מחזיר ל-pending_review. סוגר את הלולאה שהמקורות מורים (Trust-or-Escalate / selective-prediction): לנטר את אחוז-הטעות במקום לסמוך עיוור. בסיס 2026-06-07: 0/15. מייבא שופטים מ-halacha_panel_approve (מקור-אמת יחיד). מיועד להרצה שבועית.

Invariants

משרת G10 (ניטור שער-אנושי) ו-G9. read paths + --flag הפיך.

🤖 Generated with Claude Code

רשת-ביטחון תקופתית לפאנל-האישור: דוגם הלכות שאושרו ע"י הפאנל, מריץ עליהן **שוב** את הצבעת-ה-KEEP של 3 השופטים, ומציף כל מקרה שכעת נוטה DROP (false-keep פוטנציאלי). report-only; `--flag` מחזיר ל-`pending_review`. סוגר את הלולאה שהמקורות מורים (Trust-or-Escalate / selective-prediction): **לנטר** את אחוז-הטעות במקום לסמוך עיוור. בסיס 2026-06-07: **0/15**. מייבא שופטים מ-`halacha_panel_approve` (מקור-אמת יחיד). מיועד להרצה שבועית. ## Invariants - משרת G10 (ניטור שער-אנושי) ו-G9. read paths + `--flag` הפיך. 🤖 Generated with [Claude Code](https://claude.com/claude-code)

chaim added 1 commit 2026-06-08 05:01:24 +00:00

feat(halacha): panel safety-net audit (selective-prediction monitoring) da4ebeb724

Periodic safety net for the multi-judge approval panel: samples panel-approved
halachot, re-runs the same 3-judge KEEP vote, and surfaces any that now lean
DROP — candidate false-keeps a human should glance at. Report-only by default;
--flag reopens flips to pending_review. Baseline 0/15 on the 2026-06-07 batch.

Closes the loop the literature prescribes (Trust-or-Escalate / selective
prediction): monitor the auto-decision error rate rather than trusting it
blindly. Reuses halacha_panel_approve's judges (single source of truth).

Co-Authored-By: Claude Opus 4.8 (1M context) <noreply@anthropic.com>

chaim merged commit cc9adc5c1f into main

2026-06-08 05:01:33 +00:00

chaim deleted branch worktree-halacha-audit

2026-06-08 05:01:33 +00:00

chaim referenced this issue from a commit

2026-06-08 05:01:33 +00:00

Merge pull request 'feat(halacha): panel safety-net audit (selective-prediction monitoring)' (#136) from worktree-halacha-audit into main

Sign in to join this conversation.

1 Participants

Notifications

Due Date

No due date set.

Dependencies

No dependencies set.

Reference: ezer-mishpati/legal-ai#136