Skip to content

agent: verify method for data reporting, metrics - #74

Merged
landsman merged 3 commits into
mainfrom
docs/reporting-data-and-metrics
Aug 9, 2026
Merged

agent: verify method for data reporting, metrics#74
landsman merged 3 commits into
mainfrom
docs/reporting-data-and-metrics

Conversation

@landsman

@landsman landsman commented Aug 8, 2026

Copy link
Copy Markdown
Owner

Číslo z dotazu nebo z benchmarku je tvrzení a pravdivým ho dělá metoda.

Vzniklo ze dvou chyb za jeden večer — obě vypadaly hodnověrně a obě byly jedno ověření od pravdy:

  • propustnost měřená opakovaným stahováním hrstky stejných URL. Vyšel řádově nižší strop než skutečný; měřila cache, ne systém, a poslala ladění na několik hodin špatným směrem.
  • „chybí N záznamů" z dotazu bez filtru na stav. Drtivá většina byla korektní přesměrování, ne ztracená data.

Sepsané čtyři opakující se způsoby, jak se sebejisté číslo ukáže špatným, a požadavek na druhé čtení, které může nesouhlasit.

Druhá věta prvního odstavce je stejně důležitá jako první: v obou případech jsem řekl výsledek, ale ne metodu. Druhý commit to ukazuje na dvojici obecných příkladů — stejný nález hlášený jednou jako holý počet a podruhé s tím, co do něj spadlo.

Formulováno obecně (databáze, metriky, benchmarky), aby to šlo později zvednout do samostatného skillu — proto ta struktura seznamu místo souvislého odstavce.

@landsman landsman changed the title docs: ověřit metodu dřív, než se číslo nahlásí agent: verify method for data reporting, metrics Aug 8, 2026
@landsman
landsman marked this pull request as ready for review August 9, 2026 15:29
Cislo z dotazu nebo z benchmarku je tvrzeni a pravdivym ho dela metoda.
Dvakrat za jeden vecer jsem nahlasil hodnoverne vypadajici cislo, ktere
bylo jedno overeni od pravdy: propustnost merenou na peti opakovanych
URL (merila strop vzorku, ne systemu) a "241 ztracenych stranek" z dotazu
bez filtru na status — ve skutecnosti 225 korektnich presmerovani.

Sepsany ctyri opakujici se zpusoby, jak se sebejiste cislo ukaze
spatnym, a pozadavek na druhe cteni, ktere muze nesouhlasit. Druha veta
prvniho odstavce je stejne dulezita jako prvni: v obou pripadech jsem
rekl vysledek, ale ne metodu — s "mereno na peti opakovanych URL" by to
bylo videt hned.

Formulovano obecne (databaze, metriky, benchmarky), aby to slo pozdeji
zvednout do samostatneho skillu.
Pravidlo samo rikalo "rekni co a jak jsi meril", ale neukazovalo to.
Dva priklady stejneho nalezu hlaseneho dvakrat: jednou jako holy pocet,
podruhe s tim, co do nej spadlo. Druha verze je sotva delsi a je to ta,
ktera se opravi za minutu misto aby potichu ridila dalsi den prace.

Priklady jsou zamerne obecne (zaznamy, requests/s), aby pravidlo neslo
cist jako historka z jednoho projektu.
CLAUDE.md byl 137 radku a sest temat pod sebou. Ted je z nej index a kazde
pravidlo ma svuj soubor.

Slozka se jmenuje rules/ proto, ze CLAUDE.md a rules/ jsou jedine dve veci,
ktere Claude Code nacte sam. Pravidlo bez `paths:` frontmatteru se nacita
bezpodminecne, takze rozdeleni nic neodpojilo - scoping ma dal jen
github-actions.md, jehoz poruseni je videt v diffu. U zbytku by vypadnuti
z kontextu bylo tiche.
@landsman
landsman force-pushed the docs/reporting-data-and-metrics branch from b26f096 to c02114f Compare August 9, 2026 15:30
@landsman
landsman merged commit 2f5331f into main Aug 9, 2026
3 checks passed
@landsman
landsman deleted the docs/reporting-data-and-metrics branch August 9, 2026 15:31
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

None yet

Development

Successfully merging this pull request may close these issues.

1 participant