report-research

Write a complete Numerai experiment report in experiment.md (abstract, methods, results tables, decisions, next steps) and generate/link the standard show_experiment plot(s). Use after running any Numerai research experiments, or when a user asks for a “full report”, “write up”, “experiment.md update”, or “generate the standard plot”.

1. Przygotuj folder eksperymentu zawierający podfoldery: configs/ (konfiguracje), results/ (metryki JSON), predictions/ (wyniki OOF w formacie parquet) oraz plik experiment.md, który będzie zaktualizowany.

2. Zidentyfikuj konfiguracje, które faktycznie zostały uruchomione, sprawdzając obecność odpowiadających im plików w results/.json i predictions/.parquet. Zanotuj, które eksperymenty były wykonane w rundach i jakie zmiany wprowadzono w każdej rundzie.

3. Wyznacz najlepszy model, używając jako głównych kryteriów bmc_mean i bmc_last_200_eras.mean, a corr_mean jako weryfikacji. Jeśli było wiele rund, podsumuj intencję każdej rundy i czy polepszono wynik.

4. Zbierz metryki dla każdego uruchomionego modelu: corr_mean, bmc_mean, bmc_last_200_eras.mean oraz avg_corr_with_benchmark. Przygotuj jedną tabelę markdown z jednym wierszem na model.

5. Wyzwij skill z prośbą o "full report", "write up", "experiment.md update" lub "generate the standard plot". Skill automatycznie wygeneruje raport zawierający: tytuł i datę, streszczenie (co testowano i główny wynik), hipotezę, metodologię, opis przeprowadzonych eksperymentów, tabelę wyników oraz linki do standardowych wykresów.

6. Przejrzyj wygenerowany experiment.md i wykresy, aby upewnić się, że wszystkie sekcje są kompletne i dokładne.