Przejdź do treści
Biblioteka skilli
Nauka i badania · Research

scientist-two

/scientist-two

Prowadzi badania oparte na dowodach z zamrożonym protokołem oceny, budżetem eksperymentów i bramkami etapów, także testy hipotez i audyty rzetelności.

Licencja
MIT
Ostatnia zmiana repozytorium
05.11.2026

Ocena i bezpieczeństwo

85/ 100Klasa: dobry
Format20 / 25
Frontmatter z nazwą i opisem, poprawna nazwa, opis do 1024 znaków, nazwa zgodna z folderem.
Odkrywalność25 / 25
Opis mówi, kiedy użyć skilla, ma sensowną długość i jest w 3. osobie.
Treść25 / 35
Co najmniej 150 słów i do 500 linii, nagłówki, listy kroków, przykłady albo kod.
Higiena15 / 15
Bez zaślepek typu TODO, bez ścieżek Windows, z licencją.
Ryzykobrak sygnałów w skanie
Pliki w paczce
18
Skrypty
10
Komentarze HTML
0
Adresy URL w SKILL.md
0
Przestarzałość

Brak sygnałów. Repozytorium zmienione 05.11.2026, bez odwołań do wycofanych modeli i API.

Licencja

MIT, otwarta: można używać i zmieniać, z zachowaniem informacji o autorze.

Co sprawdzić przed instalacją
  • 10 skryptów w paczce. Przejrzyj je przed instalacją, bo Claude może je uruchomić.

Skrypty: examples/custom_adapter.py, examples/demo.py, examples/experiment.py, examples/validator.py, scripts/executor.py, scripts/study.py, tests/test_demo.py, tests/test_executor.py

Co robi i kiedy

Prowadzi badania oparte na dowodach z zamrożonym protokołem oceny, budżetem eksperymentów i bramkami etapów, także testy hipotez i audyty rzetelności.

Oryginalny opis (EN)

Run evidence-driven research studies with frozen evaluation protocols, finite experiment budgets, five stage gates, and recoverable local, SSH, or custom jobs. Use for hypothesis testing, ablations, experimental rebuttals, and research integrity audits.

Jak działa

  1. Before experiments
  2. Research cycle
  3. Evidence discipline
  4. Recovery and stop rules
Sekcje z nagłówków SKILL.md, w oryginale · 37 linii, 644 słów
Podgląd SKILL.md
---
name: scientist-two
description: Run evidence-driven research studies with frozen evaluation protocols, finite experiment budgets, five stage gates, and recoverable local, SSH, or custom jobs. Use for hypothesis testing, ablations, experimental rebuttals, and research integrity audits.
---

# Scientist Two

Use the host agent for research reasoning and the bundled Python scripts for durable experiment records. This is an independent adaptation, not an official ScientistTwo implementation or a reproduction of its research results.

Resolve scripts relative to this skill directory. Read [workflow.md](references/workflow.md) for the controller commands, evidence schema, and gate checks. Read [executor-contract.md](references/executor-contract.md) when configuring compute or recovering a job. See the [English README](README.md) or [中文说明](README.zh-CN.md) for installation and the CPU demonstration. [Sources](references/sources.md) records provenance and attribution.

## Before experiments

Agree on the research goal, baseline, data splits, evaluator, primary metric direction, minimum practical improvement, statistical decision rule, guardrails, resource limits, and stopping conditions. Freeze the protocol and file identities before S1. Validate a baseline with the same protocol or explicitly establish a prior result's matching provenance.

Choose local, SSH, or custom execution using existing authorized compute. An installed skill does not authorize paid compute, external publication, new credentials, or data transfers. Source preparation is an explicit allowlisted step; deploy the intended files and use the correct execution directory. Executors do not require or compare source/result hashes. Never upload a whole working tree by default.

## Research cycle

1. **S1 — Diagnose and hypothesize.** Diagnose the bottleneck; propose three candidates by default (configurable), with falsifiable predictions and bounded changes under the same evaluation protocol.
2. **S2 — Screen and confirm.** Run smoke tests, a fixed development subset, and full confirmation of selected candidates. Use the frozen metric, uncertainty, guardrail, and budget rules. Preserve failures, OOMs, null results, and early stops.
3. **S3 — Ablate and simplify.** Test components and interacting groups. Infrastructure and correctness code need not improve a metric alone. Retrain matched ablations for training-semantic changes; inference toggles alone do not establish their contribution. Reevaluate the simplified final version.
4. **S4 — Review and rebut experimentally.** Request an independent context or human reviewer; respond to fatal empirical objections with new experiments, or withdraw the claims and rereview. If no independent reviewer is available, export a review package and leave the gate pending.
5. **S5 — Audit the final version.** Check numbers/reproducibility, protocol compliance, citations, and bidirectional claim/formula/module → code symbol → configuration → test/experiment mapping. All required evidence must describe the same final version, with no unresolved fatal issue.

The five stages are this product's adaptation. Do not imply that a passed gate proves novelty, causality, semantic correctness, or conference acceptance. Separate script-verified facts from named reviewers' scientific judgments. A model-written `passed=true` is not an integrity audit.

## Evidence discipline

- Keep selection data separate from final testing. A test set used to select hypotheses, seeds, checkpoints, or hyperparameters becomes development evidence; it cannot serve as untouched confirmation.
- Record source, configuration, data, evaluator, protocol, job, and artifact identities. After changes, stale evidence remains history but cannot support new-version gates.
- Distinguish log/table consistency, reevaluation, and retraining. State exactly which scope was performed.
- A real citation is not necessarily supporting evidence: record its exact supporting location and the claim it supports. Mapping code lines is not a semantic proof.
- Finish honestly with negative, inconclusive, or budget-exhausted outcomes when appropriate. Do not relax criteria to manufacture a positive result.

## Recovery and stop rules

Use one controller and one explicit state path per study. Reserve budget and persist submission intent before starting work. A disconnect or timeout can leave a job `unknown`; reconcile the same stable ID, never blindly resubmit it. Stop new submissions when the budget is exhausted; let existing jobs finish within their own limits. Do not kill unrelated processes or discard failed code. Use isolated work directories or branches, without destructive Git resets.

The state files do not wake a sleeping agent or create a background research loop. A process with arbitrary write access can alter records: gates prevent workflow mistakes, not hostile tampering. Keep the user informed of actual validation, unresolved review, and remaining budget.
Pliki w paczce (18)
  • .gitignore 1 KB
  • LICENSE 1 KB
  • README.md 16 KB
  • README.zh-CN.md 14 KB
  • SKILL.md 5 KB
  • examples/custom_adapter.py 1 KB
  • examples/demo.py 8 KB
  • examples/experiment.py 1 KB
  • examples/validator.py 4 KB
  • references/executor-contract.md 9 KB
  • references/sources.md 7 KB
  • references/workflow.md 18 KB
  • scripts/executor.py 15 KB
  • scripts/study.py 41 KB
  • tests/test_demo.py 3 KB
  • tests/test_executor.py 13 KB
  • tests/test_ssh_real.py 5 KB
  • tests/test_study.py 24 KB

Wersje

W bazie nie ma innych skilli o nazwie scientist-two.

Migawka bazy z 13.11.2026 · wersja paczki efa0d6e394be (skrót SHA-256 całej paczki)

Pobrania w ostatnich 30 dniach: 0 · ranking

Zgłoś problem z tym skillem: szkodliwa treść, błędny opis albo prośba autora o usunięcie.

Podobne skille

  • 100research-integrity-pipeline
    Buduje raport badawczy oparty na dowodach albo sprawdza twierdzenia, cytowania i wyniki liczbowe w szkicu pod kątem rzetelności.
  • 100experiment-plan
    Zamienia dopracowaną propozycję badawczą w szczegółowy plan eksperymentów z macierzą ablacji, protokołem ewaluacji i budżetem obliczeniowym.
  • 100computer-scientist
    Przegląda dziedzinę badań, formułuje otwarte problemy, ustala ich priorytety według wpływu i wykonalności oraz zleca badania agentom Principal Scientist.
  • 100experiment-design-checklist
    Generuje rygorystyczny projekt eksperymentu dla hipotezy: kontrole, baseline'y, ablacje, metryki, testy statystyczne i szacunki zasobów obliczeniowych.
  • 100briefbound-ai-research-loop
    Prowadzi badania inżynierskie AI/ML: odtwarzanie baseline, eksperymenty z hipotezami, ablacje, projekt ewaluacji, synteza ustaleń i wybór kierunku, od artykułu lub repozytorium do wyników popartych dowodami.
  • 100computer-information-research-scientist
    Wspiera pracę badacza informatyki: projekt ablacji, budżet wniosku NSF CISE, wybór artefaktów odtwarzalności do publikacji, wychwytywanie matematyzacji i nadużyć terminologii oraz ocena etyczna eksperymentów na użytkownikach.

Uwagi i zgłoszenia

Wiadomość trafi do Bartosza Sokolińskiego. Adres e-mail jest potrzebny tylko do odpowiedzi. Szczegóły w polityce prywatności.