Przejdź do treści
Biblioteka skilli
Programowanie · Przegląd i audyt

benchmark-checklist

/benchmark-checklist

Sprawdza pomiar wydajności pod kątem ogranicznika, strojenia, limitów, błędów i powtarzalności przed podaniem przyspieszenia.

Repozytorium
skills ↗
Licencja
MIT
Ostatnia zmiana repozytorium
12.11.2026

Ocena i bezpieczeństwo

100/ 100Klasa: dobry
Format25 / 25
Frontmatter z nazwą i opisem, poprawna nazwa, opis do 1024 znaków, nazwa zgodna z folderem.
Odkrywalność25 / 25
Opis mówi, kiedy użyć skilla, ma sensowną długość i jest w 3. osobie.
Treść35 / 35
Co najmniej 150 słów i do 500 linii, nagłówki, listy kroków, przykłady albo kod.
Higiena15 / 15
Bez zaślepek typu TODO, bez ścieżek Windows, z licencją.
Ryzykobrak sygnałów w skanie
Pliki w paczce
1
Skrypty
0
Komentarze HTML
0
Adresy URL w SKILL.md
0
Przestarzałość

Brak sygnałów. Repozytorium zmienione 12.11.2026, bez odwołań do wycofanych modeli i API.

Licencja

MIT, otwarta: można używać i zmieniać, z zachowaniem informacji o autorze.

Co robi i kiedy

Sprawdza pomiar wydajności pod kątem ogranicznika, strojenia, limitów, błędów i powtarzalności przed podaniem przyspieszenia.

Oryginalny opis (EN)

Vet a performance measurement (limiter, tuning, limits, errors, repeatability, relevance, whether the work ran) before reporting a speedup or regression. Use when you run a benchmark or report a number you measured.

Jak działa

  1. Before running
  2. Questions
  3. Report
Sekcje z nagłówków SKILL.md, w oryginale · 27 linii, 472 słów
Podgląd SKILL.md
---
name: benchmark-checklist
description: "Vet a performance measurement (limiter, tuning, limits, errors, repeatability, relevance, whether the work ran) before reporting a speedup or regression. Use when you run a benchmark or report a number you measured."
disable-model-invocation: true
---

# Benchmark checklist

Use before you report any performance number: a before and after, a regression claim, a library or config choice. Answer each question from a run, not from reading the code.

A ballpark the user asked for needs one run plus questions 4 and 7, and a note that it was one run. A choice between options is never a ballpark.

## Before running

- Write the claim in the words you would ship ("export is 30% faster at p50 on the 60k-row dataset"). The questions test that sentence.
- Read the measurement script: what it times, counts and ignores.
- Check machine load and core count first (`uptime` and `nproc` on Linux, Task Manager or `Get-CimInstance Win32_Processor` on Windows). If the machine is busy and you cannot quiet it, interleave the sides and say so.

## Questions

1. **Why not double?** Name the limiter. Profile in a run you do not report, since profilers slow the work. Use per-process CPU, a runtime profiler (`perf`, `py-spy`, `node --cpu-prof`), I/O wait and syscall counts (`strace -c`), then map the hot spot to source. If the load generator saturates first, you measured the load generator.
2. **Was it tuned?** Run every side as production runs it: release builds, production flags, batching, pools, cache warmth, same versions and data. A limiter that is a setting (commit per row, debug build, missing index) means that side is untuned: tune it and measure again.
3. **Did it break limits?** Do the arithmetic against disk and network bandwidth, cores, and the share of time the changed piece takes. Removing a piece that is 10% of the run makes it at most about 11% faster. A result past a limit measured something other than the work.
4. **Did it error?** Count failures and non-success responses and check outputs are correct, not just present. Rejections are fast, timeouts and retries are slow.
5. **Does it reproduce?** At least 5 runs per side, alternating A B A B. Report median and range. A gap smaller than run-to-run variation is no measurable difference.
6. **Does it matter?** Measure the end-to-end path a user waits on and report the micro result as a share of the whole.
7. **Did it happen?** Confirm the work ran inside the timed region: the request arrived, the rows were written, the result was used. Lazy generators, unawaited promises and discarded results time nothing.

## Report

Lead with the verdict: faster, slower, no measurable difference, or inconclusive. Give the number, unit, run count, range and limiter ("p50 41 ms to 33 ms, median of 7 runs per side, range 32 to 35 ms, bound by JSON parsing on one core"). Call it inconclusive when you cannot name the limiter, a side ran untuned, or you could not check questions 4 and 7, and name the gap.

Wersje

RepozytoriumWynikLicencja
Ta strona · Calvin-LLC/skills100MIT
arjitj2/open-pstack100MIT
xinhi6716/axiom-atropos100MIT
michael-denyer/pstack-claude100MIT
wilbeibi/claude-toolkit100MIT
theonlyfusioncube/potetos-for-everyone100MIT
robansuini/pstack-codex100MIT
Macro-Harder/pstack-muse100MIT
vahaah/astack100MIT

Migawka bazy z 13.11.2026 · wersja paczki 4340e7b6354d (skrót SHA-256 całej paczki)

Pobrania w ostatnich 30 dniach: 0 · ranking

Zgłoś problem z tym skillem: szkodliwa treść, błędny opis albo prośba autora o usunięcie.

Podobne skille

  • 100eng-benchmark-checklist
    Sprawdza pomiar wydajności pod kątem limitera, dostrajania, błędów, powtarzalności i trafności oraz czy praca faktycznie się odbyła przed zgłoszeniem wyniku.
  • 100steady-flame
    Sprawdza wiarygodność wyniku pomiaru wydajności: ograniczenia, strojenie, błędy i powtarzalność, zanim zgłosi się przyspieszenie lub regresję.
  • 100vet-measurement
    Sprawdza pomiar lub benchmark przed podjęciem decyzji: ograniczenia, błędy, powtarzalność i trafność wyniku.
  • 95performance-investigation
    Mierzy i diagnozuje problemy wydajności na podstawie danych, gdy coś działa wolno lub regresuje czas, pamięć albo zapytania.
  • 100benchmark
    Dba o wiarygodność liczb z pomiarów wydajności: raporty przyspieszeń, wybór bibliotek i ustawień oraz dostrajanie jednej metryki.
  • 100benchmark
    Dobiera wymiary benchmarku pod decyzję, uruchamia bun repo bench i podaje każdą liczbę z tym, co ją ogranicza.

Uwagi i zgłoszenia

Wiadomość trafi do Bartosza Sokolińskiego. Adres e-mail jest potrzebny tylko do odpowiedzi. Szczegóły w polityce prywatności.