Przejdź do treści
Biblioteka skilli
AI i agenci · Analiza

optimizer-selection

/optimizer-selection

Dobiera optymalizator i jego hiperparametry do problemu zamiast do przyzwyczajenia, gdy trening jest niestabilny, wolno zbiega lub słabo generalizuje.

Repozytorium
AI-SKILLS ↗
Licencja
MIT
Ostatnia zmiana repozytorium
05.09.2026

Ocena i bezpieczeństwo

90/ 100Klasa: dobry
Format25 / 25
Frontmatter z nazwą i opisem, poprawna nazwa, opis do 1024 znaków, nazwa zgodna z folderem.
Odkrywalność25 / 25
Opis mówi, kiedy użyć skilla, ma sensowną długość i jest w 3. osobie.
Treść25 / 35
Co najmniej 150 słów i do 500 linii, nagłówki, listy kroków, przykłady albo kod.
Higiena15 / 15
Bez zaślepek typu TODO, bez ścieżek Windows, z licencją.
Ryzykobrak sygnałów w skanie
Pliki w paczce
1
Skrypty
0
Komentarze HTML
0
Adresy URL w SKILL.md
0
Przestarzałość

Brak sygnałów. Repozytorium zmienione 05.09.2026, bez odwołań do wycofanych modeli i API.

Licencja

MIT, otwarta: można używać i zmieniać, z zachowaniem informacji o autorze.

Co robi i kiedy

Dobiera optymalizator i jego hiperparametry do problemu zamiast do przyzwyczajenia, gdy trening jest niestabilny, wolno zbiega lub słabo generalizuje.

Oryginalny opis (EN)

Choose an optimiser and its hyperparameters based on the problem rather than habit, and know what each actually does. Use when training is unstable, slow to converge, or generalising poorly.

Jak działa

  1. Method
  2. Boundaries
Sekcje z nagłówków SKILL.md, w oryginale · 39 linii, 231 słów
Podgląd SKILL.md
---
name: optimizer-selection
description: Choose an optimiser and its hyperparameters based on the problem rather than habit, and know what each actually does. Use when training is unstable, slow to converge, or generalising poorly.
---

# Optimizer selection

Optimisers differ in how they use gradient history to set the step. The
adaptive ones are robust defaults, plain momentum sometimes generalises
better, and the choice interacts strongly with learning rate and
regularisation.

## Method

1. **Start with a well-tested adaptive default.** It works across a wide
   range of problems with little tuning, which is why it is the default
   in nearly every codebase.
2. **Understand momentum as smoothing.** Accumulating past gradients
   damps oscillation across narrow valleys and accelerates along
   consistent directions.
3. **Know what adaptivity does.** Per-parameter step scaling helps when
   gradient magnitudes vary widely across parameters, which is typical
   in deep networks.
4. **Decouple weight decay from the gradient.** Applying decay as part
   of the gradient interacts badly with adaptive scaling, and the
   decoupled variant is the correct default (see
   regularization-techniques).
5. **Tune the learning rate before anything else.** It matters more than
   the optimiser choice by a wide margin (see learning-rate-schedules).
6. **Watch the optimiser's memory cost.** Adaptive methods store
   per-parameter state, adding substantially to memory for large models
   (see gpu-memory-hierarchy).
7. **Change one hyperparameter at a time.** Optimiser settings interact,
   and simultaneous changes make results uninterpretable (see
   experiment-tracking).

## Boundaries

Optimiser choice matters less than data quality and architecture for
most outcomes. Published settings are tuned to their paper's setup and
transfer imperfectly. Second-order methods are rarely practical at
scale despite their theoretical appeal.

Wersje

W bazie nie ma innych skilli o nazwie optimizer-selection.

Migawka bazy z 13.11.2026 · wersja paczki 1bc844a24b09 (skrót SHA-256 całej paczki)

Pobrania w ostatnich 30 dniach: 0 · ranking

Zgłoś problem z tym skillem: szkodliwa treść, błędny opis albo prośba autora o usunięcie.

Podobne skille

  • 100optimize-plugin
    Waliduje wtyczkę, sprawdza jej jakość i strukturę oraz uruchamia optymalizator wtyczek.

Uwagi i zgłoszenia

Wiadomość trafi do Bartosza Sokolińskiego. Adres e-mail jest potrzebny tylko do odpowiedzi. Szczegóły w polityce prywatności.