erhan/abap-llm
1
0
Fork 0
Code Issues Pull Requests Actions Packages Projects Releases Wiki Activity

Devstral Small 2 baseline (11 tasks): README, roadmap, results; Qwen 3.8 dropped

Browse Source 
Co-Authored-By: Claude Sonnet 5.5 <noreply@anthropic.com>
Claude-Session: https://claude.ai/code/session_014aUaQeLnwbb1zTpN7kHeat
This commit is contained in:
Kral
2026-10-04 11:20:43 +02:00
parent 8d1db9c67c
commit 0af2d6458e
2 changed files with 36 additions and 29 deletions
Download Patch File Download Diff File Expand all files Collapse all files

5
docs/yol-haritasi.md
View File

@@ -1,6 +1,6 @@
# ABAP Danışman Modeli — Yol Haritası
Durum: v19 · 2026-10-02
Durum: v20 · 2026-10-04
Şu anki konum: **Adım 1.3**
## Adım 0 — Çerçeve ve kararlar
@@ -18,6 +18,7 @@ Durum: v19 · 2026-10-02
| Eğitim verisinde Claude çıktısı yok; eval görevleri eğitim verisine girmez | ✓ (2026-10-02) |
| Lisans: Apache 2.0 | ✓ |
| Baz model: sadece Apache 2.0 veya MIT lisanslı adaylar | ✓ (seçim Adım 2'de) |
| Baz model adayı: Devstral Small 2 (24B, Apache 2.0, MLX 4-bit). Qwen 3.8 elendi: aktivasyon hatasından sonra onarım yok, döngüler (aynı kaynak tekrar), thinking açıkken düşünme limitinde boş yanıt. Tüm iş yerel, Ollama cloud yok. Aşama 1 eğitim testi Devstral ile | ✓ (2026-10-04) |
Bitti. ✓
@@ -114,6 +115,8 @@ Kurallar:
## Adım 2 — Baz model seçimi
Durum (2026-10-04): aday Devstral Small 2. İlk baseline (11 görev, `runs/stage1/baseline_devstral.md`): ortalama 6,8; 11 görevden 1'i 0'dan yüksek; bitiş nedeni loop 6, tool_budget 3, report 2; onarım oranı 0,84. Qwen elendi (`runs/archive/qwen38/`).
Adım 1.6 tablosundan seçilir. Aday havuzu: sadece Apache 2.0 veya MIT lisanslı modeller. Kriterler: puan, boyut, Mac mini'de çalışabilirlik.
Bitti sayılır: tek baz model seçildi, gerekçesi yazıldı.