feat(eval): tercih robotu ve danışman sohbeti için tekrar koşulabilir eval + ilk taban çizgisi
- scripts/eval/robot.ts: 40 profilde modelsiz havuz değişmezleri (CI, çıkış kodu) ve --model ile gerçek liste üretimi denetimi (şema, havuz-dışı, yasak ifade, il çelişkisi, sayı tutarlılığı, Jev gerekçe grubu, gecikme, maliyet) - scripts/eval/sohbet.ts: 112 soru gerçek danismanAkisi ile; araç kuralları, metin kontrolü, sayı kaynağı, vaat regex'i, Jev danışman grubu - scripts/eval/ortak.ts: kullanım ölçümü, Jev istemcisi, kod denetimleri - package.json: eval:robot, eval:sohbet - İlk koşu sonuçları ve rapor (04-eval-sonuclari.md) Co-Authored-By: Claude Fable 5.1 <noreply@anthropic.com>
This commit is contained in:
@@ -22,7 +22,9 @@
|
||||
"db:generate": "drizzle-kit generate",
|
||||
"db:migrate": "node scripts/db-goc.mjs",
|
||||
"tadimlik": "tsx scripts/tadimlik-uret.ts",
|
||||
"tasarim:denetim": "tsx scripts/tasarim-denetim.ts"
|
||||
"tasarim:denetim": "tsx scripts/tasarim-denetim.ts",
|
||||
"eval:robot": "tsx --conditions=react-server --env-file-if-exists=.env.local scripts/eval/robot.ts",
|
||||
"eval:sohbet": "tsx --conditions=react-server --env-file-if-exists=.env.local scripts/eval/sohbet.ts"
|
||||
},
|
||||
"dependencies": {
|
||||
"@ai-sdk/openai-compatible": "^3.0.62",
|
||||
|
||||
Reference in New Issue
Block a user