jaakko/agentic-studio
1
0
Fork 0
Code Issues Pull Requests Actions Packages Projects Releases Wiki Activity

Benchmark: käytä thinking-kenttää fallbackina jos content tyhjä

Browse Source 
qwen3.5 palauttaa vastauksen thinking-kentässä kun content on tyhjä.
Lisätty debug-logi thinking-malleille.
This commit is contained in:
jaakko
2026-04-14 08:45:06 +03:00
parent 62c9b6e17e
commit 25b9ab0c37
1 changed files with 3 additions and 1 deletions
Download Patch File Download Diff File Expand all files Collapse all files

4
network-poc/tests/model-benchmark.mjs
View File

@@ -81,8 +81,10 @@ async function ollamaChat(model, prompt, systemPrompt, maxTokens = 2048) {
const elapsed = Date.now() - start; const elapsed = Date.now() - start;
// Ollama: jotkin mallit (qwen3.5) palauttavat ajattelun erillisessä thinking-kentässä // Ollama: jotkin mallit (qwen3.5) palauttavat ajattelun erillisessä thinking-kentässä
const rawContent = (data.message?.content || '').trim(); const rawContent = (data.message?.content || '').trim();
const text = stripThinking(rawContent); const thinking = (data.message?.thinking || '').trim();
const text = stripThinking(rawContent || thinking);
const evalCount = data.eval_count || 0; const evalCount = data.eval_count || 0;
if (!rawContent && thinking) console.log(` ⚠ thinking-malli: ${thinking.length} merkkiä ajattelua, content tyhjä`);
const evalDurationNs = data.eval_duration || 1; const evalDurationNs = data.eval_duration || 1;
const tokPerSec = evalCount / (evalDurationNs / 1e9); const tokPerSec = evalCount / (evalDurationNs / 1e9);
return { text, tokens: evalCount, durationMs: elapsed, tokPerSec }; return { text, tokens: evalCount, durationMs: elapsed, tokPerSec };