From 71b640085ab9f4923e4fc56f4feb9e10d0a2954b Mon Sep 17 00:00:00 2001 From: =?UTF-8?q?=E4=BE=9D=E7=91=AA=E8=B2=93?= Date: Thu, 6 Aug 2026 07:05:48 +0800 Subject: [PATCH] Keep the medoid group names after testing LLM naming Co-Authored-By: Claude Opus 5 (1M context) --- docs/decision-log.md | 15 +++++++++++++++ docs/run-costs.md | 4 +++- 2 files changed, 18 insertions(+), 1 deletion(-) diff --git a/docs/decision-log.md b/docs/decision-log.md index 39d5aeb..fce55b6 100644 --- a/docs/decision-log.md +++ b/docs/decision-log.md @@ -480,3 +480,18 @@ - **零使用的碼據實報告，不事後改名**：medoid 命名對 大而異質的組必然失準，該碼在結果中呈現為零使用即是 儀器的誠實紀錄；改名等於在看過結果後調整儀器。 +- **實驗後維持 medoid 命名，不改用 LLM 命名**：以同一批 + 100 組（僅給成員關鍵字，不給歌詞、組大小與其他組）各跑 + 一次 sonnet-4-6 與 fable-5 的命名，格式只規定小寫、 + 連字號、至多四個詞。兩者皆 100 組全數命名、無撞名， + 但均未勝過 medoid：名字普遍更抽象（`toxic-relationship` + →`toxic-relationship-themes`、`relentless-ambition` + →`risk-taking-and-drive`），sonnet 三次以 `-themes` + 後綴退回後設描述，fable 加禁用該詞後改善但超長名字達 + 10 個（sonnet 3 個）。關鍵案例 `mutual-individuality` + 三種命名皆未說中——該組實含「群體歸屬」與「個體差異」 + 兩種內容，屬分群未切乾淨，非命名可補。裁定：維持 + medoid，保住「組名為模型自己產出過的關鍵字」此一性質； + 代價是少數組名不副實，依前條據實報告。實驗歸檔不入 + repo，費用 $0.09（sonnet）與 $0.43（fable）記入 + `run-costs.md`。 diff --git a/docs/run-costs.md b/docs/run-costs.md index fc4cf98..f0f163e 100644 --- a/docs/run-costs.md +++ b/docs/run-costs.md @@ -32,5 +32,7 @@ $3／$15、opus-4-6 $5／$25、opus-5 與 fable-5 $10／$50） | 2026-08-05 | 03-01-code | 引述減量實驗（36 首）| claude-sonnet-4-6 | msgbatch_01Hskdhi2DkudYmgZhhgFts7 | 3 分 51 秒 | 56,458 | 11,074 | $0.17 | 實驗：每碼一行引述，36 首全數通過過濾；歸檔不入 repo | | 2026-08-05 | 03-01-code | run1 | claude-sonnet-4-6 | msgbatch_01GG5Ez9KT1pPwtQaY4sW7tv | 4 分 35 秒 | 1,293,724 | 269,166 | $3.96 | 過濾零攔阻；song-168、song-590 因餘額用盡失敗，song-775 拒答 | | 2026-08-05 | 03-01-code | 101 碼樹狀探測（148 首）| claude-sonnet-4-6 | msgbatch_017jo3E5gWVks9b39iWMTqz3 | 2 小時 11 分 | 385,270 | 79,690 | $0.87 | 實驗：k=100 葉碼＋women-power；零違規碼； 歸檔不入 repo | +| 2026-08-06 | 命名實驗（100 組）| — | claude-sonnet-4-6 | msgbatch_01XSi1YtWzdVyYUzYh7DQRWg | 3 分 5 秒 | 55,090 | 1,168 | $0.09 | 實驗：LLM 命名對照 medoid，未採用；歸檔不入 repo | +| 2026-08-06 | 命名實驗（100 組）| — | claude-fable-5 | msgbatch_01Y8SJj1h1ZuSQRErhqkvgZE | 3 分 2 秒 | 76,211 | 2,049 | $0.43 | 實驗：同上，加禁用 themes；未採用；歸檔不入 repo | -累計支出：$44.27。 +累計支出：$44.79。