Raise the clustering to 100 groups

Co-Authored-By: Claude Opus 5 (1M context) <noreply@anthropic.com>
This commit is contained in:
2026-08-17 22:38:31 +08:00
co-authored by Claude Opus 5
parent 8cdeb3db2e
commit 15f1843cde
6 changed files with 55 additions and 14 deletions
+18
View File
@@ -462,3 +462,21 @@
平台輸出過濾非隨機地排除了語料中最核心的一批歌,此
現象本身列入論文限制討論。標註步驟已入庫的兩次執行
重製量約 43%,處置待議。
- **分群組數自 50 改為 100**k=50 下
出現數個「雜物櫃組」——組內語意發散、medoid 只是折衷
詞,編碼實測幾乎不用(`mutual-individuality` 158 詞、
僅用於 2% 的歌;`fantasy-and-imagination` 232 詞含
籃球、海灘、神性意象)。k=30 更劣(最大組 491 詞、
組內一致 0.41)。改 linkage 無用:三種 linkage 於各個
k 實測,Ward 的組內一致性均最高,average 與 complete
反而產生吞噬半數語料的巨組。診斷為壓縮比過高——語料
的主題多樣性超過 50 種,非演算法選擇問題。裁定:k
取 100,雜物櫃組於此始裂解為有主題的組。實測 148 首
探測:101 碼下詞彙表外的
碼由 3 降為 0、未使用碼由多個降為 1、每首碼數中位數
12→16、`women-power` 命中率 13%→9%(碼變細後邊緣
歌不再被歸入)。代價:每次編碼執行成本由 $3.96 升至
約 $7.0。
- **零使用的碼據實報告,不事後改名**:medoid 命名對
大而異質的組必然失準,該碼在結果中呈現為零使用即是
儀器的誠實紀錄;改名等於在看過結果後調整儀器。