🤖Reddit r/MachineLearning•較早收集於 22h
TranslateGemma 字幕翻譯基準領先,但...

💡TranslateGemma 基準 #1,但指標忽略中文腳本錯誤 (20字)
⚡ 30-Second TL;DR
有什麼變化
TranslateGemma-12b TQI 平均 0.6335 領先 Spanish、Japanese、Korean、Thai、zh-CN、zh-TW。
為什麼重要
顯示翻譯評估指標缺口;TranslateGemma 強但需修正語言碼。
下一步行動
使用 zh-Hant 標籤測試 TranslateGemma 於字幕管線。
誰應關注:Researchers & Academics
關鍵要點
- •TranslateGemma-12b TQI 平均 0.6335 領先 Spanish、Japanese、Korean、Thai、zh-CN、zh-TW。
- •Gemini Flash Lite 勝過 Claude Sonnet 等大型模型。
- •人工審查:zh-TW 76% 輸出簡體;指標仍高分。
- •Claude 在日文忠實度崩潰。
📰
AI 週報
閱讀本週精選 AI 大事摘要 →
👉相關動態
AI 策展新聞聚合。所有內容版權歸原始發布者所有。
原始來源: Reddit r/MachineLearning ↗
