Search

Tag: #llm-benchmarks36 results

國產 AI 編程模型衝上全球第二

Ifanr 評測了五大 AI 模型，旨在找出最適合「Vibe Coding」的編程神器。報告強調了中國國產模型在編程任務上的競爭力與進步。

Ifanr (爱范儿)Media•May 28#coding-assistant#llm-benchmarks#domestic-ai

GPT-5.5 部分「Mythos 超車」網路攻擊能力，英機構評估

英國 AISI 評估 OpenAI 的 GPT-5.5 在某些網路攻擊能力上匹敵或超越 Claude Mythos Preview。此評估暗示 AI 能力提升為產業共通趨勢。

ITmedia AI+ (日本)Media•May 1#cyber-security#government-eval#llm-benchmarks

大模型消極怠工實測

用戶投訴Doubao等大模型回應敷衍，如圖像生成與數據分類。DeepSeek、Doubao、元寶等實測表現不一，Doubao分析最佳但圖像偷懶。成因涉算力成本與安全調整。

虎嗅Media•Mar 14#llm-benchmarks#user-complaints#prompt-engineering

開放權重模型 SOTA 排名月度更新

每月更新評估開放權重模型在最先進討論中的位置排名。由 u/ForsookComparison 發佈於 r/LocalLLaMA。包含完整排名連結及社群評論。

Reddit r/LocalLLaMACommunity•Feb 28#sota-rankings#llm-benchmarks#open-models

BHI Framework Audits LLM Benchmarks

Introduces Benchmark Health Index (BHI), a data-driven framework to audit LLM benchmarks amid reliability issues like score inflation. Evaluates along three axes: Capability Discrimination, Anti-Saturation, and Impact. Analyzes 106 benchmarks from 91 models in 2025.

ArXiv AIResearch•Feb 13#research#bhi#v1