🤖Reddit r/MachineLearning•最新收集於 22m
開源工具自動化 arXiv 論文篩選與摘要
💡建立一個個人化的開源 arXiv 研究助理，使用您自己的 LLM 後端來篩選論文。
⚡ 30-Second TL;DR
有什麼變化
根據自訂的 Markdown 興趣檔案，自動化 arXiv 論文的抓取、篩選與摘要。
為什麼重要
該工具透過自動化文獻回顧流程，顯著降低研究人員的認知負荷。它為特定領域的資訊篩選提供了一個可擴展且具成本效益的模板。
下一步行動
複製 Research Radar 儲存庫並在 Markdown 檔案中定義您的研究興趣，以自動化您的每日 arXiv 文獻回顧。
誰應關注：Researchers & Academics
關鍵要點
- •根據自訂的 Markdown 興趣檔案，自動化 arXiv 論文的抓取、篩選與摘要。
- •採用雙階段 LLM 架構：使用輕量模型進行初步評分，強大模型進行深度摘要。
- •模型無關的後端支援 OpenAI、本地 Ollama、vLLM 或 Claude Code/Codex CLI。
- •利用確定性的 Python 流程進行 PDF 提取與去重，確保執行效率。
🧠 深度解析
AI-generated analysis for this event.
🔑 增強重點摘要
- •Research Radar 整合了向量資料庫（如 ChromaDB 或 FAISS）來儲存論文嵌入（Embeddings），實現基於語意相似度的長期興趣追蹤。
- •該工具支援透過 GitHub Actions 或自託管伺服器進行排程執行，解決了研究人員在不同環境下部署的相容性問題。
- •系統內建了針對 arXiv API 的速率限制（Rate Limiting）處理機制，防止在大量抓取時被伺服器封鎖。
- •除了摘要功能，Research Radar 還提供自動化引用追蹤，能識別並標記使用者興趣領域內的關鍵引用文獻。
- •該專案採用模組化設計，允許使用者透過 Python 腳本自定義過濾邏輯，例如排除特定作者或過濾掉引用數低於門檻的論文。
📊 競品分析▸ Show
| 特性 | Research Radar | Arxiv Sanity Lite | Semantic Scholar API |
|---|---|---|---|
| 核心定位 | 個人化自動化工作流 | 社群驅動的論文探索 | 學術搜尋引擎與推薦 |
| 模型支援 | LLM 模型無關 (Ollama/OpenAI) | 無 (基於關鍵字/熱度) | 內建推薦演算法 |
| 部署方式 | 自託管/開源 | 網頁端 | API 服務 |
| 價格 | 免費 (開源) | 免費 | 免費 (有額度限制) |
🛠️ 技術深入
- 採用兩階段過濾架構：第一階段使用輕量級模型（如 Llama-3-8B 或 GPT-4o-mini）進行二元分類（相關/不相關），第二階段使用高階模型（如 Claude 3.5 Sonnet）進行深度摘要。
- PDF 解析層使用 PyMuPDF (fitz) 進行高效文字提取，並結合正規表達式處理 arXiv 特有的雙欄排版與數學公式。
- 支援 LangChain 或 LlamaIndex 框架整合，方便使用者擴充檢索增強生成 (RAG) 功能。
- 狀態管理採用 SQLite 或 JSON 檔案儲存已處理論文的 ID，確保每日執行時不會重複處理相同文獻。
🔮 前景展望AI analysis grounded in cited sources
學術資訊過濾將從關鍵字搜尋轉向代理人（Agentic）主動推薦。
隨著 LLM 代理人技術成熟，研究人員將不再需要手動篩選，而是由 AI 根據長期研究軌跡主動推送精準文獻。
開源學術工具將迫使傳統學術資料庫開放更多 API 存取權限。
個人化自動化工具的普及降低了獲取學術資訊的門檻，將對封閉式學術平台構成競爭壓力。
⏳ 時間線
2025-03
Research Radar 專案於 GitHub 發布初始版本，提供基礎 arXiv 抓取功能。
2025-09
加入對本地 LLM (Ollama) 的支援，大幅降低使用者的 API 成本。
2026-02
引入多階段 LLM 篩選架構，顯著提升摘要的精確度與相關性評分。
📰
AI 週報
閱讀本週精選 AI 大事摘要 →
👉相關動態
AI 策展新聞聚合。所有內容版權歸原始發布者所有。
原始來源： Reddit r/MachineLearning ↗