Karpathy’s LLM Wiki Idea Just Got a Standard-Shaped Push
When knowledge for agents is formatted like a product surface, wikis stop being human-only documentation.
大型語言模型、提示工程同基準測試。
12 篇
When knowledge for agents is formatted like a product surface, wikis stop being human-only documentation.
有人對 LLM 用 Rust 重寫的 SQLite 進行基準測試。結果揭示了「看起來正確的程式碼」與「真正正確的程式碼」之間,可以相差五個數量級。
我逆向工程咗 Codex 嘅 context overflow 處理方式。背後涉及 AES 加密、session 交接模式,同埋 KV cache 優化。
最新 benchmark 數據顯示,AGENTS.md 同 CLAUDE.md 呢啲 context 檔案其實會拖低 coding agent 嘅表現。有時候,懶惰先係最正確嘅工程決策。
LangChain 的 Terminal Bench 結果與 hashline 格式實驗所揭示的現象。同一模型排行榜名次逆轉的原因,在於提示詞、工具與中間件三個環節。
Nvidia唔再係唯一答案。OpenAI簽咗Cerebras、Nvidia收購Groq、Google TPU鎖定Anthropic - 智能體時代令推理芯片需求爆發,半導體格局徹底改變。
當市場憂慮 GPU 產能過剩,OpenAI 反而高調表示需要更多算力。真正樽頸唔係運算能力,而係用戶體驗 - 點樣令人用得切實際需求。
Anthropic嘅Claude Opus 4.5唔止係刷新跑分咁簡單。當競爭對手喺多模態度分散資源嘅時候,全押文字、代碼同代理嘅聚焦策略先至係真正嘅贏家。
Poetiq 的遞歸元系統成為首個在 ARC-AGI-2 上突破 50% 的系統,這是專為測試真正通用智能而設計的基準測試。一個 6 人團隊如何以一半成本跑贏 Google。