tiktoken
Andrej Karpathy 星標 OpenAI tiktoken:關注高速 BPE Tokeniser
Andrej Karpathy 在 GitHub 為 openai/tiktoken 加星,顯示他關注此高速 BPE Tokeniser。tiktoken 為 Python 套件,提供 3‑6 倍效能提升,支援直接取得模型編碼。此舉暗示其在未來模型開發與推論流程中仍會使用此工具,對 AI 開發者效能優化具重要影響。
前特斯拉 AI 總監、OpenAI 聯合創辦人,深度學習領域頂尖研究者。以清晰易懂的教學風格聞名(YouTube、X),現活躍於 AI 開源社群,研究方向涵蓋神經網路、大型語言模型及 AI 教育推廣。
tiktoken
Andrej Karpathy 在 GitHub 為 openai/tiktoken 加星,顯示他關注此高速 BPE Tokeniser。tiktoken 為 Python 套件,提供 3‑6 倍效能提升,支援直接取得模型編碼。此舉暗示其在未來模型開發與推論流程中仍會使用此工具,對 AI 開發者效能優化具重要影響。
Phi-4
Andrej Karpathy 在 GitHub 為 Microsoft 開源的 Phi‑4 大型語言模型加星,表達對該模型的關注。Phi‑4 採用先進的稀疏化與混合精度技術,支援多語言指令式任務。此舉顯示開源大模型在開發者社群的影響力持續提升,可能促進更多應用落地。