DeepSeek v3是一個基於多專家（MoE）架構的最先進AI語言模型，擁有6710億個參數，每個標記激活370億。它接受了148兆高質量標記的訓練，並在包括複雜推理、代碼生成和多語言任務等各個領域中優越。主要特徵包括128K標記的長上下文窗口、多標記預測和高效推理，使其適合從企業解決方案到內容創建等各種應用。

Petals 是一個創新的平台，可以促進大型語言模型（LLMs）的去中心化運行和微調。利用類似 BitTorrent 的網絡結構，用戶可以共享計算負載，從而實現更快的推理和微調。這種方法使先進的 AI 功能民主化，使任何人都可以在家中運行功能強大的 LLM，而無需大量計算資源。