智譜AI發布新一代高性能模型GLM-4

北京智譜華章科技有限公司 (智譜 AI) 在「智譜 AI 首屆技術開放日」大會上，發布了新一代基座大模型 GLM-4。 據指出，相較於前一代模型，GLM-4 在整體性能上有了顯著提升，不僅支持更長的上下文資訊處理，推理速度也更為迅捷，有效降低了推理成本。

官方指出，GLM-4 能夠支援高達 128k 的上下文視窗長度，單次提示詞處理的文字量可達到 300 頁之多。在測試中，GLM-4 處理長達 128K 的文字時，也未出現因長上下文資訊失焦而導致的精度下降問題。

大會上還發布了 GLM-4-All-Tools 全家桶。相較於以往需要提示詞或程式碼，才能呼叫大模型的能力。而現在，由於 GLM 模型的強大 Agent 能力，GLM-4 實現了自主根據使用者意圖，自動理解、規劃複雜指令，自由調用 WebGLM 搜尋增強、Code Interpreter 程式碼解釋器和多模態生成能力，從而完成 更加複雜的任務。

據指出，與上一代 ChatGLM3 相比，GLM-4 在綜合能力上實現了全面躍升，性能提升了 60%，已經逼近 GPT-4。同時，GLM-4 也增強了智能體能力。

從眾多評測集中可以看到，GLM-4 的效能提升非常明顯。相較於 GPT-4，GLM-4 在 MMLU、GSM8K、BBH、HellaSwag 資料集上分佈達到了 94%、95%、99% 和 90% 的水準。

而在 HumanEval 資料集上，GLM-4 則拿到了 72 分，明顯超過了 GPT-3.5 和 GPT-4 的水準。

智譜 AI 表示，2024 年還將發起開源開放的大模型開源基金，該計畫包括三個「一千」：智譜 AI 將為大模型開源社區提供一千張卡，助力開源開發；提供人民幣 1000 萬元的現金用來支持與大模型相關的開源項目；為優秀的開源開發者提供 1000 億免費 API tokens。

智譜 AI CEO 張鵬表示，大模型開源基金的目的在於推動大模型研發的大進展，促進大模型整個開源生態的大繁榮。面對全球的大模型創業者，智譜 AI 也將「Z 計畫」進一步升級，聯合生態夥伴發起總額 10 億人民幣的大模型創業基金用於支持大模型原始創新，覆蓋大模型算法、底層算子、晶片優化、行業大模型和超級應用等方向。