書生·浦語

書生·浦語（InternLM） 是上海人工智能實驗室、商湯科技及高校合作發(fā)布的大語言模型，是在過萬億token數(shù)據(jù)上訓練的多語言千億參數(shù)基座模型。它通過多階段漸進式訓練，展示了在中英文閱讀理解、推理任務(wù)等高難度場景下的出色性能，并在多種面向人類設(shè)計的綜合性考試中取得了突出成績。

書生·浦語不僅擁有強大的知識理解能力，還通過了大規(guī)模的語料庫訓練和微調(diào)過程，使其能夠在與人類對話時響應復雜指令并符合人類的道德與價值觀。新一代的書生·浦語2.0版本強調(diào)了其200K超長上下文的支持能力和20B版本綜合性能的全面領(lǐng)先地位。

目錄

• 1 功能特點
  • 1.1 多語言能力
  • 1.2 推理與代碼能力
  • 1.3 考試性能
  • 1.4 超長上下文支持
  • 1.5 工具調(diào)用能力
• 2 發(fā)展歷史
• 3 相關(guān)條目

功能特點

多語言能力

書生·浦語擁有強大的多語言理解和生成能力，特別是在中文和英文任務(wù)上。它在多種語言的客觀評測中都表現(xiàn)出了優(yōu)于社區(qū)開源模型的性能，能夠在多語言環(huán)境中被廣泛應用，為不同語言背景的用戶提供服務(wù)。

推理與代碼能力

通過在各種來源以及精選的高質(zhì)量數(shù)據(jù)上進行訓練，書生·浦語展示了在邏輯推理、代碼生成以及遵循復雜指令方面的卓越性能。這證明了模型不僅僅是一個簡單的語言生成工具，還能夠進行深度思考和問題解決，特別是在編程和技術(shù)相關(guān)的領(lǐng)域內(nèi)。

考試性能

書生·浦語模型的學習能力進一步通過人類設(shè)計的綜合性考試得到了驗證。書生·浦語在包括 MMLU（Multi-task Multi-language Learning Evaluation）和 C-Eval（Chinese Language Evaluation）在內(nèi)的多個評測集上展現(xiàn)了優(yōu)異的成績，尤其在中文考試項目中，它取得了超越 ChatGPT 的分數(shù)，彰顯了其深厚的語言理解和應用能力。

超長上下文支持

書生·浦語2.0能夠處理長達20萬字的上下文，這使它能夠在極長的文章中找到特定信息，類似于在“大海撈針”。這種能力在 LongBench 和 L-Eval 等評測中得到了驗證，模型在這些長文任務(wù)中的表現(xiàn)達到了開源模型中的領(lǐng)先水平。

工具調(diào)用能力

書生·浦語新版模型的工具調(diào)用能力整體得到升級，它能夠更可靠地支持復雜智能體的搭建，有效地進行多輪工具調(diào)用，完成較為復雜的任務(wù)。

發(fā)展歷史

• 2023年7月，書生·浦語正式發(fā)布。
• 2023年9月，上海人工智能實驗室聯(lián)合多家機構(gòu)推出書生·浦語大模型200億參數(shù)版本InternLM-20B，并在阿里云魔搭社區(qū)（ModelScope）開源首發(fā)。
• 2024年1月，書生·浦語2.0正式開源。

相關(guān)條目

• GPT-4
• ChatGPT
• 訊飛星火
• 文心一言
• 通義千問