電子發(fā)燒友網(wǎng)報道(文/李彎彎)日前,大力大模中文認知大模型平臺智譜AI關(guān)聯(lián)公司北京智譜華章科技有限公司發(fā)生工商變更,布局股東新增美團旗下天津三快科技有限公司,型并注冊資本由約1480.69萬人民幣增至約1652.86萬人民幣。購光股智
智譜AI在大模型上的外后技術(shù)積累
智譜AI成立于2019年,由清華大學計算機系知識工程實驗室的美團技術(shù)成果轉(zhuǎn)化而來,致力于打造新一代認知智能通用模型。又入
智譜AI與清華大學知識工程實驗室合作研發(fā)了雙語千億級超大規(guī)模預(yù)訓練模型GLM-130B,譜華并構(gòu)建了高精度通用知識圖譜,大力大模形成數(shù)據(jù)與知識雙輪驅(qū)動的布局認知引擎,基于此模型打造了ChatGLM(chatglm.cn)。型并此外,購光股智智譜AI還推出了認知大模型平臺Bigmodel.ai,外后包括CodeGeeX和CogView等產(chǎn)品,美團提供智能API服務(wù),又入鏈接物理世界的億級用戶、賦能元宇宙數(shù)字人、成為具身機器人的基座。
GLM-130B于2022年8月正式上線。據(jù)公開資料顯示,在準確性等關(guān)鍵指標與OpenAI、谷歌大腦和Meta等公司的大模型對比中,GLM表現(xiàn)依然出色,在MMLU、LAMBADA、BIG-bench-lite指標測試上,甚至超過了GPT-3和Meta的OPT大模型。
GLM-130B支持中英雙語,在多個公開評測集上性能超過GPT-3。同時該模型還支持英偉達、華為昇騰、海光DCU以及神威超算等多種芯片,支持快速推理,通過量化僅需4張英偉達RTX3090就可以運行千億模型,實現(xiàn)真正的大模型普惠。
2023年3月,智譜AI開源了GLM系列模型的新成員——中英雙語對話模型ChatGLM-6B,支持在單張消費級顯卡上進行推理使用。
這是繼此前開源GLM-130B千億基座模型之后,智譜AI再次推出大模型方向的研究成果。與此同時,基于千億基座模型的ChatGLM也同期推出,初具問答和對話功能。
ChatGLM-6B 模型基于 General Language Model (GLM) 架構(gòu),具有 62 億參數(shù)。結(jié)合模型量化技術(shù),用戶可以在消費級的顯卡上進行本地部署(INT4 量化級別下最低只需 6GB 顯存)。ChatGLM-6B 使用了和 ChatGLM 相同的技術(shù),針對中文問答和對話進行了優(yōu)化。
據(jù)悉,經(jīng)過約1T 標識符的中英雙語訓練,輔以監(jiān)督微調(diào)、反饋自助、人類反饋強化學習等技術(shù)的加持,62億參數(shù)的ChatGLM-6B 雖然規(guī)模不及千億模型,但大大降低了推理成本,提升了效率,并且已經(jīng)能生成相當符合人類偏好的回答。
美團在大模型領(lǐng)域的大力布局
在投資入股智譜AI之前,今年6月,美團宣布以總價2.85億美元(約合20.65億元)收購了創(chuàng)立僅四個月、美團聯(lián)合創(chuàng)始人王慧文成立的大模型公司光年之外。
對于此次并購,美團表示,光年之外是中國領(lǐng)先的AGI創(chuàng)新者,其目前的管理與技術(shù)團隊具有開發(fā)深度學習框架的高水平經(jīng)驗。公司通過收購事項可以獲得領(lǐng)先的AGI技術(shù)及人才,有機會加強其于快速增長的人工智能行業(yè)中的競爭力。
光年之外雖然成立時間不長,卻在兩個月時間便完成了以產(chǎn)品和技術(shù)人才為主的團隊搭建,吸引了多名人工智能領(lǐng)域頂級專家和創(chuàng)業(yè)者的加入,包括有著“搜狗輸入法之父”之稱的馬占凱、北京智源人工智能研究院副院長劉江、曾任微軟亞洲研究院主管研究員的袁進輝等。業(yè)界人士認為,這些人才過渡到美團,如果能把價值發(fā)揮出來,將會創(chuàng)造出無限可能。
此次投資入股智譜AI,也足以看出美團大模型領(lǐng)域的發(fā)展極其看好。目前,美團投資架構(gòu)主要包括美團戰(zhàn)投,以及2017年成立的私募股權(quán)基金美團龍珠,前身是“美團點評產(chǎn)業(yè)基金”。美團龍珠,主要專注于消費與科技方向布局。
美團龍珠創(chuàng)始合伙人朱擁華表示,從今年的維度來看,內(nèi)部認為AI會有可能影響一切,尤其大模型的影響是方方面面的。他預(yù)計2025-2030年期間,所有行業(yè)都會因為AI有巨大的調(diào)整。他強調(diào),“這個時代的腳步大家要抓住。”
智譜AI在知識智能方有著深厚的技術(shù)積累,在人才方面,智譜AI匯聚了頂尖技術(shù)研發(fā)團隊和資深顧問。核心團隊中,CEO張鵬畢業(yè)于清華計算機系,董事長劉德兵系中國工程院高文院士弟子,總裁王紹蘭為清華創(chuàng)新領(lǐng)軍博士。
在應(yīng)用上,智譜AI打造的認知大模型平臺以及數(shù)字人和科技情報產(chǎn)品,已經(jīng)在中國科協(xié)、北京市科委、華為、騰訊等1000余家企事業(yè)單位得到引用。同時,智譜AI已與北京中醫(yī)藥大學東方醫(yī)院共同開發(fā)了數(shù)字中醫(yī)大模型。
據(jù)相關(guān)負責人介紹,數(shù)字中醫(yī)大模型目前已完成千余本中醫(yī)古籍書籍、中西醫(yī)教材、期刊、醫(yī)案、診療信息等數(shù)據(jù)的收集與加工,人們可以在“中醫(yī)小助手”線上平臺,初步體驗基于大模型能力所實現(xiàn)的根據(jù)癥狀描述生成處方、中醫(yī)中藥知識問答等功能。
小結(jié)
先是并購大模型相關(guān)企業(yè)光年之外,后是投資入股人才技術(shù)兼?zhèn)涞腁I大模型研發(fā)商智譜華章,足見美團對大模型未來發(fā)展的極度看好。經(jīng)過大半年時間的發(fā)展,如今大模型已經(jīng)進入應(yīng)用落地探索期,美團未來在其中能夠取得怎樣的成績,越來越值得期待了。