在人工智能領(lǐng)域，大語(yǔ)言模型正以前所未有的速度發(fā)展，已經(jīng)成為眾多企業(yè)、研究機(jī)構(gòu)和個(gè)人開(kāi)發(fā)者的新寵。十方融海作為以數(shù)字科技創(chuàng)新為展新引擎的數(shù)字職業(yè)在線教育科技企業(yè)，也將AI大語(yǔ)言模型作為公司科研創(chuàng)新主要發(fā)力方向之一，技術(shù)團(tuán)隊(duì)一直刻苦鉆研，致力于提供開(kāi)放、免費(fèi)獲取、公開(kāi)下載、可離線部署的，具備真正認(rèn)知能力和頓悟能力的大語(yǔ)言模型，并在多語(yǔ)言模型訓(xùn)練方面積攢了豐富的經(jīng)驗(yàn)。

近日，十方融海集團(tuán)旗下威科軟件聯(lián)合OpenBuddy團(tuán)隊(duì)宣布：領(lǐng)先業(yè)界推出了國(guó)內(nèi)首個(gè)基于Falcon架構(gòu)、可商用的中文跨語(yǔ)言模型——OpenBuddy-Falcon-7B。這也是全球第一個(gè)可免費(fèi)使用開(kāi)源的中文大語(yǔ)言模型，適用于大多數(shù)商業(yè)應(yīng)用場(chǎng)景需求，且家用顯卡也能輕松運(yùn)行，為個(gè)人和企業(yè)提供更便捷、更全面的大語(yǔ)言模型智能化應(yīng)用。

今年 5月，Tii研究機(jī)構(gòu)發(fā)布了 Falcon模型，使用 Apache 2.0的可商用開(kāi)源協(xié)議，F(xiàn)alcon模型不僅在協(xié)議和數(shù)據(jù)集方面更加開(kāi)放，還采用了最新的 Flash Attention等技術(shù)，展現(xiàn)出了驚人的性能和內(nèi)容質(zhì)量。Falcon模型一經(jīng)發(fā)布，便榮登 Huggingface Open LLM Leaderboard的首位，成為最新的 SOTA開(kāi)源大語(yǔ)言模型。

十方融海在Falcon模型推出之初，便對(duì)其產(chǎn)生了濃厚的興趣。十方融海技術(shù)團(tuán)隊(duì)深知，現(xiàn)有的 SOTA開(kāi)源語(yǔ)言模型，包括 LLaMA和 Falcon，都存在“跨語(yǔ)言支持能力薄弱”這一問(wèn)題。這些模型主要以英語(yǔ)、法語(yǔ)等印歐語(yǔ)系為基礎(chǔ)，并且缺乏跨語(yǔ)言對(duì)話場(chǎng)景的深度優(yōu)化。因此，它們?cè)诶斫庵形牡确怯W語(yǔ)系語(yǔ)言方面存在困難，更無(wú)法進(jìn)行有意義的對(duì)話。

對(duì)此，為了給個(gè)人和企業(yè)提供更便捷、更全面的大語(yǔ)言模型智能化應(yīng)用，經(jīng)過(guò)不懈的研究和試錯(cuò)，十方融海旗下威科軟件聯(lián)合OpenBuddy團(tuán)隊(duì)成功地掌握了 Falcon模型的訓(xùn)練訣竅，推出了全球首個(gè)基于 Falcon架構(gòu)、開(kāi)放可商用的中文跨語(yǔ)言大模型——OpenBuddy-Falcon-7B。

相較于原始Falcon模型，OpenBuddy-Falcon-7B在跨語(yǔ)言能力方面更具優(yōu)勢(shì)，支持包括中文、日語(yǔ)、韓語(yǔ)、英語(yǔ)、法語(yǔ)、德語(yǔ)等多種語(yǔ)言。

通過(guò)采用新穎的跨語(yǔ)言學(xué)習(xí)技術(shù)與深度優(yōu)化對(duì)話場(chǎng)景，大幅提高了模型對(duì)跨語(yǔ)言知識(shí)的理解能力和融合能力，模型可以實(shí)現(xiàn)在各種語(yǔ)言之間進(jìn)行自由、流暢的對(duì)話，并能在多種語(yǔ)言直接切換，完成翻譯等需要跨語(yǔ)言能力的任務(wù)。

此外，模型具備插件使用能力，能分析用戶的意圖，自動(dòng)選取并調(diào)用插件。例如，調(diào)用Stable Diffusion開(kāi)源模型畫(huà)圖，調(diào)用內(nèi)置的搜索引擎搜索資料等等；模型更是能夠深度理解用戶的需求，可以完成問(wèn)答、寫(xiě)作、模仿、創(chuàng)作等多種任務(wù)，還可以完成“畫(huà)一個(gè)車(chē)水馬龍的街道”，“畫(huà)一個(gè)丑小鴨長(zhǎng)大后變成的動(dòng)物”等復(fù)雜指令。

這并非十方融海首次推出中文大語(yǔ)言模型。事實(shí)上，十方融海技術(shù)團(tuán)隊(duì)已經(jīng)在多語(yǔ)言模型訓(xùn)練方面積累了豐富的經(jīng)驗(yàn)，早在falcon模型推出之前，十方融海聯(lián)合OpenBuddy團(tuán)隊(duì)就曾在 LLaMA的 7B、13B、30B模型上進(jìn)行了反復(fù)迭代和調(diào)優(yōu)，研發(fā)出了OpenBuddy-LLaMA系列開(kāi)源模型。這些模型在中文、日語(yǔ)、韓語(yǔ)等多種語(yǔ)言上具備優(yōu)秀的問(wèn)題理解和回答能力，可以利用英文論文、代碼等資料學(xué)習(xí)到的知識(shí)，為中文問(wèn)題提供專業(yè)的回答和見(jiàn)解。

作為跨語(yǔ)言模型，OpenBuddy-LLaMA系列在中文、日語(yǔ)、韓語(yǔ)等多種語(yǔ)言上具備優(yōu)秀的問(wèn)題理解和回答能力，也吸引了全世界眾多開(kāi)放模型愛(ài)好者的關(guān)注，llama.cpp、Langport、FastChat等開(kāi)源項(xiàng)目均實(shí)現(xiàn)了OpenBuddy-LLaMA系列模型的集成，并在社區(qū)中獲得了廣泛的應(yīng)用。

十方融海技術(shù)團(tuán)隊(duì)負(fù)責(zé)人表示，OpenBuddy-Falcon-7B的發(fā)布，標(biāo)志著一個(gè)嶄新的時(shí)代的到來(lái)。在這個(gè)時(shí)代里，跨語(yǔ)言的大模型不再是科技巨頭的專利，而是開(kāi)放、可商用的資源，能為全球的開(kāi)發(fā)者、企業(yè)和研究者提供強(qiáng)大的支持。相信 OpenBuddy-Falcon-7B的發(fā)布，將對(duì)跨語(yǔ)言 AI領(lǐng)域的發(fā)展產(chǎn)生深遠(yuǎn)的影響，未來(lái)也有望見(jiàn)證更多基于 OpenBuddy-Falcon-7B的創(chuàng)新應(yīng)用和突破性技術(shù)問(wèn)世，共同推動(dòng)人工智能領(lǐng)域的繁榮發(fā)展。

值得一提的是，目前除了 7B（70億）參數(shù)的模型以外，OpenBuddy團(tuán)隊(duì)還在訓(xùn)練以13B（130億）、40B（400億）為訓(xùn)練參數(shù)的OpenBuddy-LLaMA-13B、OpenBuddy-Falcon-40B等百億規(guī)模的大語(yǔ)言模型。

在十方融海董事長(zhǎng)黃冠的帶領(lǐng)下，十方技術(shù)團(tuán)隊(duì)在AI大語(yǔ)言模型上將持續(xù)取得創(chuàng)新和突破，在更好滿足大眾平等使用AI技術(shù)需求的同時(shí)，也讓十方在新的AI大浪潮下走在前列。未來(lái)，十方將始終保持求是創(chuàng)新、擁抱變化的態(tài)度，為社會(huì)、為用戶創(chuàng)造出更大的價(jià)值。