但也要看到,要讓大模型從“已有”走向“可用”并不是“一蹴而就”的過(guò)程,更多的企業(yè)通常會(huì)面臨數(shù)據(jù)資源有限、算力投資難度大、模型泛化能力差、高水平人才稀缺的發(fā)展瓶頸。也正因此,對(duì)更多的企業(yè)來(lái)說(shuō),未來(lái)更加“務(wù)實(shí)”的做法,就是選擇適合自己的大模型服務(wù)商,“站在巨人的肩膀上”,更好地“用好”大模型。正是洞察到這種迫切的市場(chǎng)需求,作為數(shù)字化轉(zhuǎn)型的實(shí)踐者和賦能者,軟通動(dòng)力近年來(lái)始終堅(jiān)持以全棧式數(shù)字技術(shù)為行業(yè)客戶創(chuàng)造價(jià)值,特別是在大模型領(lǐng)域,軟通動(dòng)力也在積極地探索與實(shí)踐,希望憑借自身在AI基礎(chǔ)設(shè)施、AI專業(yè)人才,AI生態(tài)以及在通用領(lǐng)域和專用服務(wù)領(lǐng)域沉淀的豐富應(yīng)用實(shí)踐,為行業(yè)客戶提供大模型落地的專業(yè)服務(wù),打通大模型落地“最后一公里”,更好地加速千行百業(yè)擁抱大模型的新時(shí)代。大模型落地的四重挑戰(zhàn)毫無(wú)疑問(wèn),幾乎沒(méi)人會(huì)懷疑大模型對(duì)未來(lái)的顛覆性影響。但現(xiàn)實(shí)是,國(guó)內(nèi)對(duì)大模型的探索仍處于早期階段,無(wú)論在研發(fā)、迭代還是使用階段,大模型都是一個(gè)消耗資源巨大、使用成本也不低的“奢侈品”。除了成本居高不下之外,企業(yè)想要在實(shí)際業(yè)務(wù)場(chǎng)景中部署使用大模型,還面臨著數(shù)據(jù)、參數(shù)調(diào)優(yōu)、人才等諸多的落地難題。
對(duì)此,軟通動(dòng)力數(shù)字化創(chuàng)新服務(wù)線副總裁霍宇表示,今年以來(lái)軟通動(dòng)力積極在大模型領(lǐng)域探索與實(shí)踐,發(fā)現(xiàn)大模型要落地到行業(yè)和企業(yè)之中所面臨的挑戰(zhàn)非常之多,可以從幾個(gè)維度來(lái)做觀察:一是,從算力的維度看,訓(xùn)練大型模型需要大量的計(jì)算資源和資金投入,這對(duì)于眾多的企業(yè)是巨大的挑戰(zhàn)。“公司今年在大模型基礎(chǔ)算力方面的投入預(yù)計(jì)將會(huì)近億元,未來(lái)還會(huì)持續(xù)。在這個(gè)領(lǐng)域,如果需要形成有競(jìng)爭(zhēng)力的產(chǎn)品或者方案,上千萬(wàn)的資金投入只能算是起步門(mén)檻,可以說(shuō)大模型的算力和訓(xùn)練成本極高,這也包括現(xiàn)在經(jīng)常提到的行業(yè)大模型,垂直領(lǐng)域大模型,所以說(shuō)算力方面就是一個(gè)躲不過(guò)去的高門(mén)檻。”霍宇表示。二是,從數(shù)據(jù)的維度看,以生成式AI來(lái)說(shuō),訓(xùn)練的語(yǔ)言模型就需要具有更高的豐富度和復(fù)雜性,才能更好地理解和生成各種語(yǔ)言表達(dá)形式。例如,不同的語(yǔ)言有不同的句法結(jié)構(gòu)、詞匯使用規(guī)律、語(yǔ)義關(guān)系等特點(diǎn),因此訓(xùn)練模型需要包括更多的語(yǔ)言知識(shí)和規(guī)則,以適應(yīng)這些差異。同時(shí),不同的語(yǔ)言還可能包含一些特殊的表達(dá)方式、文化背景等,訓(xùn)練模型還需要考慮這些因素,以更好地模擬和生成各種語(yǔ)言表達(dá)形式。不僅如此,為了提高模型的豐富度和能力,還需要使用更加大規(guī)模、多樣化、真實(shí)的語(yǔ)言數(shù)據(jù)集,以提高模型的泛化能力和豐富性,使其能夠更好地適應(yīng)各種語(yǔ)言場(chǎng)景和應(yīng)用需求。在霍宇看來(lái),大模型訓(xùn)練的語(yǔ)料問(wèn)題本質(zhì)上就是企業(yè)的數(shù)據(jù)治理的問(wèn)題,一方面要求企業(yè)必須要獲取大量可用和可信的數(shù)據(jù);另一方面,數(shù)據(jù)還需要經(jīng)過(guò)治理,形成結(jié)構(gòu)化和標(biāo)準(zhǔn)化的數(shù)據(jù),從而更好的訓(xùn)練出所需要的大模型服務(wù)。
三是,從算法的維度看,AI模型的發(fā)展從AlexNet發(fā)布開(kāi)始,隨后的研究多數(shù)是圍繞著模型的深度和廣度探索,發(fā)展至今已有BERT、 GPT等典型模型出現(xiàn),也掀起了預(yù)訓(xùn)練模型的熱潮,目前國(guó)內(nèi)的大模型參數(shù)也已經(jīng)攀升至千億、萬(wàn)億級(jí)別,其準(zhǔn)確度也在不斷的刷新 SOTA。但與此同時(shí),對(duì)于企業(yè)而言,如何選擇合適自身的預(yù)訓(xùn)練模型,如何在具體場(chǎng)景和任務(wù)下,基于成熟的大模型進(jìn)行微調(diào)能夠快速地產(chǎn)生準(zhǔn)確結(jié)果,以及究竟是選擇商用還是開(kāi)源的大模型服務(wù),如何平衡成本和訓(xùn)練效果,同樣也是非常讓人“頭疼”的問(wèn)題。四是,從人才維度看,隨著越來(lái)越多的企業(yè)開(kāi)始廣泛應(yīng)用大模型,相關(guān)的人才需求也成為了新的挑戰(zhàn)。以在人工智能產(chǎn)品實(shí)際使用過(guò)程中進(jìn)行數(shù)據(jù)庫(kù)管理、算法參數(shù)設(shè)置、人機(jī)交互設(shè)計(jì)、性能測(cè)試跟蹤及其他輔助作業(yè)的AI訓(xùn)練師為例,相關(guān)數(shù)據(jù)顯示,這類人才目前就出現(xiàn)了大量的“缺口”亟待滿足。不難看出,雖然我們已經(jīng)見(jiàn)證了大模型開(kāi)始與場(chǎng)景、行業(yè)進(jìn)行深度融合并取得了不錯(cuò)的成績(jī),驗(yàn)證了大模型已不僅在科技企業(yè)中應(yīng)用,也邁出了走向千行百業(yè)的步伐,但大模型的落地并不是一件簡(jiǎn)單的事情,仍需要解決好算力、數(shù)據(jù)、算法、人才等方面帶來(lái)的全新挑戰(zhàn)。以服務(wù)入局大模型賽道基于此,從今年年初開(kāi)始,軟通動(dòng)力就積極布局大模型賽道,不僅投資建設(shè)AI算力基礎(chǔ)設(shè)施,同時(shí)也站在服務(wù)和落地的視角,希望能夠憑借自身在AI人才資源,AI平臺(tái)工具,AI合作生態(tài)以及“躬身實(shí)踐”中沉淀的經(jīng)驗(yàn)和方法論,和行業(yè)客戶共創(chuàng)能夠落地的大模型服務(wù),更好地幫助企業(yè)迎接大模型時(shí)代的到來(lái),具體來(lái)說(shuō):首先,在AI人才資源方面,這是軟通動(dòng)力在大模型賽道中獨(dú)具特色的優(yōu)勢(shì)。公司憑借十余年的技術(shù)積累和行業(yè)經(jīng)驗(yàn)沉淀,通過(guò)將自身的服務(wù)能力橫向拉通、整合之后,目前不僅能夠?yàn)樾袠I(yè)客戶提供“全棧化”的數(shù)字技術(shù)服務(wù),同時(shí)更積累了一大批高質(zhì)量的數(shù)字化人才。“我們的第一個(gè)切入點(diǎn)就是AI人才方向,投入專門(mén)的算力平臺(tái)作為培養(yǎng)工程師上手并熟悉大模型的工程實(shí)踐環(huán)境,能夠讓相關(guān)開(kāi)發(fā)語(yǔ)言的工程師和架構(gòu)師更快更熟練玩轉(zhuǎn)大模型,希望通過(guò)對(duì)算力及人才的投資,讓他們能夠把大模型從產(chǎn)品到落地應(yīng)用之間的鏈條打通,成為大模型領(lǐng)域的專家。而在未來(lái),這批專家資源的能力不僅可以傳遞給更多的員工;另一方面,對(duì)企業(yè)來(lái)說(shuō),也可以直接獲得專家資源的幫助,直接進(jìn)行企業(yè)所需要的大模型開(kāi)發(fā)或者提供參數(shù)調(diào)優(yōu)等相關(guān)的服務(wù)。”霍宇說(shuō)。
其次,在AI平臺(tái)工具方面,軟通動(dòng)力也打造了軟通天璇2.0 MaaS 平臺(tái)。據(jù)介紹,基于產(chǎn)業(yè)服務(wù)需求,軟通天璇2.0 MaaS平臺(tái)在整合軟通行業(yè)模型管理平臺(tái)(iSS Model Ops Platform)、軟通應(yīng)用開(kāi)發(fā)平臺(tái)(iSS Model Dev Tools)、軟通場(chǎng)景Plugin應(yīng)用服務(wù)平臺(tái)(iSS Model Plugin Store)等產(chǎn)品的基礎(chǔ)上,能夠?yàn)榭蛻籼峁┐竽P偷臄?shù)據(jù)處理、大模型一站式運(yùn)營(yíng)服務(wù)、繼續(xù)訓(xùn)練、調(diào)優(yōu)、部署、推理和數(shù)字資產(chǎn)管理、數(shù)據(jù)安全等服務(wù)。值得一提的是,軟通動(dòng)力全新升級(jí)的訓(xùn)推一體化平臺(tái),基于昇騰硬件底座,采用軟通G420K訓(xùn)練平臺(tái)和軟通G210K推理平臺(tái),整合歐拉操作系統(tǒng)等組件,搭載自有AI中臺(tái),能夠?yàn)橛脩籼峁┒喾N交互式AI模型,深度適配不同AI應(yīng)用場(chǎng)景,在央國(guó)企、教育科研、金融等多行業(yè)多領(lǐng)域都可以應(yīng)用。第三,在AI合作方面,軟通動(dòng)力與行業(yè)內(nèi)頭部和主流大模型廠商都建立了生態(tài)向的合作。不僅率先接入了微軟Azure云 GPT4,并且也是百度文心一言、華為云盤(pán)古大模型、阿里通義千問(wèn)、元乘象ChatImg2.0的生態(tài)合作伙伴,同時(shí)也在積極深研諸如ChatGLM、DeepSpeed Chat、OpenAssistant、Alpaca、LLaMA等開(kāi)源大模型。霍宇認(rèn)為,軟通動(dòng)力在AI合作生態(tài)方面全方位的“布局”,最大的價(jià)值在于團(tuán)隊(duì)通過(guò)使用這些第三方的商用大模型服務(wù),以及開(kāi)源大模型,沉淀了不少的經(jīng)驗(yàn)和方法論,而這些實(shí)踐和經(jīng)驗(yàn),對(duì)行業(yè)客戶落地大模型也是具有極高的參考價(jià)值和借鑒意義的,可以避免企業(yè)在大模型落地過(guò)程中少走“彎路”,這也是一種較為“穩(wěn)妥”的落地方式。
最后,是大模型落地實(shí)踐方面,軟通動(dòng)力也正在和行業(yè)客戶通過(guò)“共創(chuàng)”的形式,更好地推動(dòng)企業(yè)擁抱大模型時(shí)代。“現(xiàn)在不少行業(yè)客戶都找到軟通,他們認(rèn)為目前如果企業(yè)自己要搞一套大模型是有困難的,這些行業(yè)客戶的優(yōu)勢(shì)在于他們有不少的行業(yè)數(shù)據(jù),但是并不知道如何讓這些數(shù)據(jù)更好地實(shí)現(xiàn)語(yǔ)料化,或者如何讓大模型在節(jié)省算力的基礎(chǔ)上,更快地實(shí)現(xiàn)訓(xùn)練或者推理等等。除此之外,搭建行業(yè)大模型,前期的規(guī)劃以及選型,也是一道門(mén)檻,而這些正是軟通動(dòng)力擅長(zhǎng)的工作,因此雙方可以通過(guò)共創(chuàng)的形式,共同推進(jìn)大模型的落地,目前公司已經(jīng)和不少的銀行和保險(xiǎn)行業(yè)的客戶展開(kāi)相關(guān)的合作。”霍宇說(shuō)。正如IDC最新發(fā)布的《AI大模型技術(shù)能力評(píng)估報(bào)告,2023》中提到的:“對(duì)于行業(yè)用戶來(lái)說(shuō),在關(guān)注廠商大模型技術(shù)棧完備性的同時(shí),應(yīng)著重考察廠商的產(chǎn)業(yè)應(yīng)用經(jīng)驗(yàn)積累,主要發(fā)力點(diǎn)應(yīng)集中在應(yīng)用層,將技術(shù)應(yīng)用到實(shí)際業(yè)務(wù)場(chǎng)景中,提前布局,積累行業(yè)、場(chǎng)景經(jīng)驗(yàn)和數(shù)據(jù),由此才能‘站在巨人的肩膀上’打造差異化競(jìng)爭(zhēng)優(yōu)勢(shì)。”從這個(gè)角度來(lái)說(shuō),軟通動(dòng)力在大模型服務(wù)領(lǐng)域積累的四大優(yōu)勢(shì),無(wú)疑可以更好地幫助企業(yè)擁抱大模型,加速企業(yè)的數(shù)智化轉(zhuǎn)型。打通落地“最后一公里”事實(shí)上,軟通動(dòng)力以服務(wù)模式“卡位”大模型賽道,本身也是深思熟慮和審慎考量的結(jié)果。霍宇告訴我:“當(dāng)大模型浪潮襲來(lái)之時(shí),我們首先否決掉的就是自己下場(chǎng)做通用大模型平臺(tái),更多還是考慮從行業(yè)大模型的賽道入手,但深入研究之后又發(fā)現(xiàn),要做行業(yè)大模型,垂直行業(yè)中的數(shù)據(jù)和語(yǔ)料也至關(guān)重要。因此,作為一家服務(wù)型的公司,軟通動(dòng)力以服務(wù)的模式切入這個(gè)市場(chǎng)是最為合適的,我們可以通過(guò)專家資源、平臺(tái)工具,以及經(jīng)驗(yàn)和方法論,加上行業(yè)客戶手中的數(shù)據(jù)資源,雙方以共創(chuàng)的形式合作,是能夠以較快方式實(shí)現(xiàn)大模型落地的。”同樣,以“服務(wù)”模式入局大模型賽道,也讓軟通動(dòng)力能夠以更加“全局”的視角來(lái)觀察和看待整個(gè)大模型市場(chǎng),并從中沉淀和總結(jié)出了不少大模型落地中值得重視的關(guān)鍵事項(xiàng)。
第一,是關(guān)于開(kāi)源和商用大模型的選型問(wèn)題。對(duì)此,霍宇認(rèn)為,基于業(yè)務(wù)的需求情況,中國(guó)企業(yè)也會(huì)像選擇公有云和私有云部署那樣,既會(huì)選擇直接接入商用大模型,也會(huì)選擇基于開(kāi)源大模型部署本地化的服務(wù)。“拋開(kāi)算力資源問(wèn)題不說(shuō),如果單看模型參數(shù)大小,開(kāi)源大模型在相對(duì)小的規(guī)模上能力已經(jīng)接近商用模型,漸漸有了趕超的勢(shì)頭。另外,相對(duì)追求大而全的通用商用大模型,在垂直領(lǐng)域的模型訓(xùn)練上,開(kāi)源模型的數(shù)量已經(jīng)超過(guò)商用模型,因此企業(yè)不用太擔(dān)心開(kāi)源大模型會(huì)落后于主流的商用大模型平臺(tái)。而在行業(yè)大模型領(lǐng)域,應(yīng)該說(shuō)整個(gè)市場(chǎng)都還不太成熟,還處在探索與實(shí)踐的階段,這就需要整個(gè)產(chǎn)業(yè)鏈通過(guò)共創(chuàng)的方式,推動(dòng)行業(yè)大模型的慢慢成熟,最終打通落地的最后一公里。”霍宇說(shuō)。第二,除了算力和模型參數(shù)之外,企業(yè)應(yīng)該把重心放在數(shù)據(jù)以及語(yǔ)料的沉淀上。在霍宇看來(lái),目前語(yǔ)料確實(shí)是一個(gè)稀缺資源,但很多企業(yè)沒(méi)有意識(shí)到這一點(diǎn),未來(lái)企業(yè)如果要做大模型,數(shù)據(jù)和語(yǔ)料就是繞不開(kāi)的問(wèn)題。也正因此,數(shù)據(jù)和語(yǔ)料的質(zhì)量問(wèn)題就變得尤為重要,同樣底層數(shù)據(jù)的清洗、標(biāo)注、治理等一系列的工作也變得更加地迫在眉睫。“我們目前也正在幫助一些行業(yè)客戶做數(shù)據(jù)治理的工作,我們判斷做數(shù)據(jù)和語(yǔ)料的工作還會(huì)長(zhǎng)久持續(xù),只不過(guò)很多工作如數(shù)據(jù)標(biāo)注、數(shù)據(jù)收集的工作會(huì)變成‘工具+人工’的方式,同時(shí)這些數(shù)據(jù)和語(yǔ)料也會(huì)更加關(guān)注行業(yè)屬性。不僅如此,在具體的實(shí)踐過(guò)程中,我們也總結(jié)和沉淀了如何把語(yǔ)料或數(shù)據(jù)形成標(biāo)準(zhǔn)化的方法論,多大的參數(shù)量需要‘喂’它多少的語(yǔ)料能夠達(dá)到比較合適的性價(jià)比,這都是軟通動(dòng)力正在做的事情。在此基礎(chǔ)上,業(yè)務(wù)規(guī)則的設(shè)定,數(shù)學(xué)建模以及參數(shù)調(diào)優(yōu),以及后續(xù)長(zhǎng)期的優(yōu)化等工作,我們也都是可以為行業(yè)客戶提供相關(guān)服務(wù)的。”他說(shuō)。
第三,向量數(shù)據(jù)庫(kù)也是軟通動(dòng)力關(guān)注的重要方向。向量數(shù)據(jù)庫(kù)主要用在AI和機(jī)器學(xué)習(xí)領(lǐng)域。在這些領(lǐng)域,數(shù)據(jù)通常以向量的形式呈現(xiàn),可以有效解決文本、圖片、音頻、視頻等非結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)和查詢的難題;而在大模型時(shí)代,目前對(duì)非結(jié)構(gòu)化數(shù)據(jù)進(jìn)行管理和處理的主流方法是,利用RNN或 Transformer 等嵌入模型(Embedding Model),將非結(jié)構(gòu)化數(shù)據(jù)的語(yǔ)義內(nèi)容轉(zhuǎn)化為多維向量,并直接對(duì)這些向量進(jìn)行存儲(chǔ)、處理,由此可以為大模型的訓(xùn)練、學(xué)習(xí)等提供更好的數(shù)據(jù)支撐。霍宇認(rèn)為,向量數(shù)據(jù)庫(kù)在大模型中將會(huì)起到三個(gè)方面的作用和價(jià)值,包括它目前已成為推動(dòng)大模型迭代和進(jìn)化的核心技術(shù),同時(shí)它對(duì)企業(yè)的定制化需求也會(huì)有質(zhì)的影響;更為關(guān)鍵的是,向量數(shù)據(jù)庫(kù)對(duì)以后的數(shù)據(jù)型項(xiàng)目的交付也會(huì)產(chǎn)生比較大的變革。“我的理解是,向量數(shù)據(jù)庫(kù)是對(duì)數(shù)據(jù)科學(xué)的再一次‘?dāng)?shù)字化’,可以簡(jiǎn)單地對(duì)比原來(lái)以表結(jié)構(gòu)橫縱為主的數(shù)據(jù)庫(kù),是用二維或者多維結(jié)構(gòu)來(lái)表現(xiàn),那么向量數(shù)據(jù)庫(kù)就是用一維結(jié)構(gòu)來(lái)表現(xiàn)世界。因此隨著向量數(shù)據(jù)庫(kù)和算力以及AGI技術(shù)的發(fā)展,未來(lái)的數(shù)據(jù)交付模式就會(huì)改變,由此也會(huì)產(chǎn)生全新的商業(yè)模式,我們對(duì)此也是高度關(guān)注。”霍宇表示。回頭來(lái)看,軟通動(dòng)力這種“行勝于言”的務(wù)實(shí)風(fēng)格,讓它在大模型服務(wù)賽道中構(gòu)建了屬于自己獨(dú)特的競(jìng)爭(zhēng)優(yōu)勢(shì)。在AI算力資源上真金白銀的投入,對(duì)一家服務(wù)型企業(yè)而言,背后是決心的彰顯和對(duì)市場(chǎng)大勢(shì)的把握。這使得軟通動(dòng)力一方面可以提供充足的算力資源供工程師和開(kāi)發(fā)人員上手,積累和沉淀實(shí)操經(jīng)驗(yàn);另一方面,也可提供現(xiàn)場(chǎng)Demo環(huán)境供企業(yè)客戶使用,讓客戶能切實(shí)感受到大模型帶來(lái)的全新價(jià)值。“未來(lái),我們還會(huì)繼續(xù)儲(chǔ)備更多的專家資源,持續(xù)在平臺(tái)和工具上做投入,并根據(jù)客戶的業(yè)務(wù)應(yīng)用場(chǎng)景強(qiáng)化數(shù)據(jù)和語(yǔ)料的質(zhì)量,最終提升交付的效率,以更好的創(chuàng)新服務(wù)模式打通大模型落地的最后一公里。”霍宇如是說(shuō)。在“躬身實(shí)踐”和“作壁上觀”之間,軟通動(dòng)力選擇了前者,這也讓其對(duì)大模型市場(chǎng)有了更加深刻的認(rèn)知和洞察,同時(shí)其過(guò)去一段時(shí)間的大膽實(shí)踐,也讓其在人才、工具、生態(tài)乃至方法論方面有了更多的積累和沉淀,而這也是軟通動(dòng)力有能力,更有信心讓更多行業(yè)客戶加速擁抱大模型時(shí)代的底氣所在。
申耀的科技觀察,由資深科技媒體人申斯基創(chuàng)辦,20年企業(yè)級(jí)科技內(nèi)容傳播工作經(jīng)驗(yàn),長(zhǎng)期專注產(chǎn)業(yè)互聯(lián)網(wǎng)、企業(yè)數(shù)字化、ICT基礎(chǔ)設(shè)施、汽車科技等內(nèi)容的觀察和思考。
原文標(biāo)題:【觀察】軟通動(dòng)力霍宇:以服務(wù)入局大模型賽道,打通落地“最后一公里”
文章出處:【微信公眾號(hào):軟通動(dòng)力】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
-
軟通動(dòng)力
+關(guān)注
關(guān)注
1文章
760瀏覽量
15136
原文標(biāo)題:【觀察】軟通動(dòng)力霍宇:以服務(wù)入局大模型賽道,打通落地“最后一公里”
文章出處:【微信號(hào):isoftstone-group,微信公眾號(hào):軟通動(dòng)力】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
發(fā)布評(píng)論請(qǐng)先 登錄
相關(guān)推薦
評(píng)論