作者:京東科技 賈玉龍
1 背景
1.1 現(xiàn)狀
AIGC系統(tǒng)中多個(gè)模型的切換調(diào)用通常指的是在同一個(gè)AIGC系統(tǒng)或應(yīng)用中,可以根據(jù)不同的輸入條件或任務(wù)需求,動(dòng)態(tài)地選擇并調(diào)用不同的機(jī)器學(xué)習(xí)模型進(jìn)行處理。是一個(gè)AIGC系統(tǒng)能力不可或缺的環(huán)節(jié)。
目前現(xiàn)行方案中,一般直接請求不同的會(huì)話聊天對應(yīng)不同的鏈接地址,又對應(yīng)不同的算法模型。
1.2 現(xiàn)有技術(shù)及缺點(diǎn)
1、需要建立多個(gè)不同類型的AIGC聊天窗口,對應(yīng)不同的鏈接,以對應(yīng)不同的模型;
2、無法直接動(dòng)態(tài)切換模型,交互流程復(fù)雜;
3、由于異步問題,聊天窗中需要的初始化數(shù)據(jù)不能及時(shí)傳入。
2 方案目的
本問通過統(tǒng)一AIGC聊天窗中不同的卡片模型傳值,來動(dòng)態(tài)切換不同聊天內(nèi)容對應(yīng)的模型;在用戶側(cè)交互上可以不用新建聊天窗口。
3 完整技術(shù)方案
3.1 方案原理
如下圖所示,聊天欄目“智能實(shí)驗(yàn)室”是外框DOM,紅色部分為子聊天窗體,子窗體中1、2、3等為三種聊天source類型的卡片,需要對應(yīng)算法的3種模型,每個(gè)模型的對話可以直接點(diǎn)擊切換,并且需要外框DOM傳入相應(yīng)的初始化數(shù)據(jù)。
3.2 詳細(xì)描述
如下圖所示:
當(dāng)用戶想使用對應(yīng)聊天功能進(jìn)行AIGC內(nèi)容生成時(shí),可選擇聊天窗對應(yīng)按鈕,聊天窗將對應(yīng)按鈕的source類型傳給外框DOM,外框DOM根據(jù)業(yè)務(wù)場景把對應(yīng)的初始化數(shù)據(jù)準(zhǔn)備好,一起再發(fā)給子聊天窗,然后把數(shù)據(jù)傳給算法模型引擎,算法模型引擎根據(jù)source及參數(shù)類型,切換對應(yīng)的模型來進(jìn)行內(nèi)容處理,然后返回生產(chǎn)的內(nèi)容給子聊天窗,子聊天窗再渲染展示給用戶。
4 總結(jié)
本方案里在AIGC的消息傳遞中,不直接發(fā)送不同初始化或不同相應(yīng)消息給大模型進(jìn)行識(shí)別,而是讓外框DOM做模型主調(diào)度和消息總控調(diào)度,以方便及時(shí)調(diào)用和傳入?yún)?shù)。
審核編輯 黃宇
-
模型
+關(guān)注
關(guān)注
1文章
3462瀏覽量
49785 -
AIGC
+關(guān)注
關(guān)注
1文章
381瀏覽量
2054
發(fā)布評論請先 登錄
相關(guān)推薦
Linux內(nèi)核中系統(tǒng)調(diào)用詳解

AIGC入門及鴻蒙入門
#新年新氣象,大家新年快樂!#AIGC入門及鴻蒙入門
LabVIEw調(diào)用多個(gè)simulink模型
uCOS51 Proteus仿真調(diào)試任務(wù)切換時(shí)跑飛
請問UCOS任務(wù)切換調(diào)用OSTimeDlyHMSM延時(shí)函數(shù) 延時(shí)時(shí)間到了會(huì)立即返回嗎?
科技大廠競逐AIGC,中國的ChatGPT在哪?
異構(gòu)無線網(wǎng)絡(luò)聯(lián)合切換調(diào)度和資源分配算法

如何結(jié)合使用系統(tǒng)級(jí)和詳細(xì)模型來探索設(shè)計(jì)空間

AIGC是什么 AIGC有哪些應(yīng)用價(jià)值
Linux中的系統(tǒng)調(diào)用是怎樣實(shí)現(xiàn)

中軟國際解放號(hào)入選中國信通院《2023大模型和AIGC產(chǎn)業(yè)圖譜》
系統(tǒng)調(diào)用:用戶棧與內(nèi)核棧的切換(上)

評論