依托中科匯聯(lián)自主研發(fā)的畫捕和動捕系統(tǒng),快速采集校園形象人物,完成高逼真數(shù)字化重建。在設(shè)計上,提供3D超寫實(shí)、3D寫實(shí)、3D半寫實(shí)、2D真人、卡通五種風(fēng)格的數(shù)智助教形象,滿足多樣化教學(xué)場景需求。同時,支持深度定制化,從面部表情到肢體動作,全方位打造貼合學(xué)校特色的專屬數(shù)字人助教形象。

??在教育數(shù)字化轉(zhuǎn)型的浪潮中,中科匯聯(lián)智慧數(shù)字人助教解決方案深度融合大模型與智能體技術(shù),致力于打造個性化、高效能的教與學(xué)新生態(tài)。通過大模型強(qiáng)大的自然語言處理與知識理解能力,結(jié)合智能體的自主決策和靈活交互特性,數(shù)字人助教不僅能實(shí)現(xiàn)教學(xué)過程中的流暢音視頻交互,還能精準(zhǔn)匹配每個學(xué)生的學(xué)習(xí)節(jié)奏,提供定制化的教學(xué)進(jìn)度規(guī)劃,全面提升教育教學(xué)的效率與質(zhì)量。
??在課堂場景中,數(shù)字人助教作為老師的得力助手,具備多元功能。它可以通過聲音控制與實(shí)體按鍵相結(jié)合的方式,輕松管理教室內(nèi)的設(shè)備開關(guān);利用掃碼考勤和視頻分析技術(shù),準(zhǔn)確完成學(xué)生考勤工作。面對課堂紀(jì)律問題,如學(xué)生睡覺、玩手機(jī)等情況,數(shù)字人助教能夠借助先進(jìn)的學(xué)生身份識別技術(shù),及時發(fā)現(xiàn)并匯總問題,悄無聲息地反饋給當(dāng)事學(xué)生,避免打斷老師和其他同學(xué)的思路,維護(hù)課堂的良好秩序。


1
教學(xué)助教形象
依托中科匯聯(lián)自主研發(fā)的畫捕和動捕系統(tǒng),快速采集校園形象人物,完成高逼真數(shù)字化重建。在設(shè)計上,提供3D超寫實(shí)、3D寫實(shí)、3D半寫實(shí)、2D真人、卡通五種風(fēng)格的數(shù)智助教形象,滿足多樣化教學(xué)場景需求。同時,支持深度定制化,從面部表情到肢體動作,全方位打造貼合學(xué)校特色的專屬數(shù)字人助教形象。

2
純熟的AI引擎
數(shù)字人助教的核心是大模型與虛擬現(xiàn)實(shí)技術(shù)的深度融合。借助先進(jìn)的ASR語音識別技術(shù),精準(zhǔn)識別師生的語音指令;NLP語義分析與理解技術(shù),深入剖析語言背后的意圖;TTS語音合成技術(shù),輸出自然流暢的語音回復(fù)。再結(jié)合AIMeta數(shù)字人交互系統(tǒng),構(gòu)建起虛擬人大腦。大模型的引入,使其擁有更廣泛的知識儲備和更強(qiáng)大的知識推理能力,能夠在知識圖譜的輔助下,為學(xué)生提供更具深度和廣度的個性化教學(xué)服務(wù)。

3
智能知識圖譜
中科匯聯(lián)精心打造的專業(yè)知識圖譜庫,如同一個龐大的知識中樞。它能夠?qū)φn堂錄制的高清視音頻進(jìn)行精準(zhǔn)切割,轉(zhuǎn)化為3-5分鐘的知識點(diǎn)微課。學(xué)生可以通過知識點(diǎn)搜索、筆記搜索、手機(jī)拍照搜索、時間模糊搜索等多種方式,快速定位所需學(xué)習(xí)內(nèi)容。大模型與知識圖譜的協(xié)同工作,進(jìn)一步優(yōu)化搜索結(jié)果,提供更精準(zhǔn)、更具關(guān)聯(lián)性的知識推薦,有效提升教學(xué)質(zhì)量和學(xué)習(xí)效率。

4
教學(xué)場景深度學(xué)習(xí)
數(shù)字人助教運(yùn)用臉關(guān)鍵點(diǎn)檢測、人臉特征提取等技術(shù),結(jié)合教育教學(xué)音視頻記錄等多模態(tài)信息,借助大模型的強(qiáng)大學(xué)習(xí)能力,在AI深度學(xué)習(xí)神經(jīng)網(wǎng)絡(luò)的基礎(chǔ)上,融合圖像識別、語音識別、自然語言處理技術(shù)。經(jīng)過海量數(shù)據(jù)的建模訓(xùn)練和持續(xù)的模型迭代,不斷優(yōu)化教學(xué)場景理解和交互策略,充分發(fā)揮教學(xué)助教的價值,為師生提供更優(yōu)質(zhì)的教學(xué)支持。

5
沉浸式交互體驗(yàn)
借助大模型的語言生成能力和智能知識庫,數(shù)字人助教將教學(xué)場景與話術(shù)動作完美融合。在對話過程中,它思維敏捷、邏輯嚴(yán)謹(jǐn)、對話流暢,能夠根據(jù)師生的反饋實(shí)時調(diào)整交互策略,營造出身臨其境的沉浸式交互體驗(yàn),增強(qiáng)師生與數(shù)字人助教之間的互動粘性。

6
多終端展現(xiàn)
為滿足不同教學(xué)場景的使用需求,數(shù)字人助教提供標(biāo)準(zhǔn)化API接口,支持與第三方平臺無縫對接。無論是教學(xué)大屏、電腦,還是手機(jī)、平板等終端設(shè)備,都能自動適配,確保師生在任何場景下都能便捷地使用數(shù)字人助教服務(wù)。
依托中科匯聯(lián)自主研發(fā)的畫捕和動捕系統(tǒng),快速采集校園形象人物,完成高逼真數(shù)字化重建。在設(shè)計上,提供3D超寫實(shí)、3D寫實(shí)、3D半寫實(shí)、2D真人、卡通五種風(fēng)格的數(shù)智助教形象,滿足多樣化教學(xué)場景需求。同時,支持深度定制化,從面部表情到肢體動作,全方位打造貼合學(xué)校特色的專屬數(shù)字人助教形象。

特色肖像
支持多種豐富的人臉表情,同時擁有2D/3D虛擬形象可供選擇??筛鶕?jù)不同學(xué)校的文化特色、教學(xué)風(fēng)格以及學(xué)生喜好,定制獨(dú)一無二的真人形象,增強(qiáng)學(xué)生對數(shù)字人助教的認(rèn)同感和親近感。

特色服飾
教學(xué)數(shù)字人助教提供全方位的個性化虛擬形象定制服務(wù),包括背景、形象配飾、服裝等。通過定制符合教學(xué)主題和場景的形象元素,營造更加貼合教學(xué)內(nèi)容的學(xué)習(xí)氛圍,提升學(xué)生的學(xué)習(xí)體驗(yàn)。

學(xué)情分析
通過無感知的數(shù)據(jù)采集,每隔5分鐘抓拍學(xué)生考勤、表情和行為數(shù)據(jù),實(shí)時統(tǒng)計抬頭率。同時,識別教師的教學(xué)行為,如講課、板書、走動等,生成講臺占位率數(shù)據(jù)。利用大模型的數(shù)據(jù)分析能力,深度挖掘數(shù)據(jù)價值,為教學(xué)改進(jìn)提供有力依據(jù)。

智慧服務(wù)
在與師生互動過程中,數(shù)字人助教借助意圖識別引擎,精準(zhǔn)拆解和理解師生意圖。依托大模型的知識儲備和語言生成能力,針對各種問題提供智能、準(zhǔn)確的應(yīng)答,為教學(xué)過程提供及時有效的支持。


