【技術(shù)實(shí)現(xiàn)步驟摘要】
本專利技術(shù)涉及孤獨(dú)癥兒童臨床干預(yù)領(lǐng)域，尤其是涉及一種基于大模型和vb-mapp的兒童孤獨(dú)癥社交訓(xùn)練干預(yù)系統(tǒng)。
技術(shù)介紹
1、孤獨(dú)癥譜系障礙是一種廣泛性的神經(jīng)發(fā)育障礙，其主要病癥有社交障礙和重復(fù)，刻板行為，同時(shí)可能存在情緒調(diào)節(jié)，語言非語言交流障礙等其他病癥。孤獨(dú)癥患者會(huì)存在生活無法自理，無法正常融入社會(huì)生活的問題，為家庭和社會(huì)造成較大的負(fù)擔(dān)。有報(bào)告顯示，在全球的適齡兒童中，孤獨(dú)癥的患病率高達(dá)1/59，且呈增長(zhǎng)趨勢(shì)。而及早的診斷和有效的干預(yù)治療，是可以在一定程度上改善孤獨(dú)癥兒童的語言、認(rèn)知能力以及行為習(xí)慣，所以如何進(jìn)行高效的孤獨(dú)癥診斷和干預(yù)成為了重點(diǎn)。
2、而由于醫(yī)療資源的不充分和不平衡，部分地區(qū)的干預(yù)資源非常有限，所以研究者們希望利用計(jì)算機(jī)技術(shù)來輔助專業(yè)干預(yù)師進(jìn)行干預(yù)或開發(fā)新的系統(tǒng)和范式來完成獨(dú)立干預(yù)，使得更多的孤獨(dú)癥兒童獲得干預(yù)支持。而當(dāng)前的主流研究通常以ar、機(jī)器人為載體，并通過人工設(shè)計(jì)的干預(yù)范式來引導(dǎo)孤獨(dú)癥兒童進(jìn)行交互，然后收集指標(biāo)進(jìn)行干預(yù)效果的評(píng)估。
3、如文獻(xiàn)"social?intervention?strategy?of?augmented?reality?combinedwith?theater-based?games?to?improve?the?performance?of?autistic?children?insymbolic?play?and?social?skills."以及文獻(xiàn)“effectiveness?of?a?robot-assistedpsychological?inte
4、但是當(dāng)前的方法缺乏了一定的專業(yè)性，范式方法的設(shè)計(jì)上沒有以臨床評(píng)估和干預(yù)的方法作為依據(jù)，干預(yù)形式上缺乏了針對(duì)不同主題被試的個(gè)性化內(nèi)容。
技術(shù)實(shí)現(xiàn)思路
1、本專利技術(shù)提供了一種基于大模型和vb-mapp的兒童孤獨(dú)癥社交訓(xùn)練干預(yù)系統(tǒng)，可以針對(duì)不同孤獨(dú)癥兒童，生成個(gè)性化的對(duì)話內(nèi)容，使得對(duì)話豐富度更高，更容易吸引兒童的注意力，提升干預(yù)效果。
2、一種基于大模型和vb-mapp的兒童孤獨(dú)癥社交訓(xùn)練干預(yù)系統(tǒng)，包括感知模塊、表現(xiàn)模塊和控制模塊；所述的感知模塊用于收集被試的信息，包括說話的內(nèi)容和音頻；所述的表現(xiàn)模塊用于根據(jù)被試的信息以及自身的配置，生成相應(yīng)的反饋內(nèi)容；所述的控制模塊用于控制整個(gè)系統(tǒng)的工作流程，完成同步和記錄；
3、所述的表現(xiàn)模塊基于vb-mapp范式構(gòu)建系統(tǒng)提示詞，并利用大模型根據(jù)系統(tǒng)提示詞進(jìn)行對(duì)話生成；所述的系統(tǒng)提示詞包括三部分，第一部分是被試的個(gè)人信息；第二部分是當(dāng)前大模型需要扮演的虛擬形象描述，包括角色說明和能力限制；第三部分是當(dāng)前對(duì)話主題的描述；
4、系統(tǒng)的干預(yù)流程分為準(zhǔn)備階段、干預(yù)階段和收集階段，具體如下：
5、準(zhǔn)備階段，輸入被試兒童的個(gè)人信息，并選擇虛擬形象后正式進(jìn)入干預(yù)階段；干預(yù)階段，表現(xiàn)模塊結(jié)合兒童的個(gè)人信息、大模型的虛擬形象以及當(dāng)前主題構(gòu)建好系統(tǒng)提示詞，輸入給大模型，使大模型在限定的主題下和孤獨(dú)癥兒童開始有限制的多輪對(duì)話干預(yù)；收集階段貫穿于整個(gè)干預(yù)階段，在每個(gè)主題的干預(yù)都結(jié)束后，系統(tǒng)利用控制模塊將感知模塊收集的近紅外、文本、音頻數(shù)據(jù)保存，用于評(píng)估兒童的表現(xiàn)和系統(tǒng)的有效性。
6、vb-mapp(verbal?behavior?milestones?assessment?and?placement?program)是一種廣泛使用的評(píng)估工具，根據(jù)被試的發(fā)展水平劃分項(xiàng)目和評(píng)估分?jǐn)?shù)并給出干預(yù)的指導(dǎo)意見。而輪流對(duì)話的形式就是vb-mapp所推薦的一種有效的干預(yù)形式，也是大模型所擅長(zhǎng)的任務(wù)形式之一，所以根據(jù)vb-mapp提供的指南和執(zhí)業(yè)治療師的建議，本專利技術(shù)設(shè)計(jì)了一個(gè)預(yù)定主題的交流范式。本專利技術(shù)定制了五個(gè)日常交流中常用的話題：食物、動(dòng)物、玩具、家庭和顏色。
7、對(duì)話過程中，問題的形式被限制為“誰”、“什么”、“哪里”三類問題，而“為什么”、“如何、”何時(shí)”這類形式的問題被排除，本專利技術(shù)考慮到前三種問題與具體的記憶形象相關(guān)，存在孤獨(dú)癥語言障礙的被試回答時(shí)相對(duì)容易；而“為什么、如何、何時(shí)”涉及到邏輯思維、抽象概括和時(shí)間感知能力，問題較為復(fù)雜，孤獨(dú)癥兒童的思考和回答意愿會(huì)下降，而起不到干預(yù)效果。
8、本專利技術(shù)中，大模型可采用chat-gpt或者其它大語言模型。
9、進(jìn)一步地，系統(tǒng)提示詞的第一部分中，被試的個(gè)人信息包含被試的年齡、性別、昵稱、偏好、興趣和最近的經(jīng)歷，根據(jù)這些個(gè)人信息來個(gè)性化對(duì)話干預(yù)主題內(nèi)容，從而提高兒童互動(dòng)的積極性。
10、干預(yù)階段，大模型在限定的主題下和孤獨(dú)癥兒童開始有限制的多輪對(duì)話干預(yù)，具體為：
11、表現(xiàn)模塊在和孤獨(dú)癥兒童打招呼后發(fā)問，然后根據(jù)兒童的響應(yīng)做出不同的反饋，兒童沒有回應(yīng)時(shí)，會(huì)輸入額外的提示詞，讓表現(xiàn)模塊鼓勵(lì)兒童開口說話，兒童開口說話時(shí)，則進(jìn)行贊揚(yáng)，然后開始新一輪的對(duì)話，直到預(yù)設(shè)的時(shí)間耗盡。
12、干預(yù)階段，在每輪對(duì)話開始前加入一個(gè)固定提示詞，用于強(qiáng)化基于vb-mapp范式設(shè)計(jì)有限制的對(duì)話生成。
13、干預(yù)階段，在對(duì)話時(shí)間耗盡后會(huì)有用于結(jié)束的結(jié)束提示詞輸入，讓表現(xiàn)模塊與孤獨(dú)癥兒童進(jìn)行道別。
14、干預(yù)階段，為了處理孤獨(dú)癥兒童不回應(yīng)的問題，系統(tǒng)通過聲音檢測(cè)的方法來判斷其是否發(fā)聲，如果超過十秒的靜默，則會(huì)觸發(fā)預(yù)先設(shè)置好的鼓勵(lì)語音，鼓勵(lì)兒童開口說話。
15、收集階段，對(duì)話干預(yù)的文本和音頻由系統(tǒng)自動(dòng)保存，近紅外信號(hào)由8通道nirsmart系統(tǒng)進(jìn)行采集，時(shí)間分辨率為0.1秒，電極位于前額皮質(zhì)。
16、與現(xiàn)有技術(shù)相比，本專利技術(shù)具有以下有益效果：
17、本專利技術(shù)基于當(dāng)前臨床孤獨(dú)癥干預(yù)評(píng)估方法之一的vb-mapp來進(jìn)行整個(gè)系統(tǒng)范式和提示的設(shè)計(jì)，并且利用大模型作為系統(tǒng)的對(duì)話生成中樞，從而提高系統(tǒng)在干預(yù)階段的對(duì)話質(zhì)量。所提出的系統(tǒng)對(duì)話能力強(qiáng)，并支持個(gè)性化對(duì)話內(nèi)容定制，并通過多模態(tài)的臨床數(shù)據(jù)分析，證明了該系統(tǒng)對(duì)話干預(yù)的有效性，可以一定程度上緩解孤獨(dú)癥兒童干預(yù)資源稀缺的問題。
本文檔來自技高網(wǎng)...【技術(shù)保護(hù)點(diǎn)】
1.一種基于大模型和VB-MAPP的兒童孤獨(dú)癥社交訓(xùn)練干預(yù)系統(tǒng)，其特征在于，包括感知模塊、表現(xiàn)模塊和控制模塊；所述的感知模塊用于收集被試的信息，包括說話的內(nèi)容和音頻；所述的表現(xiàn)模塊用于根據(jù)被試的信息以及自身的配置，生成相應(yīng)的反饋內(nèi)容；所述的控制模塊用于控制整個(gè)系統(tǒng)的工作流程，完成同步和記錄；
2.根據(jù)權(quán)利要求1所述的基于大模型和VB-MAPP的兒童孤獨(dú)癥社交訓(xùn)練干預(yù)系統(tǒng)，其特征在于，系統(tǒng)提示詞的第一部分中，被試的個(gè)人信息包含被試的年齡、性別、昵稱、偏好、興趣和最近的經(jīng)歷，根據(jù)這些個(gè)人信息來個(gè)性化對(duì)話干預(yù)主題內(nèi)容，從而提高兒童互動(dòng)的積極性。
3.根據(jù)權(quán)利要求1所述的基于大模型和VB-MAPP的兒童孤獨(dú)癥社交訓(xùn)練干預(yù)系統(tǒng)，其特征在于，系統(tǒng)提示詞的第三部分中，主題包括食物、動(dòng)物、玩具、家庭和顏色。
4.根據(jù)權(quán)利要求1所述的基于大模型和VB-MAPP的兒童孤獨(dú)癥社交訓(xùn)練干預(yù)系統(tǒng)，其特征在于，干預(yù)階段，大模型在限定的主題下和孤獨(dú)癥兒童開始有限制的多輪對(duì)話干預(yù)，具體為：
5.根據(jù)權(quán)利要求1所述的基于大模型和VB-MAPP的兒童孤獨(dú)癥社交訓(xùn)練干預(yù)
6.根據(jù)權(quán)利要求5所述的基于大模型和VB-MAPP的兒童孤獨(dú)癥社交訓(xùn)練干預(yù)系統(tǒng)，其特征在于，干預(yù)階段，在對(duì)話時(shí)間耗盡后會(huì)有用于結(jié)束的結(jié)束提示詞輸入，讓表現(xiàn)模塊與孤獨(dú)癥兒童進(jìn)行道別。
7.根據(jù)權(quán)利要求1所述的基于大模型和VB-MAPP的兒童孤獨(dú)癥社交訓(xùn)練干預(yù)系統(tǒng)，其特征在于，干預(yù)階段，為了處理孤獨(dú)癥兒童不回應(yīng)的問題，系統(tǒng)通過聲音檢測(cè)的方法來判斷其是否發(fā)聲，如果超過十秒的靜默，則會(huì)觸發(fā)預(yù)先設(shè)置好的鼓勵(lì)語音，鼓勵(lì)兒童開口說話。
8.根據(jù)權(quán)利要求1所述的基于大模型和VB-MAPP的兒童孤獨(dú)癥社交訓(xùn)練干預(yù)系統(tǒng)，其特征在于，收集階段，對(duì)話干預(yù)的文本和音頻由系統(tǒng)自動(dòng)保存，近紅外信號(hào)由8通道NirSmart系統(tǒng)進(jìn)行采集，時(shí)間分辨率為0.1秒，電極位于前額皮質(zhì)。
...【技術(shù)特征摘要】
1.一種基于大模型和vb-mapp的兒童孤獨(dú)癥社交訓(xùn)練干預(yù)系統(tǒng)，其特征在于，包括感知模塊、表現(xiàn)模塊和控制模塊；所述的感知模塊用于收集被試的信息，包括說話的內(nèi)容和音頻；所述的表現(xiàn)模塊用于根據(jù)被試的信息以及自身的配置，生成相應(yīng)的反饋內(nèi)容；所述的控制模塊用于控制整個(gè)系統(tǒng)的工作流程，完成同步和記錄；
2.根據(jù)權(quán)利要求1所述的基于大模型和vb-mapp的兒童孤獨(dú)癥社交訓(xùn)練干預(yù)系統(tǒng)，其特征在于，系統(tǒng)提示詞的第一部分中，被試的個(gè)人信息包含被試的年齡、性別、昵稱、偏好、興趣和最近的經(jīng)歷，根據(jù)這些個(gè)人信息來個(gè)性化對(duì)話干預(yù)主題內(nèi)容，從而提高兒童互動(dòng)的積極性。
3.根據(jù)權(quán)利要求1所述的基于大模型和vb-mapp的兒童孤獨(dú)癥社交訓(xùn)練干預(yù)系統(tǒng)，其特征在于，系統(tǒng)提示詞的第三部分中，主題包括食物、動(dòng)物、玩具、家庭和顏色。
4.根據(jù)權(quán)利要求1所述的基于大模型和vb-mapp的兒童孤獨(dú)癥社交訓(xùn)練干預(yù)系統(tǒng)，其特征在于，干預(yù)階段，大模型在限定的主題下和孤獨(dú)癥兒童開始有限制的多輪對(duì)話干預(yù)，具...
【專利技術(shù)屬性】
技術(shù)研發(fā)人員：姚林，賴述忠，鄧承昀，王躍明，
申請(qǐng)(專利權(quán))人：浙江大學(xué)，
類型：發(fā)明
國別省市：
還沒有人留言評(píng)論。發(fā)表了對(duì)其他瀏覽者有用的留言會(huì)獲得科技券。