白丝美女被狂躁免费视频网站,500av导航大全精品,yw.193.cnc爆乳尤物未满,97se亚洲综合色区,аⅴ天堂中文在线网官网

首頁 / 專利庫 / 數(shù)學(xué)與統(tǒng)計 / 濾波反投影 / 一種具有偏離度自動反饋數(shù)據(jù)閉環(huán)糾偏控制的專業(yè)技能實訓(xùn)輔助教學(xué)系統(tǒng)及輔助教學(xué)方法

一種具有偏離度自動反饋數(shù)據(jù)閉環(huán)糾偏控制的專業(yè)技能實訓(xùn)輔助教學(xué)系統(tǒng)及輔助教學(xué)方法

閱讀:740發(fā)布:2022-02-28

專利匯可以提供一種具有偏離度自動反饋數(shù)據(jù)閉環(huán)糾偏控制的專業(yè)技能實訓(xùn)輔助教學(xué)系統(tǒng)及輔助教學(xué)方法專利檢索,專利查詢,專利分析的服務(wù)。并且本 發(fā)明 公開了一種具有偏離度自動反饋數(shù)據(jù)閉環(huán)糾偏控制的專業(yè)技能實訓(xùn)輔助教學(xué)系統(tǒng)及輔助教學(xué)方法。該系統(tǒng)包括智能化實訓(xùn)教材、技能訓(xùn)練專用設(shè)施、現(xiàn)場信息采集設(shè)備、系統(tǒng) 服務(wù)器 、輔助教學(xué)終端。該方法以智能化實訓(xùn)教材為導(dǎo)航,通過掃描或觸摸教材中不同的ID標識,獲得相關(guān)科目訓(xùn)練的資源或確定一個訓(xùn)練科目的操作 跟蹤 流程;該方法將技能訓(xùn)練過程細分為可識別的跟蹤 數(shù)據(jù)采集 點,通過對學(xué)習者和示范者的細分操作數(shù)據(jù)的相似度比較,產(chǎn)生偏離度反饋信息;實現(xiàn)以ID標識為紐帶的“科目訓(xùn)練開始—訓(xùn)練過程數(shù)據(jù)采集—樣板數(shù)據(jù)相似度比較—訓(xùn)練過程跟蹤評估—偏離度糾偏建議推送—ID關(guān)聯(lián)學(xué)習觀摩素材獲取—科目訓(xùn)練再開始”的數(shù)據(jù)閉環(huán)糾偏控制過程。,下面是一種具有偏離度自動反饋數(shù)據(jù)閉環(huán)糾偏控制的專業(yè)技能實訓(xùn)輔助教學(xué)系統(tǒng)及輔助教學(xué)方法專利的具體信息內(nèi)容。

1.一種具有偏離度自動反饋數(shù)據(jù)閉環(huán)糾偏控制的專業(yè)技能實訓(xùn)輔助教學(xué)系統(tǒng),其特征
在于,
該專業(yè)技能實訓(xùn)輔助教學(xué)系統(tǒng)包括:智能化實訓(xùn)教材、技能訓(xùn)練專用設(shè)施、現(xiàn)場信息采集設(shè)備、系統(tǒng)服務(wù)器、輔助教學(xué)終端;系統(tǒng)服務(wù)器包括現(xiàn)場數(shù)據(jù)服務(wù)器、端服務(wù)器;輔助教學(xué)終端包括現(xiàn)場智能教學(xué)終端、智能學(xué)習終端;
技能訓(xùn)練專用設(shè)施設(shè)置于實訓(xùn)教學(xué)現(xiàn)場,用于實訓(xùn)操作;現(xiàn)場信息采集設(shè)備設(shè)置于技
能訓(xùn)練專用設(shè)施上或附近,用于采集現(xiàn)場實訓(xùn)操作數(shù)據(jù)信息,包括圍繞技能訓(xùn)練專用設(shè)施進行操作訓(xùn)練時的操作信息和思維判斷信息;現(xiàn)場數(shù)據(jù)服務(wù)器附帶前置采集終端,與現(xiàn)場信息采集設(shè)備連接,裝有與現(xiàn)場信息采集設(shè)備配套的專業(yè)數(shù)據(jù)采集卡和配套的數(shù)據(jù)采集、轉(zhuǎn)換軟件;現(xiàn)場數(shù)據(jù)服務(wù)器用于與現(xiàn)場信息采集設(shè)備之間的交互響應(yīng),以及對現(xiàn)場采集的數(shù)據(jù)的預(yù)處理和轉(zhuǎn)換;
智能學(xué)習終端上安裝有供學(xué)習者學(xué)習的應(yīng)用軟件,即智能學(xué)習終端APP;現(xiàn)場智能教學(xué)終端上,安裝有供專業(yè)教師教學(xué)的應(yīng)用軟件,即智能教學(xué)終端APP;智能學(xué)習終端APP通過wifi無線網(wǎng)絡(luò)或者Internet與現(xiàn)場數(shù)據(jù)服務(wù)器、云端服務(wù)器連接;現(xiàn)場智能教學(xué)終端通過網(wǎng)線與現(xiàn)場數(shù)據(jù)服務(wù)器連接,并且通過Internet與云端服務(wù)器連接;
智能化實訓(xùn)教材按照針對訓(xùn)練科目的訓(xùn)練路線導(dǎo)航圖設(shè)計,是一個或多個技能實訓(xùn)科
目的集合;它將每一個技能實訓(xùn)科目內(nèi)容作為一個獨立的章節(jié),每一個章節(jié),具有相同的架構(gòu)設(shè)計;架構(gòu)中包含了以下幾個部分的內(nèi)容:1)、專業(yè)知識點、技能點基礎(chǔ)學(xué)習準備;2)、技能實訓(xùn)科目專業(yè)環(huán)境使用方法學(xué)習準備;3)、技能實訓(xùn)科目訓(xùn)練要求與評價標準;4)、技能實訓(xùn)科目訓(xùn)練步驟學(xué)習與示范;5)、技能實訓(xùn)科目訓(xùn)練跟蹤評估反饋建議;各部分的內(nèi)容均按照樹狀索引結(jié)構(gòu)編排,每一條索引設(shè)置有一個隱形的和唯一性的ID標識即隱形鏈接地址;各ID標識均與預(yù)存在云端服務(wù)器中的相關(guān)實訓(xùn)教學(xué)資源信息相對應(yīng);
云端服務(wù)器設(shè)置于實訓(xùn)教學(xué)現(xiàn)場或者通過租用的形式設(shè)置于運營商機房;云端服務(wù)器
中預(yù)存有實訓(xùn)教學(xué)資源信息,這些實訓(xùn)教學(xué)資源信息具有與智能化實訓(xùn)教材相對應(yīng)的資源架構(gòu)和ID標識鏈接地址;云端服務(wù)器,用于實現(xiàn)與智能化實訓(xùn)教材中的ID標識即隱形鏈接地址的交互響應(yīng),以及對現(xiàn)場采集上傳的數(shù)據(jù)進行深度識別處理、比較和跟蹤評估,并且根據(jù)評估結(jié)果進行信息反饋,提供針對性的學(xué)習資源推送服務(wù);
智能學(xué)習終端APP或智能教學(xué)終端APP,通過掃描或觸摸屏幕中的智能化實訓(xùn)教材中不
同的ID標識,向系統(tǒng)服務(wù)器發(fā)出數(shù)據(jù)請求,可以獲得預(yù)先上傳到云端服務(wù)器中的與專業(yè)教學(xué)設(shè)計中相關(guān)的實訓(xùn)教學(xué)資源信息,對訓(xùn)練科目各部分的具體內(nèi)容進行學(xué)習,或者指定一個訓(xùn)練科目操作的跟蹤流程;在系統(tǒng)服務(wù)器完成對學(xué)習者的訓(xùn)練操作過程的數(shù)據(jù)采集、處理、比較和跟蹤評估之后,所述終端APP可以接收到從云端服務(wù)器發(fā)出的偏離度反饋信息、評估結(jié)果和糾偏學(xué)習建議,通過選擇建議中的ID標識,即可獲得針對性的學(xué)習資源推送服務(wù);
該輔助教學(xué)系統(tǒng)以智能化實訓(xùn)教材中設(shè)計的科目訓(xùn)練路線導(dǎo)航圖為導(dǎo)航;自動學(xué)習示
范者的技能訓(xùn)練操作過程,生成比較評估樣板數(shù)據(jù)庫;自動跟蹤學(xué)習者的技能訓(xùn)練操作過程數(shù)據(jù),與比較評估樣板數(shù)據(jù)庫中的數(shù)據(jù)進行比較;在系統(tǒng)服務(wù)器完成對現(xiàn)場采集數(shù)據(jù)的識別、處理、比較和跟蹤評估后,產(chǎn)生偏離度評估結(jié)果反饋信息和糾偏補充學(xué)習建議;學(xué)習者通過ID標識關(guān)聯(lián)獲取學(xué)習觀摩素材,選擇適用的內(nèi)容進行補充學(xué)習;之后,科目訓(xùn)練再次開始;由此實現(xiàn)“科目訓(xùn)練開始—訓(xùn)練過程數(shù)據(jù)采集—樣板數(shù)據(jù)相似度比較—訓(xùn)練過程跟蹤評估—偏離度糾偏建議推送—ID標識關(guān)聯(lián)學(xué)習觀摩素材獲取—科目訓(xùn)練再開始”的循環(huán);構(gòu)成技能科目訓(xùn)練中依據(jù)對現(xiàn)場操作數(shù)據(jù)采集的跟蹤評估,實現(xiàn)以ID標識為紐帶的數(shù)據(jù)閉環(huán)糾偏控制。
2.如權(quán)利要求1所述的具有偏離度自動反饋數(shù)據(jù)閉環(huán)糾偏控制的專業(yè)技能實訓(xùn)輔助教
學(xué)系統(tǒng),其特征在于,
智能化實訓(xùn)教材的每一個章節(jié)即為一個技能訓(xùn)練科目,其架構(gòu)至少包括“實訓(xùn)科目介
紹”、“實訓(xùn)環(huán)境介紹”、“專業(yè)基礎(chǔ)知識”和“虛擬仿真實訓(xùn)環(huán)境”四個部分;“實訓(xùn)科目介紹”部分分成“實訓(xùn)科目內(nèi)容介紹”、“實訓(xùn)科目考核說明”、“實訓(xùn)操作步驟介紹”三個總目,每個總目分成若干分目,分目下面又分成若干支目;“實訓(xùn)環(huán)境介紹”部分分成“技能訓(xùn)練環(huán)境介紹”、“技能實訓(xùn)流程介紹”、“訓(xùn)練過程跟蹤評估”、“技能訓(xùn)練管理手冊”四個總目,每個總目下面分成若干分目,分目下面又分成若干支目;“專業(yè)基礎(chǔ)知識”部分分成“專業(yè)基礎(chǔ)知識介紹”、“專業(yè)課程資源素材”兩個總目,每個總目又若干分目,每個分目又分成若干支目;“虛擬仿真實訓(xùn)環(huán)境”部分包含“虛擬仿真實訓(xùn)平臺”一個總目,總目下面分成若干分目,分目下面又分成若干支目;每個總目、分目、支目、條目都有一個索引框,每一個索引框都對應(yīng)一個ID標識;各個ID標識與系統(tǒng)服務(wù)器內(nèi)的實訓(xùn)教學(xué)資源的存儲地址相關(guān)聯(lián)。
3.如權(quán)利要求1或2所述的具有偏離度自動反饋數(shù)據(jù)閉環(huán)糾偏控制的專業(yè)技能實訓(xùn)輔
助教學(xué)系統(tǒng),其特征在于,
智能化實訓(xùn)教材以紙質(zhì)印刷的教材和在智能教學(xué)終端包括大屏幕觸摸一體機上顯示
電子文檔兩種形式存在;電子文檔用于滿足專業(yè)教師現(xiàn)場教學(xué)應(yīng)用需求,紙質(zhì)印刷的教材用于滿足學(xué)生在其他區(qū)域位置的學(xué)習需求;
智能學(xué)習終端APP通過掃描紙質(zhì)印刷的智能化實訓(xùn)教材中預(yù)設(shè)的ID標識,可以與系統(tǒng)
服務(wù)器進行交互,獲得相關(guān)的教學(xué)資源、科目訓(xùn)練偏離度評估反饋信息和糾偏建議;
智能教學(xué)終端APP通過掃描紙質(zhì)印刷的或屏幕觸摸在智能教學(xué)終端上顯示的智能化實
訓(xùn)教材中預(yù)設(shè)的ID標識,可以與系統(tǒng)服務(wù)器進行交互,獲得相關(guān)的教學(xué)資源和反饋信息,包括科目訓(xùn)練評估反饋信息、糾偏建議和科目訓(xùn)練統(tǒng)計信息。
4.如權(quán)利要求1或2所述的具有偏離度自動反饋數(shù)據(jù)閉環(huán)糾偏控制的專業(yè)技能實訓(xùn)輔
助教學(xué)系統(tǒng),其特征在于,
現(xiàn)場信息采集設(shè)備包括全景攝像機、智能傳感器矩陣、RGBD傳感器矩陣、音頻采集矩
陣;全景攝像機固定安裝在技能訓(xùn)練專用設(shè)施的上方即實訓(xùn)室頂端;智能傳感器矩陣固定安裝在技能訓(xùn)練專用設(shè)施附近;音頻采集矩陣采用三種安裝形式:實訓(xùn)室頂端固定安裝、技能訓(xùn)練專用設(shè)施上安裝、與RGBD傳感器矩陣設(shè)備一致移動安裝;
智能傳感器矩陣包括紅外傳感器、觸摸傳感器、光敏傳感器、體感傳感器、聲波傳感器、數(shù)據(jù)手套各種不同類型的傳感器;RGBD傳感器矩陣包括多個RGB攝像機和深度攝像機,能夠從不同的度捕捉到操作者的動作信息和骨骼信息,能夠產(chǎn)生滿足精度要求的操作者的移動方向矢量信息和體態(tài)動作信息集合;音頻采集矩陣設(shè)備包括定向話筒和高靈敏拾音器話筒。
5.如權(quán)利要求1或2所述的具有偏離度自動反饋數(shù)據(jù)閉環(huán)糾偏控制的專業(yè)技能實訓(xùn)輔
助教學(xué)系統(tǒng),其特征在于,現(xiàn)場數(shù)據(jù)服務(wù)器包括順序連接的以下功能模
1)采集數(shù)據(jù)接口模塊,用于完成與現(xiàn)場信息采集設(shè)備的數(shù)據(jù)輸出的接口功能;
2)現(xiàn)場數(shù)據(jù)信息預(yù)處理模塊,用于根據(jù)統(tǒng)一的時間軸標志,完成該時間點之后的數(shù)據(jù)
提取功能;這樣的數(shù)據(jù)包括視頻關(guān)鍵、采樣圖片、骨骼信號、音頻信號、矢量信號、相對位置信號、模擬信號量、開關(guān)信號狀態(tài)值;數(shù)據(jù)提取時通過平滑處理消除由于干擾的原因誤讀;
3)數(shù)據(jù)信息壓縮傳輸模塊,用于將預(yù)處理之后的數(shù)據(jù)信號,經(jīng)過壓縮和標定后形成帶
有采集標志的數(shù)據(jù)包;完成現(xiàn)場數(shù)據(jù)服務(wù)器與智能學(xué)習終端、智能教學(xué)終端、云端服務(wù)器之間的數(shù)據(jù)交換功能;
其中,采集數(shù)據(jù)接口模塊分三種:
第一種采集數(shù)據(jù)接口模塊,用于完成與現(xiàn)場信息采集設(shè)備的自帶采集數(shù)據(jù)配套硬、軟
件的采集設(shè)備的數(shù)據(jù)輸出的接口功能;
第二種采集數(shù)據(jù)接口模塊,用于完成與現(xiàn)場信息采集設(shè)備的專業(yè)數(shù)據(jù)采集卡配套的數(shù)
據(jù)輸出軟件的接口功能;
第三種采集數(shù)據(jù)接口模塊,用于完成與現(xiàn)場信息采集設(shè)備的音視頻信號采集卡配套的
數(shù)據(jù)輸出軟件的接口功能。
6.如權(quán)利要求1或2所述的具有偏離度自動反饋數(shù)據(jù)閉環(huán)糾偏控制的專業(yè)技能實訓(xùn)輔
助教學(xué)系統(tǒng),其特征在于,
云端服務(wù)器包括依次連接的以下功能模塊:
1)人工智能識別模塊:對現(xiàn)場數(shù)據(jù)服務(wù)器上傳的過程采集信號進行識別,包括移動軌
跡、體態(tài)、體感、骨骼、語音、圖像、表情、交互、檢測圖像、面部矢量、肢體動作和專業(yè)設(shè)施變位數(shù)據(jù)信息;
2)相似度比較模塊:對現(xiàn)場數(shù)據(jù)服務(wù)器上傳的訓(xùn)練過程采集的各技能點屬性關(guān)注點數(shù)
據(jù)進行識別,并且與對應(yīng)的樣板數(shù)據(jù)進行相似度比較;這種比較是在同一個時間軸標志下,針對預(yù)定的技能點區(qū)域內(nèi)的信息評價結(jié)果進行的;進行相似度比較的方法包括:對各技能點區(qū)域內(nèi)采集的數(shù)據(jù)按“一次特征改進雷達圖”評價方法進行評價;對科目訓(xùn)練全流程中各個技能點評價結(jié)果按“二次特征改進雷達圖”評價方法進行結(jié)果性評價;
3)技能點偏離度評價模塊:完成以技能點為依據(jù)的評價結(jié)果與樣板數(shù)據(jù)的偏離度的計
算,即采用相對誤差計算公式進行偏離度計算即進行偏離度評價,獲得對各技能點操作的偏離度評價結(jié)果;通常是針對各關(guān)鍵技能點的偏離度進行評價,科目訓(xùn)練需要時也可針對一般技能點的偏離度進行評價;
4)、科目訓(xùn)練全流程偏離度評價模塊:完成以科目訓(xùn)練全流程為依據(jù)的評價結(jié)果與樣
板數(shù)據(jù)的偏離度的計算,即采用相對誤差計算公式進行偏離度計算即進行偏離度評價,獲得對科目訓(xùn)練全流程操作的偏離度評價結(jié)果;
5)、自動反饋與糾偏建議形成及輸出模塊
根據(jù)技能點偏離度評價模塊的輸出結(jié)果,產(chǎn)生以各技能點操作的偏離度評價結(jié)果為依
據(jù)的偏離度自動反饋信息及補充學(xué)習糾偏建議;根據(jù)科目訓(xùn)練全流程偏離度評價模塊的輸出結(jié)果,產(chǎn)生以科目訓(xùn)練全流程偏離度評價結(jié)果為依據(jù)的科目訓(xùn)練全流程綜合評價成績及反饋信息;該模塊是構(gòu)成科目訓(xùn)練中依據(jù)對操作數(shù)據(jù)的采集跟蹤,實現(xiàn)以ID標識為紐帶的數(shù)據(jù)閉環(huán)糾偏控制過程的主要流轉(zhuǎn)數(shù)據(jù)生成模塊;
云端服務(wù)器還包括依次連接的以下功能模塊:
1)用戶信息驗證管理模塊:實現(xiàn)用戶注冊、登錄、信息采集和運行中的隨機隱形用戶信息驗證功能;
2)ID掃描識別通信響應(yīng)模塊:完成對智能學(xué)習終端、智能教學(xué)終端發(fā)出的用戶數(shù)據(jù)請
求指令的確認和響應(yīng);完成對現(xiàn)場數(shù)據(jù)服務(wù)器發(fā)出的實時交換和靜默推送數(shù)據(jù)交換形式的確認和響應(yīng);對發(fā)送到智能學(xué)習終端上的資源信息,進行數(shù)據(jù)包壓縮和像素降低處理;
3)實訓(xùn)教學(xué)資源管理模塊:用于對與智能化實訓(xùn)教材設(shè)計的學(xué)習路線圖中的ID標識對
應(yīng)的資源信息的存放地址和資源內(nèi)容的維護。
7.如權(quán)利要求1或2所述的具有偏離度自動反饋數(shù)據(jù)閉環(huán)糾偏控制的專業(yè)技能實訓(xùn)輔
助教學(xué)系統(tǒng),其特征在于,
所述的現(xiàn)場智能教學(xué)終端包括一體化LED顯示終端、教學(xué)電腦、筆記本電腦、IPAD;所述的一體化LED顯示終端包括大屏幕觸摸屏電腦一體機;所述的智能學(xué)習終端包括智能手機、IPAD、筆記本電腦、個人電腦;所述的專業(yè)技能實訓(xùn)輔助教學(xué)系統(tǒng)還包括智慧教室信息化輔助設(shè)備,其與現(xiàn)場智能教學(xué)終端連接,或直接與現(xiàn)場數(shù)據(jù)服務(wù)器連接;所述的智慧教室信息化輔助設(shè)備包括實訓(xùn)現(xiàn)場內(nèi)常規(guī)的投影儀系統(tǒng)、音響系統(tǒng)和錄播系統(tǒng);所述的現(xiàn)場數(shù)據(jù)服務(wù)器附帶的前置采集終端包括工控計算機、個人電腦。
8.如權(quán)利要求1或2所述的具有偏離度自動反饋數(shù)據(jù)閉環(huán)糾偏控制的專業(yè)技能實訓(xùn)輔
助教學(xué)系統(tǒng),其特征在于,
智能學(xué)習終端APP包括相互連接的智能用戶注冊管理模塊、ID掃描識別通信模塊;還包括分別與ID標識掃描識別通信模塊連接的推薦資源交互學(xué)習模塊、虛擬仿真簡易練習模塊、觀摩資源點播學(xué)習模塊、教學(xué)課程點播學(xué)習模塊、學(xué)習過程信息記錄模塊、科目訓(xùn)練評估信息模塊,以上各模塊的用戶操作信息記錄采用非連續(xù)采集的形式,經(jīng)數(shù)據(jù)處理之后,以數(shù)據(jù)包形式發(fā)送到系統(tǒng)服務(wù)器中;此外還包括與以上各模塊連接的用戶信息隱性監(jiān)督模塊;
智能用戶注冊管理模塊:通過人工智能手段采集用戶信息,建立系統(tǒng)中的個人賬戶;與專業(yè)實訓(xùn)教學(xué)過程相關(guān)的歷史記錄數(shù)據(jù)將被保存在個人賬戶所對應(yīng)的區(qū)域之中;
ID標識掃描識別通信模塊:用于調(diào)用智能學(xué)習終端中的掃描框,來掃描紙質(zhì)印刷的智
能化實訓(xùn)教材中設(shè)定的ID標識,向云端服務(wù)器發(fā)出“用戶數(shù)據(jù)請求”指令;待系統(tǒng)服務(wù)器響應(yīng)“用戶數(shù)據(jù)請求”指令之后,接收對應(yīng)的反饋信息,包括教學(xué)資源;
推薦資源交互學(xué)習模塊:向?qū)W習者推送針對性學(xué)習建議之后,記錄用戶的自我學(xué)習內(nèi)
容和響應(yīng)程度信息;與用戶信息隱性監(jiān)督模塊相配合,構(gòu)成專業(yè)實訓(xùn)教學(xué)過程中相關(guān)的歷史記錄數(shù)據(jù);
虛擬仿真簡易練習模塊:科目訓(xùn)練流程的虛擬仿真練習,同時記錄用戶的自我學(xué)習過
程和響應(yīng)程度信息;與用戶信息隱性監(jiān)督模塊相配合,構(gòu)成專業(yè)實訓(xùn)教學(xué)過程中相關(guān)的歷史記錄數(shù)據(jù);
觀摩資源點播學(xué)習模塊:科目訓(xùn)練流程的觀摩學(xué)習,同時記錄用戶的自我學(xué)習過程和
關(guān)注程度信息;與用戶信息隱性監(jiān)督模塊相配合,構(gòu)成專業(yè)實訓(xùn)教學(xué)過程中相關(guān)的歷史記錄數(shù)據(jù)。
教學(xué)課程點播學(xué)習模塊:通過選擇相關(guān)的ID標識,從云端服務(wù)器獲取訓(xùn)練科目相關(guān)信
息資源和輔助信息;記錄用戶在學(xué)習準備時或者課后的自我學(xué)習內(nèi)容和推薦學(xué)習響應(yīng)程度信息;與用戶信息隱性監(jiān)督模塊相配合,構(gòu)成專業(yè)實訓(xùn)教學(xué)過程中相關(guān)的歷史記錄數(shù)據(jù);
學(xué)習過程信息記錄模塊:記錄用戶在專業(yè)教學(xué)計劃實施周期中,對知識點、技能點、觀摩資源、實訓(xùn)內(nèi)容、主動學(xué)習、學(xué)習積極性和效果信息;與用戶信息隱性監(jiān)督模塊相配合,構(gòu)成專業(yè)實訓(xùn)教學(xué)過程中相關(guān)的歷史記錄數(shù)據(jù);
科目訓(xùn)練評估信息模塊:通過數(shù)據(jù)請求,從云端服務(wù)器獲得科目訓(xùn)練歷史評估記錄、當前評估記錄、訓(xùn)練成績和補充學(xué)習建議;
用戶信息隱性監(jiān)督模塊:對用戶的自主學(xué)習過程進行記錄,通過隨機的隱形用戶拍照
和瞳孔識別,將獲取的用戶信息與注冊信息進行比對,驗證學(xué)習者的實時真實身份信息;經(jīng)過身份確認的學(xué)習記錄將構(gòu)成“評估依據(jù)”的一個組成部分。
9.如權(quán)利要求1或2所述的具有偏離度自動反饋數(shù)據(jù)閉環(huán)糾偏控制的專業(yè)技能實訓(xùn)輔
助教學(xué)系統(tǒng),其特征在于,
智能教學(xué)終端APP包括相互連接的智能用戶注冊管理模塊、ID掃描識別通信模塊;還包括分別與ID掃描識別通信模塊連接的科目訓(xùn)練教學(xué)指導(dǎo)模塊、虛擬仿真科目練習模塊、觀摩資源示范輔導(dǎo)模塊、專業(yè)課件教學(xué)應(yīng)用模塊、示范樣板信息錄入模塊、科目訓(xùn)練評估反饋模塊;此外還包括與以上各模塊連接的教學(xué)管理信息查詢模塊、科目訓(xùn)練資源導(dǎo)入模塊;
智能用戶注冊管理模塊:用于通過人工智能手段采集用戶信息,建立系統(tǒng)中的個人賬
戶;與專業(yè)實訓(xùn)教學(xué)過程相關(guān)的歷史記錄數(shù)據(jù)將被保存在個人賬戶所對應(yīng)的區(qū)域之中;
ID標識掃描識別通信模塊:用于調(diào)用現(xiàn)場智能教學(xué)終端中的掃描框,掃描紙質(zhì)印刷的
智能化實訓(xùn)教材中的ID標識,或者采用觸摸的方式點擊現(xiàn)場智能教學(xué)終端中的“智能化實訓(xùn)教材電子文檔”中設(shè)定的ID標識,向云端服務(wù)器發(fā)出“用戶數(shù)據(jù)請求”指令;待系統(tǒng)響應(yīng)“用戶數(shù)據(jù)請求”指令之后,接收對應(yīng)的反饋信息,包括教學(xué)資源;
科目訓(xùn)練教學(xué)指導(dǎo)模塊:用于根據(jù)每一個科目訓(xùn)練教學(xué)計劃的設(shè)計,將與實訓(xùn)教學(xué)計
劃相關(guān)的跟蹤評估規(guī)則和方法導(dǎo)入到系統(tǒng)中。該導(dǎo)入是登錄教師特定權(quán)限賬戶后實現(xiàn)的;
虛擬仿真科目練習模塊:用于選擇不同科目的虛擬仿真練習內(nèi)容,進行模擬現(xiàn)場訓(xùn)練
環(huán)境和訓(xùn)練過程的虛擬訓(xùn)練操作;
觀摩資源示范輔導(dǎo)模塊:用于向系統(tǒng)服務(wù)器傳送相關(guān)示范資源的學(xué)習請求,從云端服
務(wù)器或現(xiàn)場數(shù)據(jù)服務(wù)器獲得實際的觀摩示范資源;觀摩示范內(nèi)容包括示范者的真實的操作記錄和虛擬增強現(xiàn)實教學(xué)素材;
專業(yè)課件教學(xué)應(yīng)用模塊:用于獲得教學(xué)計劃實施中的相關(guān)課件、碎片化素材和其他課
程資源;還用于將教學(xué)過程中的相關(guān)附加信息自動記錄、推送到科目實訓(xùn)教學(xué)訓(xùn)練指導(dǎo)模塊中;
示范樣板信息錄入模塊:用于示范樣板信息錄入;通過專業(yè)示范者或者技能大賽優(yōu)勝
者進行現(xiàn)場示范操作,按照實訓(xùn)教學(xué)計劃中設(shè)計的評價標準,進行相應(yīng)的現(xiàn)場數(shù)據(jù)采集,經(jīng)過處理之后錄入存放到云端服務(wù)器中,成為示范操作樣板即科目訓(xùn)練示范數(shù)據(jù);其采用相同的數(shù)據(jù)采集方法和評價標準,經(jīng)過數(shù)據(jù)處理之后,可形成規(guī)范化、專業(yè)化和歸一化的評價過程;
科目訓(xùn)練評估反饋模塊:用于查閱學(xué)習者個人的訓(xùn)練的跟蹤信息、評估信息、反饋信息和學(xué)習信息,包括統(tǒng)計信息和整體教學(xué)評估信息;
教學(xué)管理信息查詢模塊:用于檢索、查詢與科目訓(xùn)練相關(guān)的教學(xué)計劃執(zhí)行記錄和學(xué)習
者的學(xué)習過程、訓(xùn)練操作跟蹤評估記錄、歷史信息和統(tǒng)計數(shù)據(jù);
科目訓(xùn)練資源導(dǎo)入模塊:用于根據(jù)每一個科目訓(xùn)練教學(xué)計劃的設(shè)計,將與實訓(xùn)教學(xué)計
劃相關(guān)的資源導(dǎo)入到系統(tǒng)中;這些導(dǎo)入的資源包括科目訓(xùn)練的內(nèi)容、學(xué)習資源、觀摩、教學(xué)課件,包括知識點、技能點內(nèi)容描述、虛擬仿真資源、訓(xùn)練設(shè)施和方法說明、安全要求;該導(dǎo)入在登錄教師特定權(quán)限賬戶后實現(xiàn)。
10.如權(quán)利要求5所述的具有偏離度自動反饋數(shù)據(jù)閉環(huán)糾偏控制的專業(yè)技能實訓(xùn)輔助
教學(xué)系統(tǒng),其特征在于,
其中的數(shù)據(jù)信息壓縮傳輸模塊中,所述的數(shù)據(jù)交換分為實時交換和靜默推送二種形
式;
實時交換的形式適用于:
(1)從用戶終端發(fā)出的用戶數(shù)據(jù)請求指令的轉(zhuǎn)發(fā)響應(yīng);
(2)經(jīng)預(yù)處理之后技能點屬性關(guān)注點采集屬性信息;
(3)其它需要立即響應(yīng)并從云端服務(wù)器獲得的反饋信息;
靜默推送交換的形式適用于:
(1)科目訓(xùn)練中全景攝像機采集的完整的視頻信號;
(2)科目訓(xùn)練中全景攝像機采集的完整的音頻信號;
(3)通過智能教學(xué)終端選中的科目訓(xùn)練計劃中設(shè)定的實訓(xùn)教學(xué)資源信息下載服務(wù);
靜默推送交換的形式是指系統(tǒng)服務(wù)器自動選擇在系統(tǒng)和網(wǎng)絡(luò)不繁忙的狀態(tài)時實施的
數(shù)據(jù)傳送形式。
11.一種利用如權(quán)利要求1-10任一所述的專業(yè)技能實訓(xùn)輔助教學(xué)系統(tǒng)進行的具有偏離
度自動反饋數(shù)據(jù)閉環(huán)糾偏控制的專業(yè)技能實訓(xùn)輔助教學(xué)方法,其特征在于,
該專業(yè)技能實訓(xùn)輔助教學(xué)方法,以智能化實訓(xùn)教材為核心,將智能化實訓(xùn)教材設(shè)計成
科目訓(xùn)練路線導(dǎo)航圖,其中各部分內(nèi)容按樹狀索引結(jié)構(gòu)編排,每一個索引對應(yīng)一個ID標識即隱形鏈接地址;學(xué)習者利用智能學(xué)習終端上的APP,通過掃描智能化實訓(xùn)教材中不同的ID標識,從云端服務(wù)器中獲取預(yù)先上傳的相關(guān)訓(xùn)練科目學(xué)習資源,進行針對性學(xué)習;專業(yè)教師利用智能教學(xué)終端上的APP,通過掃描或屏幕觸摸智能化實訓(xùn)教材中不同的ID標識,從系統(tǒng)服務(wù)器中獲取預(yù)先上傳的相關(guān)訓(xùn)練科目教學(xué)資源,或指定一個訓(xùn)練科目操作的自動跟蹤流程;
示范者在技能訓(xùn)練專用設(shè)施上進行示范操作時,通過現(xiàn)場信息采集設(shè)備和系統(tǒng)服務(wù)
器,完成對示范者的示范操作數(shù)據(jù)采集與跟蹤,生成評估樣板數(shù)據(jù)庫;亦即,根據(jù)訓(xùn)練科目的教學(xué)設(shè)計要求,采用與學(xué)習者的訓(xùn)練操作過程相同的細分和評價方法,采集示范者的操作示范過程數(shù)據(jù)即樣板數(shù)據(jù),經(jīng)過處理之后存入到云端服務(wù)器的數(shù)據(jù)庫中,成為學(xué)習者專業(yè)科目訓(xùn)練中的相似度比較樣板;
學(xué)習者在技能訓(xùn)練專用設(shè)施上進行訓(xùn)練操作時,通過現(xiàn)場信息采集設(shè)備對學(xué)習者的操
作過程進行自動跟蹤和數(shù)據(jù)采集,系統(tǒng)服務(wù)器對采集到的訓(xùn)練數(shù)據(jù)進行細分、識別、處理之后,與評估樣板數(shù)據(jù)庫中的樣板數(shù)據(jù)進行相似度比較;相似度比較結(jié)果經(jīng)過積分處理,產(chǎn)生偏離度評價結(jié)果、科目訓(xùn)練過程評估反饋信息和補充學(xué)習糾偏建議;學(xué)習者通過ID標識關(guān)聯(lián)獲取信息之后,可以選擇對自己最適用的內(nèi)容進行補充學(xué)習糾偏;之后,重復(fù)科目訓(xùn)練過程;由此構(gòu)成科目訓(xùn)練中對現(xiàn)場操作數(shù)據(jù)采集的循環(huán)跟蹤評估,實現(xiàn)以ID標識為紐帶的數(shù)據(jù)閉環(huán)糾偏控制。
12.如權(quán)利要求11所述的專業(yè)技能實訓(xùn)輔助教學(xué)方法,其特征在于,
針對服務(wù)型技能項目,將一個技能訓(xùn)練科目,按照訓(xùn)練大綱的要求,在操作者操作時的移動軌跡上,設(shè)置了多個需要重點掌握的操作技能點,包括多個關(guān)鍵技能點和多個一般技能點;在物理位置上,將關(guān)鍵技能點和一般技能點對應(yīng)的操作區(qū)域,確定為“關(guān)鍵技能點區(qū)域”和“一般技能點區(qū)域”,區(qū)域的形狀大小根據(jù)技能點屬性在教學(xué)設(shè)計中確定;將各個技能點屬性細分成為系統(tǒng)服務(wù)器可以進行特征識別跟蹤的多個屬性關(guān)注點,即:每個關(guān)鍵技能點區(qū)域內(nèi)包含了多個屬性關(guān)注點,每個一般技能點區(qū)域內(nèi)也包含了多個屬性關(guān)注點;設(shè)置現(xiàn)場信息采集設(shè)備,采集各技能點區(qū)域內(nèi)的各個屬性關(guān)注點的現(xiàn)場數(shù)據(jù),包括移動軌跡、體態(tài)、體感、骨骼、語音、圖像、表情、交互、檢測圖像、面部矢量、肢體動作和專業(yè)設(shè)施變位數(shù)據(jù)信息;
將現(xiàn)場操作數(shù)據(jù)的采集分成兩種類型:“科目訓(xùn)練示范數(shù)據(jù)”,是在示范者示范操作時所采集的現(xiàn)場數(shù)據(jù),簡稱為樣板數(shù)據(jù);“學(xué)習者訓(xùn)練數(shù)據(jù)”,是學(xué)習者在科目訓(xùn)練中所采集的現(xiàn)場數(shù)據(jù),簡稱為訓(xùn)練數(shù)據(jù)也即被評估數(shù)據(jù);兩種類型的數(shù)據(jù)在采集和跟蹤處理時的細分規(guī)則和采集方法保持一致;
科目訓(xùn)練中,圍繞技能訓(xùn)練專用設(shè)施,通過現(xiàn)場信息采集設(shè)備,采集操作者操作時在各技能點區(qū)域內(nèi)的各個屬性關(guān)注點的現(xiàn)場操作數(shù)據(jù)信息,包括移動軌跡、體態(tài)、體感、紅外、肢體動作、話術(shù)、檢測結(jié)果、操作細節(jié)和矢量值;
專業(yè)教師利用智能教學(xué)終端APP,通過點擊或觸摸智能教學(xué)終端APP中的不同的ID標
識,即可與系統(tǒng)服務(wù)器進行交互,獲得相關(guān)的實訓(xùn)科目的教學(xué)資源和課件,并利用現(xiàn)場智能教學(xué)終端或者智慧教室信息化輔助設(shè)施,開展現(xiàn)場教學(xué)和咨詢輔導(dǎo)活動;
專業(yè)教師利用智能教學(xué)終端APP,通過調(diào)動終端中的掃描框掃描或屏幕觸摸智能化實
訓(xùn)教材導(dǎo)航圖中預(yù)設(shè)的“訓(xùn)練過程跟蹤評估”的ID標識,即可獲得相關(guān)學(xué)習者的科目訓(xùn)練偏離度評估結(jié)果反饋信息和糾偏建議。
13.如權(quán)利要求12所述的專業(yè)技能實訓(xùn)輔助教學(xué)方法,其特征在于,
將在各技能點區(qū)域內(nèi)采集到的各個屬性關(guān)注點的現(xiàn)場數(shù)據(jù),包括“學(xué)習者訓(xùn)練數(shù)據(jù)”簡稱為“訓(xùn)練數(shù)據(jù)”和“科目訓(xùn)練示范數(shù)據(jù)”簡稱為“樣板數(shù)據(jù)”,在現(xiàn)場數(shù)據(jù)服務(wù)器中進行預(yù)處理之后上傳到云端服務(wù)器內(nèi);經(jīng)云端服務(wù)器內(nèi)的人工智能識別模塊進行識別后,由云端服務(wù)器內(nèi)的相似度比較模塊將各個屬性關(guān)注點上采集到的“訓(xùn)練數(shù)據(jù)”與“樣板數(shù)據(jù)”分別進行相似度比較;進行相似度比較的方法包括:針對各技能點區(qū)域內(nèi)采集數(shù)據(jù)采用的一次特征改進雷達圖評價方法,以及針對科目訓(xùn)練全流程中各個技能點評價結(jié)果采用的二次特征改進雷達圖評價方法;然后,由云端服務(wù)器內(nèi)的偏離度評價模塊進行偏離度評價,即采用相對誤差計算公式分別完成針對以技能點為依據(jù)和以科目訓(xùn)練全流程為依據(jù)的評價結(jié)果與樣板數(shù)據(jù)之間的偏離度的計算,獲得各技能點偏離度評價結(jié)果和科目訓(xùn)練全流程偏離度評價結(jié)果;最后,根據(jù)各技能點偏離度評價結(jié)果,產(chǎn)生偏離度自動反饋數(shù)據(jù)和補充學(xué)習糾偏建議,反饋到智能學(xué)習終端和智能教學(xué)終端;根據(jù)科目訓(xùn)練全流程偏離度評價結(jié)果,產(chǎn)生對學(xué)習者的本科目訓(xùn)練全流程的綜合評價成績,反饋到智能學(xué)習終端和智能教學(xué)終端。
14.如權(quán)利要求13所述的專業(yè)技能實訓(xùn)輔助教學(xué)方法,其特征在于,
關(guān)鍵技能點屬性的關(guān)注點設(shè)置為6-10個,一般技能點屬性的關(guān)注點設(shè)置為2-5個;
各個屬性關(guān)注點上的現(xiàn)場采集數(shù)據(jù),包括移動軌跡、體態(tài)、體感、骨骼、語音、圖像、表情、交互、檢測圖像、面部矢量、肢體動作和專業(yè)設(shè)施變位信息;
學(xué)習者的現(xiàn)場訓(xùn)練數(shù)據(jù),包括移動軌跡、體態(tài)、體感、骨骼、語音、圖像、表情、交互、檢測圖像、面部矢量、肢體動作和專業(yè)設(shè)施變位信息;
進行相似度比較和偏離度評價的具體方法是:將在各個技能點區(qū)域內(nèi)采集到的各個屬
性關(guān)注點的“訓(xùn)練數(shù)據(jù)”與“樣板數(shù)據(jù)”,按照現(xiàn)場全景攝像機提供的時間軸標記點進行特征比較;比較之后根據(jù)教學(xué)設(shè)計中確定的閾值產(chǎn)生比較結(jié)果,通過一次權(quán)重修正系數(shù)進行修正后,利用一次特征改進雷達圖評價方法進行評價;將評價結(jié)果采用相對誤差計算公式進行偏離度計算,產(chǎn)生學(xué)習者在各個技能點區(qū)域訓(xùn)練操作時采集的訓(xùn)練數(shù)據(jù)與樣板數(shù)據(jù)之間的偏離度評價結(jié)果,據(jù)此產(chǎn)生偏離度自動反饋數(shù)據(jù)和補充學(xué)習糾偏建議,反饋到智能學(xué)習終端和智能教學(xué)終端;將各個技能點區(qū)域內(nèi)采集數(shù)據(jù)的一次特征改進雷達圖評價結(jié)果,通過二次權(quán)重修正系數(shù)進行修正,利用二次特征改進雷達圖評價方法進行評價,評價結(jié)果采用相對誤差計算公式進行偏離度計算,產(chǎn)生學(xué)習者的本科目訓(xùn)練全流程的綜合評價成績,反饋到智能學(xué)習終端和智能教學(xué)終端;偏離度自動反饋數(shù)據(jù)和補充學(xué)習糾偏建議的產(chǎn)生,主要是針對關(guān)鍵技能點區(qū)域的操作內(nèi)容;
在相似度比較計算中,需要根據(jù)專業(yè)教學(xué)要求分別設(shè)置閾值,形成量化的比較結(jié)果;相似度比較計算中的相關(guān)閾值和權(quán)重系數(shù)在專業(yè)教學(xué)設(shè)計中確定,并且在訓(xùn)練科目開始之前通過智能教學(xué)終端APP中的科目訓(xùn)練資源導(dǎo)入模塊錄入到系統(tǒng)之內(nèi)。
15.如權(quán)利要求13或14所述的專業(yè)技能實訓(xùn)輔助教學(xué)方法,其特征在于,
對各技能點區(qū)域內(nèi)采集數(shù)據(jù)的一次特征改進雷達圖評價方法如下:
通過現(xiàn)場信息采集設(shè)備,采集到各技能點區(qū)域內(nèi)的各個屬性關(guān)注點的現(xiàn)場數(shù)據(jù),包括
“學(xué)習者訓(xùn)練數(shù)據(jù)”和“科目訓(xùn)練示范數(shù)據(jù)”,通過現(xiàn)場數(shù)據(jù)服務(wù)器預(yù)處理之后,將帶有采集時間標志的各個數(shù)據(jù)包上傳到云端服務(wù)器內(nèi);云端服務(wù)器將采集到的各個屬性關(guān)注點的“學(xué)習者訓(xùn)練數(shù)據(jù)”,按照現(xiàn)場全景攝像機提供的時間軸標記點,與“科目訓(xùn)練示范數(shù)據(jù)”進行特征比較,然后根據(jù)教學(xué)設(shè)計中確定的閾值進行標定量化,得到標定量化值即屬性值ai;
將該標定量化值按照預(yù)定的屬性關(guān)注點一次權(quán)重系數(shù)qti或者qSi進行修正后,生成多條同一點出發(fā)的矢量線,由此繪制出針對每一個關(guān)鍵技能點和一般技能點屬性評價的一次特征改進雷達圖;在繪制一次特征改進雷達圖時,用一根矢量線和對應(yīng)的夾角來表示一個“屬性關(guān)注點數(shù)據(jù)”,從同一原點出發(fā),按照各個屬性關(guān)注點的設(shè)定排列,順時針方向順序進行圖形繪制;其中,各屬性關(guān)注點的矢量線夾角與教學(xué)設(shè)計中預(yù)定的一次權(quán)重系數(shù)qti或者qSi相關(guān)聯(lián),權(quán)重系數(shù)越大、夾角越大;
根據(jù)以下公式1、公式2,分別計算出各個關(guān)鍵技能點區(qū)域和一般技能點區(qū)域?qū)傩缘囊?br/>次特征改進雷達圖的面積;
其中:
At=實訓(xùn)科目中對應(yīng)的每一個關(guān)鍵技能點的一次特征改進雷達圖面積計算結(jié)果;即:A1是第一個關(guān)鍵技能點的一次特征改進雷達圖面積計算結(jié)果,A2是第二個關(guān)鍵技能點的一次特征改進雷達圖面積計算結(jié)果,以此類推;
Bs=實訓(xùn)科目中對應(yīng)的每一個一般技能點的一次特征改進雷達圖面積計算結(jié)果;即:B1是第一個一般關(guān)鍵技能點的一次特征改進雷達圖面積計算結(jié)果,B2是第二個一般技能點的一次特征改進雷達圖面積計算結(jié)果,以此類推;
n=各技能點區(qū)域內(nèi)設(shè)定的屬性關(guān)注點的個數(shù);計算At時,n是關(guān)鍵技能點區(qū)域內(nèi)設(shè)定的屬性關(guān)注點個數(shù);計算Bs時,n是一般技能點區(qū)域內(nèi)設(shè)定的屬性關(guān)注點個數(shù);
qti=第t個關(guān)鍵技能點的第i個屬性關(guān)注點的一次權(quán)重系數(shù);在計算At的公式1中用權(quán)
重系數(shù)qti;
qsi=第s個一般技能點的第i個屬性關(guān)注點的一次權(quán)重系數(shù);在計算Bs的公式2中用權(quán)
重系數(shù)qsi;
ai=對應(yīng)每一個技能點屬性關(guān)注點采集的數(shù)據(jù),經(jīng)過標定量化之后再經(jīng)過一次權(quán)重系
數(shù)qti或qsi修正后的數(shù)據(jù),即繪制一次特征改進雷達圖時的一個軸長,即矢量線的長度;
a(i+1)mod?n=與ai相鄰的技能點屬性關(guān)注點采集的數(shù)據(jù),經(jīng)過標定后的量化值;
當a(i+1)mod?n中n=i時,a(i+1)mod?n=a1;此時的模值modn是代表不同的關(guān)鍵技能點和一般技能點對應(yīng)的屬性關(guān)注點個數(shù);
t=實訓(xùn)科目中在操作者的移動路線上按順序排列的各個關(guān)鍵技能點的順序編號;
s=實訓(xùn)科目中在操作者的移動路線上按順序排列的各個一般技能點的順序編號;
Bs的計算公式與At的計算公式相同,但教學(xué)設(shè)計中設(shè)置的屬性關(guān)注點個數(shù)n不同,一次權(quán)重系數(shù)qti和qsi也不同。
16.如權(quán)利要求15所述的專業(yè)技能實訓(xùn)輔助教學(xué)方法,其特征在于,
對科目訓(xùn)練全流程中各個技能點評價結(jié)果的二次特征改進雷達圖評價方法如下:
根據(jù)科目實訓(xùn)流程的技能點排列順序,將各技能點的一次特征改進雷達圖面積At、Bs按順序排列,亦即,按照“Th1=A1、Th2=B1、Th3=A2、Th4=B2、Th5=A3、Th6=B3、Th7=A4、Th8=B4”,依次類推的順序交替排列后,構(gòu)成新的科目訓(xùn)練全流程數(shù)據(jù)表Th;將科目訓(xùn)練全流程數(shù)據(jù)表Th中的數(shù)據(jù),按照預(yù)定的二次權(quán)重系數(shù)qTi進行修正后,生成多條從同一點出發(fā)的矢量線,由此繪制出反映訓(xùn)練全流程的二次特征改進雷達圖;在繪制二次特征改進雷達圖時,用一根矢量線和對應(yīng)的夾角來表示一個技能點的相似度評價結(jié)果,從同一原點出發(fā),按照順時針方向的順序進行圖形繪制;其中各技能點評價結(jié)果的矢量線夾角與教學(xué)設(shè)計中預(yù)定的二次權(quán)重系數(shù)qTi相關(guān)聯(lián),權(quán)重系數(shù)越大、夾角越大;
根據(jù)以下公式3,計算出反映訓(xùn)練全流程的二次特征改進雷達圖的面積Ch;
其中:
Ch=針對技能實訓(xùn)科目的全流程繪制的二次特征改進雷達圖面積計算結(jié)果;
h=實訓(xùn)科目全流程技能點數(shù)據(jù)表Th內(nèi)的數(shù)據(jù)總量,是所有關(guān)鍵技能點和一般技能點數(shù)量的總和;
qTi=在計算Ch時,對應(yīng)科目訓(xùn)練全流程數(shù)據(jù)表Th內(nèi)順序為i的數(shù)據(jù)的二次權(quán)重系數(shù);i的變化范圍從1到h;
Ti=科目訓(xùn)練全流程數(shù)據(jù)表Th中的第i個經(jīng)過二次權(quán)重系數(shù)qTi修正的數(shù)據(jù);即:T1=qT1*A1,T2=qT2*B1,T3=qT3*A2,T4=qT4*B2,T5=qT5*A3,T6=qT6*B3,以此類推下去;i的變化范圍從
1到h;
T(i+1)mod?h=實訓(xùn)科目全流程數(shù)據(jù)表Th中與Ti相鄰的下一個數(shù)據(jù);
當T(i+1)mod?h中h=i時,T(i+1)mod?h=T1,與全流程數(shù)據(jù)表Th中第一個數(shù)據(jù)重合。
17.如權(quán)利要求16所述的專業(yè)技能實訓(xùn)輔助教學(xué)方法,其特征在于,
采用以下相對誤差計算公式4,對各個關(guān)鍵技能點區(qū)域內(nèi)的操作進行偏離度評價:
其中:
Δet=針對各個技能點的訓(xùn)練記錄數(shù)據(jù)的偏離度評價結(jié)果;通常僅用于評價各關(guān)鍵技
能點的偏離情況;在科目訓(xùn)練需要時也可用于評價各一般技能點的偏離情況。
t=實訓(xùn)科目流程中的各個技能點的順序編號;
Tdt=各個技能點的示范樣板修正數(shù)據(jù)一次特性改進雷達圖面積計算結(jié)果,即At或Bs;該數(shù)據(jù)從樣板數(shù)據(jù)庫中獲??;
Ttrt=各個技能點的訓(xùn)練記錄修正數(shù)據(jù)一次特性改進雷達圖面積計算結(jié)果,即從學(xué)習
者訓(xùn)練數(shù)據(jù)計算獲得的At或者Bs;該數(shù)據(jù)通過跟蹤現(xiàn)場訓(xùn)練數(shù)據(jù)后計算獲得;
采用以下相對誤差計算公式5,對科目訓(xùn)練全流程的操作進行偏離度評價:
其中:
Δe=科目全流程訓(xùn)練的偏離度綜合評價成績;
Tdh=全流程示范樣板修正數(shù)據(jù)二次改進雷達圖面積計算結(jié)果,即針對樣板數(shù)據(jù)利用公式3計算得到的Ch,該數(shù)據(jù)從樣板數(shù)據(jù)庫中獲取;
Ttrh=全流程訓(xùn)練記錄修正數(shù)據(jù)二次改進雷達圖面積計算結(jié)果,即針對學(xué)習者訓(xùn)練數(shù)
據(jù)利用公式3計算得到的Ch,該數(shù)據(jù)通過跟蹤現(xiàn)場訓(xùn)練數(shù)據(jù)后獲得。
18.如權(quán)利要求17所述的專業(yè)技能實訓(xùn)輔助教學(xué)方法,其特征在于,
該方法中,通過“科目訓(xùn)練開始—訓(xùn)練過程數(shù)據(jù)采集—樣板數(shù)據(jù)相似度比較—訓(xùn)練過
程跟蹤評估—偏離度糾偏建議推送—ID標識關(guān)聯(lián)學(xué)習觀摩素材獲取—科目訓(xùn)練再開始”的循環(huán),構(gòu)成技能科目訓(xùn)練中依據(jù)對現(xiàn)場操作數(shù)據(jù)的跟蹤采集和跟蹤評估,實現(xiàn)以ID標識為紐帶的數(shù)據(jù)閉環(huán)糾偏控制的過程如下:
專業(yè)教師在訓(xùn)練科目的教學(xué)設(shè)計中,完成了關(guān)于科目訓(xùn)練過程中的細分規(guī)則設(shè)計、評
價參數(shù)設(shè)計、專業(yè)資源素材準備、教學(xué)課件準備之后,通過智能教學(xué)終端上傳到云端服務(wù)器中;然后通過智能教學(xué)終端,啟動示范者操作的“科目訓(xùn)練示范數(shù)據(jù)”采集流程;現(xiàn)場信息采集設(shè)備采集的數(shù)據(jù)經(jīng)過現(xiàn)場數(shù)據(jù)服務(wù)器預(yù)處理、壓縮和標定后進入云端服務(wù)器,經(jīng)過“運動軌跡信息提取”、“技能點屬性關(guān)注點信息提取”以及識別處理之后,判別為“科目訓(xùn)練示范數(shù)據(jù)”存入“樣板曲線模板數(shù)據(jù)庫”即樣板數(shù)據(jù)庫;
通過現(xiàn)場智能教學(xué)終端APP中的ID掃描識別通信模塊掃描或屏幕觸摸智能化實訓(xùn)教材
中對應(yīng)章節(jié)的“訓(xùn)練過程跟蹤評估”的ID標識,向系統(tǒng)服務(wù)器發(fā)出確定訓(xùn)練科目的指令;隨后,啟動學(xué)習者的現(xiàn)場科目訓(xùn)練操作;現(xiàn)場信息采集設(shè)備對現(xiàn)場的科目訓(xùn)練操作數(shù)據(jù)進行跟蹤采集;現(xiàn)場數(shù)據(jù)服務(wù)器中的“現(xiàn)場數(shù)據(jù)信息預(yù)處理模塊”對采集到的現(xiàn)場實時數(shù)據(jù)進行預(yù)處理,數(shù)據(jù)信息壓縮傳輸模塊將預(yù)處理之后的數(shù)據(jù)信號,經(jīng)過壓縮和標定后形成帶有采集標志的數(shù)據(jù)包,上傳到云端服務(wù)器中;云端服務(wù)器內(nèi)的人工智能識別模塊對上傳的數(shù)據(jù)進行“運動軌跡信息提取”、“技能點屬性關(guān)注點信息提取”以及識別處理之后,將跟蹤采集到的數(shù)據(jù)判別為“學(xué)習者訓(xùn)練數(shù)據(jù)”,自動保存到訓(xùn)練數(shù)據(jù)庫中;
之后,對應(yīng)的“科目訓(xùn)練示范數(shù)據(jù)”和“學(xué)習者訓(xùn)練數(shù)據(jù)”在“相似度比較模塊”中,按照預(yù)定的“細分規(guī)則設(shè)計、評價參數(shù)設(shè)計”進行相似度比較;即對各技能點區(qū)域內(nèi)采集的數(shù)據(jù)按“一次特征改進雷達圖”評價方法利用公式1或公式2進行評價;對科目訓(xùn)練全流程中各個技能點的評價結(jié)果按“二次特征改進雷達圖”評價方法利用公式3進行評價;然后進入偏離度評價模塊,按所述的偏離度評價方法,利用公式4計算關(guān)鍵技能點操作的偏離度,利用公式5計算并產(chǎn)生科目全流程訓(xùn)練偏離度情況的綜合評價成績;
云端服務(wù)器的自動反饋與糾偏建議形成及輸出模塊,根據(jù)“一次特征改進雷達圖”評價和偏離度評價結(jié)果,對各個技能點偏離度超過閾值的部分,向?qū)W習者推送“偏離度反饋信息”和“補充學(xué)習建議”信息,信息的表達方式是與智能化實訓(xùn)教材中設(shè)置的ID標識一致的;
云端服務(wù)器的自動反饋與糾偏建議形成及輸出模塊,根據(jù)“二次特征改進雷達圖”評價和偏離度評價結(jié)果,向?qū)W習者推送針對科目訓(xùn)練全流程“偏離度反饋信息”和“補充學(xué)習建議”信息,信息的形式也是與智能化實訓(xùn)教材中設(shè)置的ID標識一致的;
通過對“補充學(xué)習建議”中的ID標識,學(xué)習者可以知道自己的當前訓(xùn)練情況和需要補充的糾偏學(xué)習內(nèi)容;在“補充學(xué)習建議”中的ID標識中,學(xué)習者可以選擇最適用的ID標識,從系統(tǒng)服務(wù)器獲取學(xué)習資源;
經(jīng)過關(guān)于知識點和技能點的觀摩、學(xué)習之后,學(xué)習者重新開始科目訓(xùn)練流程,進行第二次循環(huán),直至針對科目訓(xùn)練全流程的“偏離度反饋信息”滿足科目訓(xùn)練教學(xué)設(shè)計的要求;循環(huán)次數(shù)的控制、最終訓(xùn)練成績的判定,由專業(yè)教師按照教學(xué)設(shè)計中的規(guī)定執(zhí)行;
以上對科目訓(xùn)練操作數(shù)據(jù)的閉環(huán)糾偏控制過程,通過反饋以ID標識為紐帶的補充學(xué)習
建議,引導(dǎo)學(xué)習者逐次向訓(xùn)練要求靠近。
19.如權(quán)利要求18所述的專業(yè)技能實訓(xùn)輔助教學(xué)方法,其特征在于,
根據(jù)相似度比較和偏離度評價結(jié)果,系統(tǒng)向?qū)W習者推送的“偏離度反饋信息”包含:(1)各技能點操作評價信息;(2)訓(xùn)練流程評價信息;(3)建議補充知識點和技能點知識;(4)建議觀摩的示范視頻信息;(5)話術(shù)類語言表達示范信息;以上信息中的(1)、(2)是“文字+標識+得分”的表達形式;后面三類是針對性補充學(xué)習建議,是以ID標識的形式表達的;其中的ID標識信息就是智能化實訓(xùn)教材中定義的ID標識,只要用手機APP或智能教學(xué)終端APP通過掃描或屏幕觸摸智能化實訓(xùn)教材中不同的ID標識,就可以直接獲得對應(yīng)的學(xué)習資源素材;
學(xué)習者對系統(tǒng)反饋的ID標識推送信息,可以進行選擇,確定最適用的部分進行補充學(xué)習。
20.如權(quán)利要求13所述的專業(yè)技能實訓(xùn)輔助教學(xué)方法,其特征在于,
該方法同時適用于服務(wù)型訓(xùn)練科目,可應(yīng)用于技能大賽成果的示范推廣和區(qū)域型職業(yè)
教育資源的共享應(yīng)用;根據(jù)技能大賽規(guī)則要求,由專業(yè)教師對技能大賽的資源素材進行細分規(guī)則分解之后,作為科目訓(xùn)練示范數(shù)據(jù),通過智能教學(xué)終端中的“示范樣板信息錄入模塊”,錄入到云端服務(wù)器中,作為“科目訓(xùn)練示范數(shù)據(jù)”即樣板數(shù)據(jù),形成評價依據(jù);該樣板數(shù)據(jù)具有可復(fù)制性;由此能夠?qū)崿F(xiàn)技能大賽成果的推廣應(yīng)用。
21.如權(quán)利要求13所述的專業(yè)技能實訓(xùn)輔助教學(xué)方法,其特征在于,
該方法中,“偏離度自動反饋數(shù)據(jù)閉環(huán)糾偏控制”的過程如下:
首先,通過智能教學(xué)終端APP中的ID掃描識別通信模塊掃描或屏幕觸摸智能化實訓(xùn)教
材中設(shè)定的“訓(xùn)練過程跟蹤評估”的ID標識,向系統(tǒng)服務(wù)器發(fā)出用戶數(shù)據(jù)請求指令;
隨后,啟動現(xiàn)場科目訓(xùn)練操作;現(xiàn)場信息采集設(shè)備對現(xiàn)場的科目訓(xùn)練操作數(shù)據(jù)進行跟
蹤采集;現(xiàn)場數(shù)據(jù)服務(wù)器中的現(xiàn)場數(shù)據(jù)信息預(yù)處理模塊對采集到的現(xiàn)場實時數(shù)據(jù)進行預(yù)處理,數(shù)據(jù)信息壓縮傳輸模塊將預(yù)處理之后的數(shù)據(jù)信號,經(jīng)過壓縮和標定后形成帶有采集標志的數(shù)據(jù)包,上傳到云端服務(wù)器中;云端服務(wù)器內(nèi)的人工智能識別模塊對上傳的數(shù)據(jù)進行“運動軌跡信息提取”、“技能點屬性關(guān)注點信息提取”以及識別處理之后,分別獲得操作者的運動軌跡數(shù)據(jù)和細分操作數(shù)據(jù);隨后對數(shù)據(jù)的類型進行判斷識別,根據(jù)判別結(jié)果輸出兩個分支:其一輸出為“科目訓(xùn)練示范數(shù)據(jù)”,該數(shù)據(jù)通過“樣板曲線生成”形成樣板數(shù)據(jù)存入云端服務(wù)器中的樣板數(shù)據(jù)庫內(nèi),作為學(xué)習者訓(xùn)練評估時的對照數(shù)據(jù);其二輸出為“學(xué)習者訓(xùn)練數(shù)據(jù)”,作為訓(xùn)練過程中的被評估數(shù)據(jù);
之后,對應(yīng)的“科目訓(xùn)練示范數(shù)據(jù)”和“學(xué)習者訓(xùn)練數(shù)據(jù)”在云端服務(wù)器的相似度比較模塊中,按照預(yù)定的“細分規(guī)則設(shè)計、評價參數(shù)設(shè)計”進行相似度比較;進行相似度比較的方法包括:對各技能點區(qū)域內(nèi)采集的數(shù)據(jù)按“一次特征改進雷達圖”評價方法進行評價,對科目訓(xùn)練全流程中各個技能點評價結(jié)果按“二次特征改進雷達圖”評價方法進行結(jié)果性評價;之后,上述評價結(jié)果分別進入技能點偏離度評價模塊和科目訓(xùn)練全流程偏離度評價模塊進行偏離度計算產(chǎn)生偏離度評價結(jié)果;最后,通過自動反饋與糾偏建議形成及輸出模塊,形成并輸出自動反饋信息和糾偏建議及學(xué)習資源推送;學(xué)習者通過ID標識關(guān)聯(lián)獲取學(xué)習觀摩素材,針對性地選擇最需要的內(nèi)容進行觀摩和補充學(xué)習;之后,科目訓(xùn)練重新啟動;由此完成整個“偏離度自動反饋數(shù)據(jù)閉環(huán)糾偏控制”的過程。
22.如權(quán)利要求13所述的專業(yè)技能實訓(xùn)輔助教學(xué)方法,其特征在于,
利用現(xiàn)場信息采集設(shè)備進行數(shù)據(jù)采集與處理的具體方法如下:
1)、通過在實訓(xùn)設(shè)備上方垂直安裝的全景攝像機以及配套的視頻分析軟件,獲取每一
關(guān)鍵幀圖像中被跟蹤操作者的2D像素坐標,形成帶有時間軸標識的操作者的平面移動軌跡圖和矢量方向圖,同時產(chǎn)生全系統(tǒng)數(shù)據(jù)采集過程中的時間軸基準信息;
2)、根據(jù)預(yù)先設(shè)定的關(guān)鍵技能點位置和關(guān)鍵技能點區(qū)域范圍,獲得操作中的各種關(guān)鍵
技能點屬性采集數(shù)據(jù),包括語音、語氣、表情、關(guān)鍵詞句識別、操作姿態(tài)、操作者朝向、檢測數(shù)據(jù)圖像、動作順序、邏輯順序、判斷結(jié)果、操作效率、冗余操作;同時,獲得KGBD傳感器轉(zhuǎn)換后的,操作者與實訓(xùn)設(shè)備和可能的“客戶”之間的相對位置變化和正面朝向矢量變化方向之類的信息;圖像采集的核心是對操作者的體態(tài)、姿態(tài)、正面矢量方向和手部動作進行采樣和記錄,采樣密度為每秒12-15幀;如果操作者的動作比較頻繁和細膩,則采用數(shù)據(jù)手套的形式來獲得局部動作捕捉數(shù)據(jù);RGB圖像和音頻信息同時也進行記錄;
3)、在關(guān)鍵技能點區(qū)域范圍中,對“操作者”和“客戶”之間的語音信息進行采集和識別,并且與預(yù)設(shè)的語音信息進行關(guān)鍵詞的比較,然后記錄、保存;音頻采集的核心是對操作者的表達能和方式進行識別;主要通過長句和關(guān)鍵詞的智能識別方法,判斷操作者在關(guān)鍵位置時,所表達的關(guān)鍵信息的正確性、準確性和規(guī)范化程度;
4)、服務(wù)器對所采集到的視頻信息,采用雙邊濾波對深度圖進行的去噪保邊平滑處理;
根據(jù)深度圖和紅外CMOS內(nèi)參計算攝像機坐標系下的深度信息構(gòu)成點云,并變換到全局坐標系下,計算深度信息和法向量;此項操作用以獲得操作者的骨骼節(jié)點的變化軌跡和骨骼間的相對位置變化和矢量圖,為下一步關(guān)鍵技能點屬性關(guān)注點的相似度比較提供一個特殊的屬性參數(shù);
5)、在需要使用測量儀器進行檢測、判斷的維修技能訓(xùn)練場合,要采集、判斷儀器的顯示內(nèi)容;操作者觀察到的檢測內(nèi)容,和經(jīng)過思考之后選擇的下一步操作,應(yīng)該符合專業(yè)技術(shù)要求;操作步驟在專業(yè)上和邏輯上具有正確性和準確性;現(xiàn)場采集的數(shù)據(jù)要能夠為操作者所采取的操作步驟提供評估依據(jù);
6)、當操作者通過各個關(guān)鍵技能點操作區(qū)域時,均需重復(fù)上述1)-5)的數(shù)據(jù)采集與處理步驟和內(nèi)容;將采集到的各種形式的現(xiàn)場數(shù)據(jù)送入現(xiàn)場數(shù)據(jù)服務(wù)器內(nèi),經(jīng)處理后上傳到云端服務(wù)器保存;
7)、在一般技能點區(qū)域內(nèi),僅僅采集操作者的運動軌跡和矢量方向的關(guān)聯(lián)性信息。

說明書全文

一種具有偏離度自動反饋數(shù)據(jù)閉環(huán)糾偏控制的專業(yè)技能實訓(xùn)

輔助教學(xué)系統(tǒng)及輔助教學(xué)方法

技術(shù)領(lǐng)域

背景技術(shù)

[0002] 傳統(tǒng)的技能訓(xùn)練操作,是一種“師傅帶徒弟”型的“手把手”的模式。在教學(xué)實踐中,一位專業(yè)教師需要輔導(dǎo)一個班級的學(xué)生。由于不同的教師自身對科目訓(xùn)練技能的掌握參差不齊,對專業(yè)技能操作標準的理解掌握有差異性,在實現(xiàn)專業(yè)化的均衡教育過程中具有較大的難度。
[0003] 多年以來的專業(yè)教學(xué)設(shè)計中,將專業(yè)教學(xué)計劃內(nèi)容分為專業(yè)基礎(chǔ)課教學(xué)和專業(yè)技能實訓(xùn)教學(xué)兩部分,前者以知識點傳授為主、后者以技能習慣養(yǎng)成為目標?,F(xiàn)有的技能訓(xùn)練模式和現(xiàn)有的計算機輔助教學(xué)手段,不能進行自動跟蹤評估并自動糾偏,完全依靠教師自行完成,不能完全實現(xiàn)專業(yè)實訓(xùn)教學(xué)過程中的規(guī)范化、標準化、精準化和教學(xué)資源均衡。

發(fā)明內(nèi)容

[0004] 本發(fā)明的目的在于,克服專業(yè)教學(xué)中的不足,提供一種具有偏離度自動反饋數(shù)據(jù)閉環(huán)糾偏控制的專業(yè)技能訓(xùn)練輔助教學(xué)系統(tǒng),和一種具有偏離度自動反饋數(shù)據(jù)閉環(huán)糾偏控制的專業(yè)技能訓(xùn)練輔助教學(xué)方法;解決職業(yè)教育中的技能實訓(xùn)教學(xué)的專業(yè)性、規(guī)范性、均衡性和可操作性的難題,實現(xiàn)生均共享的技能訓(xùn)練“自動跟蹤糾偏”輔導(dǎo)和面向技能大賽成果的拓展應(yīng)用。
[0005] 本發(fā)明的目的是通過如下技術(shù)方案實現(xiàn)的:
[0006] 一種具有偏離度自動反饋數(shù)據(jù)閉環(huán)糾偏控制的專業(yè)技能訓(xùn)練輔助教學(xué)系統(tǒng),該系統(tǒng)包括智能化實訓(xùn)教材、技能訓(xùn)練專用設(shè)施、現(xiàn)場信息采集設(shè)備、系統(tǒng)服務(wù)器、輔助教學(xué)終端;系統(tǒng)服務(wù)器包括現(xiàn)場數(shù)據(jù)服務(wù)器、端服務(wù)器;輔助教學(xué)終端包括現(xiàn)場智能教學(xué)終端、智能學(xué)習終端;
[0007] 技能訓(xùn)練專用設(shè)施設(shè)置于實訓(xùn)教學(xué)現(xiàn)場,用于實訓(xùn)操作;現(xiàn)場信息采集設(shè)備設(shè)置于技能訓(xùn)練專用設(shè)施上或附近,用于采集現(xiàn)場實訓(xùn)操作數(shù)據(jù)信息(包括圍繞技能訓(xùn)練專用設(shè)施進行操作訓(xùn)練時的操作信息和思維判斷信息);
[0008] 現(xiàn)場數(shù)據(jù)服務(wù)器附帶前置采集終端,與現(xiàn)場信息采集設(shè)備連接,裝有與現(xiàn)場信息采集設(shè)備配套的專業(yè)數(shù)據(jù)采集卡和配套的數(shù)據(jù)采集、轉(zhuǎn)換軟件;實訓(xùn)操作的圖像、音頻和開關(guān)信號通過專業(yè)數(shù)據(jù)采集卡和配套的專業(yè)數(shù)據(jù)采集軟件進行采集;現(xiàn)場數(shù)據(jù)服務(wù)器用于與現(xiàn)場信息采集設(shè)備之間的交互響應(yīng),以及對現(xiàn)場采集的數(shù)據(jù)的預(yù)處理和轉(zhuǎn)換;
[0009] 智能化實訓(xùn)教材按照針對訓(xùn)練科目的科目訓(xùn)練路線導(dǎo)航圖設(shè)計,是一個或多個技能實訓(xùn)科目的集合;它將每一個技能實訓(xùn)科目內(nèi)容作為一個獨立的章節(jié),每一個章節(jié),具有相同的架構(gòu)設(shè)計;架構(gòu)中包含了以下幾個部分的內(nèi)容:1)、專業(yè)知識點、技能點基礎(chǔ)學(xué)習準備;2)、技能實訓(xùn)科目專業(yè)環(huán)境使用方法學(xué)習準備;3)、技能實訓(xùn)科目訓(xùn)練要求與評價標準;4)、技能實訓(xùn)科目訓(xùn)練步驟學(xué)習與示范;5)、技能實訓(xùn)科目訓(xùn)練跟蹤評估反饋建議;各部分的內(nèi)容均按照樹狀索引結(jié)構(gòu)編排,每一條索引設(shè)置有一個隱形的唯一性的ID標識(即隱形鏈接地址);各ID標識均與預(yù)存在云端服務(wù)器中的相關(guān)實訓(xùn)教學(xué)資源信息相對應(yīng);
[0010] 云端服務(wù)器設(shè)置于實訓(xùn)教學(xué)現(xiàn)場或者通過租賃的形式設(shè)置于運營商機房內(nèi);云端服務(wù)器中預(yù)存有實訓(xùn)教學(xué)資源信息,這些實訓(xùn)教學(xué)資源信息具有與智能化實訓(xùn)教材相對應(yīng)的資源架構(gòu)和ID標識鏈接地址;云端服務(wù)器,通過智能化實訓(xùn)教材中的ID標識向用戶提供服務(wù)響應(yīng)、對科目訓(xùn)練現(xiàn)場采集、上傳的數(shù)據(jù)進行深度識別處理、比較和跟蹤評估、并且根據(jù)評估結(jié)果進行偏離度信息反饋,提供針對性的補充學(xué)習建議;
[0011] 智能學(xué)習終端上安裝有供學(xué)習者使用的應(yīng)用軟件,即智能學(xué)習終端APP;現(xiàn)場智能教學(xué)終端上,安裝有供專業(yè)教師使用的應(yīng)用軟件,即現(xiàn)場智能教學(xué)終端APP;智能學(xué)習終端APP通過wifi無線網(wǎng)絡(luò)或者Internet與現(xiàn)場數(shù)據(jù)服務(wù)器、云端服務(wù)器連接;現(xiàn)場智能教學(xué)終端通過網(wǎng)線與現(xiàn)場數(shù)據(jù)服務(wù)器連接,并且通過Internet與云端服務(wù)器連接;
[0012] 智能學(xué)習終端APP或智能教學(xué)終端APP,通過掃描或觸摸屏幕中的智能化實訓(xùn)教材中不同的ID標識,向系統(tǒng)服務(wù)器發(fā)出數(shù)據(jù)請求,可以獲得預(yù)先上傳到云端服務(wù)器中的與專業(yè)教學(xué)設(shè)計中相關(guān)的實訓(xùn)教學(xué)資源信息,對訓(xùn)練科目各部分的具體內(nèi)容進行學(xué)習,或者指定一個訓(xùn)練科目操作的跟蹤流程;在系統(tǒng)服務(wù)器完成對學(xué)習者的訓(xùn)練操作過程的數(shù)據(jù)采集、處理、比較和跟蹤評估之后,所述終端APP可以接收到從云端服務(wù)器發(fā)出的偏離度反饋信息、評估結(jié)果和糾偏學(xué)習建議,通過選擇建議中的ID標識,即可獲得針對性的學(xué)習資源推送服務(wù);
[0013] 該輔助教學(xué)系統(tǒng)以智能化實訓(xùn)教材中設(shè)計的科目訓(xùn)練路線導(dǎo)航圖為導(dǎo)航;自動學(xué)習示范者的技能操作過程,生成比較評估樣板數(shù)據(jù)庫;自動跟蹤學(xué)習者的技能訓(xùn)練操作過程,與樣板數(shù)據(jù)庫中的數(shù)據(jù)進行比較;在系統(tǒng)服務(wù)器完成對現(xiàn)場采集數(shù)據(jù)的識別、處理、比較和跟蹤評估后,產(chǎn)生偏離度評估結(jié)果反饋信息和糾偏補充學(xué)習建議;學(xué)習者通過ID標識關(guān)聯(lián)后,獲取學(xué)習觀摩素材,選擇適用的內(nèi)容進行補充學(xué)習;之后,科目訓(xùn)練再次開始;由此實現(xiàn)“科目訓(xùn)練開始—訓(xùn)練過程數(shù)據(jù)采集—樣板數(shù)據(jù)相似度比較—訓(xùn)練過程跟蹤評估—偏離度糾偏建議推送—ID標識關(guān)聯(lián)學(xué)習觀摩素材獲取—科目訓(xùn)練再開始”的循環(huán);構(gòu)成技能科目訓(xùn)練中依據(jù)對現(xiàn)場操作數(shù)據(jù)采集的跟蹤評估,實現(xiàn)以ID標識為紐帶的數(shù)據(jù)閉環(huán)糾偏控制。
[0014] 進一步地,智能化實訓(xùn)教材的每一個章節(jié)即為一個技能訓(xùn)練科目,其架構(gòu)至少包括“實訓(xùn)科目介紹”、“實訓(xùn)環(huán)境介紹”、“專業(yè)基礎(chǔ)知識”和“虛擬仿真實訓(xùn)環(huán)境”四個部分;“實訓(xùn)科目介紹”部分分成“實訓(xùn)科目內(nèi)容介紹”、“實訓(xùn)科目考核說明”、“實訓(xùn)操作步驟介紹”三個總目,每個總目分成若干分目,分目下面又分成若干支目;“實訓(xùn)環(huán)境介紹”部分分成“技能訓(xùn)練環(huán)境介紹”、“技能實訓(xùn)流程介紹”、“訓(xùn)練過程跟蹤評估”、“技能訓(xùn)練管理手冊”四個總目,每個總目下面分成若干分目,分目下面又分成若干支目;“專業(yè)基礎(chǔ)知識”部分分成“專業(yè)基礎(chǔ)知識介紹”、“專業(yè)課程資源素材”兩個總目,每個總目又若干分目,每個分目又分成若干支目;“虛擬仿真實訓(xùn)環(huán)境”部分包含“虛擬仿真實訓(xùn)平臺”一個總目,總目下面分成若干分目,分目下面又分成若干支目;每個總目、分目、支目、條目都含有一個索引框,每一個索引框都對應(yīng)一個ID標識,各個ID標識與系統(tǒng)服務(wù)器內(nèi)的專業(yè)教學(xué)資源的存儲地址相關(guān)聯(lián);輔助教學(xué)系統(tǒng)從專業(yè)技能教學(xué)流程和專業(yè)技能實訓(xùn)流程兩個維度,將專業(yè)知識學(xué)習和訓(xùn)練跟蹤反饋信息,通過智能化實訓(xùn)教材中的ID標識,與系統(tǒng)服務(wù)器之間建立起一個閉環(huán)的數(shù)據(jù)關(guān)聯(lián);構(gòu)成一個圍繞訓(xùn)練數(shù)據(jù)為中心的采集、識別、比較、評估、反饋、循環(huán)的相似度比較閉環(huán)糾偏控制系統(tǒng),達到技能訓(xùn)練操作逐步向示范樣板操作靠近的目的。
[0015] 本發(fā)明中,一種利用上述專業(yè)技能實訓(xùn)輔助教學(xué)系統(tǒng)進行的具有偏離度自動反饋數(shù)據(jù)閉環(huán)糾偏控制的專業(yè)技能實訓(xùn)輔助教學(xué)方法如下:
[0016] 該專業(yè)技能實訓(xùn)輔助教學(xué)方法,以智能化實訓(xùn)教材為導(dǎo)航,將智能化實訓(xùn)教材設(shè)計成專業(yè)訓(xùn)練科目的路線導(dǎo)航圖,其中各部分內(nèi)容按樹狀索引結(jié)構(gòu)編排,每一個索引對應(yīng)一個ID標識;學(xué)習者利用智能學(xué)習終端上的APP,通過掃描智能化實訓(xùn)教材中不同的ID標識,從云端服務(wù)器中獲取預(yù)先上傳的相關(guān)訓(xùn)練科目學(xué)習資源,進行針對性學(xué)習;專業(yè)教師利用智能教學(xué)終端上的APP,通過掃描或屏幕觸摸智能化實訓(xùn)教材中不同的ID標識,從系統(tǒng)服務(wù)器中獲取預(yù)先上傳的相關(guān)訓(xùn)練科目教學(xué)資源,或指定一個訓(xùn)練科目操作的自動跟蹤流程;
[0017] 示范者在技能訓(xùn)練專用設(shè)施上進行示范操作時,通過現(xiàn)場信息采集設(shè)備和系統(tǒng)服務(wù)器,完成對示范者的示范操作數(shù)據(jù)采集與跟蹤,生成評估樣板數(shù)據(jù)庫;亦即,根據(jù)訓(xùn)練科目的教學(xué)設(shè)計要求,采用與學(xué)習者的訓(xùn)練操作過程相同的細分和評價方法,采集示范者的操作示范過程數(shù)據(jù)即樣板數(shù)據(jù),經(jīng)過處理之后存入到云端服務(wù)器的數(shù)據(jù)庫中,成為學(xué)習者專業(yè)科目訓(xùn)練中的相似度比較樣板;
[0018] 學(xué)習者在技能訓(xùn)練專用設(shè)施上進行訓(xùn)練操作時,通過現(xiàn)場信息采集設(shè)備對學(xué)習者的操作過程進行自動跟蹤和數(shù)據(jù)采集,系統(tǒng)服務(wù)器對采集到的訓(xùn)練數(shù)據(jù)進行細分、識別、處理之后,與評估樣板數(shù)據(jù)庫中的樣板數(shù)據(jù)進行相似度比較;相似度比較結(jié)果經(jīng)過積分處理,產(chǎn)生偏離度評價結(jié)果、科目訓(xùn)練過程評估反饋信息和補充學(xué)習糾偏建議;學(xué)習者通過ID標識關(guān)聯(lián)獲取信息之后,可以選擇對自己最適用的內(nèi)容進行補充學(xué)習糾偏;之后,重復(fù)科目訓(xùn)練過程;由此構(gòu)成科目訓(xùn)練中對現(xiàn)場操作數(shù)據(jù)采集的循環(huán)跟蹤評估,實現(xiàn)以ID標識為紐帶的數(shù)據(jù)閉環(huán)糾偏控制。
[0019] 進一步,針對服務(wù)型技能項目,將一個技能訓(xùn)練科目,按照訓(xùn)練大綱的要求,在操作者操作時的移動軌跡上,設(shè)置了多個需要重點掌握的操作技能點,包括多個關(guān)鍵技能點和多個一般技能點;在物理位置上,將關(guān)鍵技能點和一般技能點對應(yīng)的操作區(qū)域,確定為“關(guān)鍵技能點區(qū)域”和“一般技能點區(qū)域”,區(qū)域的形狀大小根據(jù)技能點屬性在教學(xué)設(shè)計中確定;關(guān)鍵技能點屬性的關(guān)注點設(shè)置為6-10個,一般技能點屬性的關(guān)注點設(shè)置為2-5個;將各個技能點屬性細分成為系統(tǒng)服務(wù)器可以進行特征識別跟蹤的多個屬性關(guān)注點(即多個維度的關(guān)注點),即:每個關(guān)鍵技能點區(qū)域包括多個屬性關(guān)注點,每個一般技能點區(qū)域包括多個屬性關(guān)注點;設(shè)置現(xiàn)場信息采集設(shè)備,采集各技能點區(qū)域內(nèi)的各個屬性關(guān)注點的現(xiàn)場數(shù)據(jù)(包括移動軌跡、體態(tài)、體感、骨骼、語音、圖像、表情、交互、檢測圖像、面部矢量、肢體動作和專業(yè)設(shè)施變位數(shù)據(jù)信息);
[0020] 將現(xiàn)場操作數(shù)據(jù)的采集分成兩種類型:“科目訓(xùn)練示范數(shù)據(jù)”,是在示范者示范操作時所采集的現(xiàn)場數(shù)據(jù),簡稱為樣板數(shù)據(jù);“學(xué)習者訓(xùn)練數(shù)據(jù)”,是學(xué)習者在科目訓(xùn)練中所采集的現(xiàn)場數(shù)據(jù),簡稱為訓(xùn)練數(shù)據(jù)也即被評估數(shù)據(jù);兩種類型的數(shù)據(jù)在采集和跟蹤處理時的細分規(guī)則和采集方法保持一致;
[0021] 科目訓(xùn)練中,圍繞技能訓(xùn)練專用設(shè)施,通過現(xiàn)場信息采集設(shè)備,采集操作者操作時在各技能點區(qū)域內(nèi)的各個屬性關(guān)注點的現(xiàn)場操作數(shù)據(jù)信息,包括移動軌跡、體態(tài)、體感、紅外、肢體動作、話術(shù)、檢測結(jié)果、操作細節(jié)和矢量值。
[0022] 進一步地,將在各技能點區(qū)域內(nèi)采集到的各個屬性關(guān)注點的現(xiàn)場數(shù)據(jù)(包括“學(xué)習者訓(xùn)練數(shù)據(jù)”和“科目訓(xùn)練示范數(shù)據(jù)”),在現(xiàn)場數(shù)據(jù)服務(wù)器中進行預(yù)處理之后上傳到云端服務(wù)器內(nèi);經(jīng)云端服務(wù)器內(nèi)的人工智能識別模進行識別后,由云端服務(wù)器內(nèi)的相似度比較模塊將各個屬性關(guān)注點上采集到的“學(xué)習者訓(xùn)練數(shù)據(jù)”與“科目訓(xùn)練示范數(shù)據(jù)”分別進行相似度比較;進行相似度比較的方法包括:針對各技能點區(qū)域內(nèi)采集數(shù)據(jù)采用的一次特征改進雷達圖評價方法,以及針對科目訓(xùn)練全流程中各個技能點評價結(jié)果采用的二次特征改進雷達圖評價方法;然后,由云端服務(wù)器內(nèi)的偏離度評價模塊進行偏離度評價,即采用相對誤差計算公式分別完成針對以技能點為依據(jù)和以科目訓(xùn)練全流程為依據(jù)的評價結(jié)果與樣板數(shù)據(jù)之間的偏離度的計算,獲得各技能點偏離度評價結(jié)果和科目訓(xùn)練全流程偏離度評價結(jié)果;最后,根據(jù)各技能點偏離度評價結(jié)果,產(chǎn)生偏離度自動反饋數(shù)據(jù)和補充學(xué)習糾偏建議,反饋到智能學(xué)習終端和智能教學(xué)終端;根據(jù)科目訓(xùn)練全流程偏離度評價結(jié)果,產(chǎn)生對學(xué)習者的本科目訓(xùn)練全流程的綜合評價成績,反饋到智能學(xué)習終端和智能教學(xué)終端。
[0023] 進一步地,進行相似度比較和偏離度評價的具體方法是:將“學(xué)習者訓(xùn)練數(shù)據(jù)”與“科目訓(xùn)練示范數(shù)據(jù)”,按照現(xiàn)場全景攝像機提供的時間軸標記點進行特征比較;比較之后根據(jù)教學(xué)設(shè)計中確定的閾值產(chǎn)生比較結(jié)果,通過一次權(quán)重修正系數(shù)進行修正后,利用一次特征改進雷達圖評價方法進行評價,即利用公式1或者公式2進行計算;將評價結(jié)果采用相對誤差計算公式即公式4進行偏離度計算,產(chǎn)生學(xué)習者在各個技能點區(qū)域訓(xùn)練操作時與“科目訓(xùn)練示范數(shù)據(jù)”之間的偏離度評價結(jié)果,據(jù)此產(chǎn)生偏離度自動反饋數(shù)據(jù)和補充學(xué)習糾偏建議,反饋到智能學(xué)習終端和智能教學(xué)終端;將各個技能點區(qū)域內(nèi)采集數(shù)據(jù)的一次特征改進雷達圖評價結(jié)果,通過二次權(quán)重修正系數(shù)進行修正,利用二次特征改進雷達圖評價方法進行評價,即利用公式3進行計算;將評價結(jié)果采用相對誤差計算公式即公式5進行偏離度計算,產(chǎn)生學(xué)習者的本科目訓(xùn)練全流程的綜合評價成績,反饋到智能學(xué)習終端和智能教學(xué)終端;偏離度自動反饋數(shù)據(jù)和補充學(xué)習糾偏建議的產(chǎn)生,主要是針對關(guān)鍵技能點區(qū)域的操作內(nèi)容;公式3也可通過編程中的積分來計算;
[0024] 在相似度比較計算中,需要根據(jù)專業(yè)教學(xué)要求分別設(shè)置閾值,形成量化的比較結(jié)果;相似度比較計算中的相關(guān)閾值和權(quán)重系數(shù)在專業(yè)教學(xué)設(shè)計中確定,并且在訓(xùn)練科目開始之前通過智能教學(xué)終端APP中的科目訓(xùn)練資源導(dǎo)入模塊錄入到系統(tǒng)之內(nèi)。
[0025] 進一步地,本發(fā)明的方法中,通過“科目訓(xùn)練開始—訓(xùn)練過程數(shù)據(jù)采集—樣板數(shù)據(jù)相似度比較—訓(xùn)練過程跟蹤評估—偏離度糾偏建議推送—ID標識關(guān)聯(lián)學(xué)習觀摩素材獲取—科目訓(xùn)練再開始”的循環(huán),構(gòu)成技能科目訓(xùn)練中依據(jù)對現(xiàn)場操作數(shù)據(jù)的跟蹤采集和跟蹤評估,實現(xiàn)以ID標識為紐帶的數(shù)據(jù)閉環(huán)糾偏控制的過程如下:
[0026] 專業(yè)教師在訓(xùn)練科目的教學(xué)設(shè)計中,完成了關(guān)于科目訓(xùn)練過程中的細分規(guī)則設(shè)計、評價參數(shù)設(shè)計、專業(yè)資源素材準備、教學(xué)課件準備之后,通過智能教學(xué)終端上傳到云端服務(wù)器中;然后通過智能教學(xué)終端,啟動示范者操作的“科目訓(xùn)練示范數(shù)據(jù)”采集流程;現(xiàn)場信息采集設(shè)備采集的數(shù)據(jù)經(jīng)過現(xiàn)場數(shù)據(jù)服務(wù)器預(yù)處理、壓縮和標定后進入云端服務(wù)器,經(jīng)過“運動軌跡信息提取”、“技能點屬性關(guān)注點信息提取”以及識別處理之后,判別為“科目訓(xùn)練示范數(shù)據(jù)”存入“樣板曲線模板數(shù)據(jù)庫”即樣板數(shù)據(jù)庫;
[0027] 通過現(xiàn)場智能教學(xué)終端APP中的ID掃描識別通信模塊掃描或屏幕觸摸智能化實訓(xùn)教材中對應(yīng)章節(jié)的“訓(xùn)練過程跟蹤評估”的ID標識,向系統(tǒng)服務(wù)器發(fā)出確定訓(xùn)練科目的指令;隨后,啟動學(xué)習者的現(xiàn)場科目訓(xùn)練操作;現(xiàn)場信息采集設(shè)備對現(xiàn)場的科目訓(xùn)練操作數(shù)據(jù)進行跟蹤采集;現(xiàn)場數(shù)據(jù)服務(wù)器中的“現(xiàn)場數(shù)據(jù)信息預(yù)處理模塊”對采集到的現(xiàn)場實時數(shù)據(jù)進行預(yù)處理,數(shù)據(jù)信息壓縮傳輸模塊將預(yù)處理之后的數(shù)據(jù)信號,經(jīng)過壓縮和標定后形成帶有采集標志的數(shù)據(jù)包,上傳到云端服務(wù)器中;云端服務(wù)器內(nèi)的人工智能識別模塊對上傳的數(shù)據(jù)進行“運動軌跡信息提取”、“技能點屬性關(guān)注點信息提取”以及識別處理之后,將跟蹤采集到的數(shù)據(jù)判別為“學(xué)習者訓(xùn)練數(shù)據(jù)”,自動保存到訓(xùn)練數(shù)據(jù)庫中;
[0028] 之后,對應(yīng)的“科目訓(xùn)練示范數(shù)據(jù)”和“學(xué)習者訓(xùn)練數(shù)據(jù)”在“相似度比較模塊”中,按照預(yù)定的“細分規(guī)則設(shè)計、評價參數(shù)設(shè)計”進行相似度比較;即對各技能點區(qū)域內(nèi)采集的數(shù)據(jù)按“一次特征改進雷達圖”評價方法利用公式1或公式2進行評價;對科目訓(xùn)練全流程中各個技能點的評價結(jié)果按“二次特征改進雷達圖”評價方法利用公式3進行評價;然后進入偏離度評價模塊,按所述的偏離度評價方法,利用公式4計算關(guān)鍵技能點操作的偏離度,利用公式5計算并產(chǎn)生科目全流程訓(xùn)練偏離度情況的綜合評價成績;
[0029] 云端服務(wù)器的自動反饋與糾偏建議形成及輸出模塊,根據(jù)“一次特征改進雷達圖”評價和偏離度評價結(jié)果,對各個技能點偏離度超過閾值的部分,向?qū)W習者推送“偏離度反饋信息”和“補充學(xué)習建議”信息,信息的表達方式是與智能化實訓(xùn)教材中設(shè)置的ID標識一致的;云端服務(wù)器的自動反饋與糾偏建議形成及輸出模塊,根據(jù)“二次特征改進雷達圖”評價和偏離度評價結(jié)果,向?qū)W習者推送針對科目訓(xùn)練全流程“偏離度反饋信息”和“補充學(xué)習建議”信息,信息的形式也是與智能化實訓(xùn)教材中設(shè)置的ID標識一致的;
[0030] 通過對“補充學(xué)習建議”中的ID標識,學(xué)習者可以知道自己的當前訓(xùn)練情況和需要補充的糾偏學(xué)習內(nèi)容;在“補充學(xué)習建議”中的ID標識中,學(xué)習者可以選擇最適用的ID標識,從系統(tǒng)服務(wù)器獲取學(xué)習資源;經(jīng)過關(guān)于知識點和技能點的觀摩、學(xué)習之后,學(xué)習者重新開始科目訓(xùn)練流程,進行第二次循環(huán),直至針對科目訓(xùn)練全流程的“偏離度反饋信息”滿足科目訓(xùn)練教學(xué)設(shè)計的要求;循環(huán)次數(shù)的控制、最終訓(xùn)練成績的判定,由專業(yè)教師按照教學(xué)設(shè)計中的規(guī)定執(zhí)行;以上對科目訓(xùn)練操作數(shù)據(jù)的閉環(huán)糾偏控制過程,通過反饋以ID標識為紐帶的補充學(xué)習建議,引導(dǎo)學(xué)習者逐次向訓(xùn)練要求靠近。
[0031] 本發(fā)明的有益效果:
[0032] 本發(fā)明提出了一種新型的具有偏離度自動反饋數(shù)據(jù)閉環(huán)糾偏控制的專業(yè)技能實訓(xùn)輔助教學(xué)系統(tǒng)及專業(yè)技能輔助教學(xué)方法;該輔助教學(xué)系統(tǒng)及輔助教學(xué)方法,以智能化實訓(xùn)教材為導(dǎo)航,將智能化實訓(xùn)教材設(shè)計成技能訓(xùn)練中的路線導(dǎo)航圖,通過掃描或觸摸教材中不同的ID標識,可以獲得相關(guān)科目訓(xùn)練的資源或指定一個訓(xùn)練科目的操作跟蹤流程;并且,將技能訓(xùn)練過程細分為可識別的跟蹤數(shù)據(jù)采集點(即屬性關(guān)注點),通過對學(xué)習者和示范者的“兩種類型”的細分操作數(shù)據(jù)的相似度比較和偏離度計算,產(chǎn)生偏離度反饋信息、跟蹤評估成績和補充學(xué)習糾偏建議;通過“科目訓(xùn)練開始—訓(xùn)練過程數(shù)據(jù)采集—樣板數(shù)據(jù)相似度比較—訓(xùn)練過程跟蹤評估—偏離度糾偏建議推送—ID標識關(guān)聯(lián)學(xué)習觀摩素材獲取—科目訓(xùn)練再開始”,構(gòu)成科目訓(xùn)練中依據(jù)對操作數(shù)據(jù)的采集跟蹤,實現(xiàn)以ID標識為紐帶的數(shù)據(jù)閉環(huán)糾偏控制過程。
[0033] 該輔助教學(xué)系統(tǒng)及輔助教學(xué)方法,將實訓(xùn)科目、實訓(xùn)環(huán)境、專業(yè)資源、現(xiàn)場評估和訓(xùn)練指導(dǎo)鏈接到一起,構(gòu)成一個具有咨詢、輔導(dǎo)、評估、反饋功能的智能化訓(xùn)練系統(tǒng),自動進行跟蹤評估和自動產(chǎn)生糾偏信息;可實現(xiàn)專業(yè)實訓(xùn)教學(xué)過程中的規(guī)范化、標準化、精準化和技能訓(xùn)練科目操作中的教學(xué)均衡,實現(xiàn)了職業(yè)技能實訓(xùn)教學(xué)模式的創(chuàng)新。該輔助教學(xué)系統(tǒng)及輔助教學(xué)方法適用但不局限于汽車營銷專業(yè),汽車機械拆裝和電氣維修,以及其他類似的服務(wù)型技能學(xué)習和專業(yè)技能訓(xùn)練場合;也適用于服務(wù)型技能大賽成果的普及、推廣實踐。附圖說明
[0034] 圖1是本發(fā)明的具有偏離度自動反饋數(shù)據(jù)閉環(huán)糾偏控制的專業(yè)技能實訓(xùn)輔助教學(xué)系統(tǒng)的結(jié)構(gòu)圖;
[0035] 圖2是本發(fā)明中的智能化實訓(xùn)教材的總體架構(gòu)框圖
[0036] 圖3是本發(fā)明中的智能學(xué)習終端APP的索引框圖;
[0037] 圖4是本發(fā)明中的智能教學(xué)終端APP的索引框圖;
[0038] 圖5是本發(fā)明的專業(yè)技能實訓(xùn)輔助教學(xué)系統(tǒng)各部分之間的交互關(guān)系圖;
[0039] 圖6是本發(fā)明中的智能實訓(xùn)方法的流程框圖;
[0040] 圖7是本發(fā)明中的智能化實訓(xùn)教材中的實訓(xùn)科目介紹部分的架構(gòu)框圖;
[0041] 圖8是本發(fā)明中的智能化實訓(xùn)教材中的實訓(xùn)環(huán)境介紹部分的架構(gòu)框圖;
[0042] 圖9是本發(fā)明中的智能化實訓(xùn)教材中的專業(yè)技能知識基礎(chǔ)部分的架構(gòu)框圖;
[0043] 圖10是本發(fā)明中的智能化實訓(xùn)教材中的虛擬仿真環(huán)境部分的架構(gòu)框圖;
[0044] 圖11是智能化實訓(xùn)教材中實訓(xùn)科目介紹部分的關(guān)鍵技能點屬性構(gòu)成和操作要求的架構(gòu)框圖;
[0045] 圖12是本發(fā)明實施例2中的汽車銷售六方位繞車介紹法示意圖;
[0046] 圖13是本發(fā)明實施例2中的第一關(guān)鍵技能點區(qū)域的屬性關(guān)注點數(shù)據(jù)的一次特征改進雷達圖;
[0047] 圖14是本發(fā)明中的實施例2中的科目訓(xùn)練全流程二次特征改進雷達圖。
[0048] 圖12中:C為技能實訓(xùn)專用設(shè)備汽車,P為全景攝像機;t1為第一關(guān)鍵技能點,t2為第一一般技能點,t2為第二關(guān)鍵技能點,s2為第二一般技能點,t3為第三關(guān)鍵技能點,s3為第三一般技能點,t4為第四關(guān)鍵技能點,s4為第四一般技能點,t5為第一關(guān)鍵技能點,s5第五一般技能點,t6第六關(guān)鍵技能點。

具體實施方式

[0049] 以下結(jié)合附圖和實施例對本發(fā)明作進一步的說明。
[0050] 實施例1
[0051] 如圖1所示,本發(fā)明一種具有偏離度自動反饋數(shù)據(jù)閉環(huán)糾偏控制的專業(yè)技能實訓(xùn)輔助教學(xué)系統(tǒng),該系統(tǒng)包括智能化實訓(xùn)教材、技能訓(xùn)練專用設(shè)施、現(xiàn)場信息采集設(shè)備、系統(tǒng)服務(wù)器、輔助教學(xué)終端;系統(tǒng)服務(wù)器包括現(xiàn)場數(shù)據(jù)服務(wù)器、云端服務(wù)器;輔助教學(xué)終端包括現(xiàn)場智能教學(xué)終端、智能學(xué)習終端;現(xiàn)場智能教學(xué)終端包括大屏幕觸摸屏電腦一體機、教學(xué)電腦、筆記本電腦、IPAD等;智能學(xué)習終端包括手機、IPAD、筆記本電腦、個人電腦;該系統(tǒng)還包括智慧教室信息化輔助設(shè)備(投影儀系統(tǒng)、音響、錄播系統(tǒng))、智能學(xué)習終端APP、智能教學(xué)終端APP、wifi無線網(wǎng)絡(luò)設(shè)備;智慧教室信息化輔助設(shè)備與現(xiàn)場智能教學(xué)終端連接;云端服務(wù)器發(fā)送到智能化教學(xué)終端的數(shù)據(jù)信息,可以轉(zhuǎn)發(fā)到現(xiàn)場智慧教室輔助信息化設(shè)備包括大屏幕觸摸一體機之上;
[0052] 技能訓(xùn)練專用設(shè)施設(shè)置于實訓(xùn)教學(xué)現(xiàn)場(實訓(xùn)室,wifi覆蓋),用于實訓(xùn)操作;現(xiàn)場信息采集設(shè)備設(shè)置于技能訓(xùn)練專用設(shè)施上或附近,用于采集現(xiàn)場實訓(xùn)操作數(shù)據(jù)信息;現(xiàn)場信息采集設(shè)備與現(xiàn)場數(shù)據(jù)服務(wù)器連接;現(xiàn)場數(shù)據(jù)服務(wù)器用于與現(xiàn)場信息采集設(shè)備之間的交互響應(yīng),以及對現(xiàn)場采集的數(shù)據(jù)的預(yù)處理和轉(zhuǎn)換(相當于一個前端數(shù)據(jù)轉(zhuǎn)換平臺);現(xiàn)場數(shù)據(jù)服務(wù)器附帶前置采集終端(包括工控計算機、個人電腦),與現(xiàn)場信息采集設(shè)備連接,裝有與現(xiàn)場信息采集設(shè)備配套的專業(yè)數(shù)據(jù)采集卡和配套的數(shù)據(jù)采集、轉(zhuǎn)換軟件;實訓(xùn)操作的圖像、音頻和開關(guān)信號通過專業(yè)數(shù)據(jù)采集卡和配套的專業(yè)數(shù)據(jù)采集軟件進行采集;
[0053] 智能學(xué)習終端APP是通過下載安裝在學(xué)習者個人的智能學(xué)習終端上的應(yīng)用軟件,通過wifi無線網(wǎng)絡(luò)與現(xiàn)場數(shù)據(jù)服務(wù)器、云端服務(wù)器連接;智能教學(xué)終端APP是安裝在現(xiàn)場智能教學(xué)終端上的應(yīng)用軟件;現(xiàn)場智能教學(xué)終端通過網(wǎng)線與現(xiàn)場數(shù)據(jù)服務(wù)器連接;現(xiàn)場數(shù)據(jù)服務(wù)器通過wifi無線網(wǎng)絡(luò)與云端服務(wù)器連接;
[0054] 智能化實訓(xùn)教材是一個或多個技能訓(xùn)練科目的集合,它將每一個技能訓(xùn)練科目內(nèi)容作為一個獨立的章節(jié);每一個章節(jié),按照相同的架構(gòu)設(shè)計,成為針對技能訓(xùn)練科目的學(xué)習路線導(dǎo)航圖;每個章節(jié)都按照樹狀索引結(jié)構(gòu)編排,每一條索引對應(yīng)一個不同的ID標識(即隱形鏈接地址);
[0055] 現(xiàn)場數(shù)據(jù)服務(wù)器安裝在實訓(xùn)場地附近,設(shè)計中包含了一個前置采集終端,用來匯集與轉(zhuǎn)發(fā)采集到的數(shù)據(jù);還包含了對現(xiàn)場攝像機、傳感器等設(shè)備的供電和信號交互,以及專業(yè)教學(xué)資源的中間緩存;
[0056] 云端服務(wù)器中預(yù)存有實訓(xùn)教學(xué)資源信息和科目訓(xùn)練內(nèi)容,這些資源信息具有與智能化實訓(xùn)教材相對應(yīng)的架構(gòu);云端服務(wù)器中存放的訓(xùn)練科目信息和教學(xué)資源信息,均與智能化實訓(xùn)教材中的每一條索引的ID標識相關(guān)聯(lián);云端服務(wù)器除了與智能化實訓(xùn)教材ID標識進行交互響應(yīng),還對現(xiàn)場采集的數(shù)據(jù)進行深度識別處理、比較和跟蹤評估,向智能學(xué)習終端和智能教學(xué)終端反饋科目訓(xùn)練評估結(jié)果、偏離度信息和補充學(xué)習糾偏建議。
[0057] 如圖5所示,智能學(xué)習終端APP或智能教學(xué)終端APP,通過掃描或屏幕觸摸智能化實訓(xùn)教材中不同的ID標識,向系統(tǒng)服務(wù)器發(fā)出數(shù)據(jù)請求,可獲得預(yù)先上傳到云端服務(wù)器中的科目訓(xùn)練相關(guān)學(xué)習資源信息,或指定一個技能訓(xùn)練操作跟蹤流程;接收從云端服務(wù)器傳送過來的科目訓(xùn)練評估結(jié)果、偏離度反饋信息和補充學(xué)習糾偏建議;還包括咨詢糾偏指導(dǎo)信息和優(yōu)化訓(xùn)練的示范、補充資源素材。
[0058] 以下對系統(tǒng)各部分做詳細說明:
[0059] 1、智能化實訓(xùn)教材
[0060] 智能化實訓(xùn)教材按照國家專業(yè)教學(xué)大綱的要求,選擇、編排的技能實訓(xùn)科目內(nèi)容;智能化實訓(xùn)教材是一個或多個技能實訓(xùn)科目的集合,它將每一個技能訓(xùn)練科目作為一個獨立的章節(jié),按照相同的設(shè)計架構(gòu),針對訓(xùn)練科目流程的實施路線圖進行設(shè)計;并且,智能化實訓(xùn)教材架構(gòu)中包含的每一個技能訓(xùn)練科目的內(nèi)容介紹(包括相關(guān)專業(yè)設(shè)備、內(nèi)部構(gòu)造、工作原理、訓(xùn)練流程、關(guān)鍵技能點、相關(guān)知識點、觀摩素材等部分),均按照文、圖、流程、操作要求的樹狀索引結(jié)構(gòu)編排,每一條索引設(shè)置有唯一性的ID標識;各ID標識均與云端服務(wù)器中的相關(guān)實訓(xùn)教學(xué)資源信息存放地址相關(guān)聯(lián)。
[0061] 如圖2所示,智能化實訓(xùn)教材每一個章節(jié)(每一個技能實訓(xùn)科目)的架構(gòu)由“實訓(xùn)科目介紹”、“實訓(xùn)環(huán)境介紹”、“專業(yè)基礎(chǔ)知識”和“虛擬仿真實訓(xùn)環(huán)境”四個部分組成;每個部分可以分成多個總目,每個總目又可分成若干分目,每個分目又可分成若干支目,每個支目又可分成若干條目;每個總目、分目、支目、條目有一個索引框,每一個索引框?qū)?yīng)一個ID標識;如圖7-圖10所示,智能化實訓(xùn)教材每一個章節(jié)的“實訓(xùn)科目介紹”部分分成“實訓(xùn)科目內(nèi)容介紹”、“實訓(xùn)科目考核說明”、“實訓(xùn)操作步驟介紹”三個索引框;“實訓(xùn)環(huán)境介紹”部分分成“技能訓(xùn)練環(huán)境介紹”、“技能實訓(xùn)流程介紹”、“訓(xùn)練過程跟蹤評估”、“技能訓(xùn)練管理手冊”四個索引框;“專業(yè)基礎(chǔ)知識”部分分成“專業(yè)基礎(chǔ)知識介紹”、“專業(yè)課程資源素材”兩個索引框;“虛擬仿真實訓(xùn)環(huán)境”部分包含“虛擬仿真實訓(xùn)平臺”一個索引框;以上每個索引框都帶有一個ID標識。
[0062] 智能化實訓(xùn)教材以供學(xué)習者使用的紙質(zhì)印刷的教材和在智能教學(xué)終端和輔助設(shè)備上顯示的電子文檔兩種形式存在,可以滿足專業(yè)教師現(xiàn)場教學(xué)應(yīng)用需求,和學(xué)生在其他區(qū)域位置的學(xué)習需求。智能學(xué)習終端和智能教學(xué)終端均可通過掃描或屏幕觸摸智能化實訓(xùn)教材的ID標識從系統(tǒng)服務(wù)器獲得相關(guān)的資源信息反饋。
[0063] 智能化實訓(xùn)教材并不是傳統(tǒng)意義上的一本教科書,而是一個“技能訓(xùn)練路線學(xué)習導(dǎo)航窗口”,它將實訓(xùn)科目、實訓(xùn)環(huán)境、專業(yè)資源、現(xiàn)場評估和訓(xùn)練指導(dǎo)鏈接到一起,構(gòu)成一個具有咨詢、輔導(dǎo)、評估、反饋功能的自動化訓(xùn)練導(dǎo)航系統(tǒng)。在技能訓(xùn)練過程中,它可以替代專業(yè)教師和教練,幫助學(xué)習者實現(xiàn)“咨詢、觀摩、評估、糾偏、輔導(dǎo)”的過程。在智能教學(xué)終端的屏幕上(包括大屏幕一體機)也可以通過觸摸智能化實訓(xùn)教材的電子文檔從系統(tǒng)服務(wù)器獲得相關(guān)的資源信息反饋;在科目訓(xùn)練過程中,系統(tǒng)服務(wù)器通過智能化實訓(xùn)教材設(shè)計中規(guī)定的各個ID標識,向智能學(xué)習終端和智能教學(xué)終端推送偏離度評估信息和補充學(xué)習糾偏建議;學(xué)習者通過掃描各個ID標識獲得對應(yīng)的資源素材,由此構(gòu)成以ID標識為中心的數(shù)據(jù)流轉(zhuǎn)閉環(huán)糾偏控制過程,引導(dǎo)學(xué)習者逐步達到科目訓(xùn)練要求;借助ID標識的交互鏈接作用,將訓(xùn)練科目、實訓(xùn)環(huán)境、專業(yè)資源、現(xiàn)場評估和訓(xùn)練指導(dǎo)整合成為一個整體,構(gòu)成一個具有咨詢、輔導(dǎo)、評估、反饋功能的智能化輔助數(shù)據(jù)閉環(huán)輔助訓(xùn)練系統(tǒng)。
[0064] 2、技能訓(xùn)練專用設(shè)施
[0065] 技能訓(xùn)練專用設(shè)施是用來進行專業(yè)技能訓(xùn)練的真實的專用設(shè)施,這些設(shè)施在專業(yè)教學(xué)中用來幫助學(xué)習者練習、養(yǎng)成良好的拆裝或維修技能習慣。另一種技能訓(xùn)練專用設(shè)施則是作為專業(yè)場景,幫助學(xué)習者練習、養(yǎng)成良好的服務(wù)型技能習慣。這些專用設(shè)施來源于真實應(yīng)用中的常規(guī)設(shè)備或者子系統(tǒng),在科目訓(xùn)練中,需要在上面增加一些傳感器,用于檢測到操作者的相關(guān)操作手勢和動作;同時還包括技能訓(xùn)練中涉及的專用檢測儀器和工具,在學(xué)習中也需要養(yǎng)成正確的操作和觀察能。
[0066] 3、現(xiàn)場信息采集設(shè)備
[0067] 現(xiàn)場信息采集設(shè)備包括全景攝像機、智能傳感器矩陣、RGBD傳感器矩陣、音頻采集矩陣幾個部分。除了全景攝像機之外,其它部分由2-N個(套)相同或者不同參數(shù)配置的設(shè)備構(gòu)成。設(shè)備的數(shù)量和參數(shù),根據(jù)技能訓(xùn)練區(qū)的面積大小和訓(xùn)練內(nèi)容的不同來確定,達到覆蓋技能訓(xùn)練區(qū)、獲得操作者在科目訓(xùn)練流程中的完整的移動軌跡、體態(tài)、體感、紅外、肢體動作、語言表達等信息,特別是針對關(guān)鍵技能點位置的清晰的記錄信息。
[0068] 全景攝像機是一臺廣的固定攝像機,用于連續(xù)拍攝現(xiàn)場的整體平面圖像,獲得每幅圖像中被跟蹤操作者的2D像素坐標;通過配套的視頻分析軟件(例如選擇kinect、QVA等現(xiàn)有的軟件),2D像素坐標數(shù)據(jù)的變化所形成的平面移動軌跡和時間軸標識,產(chǎn)生全系統(tǒng)數(shù)據(jù)采集過程中的時間軸基準信息;全景攝像機固定安裝在技能訓(xùn)練專用設(shè)施的上方(實訓(xùn)室頂端),其拍攝范圍能夠涵蓋科目訓(xùn)練的活動區(qū)域;在技能訓(xùn)練專用設(shè)施的上方,還安裝有一個與全景攝像機配套的高靈敏度的低噪音拾音器,用于獲取訓(xùn)練區(qū)域中的音頻信號
[0069] 智能傳感器矩陣由多個不同性能參數(shù)的傳感器部件構(gòu)成,設(shè)置在操作流程中的預(yù)定的關(guān)鍵技能操作點區(qū)域附近或者專用設(shè)施上;傳感器包括紅外、觸摸、光敏、體感、聲波、數(shù)據(jù)手套等不同類型,根據(jù)科目訓(xùn)練現(xiàn)場的具體操作類型進行配置,智能傳感器還包括儀器檢測結(jié)果識別和語音識別等功能。
[0070] RGBD傳感器矩陣由2-N個RGB攝像機和深度攝像機構(gòu)成,根據(jù)科目訓(xùn)練現(xiàn)場的需求進行配置,其特征是能夠從不同的角度捕捉到操作者的動作信息和骨骼信息;RGB攝像機和深度攝像機的主要作用是采集到操作者的移動方向、矢量信息和體態(tài)動作的關(guān)鍵信息。RGBD傳感器矩陣設(shè)置為可移動安裝,能夠覆蓋相關(guān)的“技能點區(qū)域”,在10-15米范圍內(nèi)可以獲得清晰的視頻圖像。
[0071] 音頻采集矩陣用于采集對現(xiàn)場音頻信息或者語言表達內(nèi)容有采集要求的訓(xùn)練流程之中;音頻采集矩陣采用三種安裝形式,實訓(xùn)室頂端固定安裝、技能訓(xùn)練專用設(shè)施上安裝、與RGBD傳感器矩陣設(shè)備一致移動安裝。
[0072] 4、系統(tǒng)服務(wù)器
[0073] 系統(tǒng)服務(wù)器包括現(xiàn)場數(shù)據(jù)服務(wù)器和云端服務(wù)器,均為市場銷售的專業(yè)數(shù)據(jù)處理服務(wù)器,同時具備較大的數(shù)據(jù)存儲能力。
[0074] 現(xiàn)場數(shù)據(jù)服務(wù)器安裝在實訓(xùn)場地附近,主要用于對現(xiàn)場采集的簡單動作等數(shù)據(jù)的預(yù)處理、轉(zhuǎn)換和專業(yè)技術(shù)資源的下載緩存服務(wù);現(xiàn)場數(shù)據(jù)服務(wù)器系統(tǒng)的設(shè)計中包含對現(xiàn)場攝像機、傳感器等設(shè)備的供電和信號轉(zhuǎn)化部分,包含了一個前置采集終端,用來匯集與轉(zhuǎn)發(fā)采集到的數(shù)據(jù)。
[0075] 現(xiàn)場信息采集設(shè)備選擇市場采購的專業(yè)設(shè)備,這些設(shè)備有的具有配套的數(shù)據(jù)采集處理軟件和硬件,例如Kinect和數(shù)據(jù)手套;有的可以通過專業(yè)的數(shù)據(jù)采集卡和配套的軟件完成采集工作;在現(xiàn)場數(shù)據(jù)服務(wù)器與現(xiàn)場信息采集設(shè)備之間,需要增加一個前置采集終端,用來匯集與轉(zhuǎn)發(fā)采集到的數(shù)據(jù),這個終端可以選擇工控機,也可以使用個人電腦加擴展口的辦法解決。
[0076] 云端服務(wù)器重點用于與智能化實訓(xùn)教材ID標識之間的交互響應(yīng)和對現(xiàn)場采集數(shù)據(jù)的深度識別處理、比較和跟蹤評估,以及針對性的資源素材的自動推送服務(wù)。當學(xué)習者位于其它區(qū)域時,智能學(xué)習終端APP掃描智能化實訓(xùn)教材中的ID標識相關(guān)聯(lián)信息的需求響應(yīng)由云端服務(wù)器完成。
[0077] 云端服務(wù)器可以本地化安裝,也可以托管或租用的形式設(shè)置在電信機房之內(nèi)。
[0078] 4.1、現(xiàn)場數(shù)據(jù)服務(wù)器包括順序連接的以下功能模塊:
[0079] 4.1.1、采集數(shù)據(jù)接口模塊:用于完成與現(xiàn)場信息采集設(shè)備的數(shù)據(jù)輸出的接口功能;分為三種:第一種采集數(shù)據(jù)接口模塊,用于完成與現(xiàn)場信息采集設(shè)備的自帶采集數(shù)據(jù)配套硬、軟件的采集設(shè)備的數(shù)據(jù)輸出的接口功能;第二種采集數(shù)據(jù)接口模塊,用于完成與現(xiàn)場信息采集設(shè)備的專業(yè)數(shù)據(jù)采集卡配套的數(shù)據(jù)輸出軟件的接口功能;第三種采集數(shù)據(jù)接口模塊,用于完成與現(xiàn)場信息采集設(shè)備的音視頻信號采集卡配套的數(shù)據(jù)輸出軟件的接口功能。
[0080] 4.1.2、現(xiàn)場數(shù)據(jù)信息預(yù)處理模塊:用于根據(jù)統(tǒng)一的時間軸標志,完成該時間點之后的數(shù)據(jù)提取功能;這樣的數(shù)據(jù)包括視頻關(guān)鍵、采樣圖片、骨骼信號、音頻信號、矢量信號、相對位置信號、模擬信號量、開關(guān)信號狀態(tài)值;數(shù)據(jù)提取時通過平滑處理消除由于干擾的原因誤讀;
[0081] 4.1.3、數(shù)據(jù)信息壓縮傳輸模塊:用于將預(yù)處理之后的數(shù)據(jù)信號,經(jīng)過壓縮和標定后形成帶有采集標志的數(shù)據(jù)包;完成現(xiàn)場數(shù)據(jù)服務(wù)器與智能學(xué)習終端、智能教學(xué)終端、云端服務(wù)器之間的數(shù)據(jù)交換功能;其中,數(shù)據(jù)交換分為實時交換和靜默推送二種形式;
[0082] 實時交換的形式適用于:從用戶終端發(fā)出的用戶數(shù)據(jù)請求指令的轉(zhuǎn)發(fā)響應(yīng);經(jīng)預(yù)處理之后技能點屬性關(guān)注點采集屬性信息;其它需要立即響應(yīng)并從云端服務(wù)器獲得的反饋信息。
[0083] 靜默推送交換的形式適用于:科目訓(xùn)練中全景攝像機采集的完整的視頻信號;科目訓(xùn)練中全景攝像機采集的完整的音頻信號;通過智能教學(xué)終端選中的科目訓(xùn)練計劃中設(shè)定的實訓(xùn)教學(xué)資源信息下載緩存服務(wù)。靜默推送交換的形式是指系統(tǒng)服務(wù)器自動選擇在系統(tǒng)和網(wǎng)絡(luò)不繁忙的狀態(tài)時實施的數(shù)據(jù)傳送形式。
[0084] 4.2、云端服務(wù)器包括依次連接的以下核心應(yīng)用軟件功能模塊:
[0085] 1)、人工智能識別模塊:對現(xiàn)場數(shù)據(jù)服務(wù)器上傳的過程采集信號進行識別,包括移動軌跡、體態(tài)、體感、骨骼、語音、圖像、表情、交互、檢測圖像、面部矢量、肢體動作和專業(yè)設(shè)施變位數(shù)據(jù)信息;
[0086] 2)、相似度比較模塊:對現(xiàn)場數(shù)據(jù)服務(wù)器上傳的訓(xùn)練過程采集的各技能點屬性關(guān)注點數(shù)據(jù)進行識別,并且與對應(yīng)的樣板數(shù)據(jù)進行相似度比較;這種比較是在同一個時間軸標志下,針對預(yù)定的技能點區(qū)域內(nèi)的信息評價結(jié)果進行的;進行相似度比較的方法包括:對各技能點區(qū)域內(nèi)采集的數(shù)據(jù)按“一次特征改進雷達圖”評價方法進行評價,即按公式1或者公式2進行計算;對科目訓(xùn)練全流程中各個技能點評價結(jié)果按“二次特征改進雷達圖”評價方法進行結(jié)果性評價,即按公式3進行計算;
[0087] 3)技能點偏離度評價模塊:完成以技能點為依據(jù)的評價結(jié)果與樣板數(shù)據(jù)的偏離度的計算,即采用相對誤差計算公式4進行偏離度計算(進行偏離度評價),獲得對各技能點操作的偏離度評價結(jié)果;通常是針對各關(guān)鍵技能點的偏離度評價,在科目訓(xùn)練需要時也可針對一般技能點的偏離度進行評價;
[0088] 4)、科目訓(xùn)練全流程偏離度評價模塊:完成以科目訓(xùn)練全流程為依據(jù)的評價結(jié)果與樣板數(shù)據(jù)的偏離度的計算,即采用相對誤差計算公式5進行偏離度計算(進行偏離度評價),獲得對科目訓(xùn)練全流程操作的偏離度評價結(jié)果;
[0089] 5)、自動反饋與糾偏建議形成及輸出模塊:根據(jù)技能點偏離度評價模塊的輸出結(jié)果,產(chǎn)生以各技能點操作的偏離度評價結(jié)果為依據(jù)的偏離度自動反饋信息及補充學(xué)習糾偏建議;根據(jù)科目訓(xùn)練全流程偏離度評價模塊的輸出結(jié)果,產(chǎn)生以科目訓(xùn)練全流程偏離度評價結(jié)果為依據(jù)的科目訓(xùn)練全流程綜合評價成績及反饋信息;該模塊是構(gòu)成科目訓(xùn)練中依據(jù)對操作數(shù)據(jù)的采集跟蹤,實現(xiàn)以ID標識為紐帶的數(shù)據(jù)閉環(huán)糾偏控制過程的主要流轉(zhuǎn)數(shù)據(jù)生成模塊。
[0090] 4.3、云端服務(wù)器還包括依次連接的以下功能模塊:
[0091] 用戶信息驗證管理模塊:實現(xiàn)用戶注冊、登錄、信息采集和運行中的隨機隱形用戶信息驗證功能;
[0092] ID掃描識別通信響應(yīng)模塊:完成對智能學(xué)習終端、智能教學(xué)終端發(fā)出的用戶數(shù)據(jù)請求指令的確認和響應(yīng);完成對現(xiàn)場數(shù)據(jù)服務(wù)器發(fā)出的實時交換和靜默推送數(shù)據(jù)交換形式的確認和響應(yīng);對發(fā)送到智能學(xué)習終端上的資源信息,進行數(shù)據(jù)包壓縮和像素降低處理;
[0093] 實訓(xùn)教學(xué)資源管理模塊:用于對與智能化實訓(xùn)教材中設(shè)計的,學(xué)習路線圖ID標識即隱形關(guān)聯(lián)地址,相對應(yīng)的資源信息的編輯和維護。
[0094] 5、智能學(xué)習終端、現(xiàn)場智能教學(xué)終端、智能學(xué)習終端APP、智能教學(xué)終端APP
[0095] 智能學(xué)習終端APP是可下載安裝在學(xué)習者個人智能學(xué)習終端上的應(yīng)用軟件,可通過人臉識別或指紋識別注冊生成“學(xué)員賬戶和學(xué)習檔案”。智能教學(xué)終端APP是安裝在現(xiàn)場智能教學(xué)終端上的應(yīng)用軟件?,F(xiàn)場智能教學(xué)終端和智慧教室信息化輔助設(shè)備是實訓(xùn)教學(xué)資源信息的輸出端口。
[0096] 如圖3所示,智能學(xué)習終端APP包括相互連接的智能用戶注冊管理模塊、ID標識掃描識別通信模塊;還包括分別與ID標識掃描識別通信模塊連接的推薦資源交互學(xué)習模塊、虛擬仿真簡易練習模塊、觀摩資源點播學(xué)習模塊、教學(xué)課程點播學(xué)習模塊、學(xué)習過程信息記錄模塊、科目訓(xùn)練評估信息模塊;此外還包括與以上各模塊連接的用戶信息隱性監(jiān)督模塊;
[0097] 智能用戶注冊管理模塊:通過人工智能手段采集用戶信息,建立系統(tǒng)中的個人賬戶;與專業(yè)實訓(xùn)教學(xué)過程相關(guān)的歷史記錄數(shù)據(jù)將被保存在個人賬戶所對應(yīng)的區(qū)域之中。
[0098] ID掃描識別通信模塊:用于調(diào)用智能學(xué)習終端中的掃描框掃描紙質(zhì)印刷的智能化實訓(xùn)教材中設(shè)定的ID標識,向云端服務(wù)器發(fā)出“用戶數(shù)據(jù)請求”指令;待系統(tǒng)響應(yīng)“用戶數(shù)據(jù)請求”指令之后,接收對應(yīng)的反饋信息(包括教學(xué)資源)。
[0099] 推薦資源交互學(xué)習模塊:向?qū)W習者推送針對性學(xué)習建議之后,記錄用戶的自我學(xué)習內(nèi)容和響應(yīng)程度信息;與用戶信息隱性監(jiān)督模塊相配合,構(gòu)成專業(yè)實訓(xùn)教學(xué)過程相關(guān)的歷史記錄數(shù)據(jù)。
[0100] 虛擬仿真簡易練習模塊:科目訓(xùn)練流程的虛擬仿真練習,同時記錄用戶的自我學(xué)習過程和響應(yīng)程度信息;與用戶信息隱性監(jiān)督模塊相配合,構(gòu)成專業(yè)實訓(xùn)教學(xué)過程相關(guān)的歷史記錄數(shù)據(jù)。
[0101] 觀摩資源點播學(xué)習模塊:科目訓(xùn)練流程的觀摩學(xué)習,同時記錄用戶的自我學(xué)習過程和關(guān)注程度信息;與用戶信息隱性監(jiān)督模塊相配合,構(gòu)成專業(yè)實訓(xùn)教學(xué)過程相關(guān)的歷史記錄數(shù)據(jù)。
[0102] 教學(xué)課程點播學(xué)習模塊:通過選擇相關(guān)的ID標識,從云端服務(wù)器獲取訓(xùn)練科目相關(guān)信息資源和輔助信息。記錄用戶在學(xué)習準備時或者課后的自我學(xué)習內(nèi)容和推薦學(xué)習響應(yīng)程度信息;與用戶信息隱性監(jiān)督模塊相配合,構(gòu)成專業(yè)實訓(xùn)教學(xué)過程相關(guān)的歷史記錄數(shù)據(jù)。
[0103] 學(xué)習過程信息記錄模塊:記錄用戶在專業(yè)教學(xué)計劃實施周期中,對知識點、技能點、觀摩資源、實訓(xùn)內(nèi)容、主動學(xué)習、學(xué)習積極性和效果信息;與用戶信息隱性監(jiān)督模塊相配合,構(gòu)成專業(yè)實訓(xùn)教學(xué)過程相關(guān)的歷史記錄數(shù)據(jù)。
[0104] 科目訓(xùn)練評估信息模塊:通過數(shù)據(jù)請求,從云端服務(wù)器獲得科目訓(xùn)練歷史評估記錄、當前評估記錄、訓(xùn)練成績和補充學(xué)習建議;
[0105] 用戶信息隱性監(jiān)督模塊:對用戶的自主學(xué)習過程進行記錄,通過隨機的隱形用戶拍照和瞳孔識別,將獲取的用戶信息與注冊信息進行比對,驗證學(xué)習者的實時真實身份信息;經(jīng)過身份確認的學(xué)習記錄將構(gòu)成“評估依據(jù)”的一個組成部分。
[0106] 如圖4所示,智能教學(xué)終端APP包括相互連接的智能用戶注冊管理模塊、ID標識掃描識別通信模塊;還包括分別與ID標識掃描識別通信模塊連接的科目訓(xùn)練教學(xué)指導(dǎo)模塊、虛擬仿真科目練習模塊、觀摩資源示范輔導(dǎo)模塊、專業(yè)課件教學(xué)應(yīng)用模塊、示范樣板信息錄入模塊、科目訓(xùn)練評估反饋模塊;此外還包括與以上各模塊連接的教學(xué)管理信息查詢模塊、科目訓(xùn)練資源導(dǎo)入模塊;
[0107] 智能用戶注冊管理模塊:用于通過人工智能手段采集用戶信息,建立系統(tǒng)中的個人賬戶;與專業(yè)實訓(xùn)教學(xué)過程相關(guān)的歷史記錄數(shù)據(jù)將被保存在個人賬戶所對應(yīng)的區(qū)域之中。
[0108] ID標識掃描識別通信模塊:用于調(diào)用現(xiàn)場智能教學(xué)終端中的掃描框,掃描紙質(zhì)印刷的智能化實訓(xùn)教材中的ID標識,或者采用觸摸的方式點擊現(xiàn)場智能教學(xué)終端中的“智能化實訓(xùn)教材電子文檔”中設(shè)定的ID標識,向云端服務(wù)器發(fā)出“用戶數(shù)據(jù)請求”指令;待系統(tǒng)響應(yīng)“用戶數(shù)據(jù)請求”指令之后,接收對應(yīng)的反饋信息,包括教學(xué)資源。
[0109] 科目訓(xùn)練教學(xué)指導(dǎo)模塊:用于根據(jù)每一個科目訓(xùn)練教學(xué)計劃的設(shè)計,將與實訓(xùn)教學(xué)計劃相關(guān)的跟蹤評估規(guī)則和方法導(dǎo)入到系統(tǒng)中。該導(dǎo)入是登錄教師特定權(quán)限賬戶后實現(xiàn)的。
[0110] 虛擬仿真科目練習模塊:用于選擇不同科目的虛擬仿真練習內(nèi)容,進行模擬現(xiàn)場訓(xùn)練環(huán)境和訓(xùn)練過程的虛擬訓(xùn)練操作。通過該模塊可完整地模擬出現(xiàn)場的訓(xùn)練環(huán)境和訓(xùn)練過程。這種虛擬訓(xùn)練操作可以幫助學(xué)習者在實操之前,盡量的熟悉科目訓(xùn)練內(nèi)容。通過該模塊的操作可達到提高科目實操訓(xùn)練的效率,同時也可以解決提高學(xué)習者的有效實訓(xùn)操作效率的不足。
[0111] 觀摩資源示范輔導(dǎo)模塊:用于向系統(tǒng)服務(wù)器傳送相關(guān)示范資源的學(xué)習請求,從云端服務(wù)器或現(xiàn)場數(shù)據(jù)服務(wù)器獲得實際的觀摩示范資源。觀摩示范內(nèi)容包括示范者的真實的操作記錄和虛擬增強現(xiàn)實教學(xué)素材。
[0112] 專業(yè)課件教學(xué)應(yīng)用模塊:該模塊是為專業(yè)教學(xué)服務(wù)的,用于獲得教學(xué)計劃實施中的相關(guān)課件、碎片化素材和其它課程資源??梢詽M足現(xiàn)場教學(xué)計劃實施需求,也可以將教學(xué)過程中的相關(guān)附加信息(如板書內(nèi)容)自動記錄、推送到科目實訓(xùn)教學(xué)訓(xùn)練指導(dǎo)模塊中。
[0113] 示范樣板信息錄入模塊:用于示范樣板信息錄入;通過專業(yè)示范者或者技能大賽優(yōu)勝者進行現(xiàn)場示范操作,按照實訓(xùn)教學(xué)計劃中設(shè)計的評價標準,進行相應(yīng)的現(xiàn)場數(shù)據(jù)采集,經(jīng)過處理之后錄入存放到云端服務(wù)器中,成為示范操作樣板(即科目訓(xùn)練示范數(shù)據(jù))。其采用相同的數(shù)據(jù)采集方法和評價標準,經(jīng)過數(shù)據(jù)處理之后,可形成規(guī)范化、專業(yè)化和歸一化的評價過程。
[0114] 科目訓(xùn)練評估反饋模塊:該模塊用于查閱學(xué)習者個人的訓(xùn)練的跟蹤信息、評估信息、反饋信息和學(xué)習信息,包括統(tǒng)計信息和整體教學(xué)評估信息。
[0115] 教學(xué)管理信息查詢模塊:用于檢索、查詢與科目訓(xùn)練相關(guān)的教學(xué)計劃執(zhí)行記錄和學(xué)習者的學(xué)習過程、訓(xùn)練操作跟蹤評估記錄、歷史信息和統(tǒng)計數(shù)據(jù);該模塊僅僅是發(fā)送相關(guān)的指令信息和接受反饋信息;運算過程、統(tǒng)計過程和歷史數(shù)據(jù)均從云端服務(wù)器內(nèi)數(shù)據(jù)庫中提取。
[0116] 科目訓(xùn)練資源導(dǎo)入模塊:根據(jù)每一個科目訓(xùn)練計劃的設(shè)計,將與實訓(xùn)教學(xué)計劃相關(guān)的資源導(dǎo)入到系統(tǒng)中。系統(tǒng)的架構(gòu)設(shè)計是固定的,但是科目訓(xùn)練的內(nèi)容、學(xué)習資源、觀摩、教學(xué)課件,包括知識點、技能點內(nèi)容描述、虛擬仿真資源、訓(xùn)練設(shè)施和方法說明、安全要求等等,都是根據(jù)科目訓(xùn)練的教學(xué)設(shè)計來確定的。在每一個科目訓(xùn)練教學(xué)計劃設(shè)計中,與實訓(xùn)教學(xué)計劃相關(guān)的資源包括關(guān)鍵技能點數(shù)量、關(guān)鍵技能點屬性的設(shè)置,都需要通過一個模板導(dǎo)入到系統(tǒng)中。該導(dǎo)入在登錄教師特定權(quán)限賬戶后實現(xiàn)。
[0117] 智能學(xué)習終端APP或現(xiàn)場智能教學(xué)終端APP通過調(diào)動終端中的掃描框掃描智能化實訓(xùn)教材中設(shè)定的ID標識,然后向云端服務(wù)器發(fā)出“用戶數(shù)據(jù)請求”指令;智能學(xué)習終端APP或現(xiàn)場智能教學(xué)終端APP接收到云端服務(wù)器提供的反饋信息之后,通過激活A(yù)PP中不同的功能模塊(即圖3智能學(xué)習終端APP、圖4現(xiàn)場智能教學(xué)終端APP功能框圖中各功能模塊)后在屏幕上顯示。
[0118] 智能教學(xué)終端APP主要服務(wù)于現(xiàn)場教學(xué),通過ID標識掃描識別通信模塊調(diào)動掃描框掃描智能化實訓(xùn)教材中設(shè)定的ID標識,或者采用觸摸的方式點擊一體機中的“智能化實訓(xùn)教材電子文檔”中設(shè)定的ID標識,然后,向現(xiàn)場數(shù)據(jù)服務(wù)器或者云端服務(wù)器發(fā)出“用戶數(shù)據(jù)請求”指令。服務(wù)器響應(yīng)服務(wù)后,反饋的相關(guān)信息可以滿足現(xiàn)場教學(xué)需求。
[0119] 如圖4智能教學(xué)終端APP功能框圖中所示,通過“科目訓(xùn)練資源導(dǎo)入”和“示范樣板信息錄入”的操作,在這兩個模塊中預(yù)先進行屬性參數(shù)設(shè)置,確定“專業(yè)教學(xué)數(shù)據(jù)維護”的屬性;然后,通過ID標識掃描識別通信模塊向系統(tǒng)發(fā)送帶有屬性說明的指令。之后,系統(tǒng)服務(wù)器將對教學(xué)資源編輯或是對示范樣板數(shù)據(jù)的進行采集的操作流程。如圖6所示,系統(tǒng)將產(chǎn)生“科目訓(xùn)練示范數(shù)據(jù)”,經(jīng)現(xiàn)場數(shù)據(jù)服務(wù)器上傳到云端服務(wù)器,生成科目訓(xùn)練樣板數(shù)據(jù),存入樣板數(shù)據(jù)庫。
[0120] 智能教學(xué)終端APP的功能設(shè)置除了智能學(xué)習終端APP中描述的之外,還增加了“科目訓(xùn)練資源導(dǎo)入”、“示范樣板信息錄入”功能模塊,支持對新增教學(xué)計劃內(nèi)容的維護和管理。
[0121] 6、技能訓(xùn)練科目設(shè)計內(nèi)容
[0122] 6.1、訓(xùn)練科目的教學(xué)準備
[0123] 如圖5所示,智能學(xué)習終端和智能教學(xué)終端可以通過掃描智能化實訓(xùn)教材中的ID標識,向系統(tǒng)服務(wù)器發(fā)出用戶數(shù)據(jù)請求指令,內(nèi)容包括專業(yè)教學(xué)課程資源、學(xué)習觀摩資源、科目訓(xùn)練信息、偏離度反饋信息和補充學(xué)習建議歷史信息;系統(tǒng)服務(wù)器的反饋信息,可以發(fā)送到智能學(xué)習終端也可以發(fā)送到智能教學(xué)終端以及信息化輔助設(shè)備和智能大屏幕一體機上。
[0124] 專業(yè)教師利用智能教學(xué)終端APP,點擊或觸摸智能教學(xué)終端APP中的不同的ID標識,即可與系統(tǒng)服務(wù)器進行交互,獲得相關(guān)的實訓(xùn)科目的教學(xué)資源和課件,并利用現(xiàn)場智能教學(xué)終端(一體化觸摸屏等)或者智慧教室信息化輔助設(shè)施(投影儀等)實施現(xiàn)場教學(xué)和咨詢輔導(dǎo)活動。
[0125] 專業(yè)教師利用智能教學(xué)終端APP,通過調(diào)動終端中的掃描框掃描或屏幕觸摸智能化實訓(xùn)教材導(dǎo)航圖中預(yù)設(shè)的“訓(xùn)練過程跟蹤評估”的ID標識,即可獲得相關(guān)學(xué)習者的科目訓(xùn)練偏離度評估結(jié)果反饋信息和糾偏建議。
[0126] 在新建一個智能化實訓(xùn)教材中的訓(xùn)練科目章節(jié)中的“訓(xùn)練過程跟蹤評估”的ID標識時,首先需要在智能教學(xué)終端APP中,選擇“科目訓(xùn)練資源導(dǎo)入模塊”,添加這個訓(xùn)練科目;將與訓(xùn)練科目教學(xué)相關(guān)的科目訓(xùn)練內(nèi)容、學(xué)習資源、觀摩、教學(xué)課件,包括知識點、技能點內(nèi)容描述、虛擬仿真資源、訓(xùn)練設(shè)施和方法說明、安全要求等等,逐一導(dǎo)入到系統(tǒng)服務(wù)器中;然后針對這個訓(xùn)練科目進行操作參數(shù)的設(shè)置,根據(jù)訓(xùn)練科目教學(xué)設(shè)計計劃安排,專業(yè)教師在教學(xué)設(shè)計中需要確定訓(xùn)練流程中的關(guān)鍵技能點和一般技能點的細分規(guī)則和要求,以及相應(yīng)的閾值、權(quán)重系數(shù)等操作參數(shù);將這些需要設(shè)定的信息,通過智能教學(xué)終端中的“科目訓(xùn)練教學(xué)指導(dǎo)模塊”,預(yù)先錄入到云端服務(wù)器中。
[0127] 6.2、訓(xùn)練過程中的數(shù)據(jù)采集與保存方法
[0128] 6.2.1、通過智能教學(xué)終端APP,選擇智能化實訓(xùn)教材中的某一個訓(xùn)練科目(章節(jié)),掃描圖8中所示的“訓(xùn)練過程跟蹤評估”的ID標識;啟動圖1中的現(xiàn)場信息采集設(shè)備之后,示范者可以在技能訓(xùn)練專用設(shè)施上開始對應(yīng)的科目訓(xùn)練示范操作,此時通過現(xiàn)場信息采集設(shè)備進行數(shù)據(jù)采集,采集到的相關(guān)數(shù)據(jù)將自動被“學(xué)習和記錄”,成為評估樣板數(shù)據(jù),存入現(xiàn)場數(shù)據(jù)服務(wù)器。
[0129] 6.2.2、通過智能教學(xué)終端APP,選擇智能化實訓(xùn)教材中的某一個訓(xùn)練科目(章節(jié)),掃描如圖8中所示的“訓(xùn)練過程跟蹤評估”的ID標識;啟動圖1中的現(xiàn)場信息采集設(shè)備之后,學(xué)習者就可以在技能訓(xùn)練專用設(shè)施中開始科目訓(xùn)練操作,此時,通過現(xiàn)場信息采集設(shè)備進行數(shù)據(jù)采集,采集到的相關(guān)數(shù)據(jù)將自動被記錄、進入現(xiàn)場數(shù)據(jù)服務(wù)器中,并且上傳到云端服務(wù)器。
[0130] 6.2.3、利用現(xiàn)場信息采集設(shè)備進行數(shù)據(jù)采集與處理的具體方法如下:
[0131] 1)、通過在實訓(xùn)設(shè)備上方,垂直安裝的全景攝像機以及配套的視頻分析軟件,可以獲取每一關(guān)鍵幀圖像中被跟蹤操作者的2D像素坐標,形成帶有時間軸標識的操作者的平面移動軌跡圖和矢量方向圖,同時產(chǎn)生全系統(tǒng)數(shù)據(jù)采集過程中的時間軸基準信息。
[0132] 2)、根據(jù)預(yù)先設(shè)定的關(guān)鍵技能點位置和關(guān)鍵技能點區(qū)域范圍,可以獲得操作中的各種關(guān)鍵技能點屬性采集數(shù)據(jù)。如語音、語氣、表情、關(guān)鍵詞句識別、操作姿態(tài)、操作者朝向、檢測數(shù)據(jù)圖像、動作順序、邏輯順序、判斷結(jié)果、操作效率、冗余操作等。還可獲得KGBD傳感器轉(zhuǎn)換后的,操作者與實訓(xùn)設(shè)備和可能的“客戶”之間的相對位置變化和正面朝向矢量變化方向等信息。圖像采集的核心是對操作者的體態(tài)、姿態(tài)、正面矢量方向和手部動作進行采樣和記錄,采樣密度為每秒12-15幀。如操作者的動作比較頻繁和細膩,則采用數(shù)據(jù)手套的形式來獲得局部動作捕捉數(shù)據(jù)。RGB圖像和音頻信息同時也進行記錄(數(shù)據(jù)手套是智能傳感器矩陣的一種類型)。
[0133] 3)、在關(guān)鍵技能點區(qū)域范圍中,需要對“操作者”和“客戶”之間的語音信息進行采集和識別,并且與預(yù)設(shè)的語音信息進行關(guān)鍵詞的比較,然后記錄、保存。音頻采集的核心是對操作者的表達能力和方式進行識別;主要通過長句和關(guān)鍵詞的智能識別方法,判斷操作者在關(guān)鍵位置時,所表達的關(guān)鍵信息的正確性、準確性和規(guī)范化程度。
[0134] 4)、服務(wù)器對所采集到的視頻信息,采用雙邊濾波對深度圖進行的去噪保邊平滑處理。根據(jù)深度圖和紅外CMOS內(nèi)參計算攝像機坐標系下的深度信息構(gòu)成點云,并變換到全局坐標系下,計算深度信息和法向量(用于誤差估計)。此項操作可獲得操作者的骨骼節(jié)點的變化軌跡和骨骼間的相對位置變化和矢量圖,為下一步關(guān)鍵技能點屬性的相似度比較提供一個特殊維度的參數(shù)。
[0135] 5)、在需要使用測量儀器進行檢測、判斷的維修技能訓(xùn)練場合,要采集、判斷儀器的顯示內(nèi)容;操作者觀察到的檢測內(nèi)容,和經(jīng)過思考之后選擇的下一步操作,應(yīng)該符合專業(yè)技術(shù)要求;操作步驟在專業(yè)上和邏輯上具有正確性和準確性;現(xiàn)場采集的數(shù)據(jù)要能夠為操作者所采取的操作步驟提供評估依據(jù)。
[0136] 6)、當操作者通過各個關(guān)鍵技能點操作區(qū)域時,均需重復(fù)上述“1)”-“5)”的數(shù)據(jù)采集與處理步驟和內(nèi)容。將采集到的各種形式的現(xiàn)場數(shù)據(jù)送入現(xiàn)場數(shù)據(jù)服務(wù)器內(nèi)經(jīng)處理后上傳到云端服務(wù)器保存。
[0137] 7)、在一般技能點區(qū)域內(nèi),僅僅采集操作者的運動軌跡和矢量方向的關(guān)聯(lián)性信息。
[0138] 6.3、訓(xùn)練過程中的數(shù)據(jù)采集跟蹤與評估過程
[0139] 6.3.1、跟蹤評估的數(shù)據(jù)分類
[0140] 訓(xùn)練科目中的跟蹤評估數(shù)據(jù)有兩種類型:①科目訓(xùn)練示范數(shù)據(jù),②學(xué)習者訓(xùn)練數(shù)據(jù);
[0141] 科目訓(xùn)練示范數(shù)據(jù)是示范者根據(jù)本科目的要求在實際操作中所產(chǎn)生的現(xiàn)場數(shù)據(jù);學(xué)習者訓(xùn)練數(shù)據(jù)是學(xué)習者根據(jù)本科目的要求進行實際操作時所產(chǎn)生的現(xiàn)場數(shù)據(jù);以上兩個類型的數(shù)據(jù)在采集過程中,使用完全一致的傳感器設(shè)置、關(guān)鍵技能點區(qū)域設(shè)置、細分規(guī)則和參數(shù)設(shè)置。
[0142] 6.3.2、跟蹤與評估過程
[0143] 現(xiàn)場數(shù)據(jù)服務(wù)器中采集到的現(xiàn)場實時數(shù)據(jù)上傳到云端服務(wù)器中后,經(jīng)過“運動軌跡信息提取”和“技能點屬性關(guān)注信息提取”后,分別獲得了操作者的運動軌跡數(shù)據(jù)和細分操作數(shù)據(jù);隨后對數(shù)據(jù)的類型進行判斷識別,根據(jù)判別結(jié)果輸出兩個分支:其一輸出為圖6左側(cè)的“科目訓(xùn)練示范數(shù)據(jù)”,該數(shù)據(jù)通過“樣板曲線生成”存入云端服務(wù)器中的樣板數(shù)據(jù)庫內(nèi),作為學(xué)習者訓(xùn)練評估時的對照數(shù)據(jù);其二輸出為圖6右側(cè)的“學(xué)習者訓(xùn)練數(shù)據(jù)”,作為訓(xùn)練過程中的被評估數(shù)據(jù),進入“技能點屬性關(guān)注點相似度比較”模塊(相似度比較器),與樣板數(shù)據(jù)庫內(nèi)相應(yīng)的對照數(shù)據(jù)進行比較。
[0144] 以示范者的操作作為樣板,采集各個技能點區(qū)域中各個維度關(guān)注點上的現(xiàn)場訓(xùn)練數(shù)據(jù)(包括移動軌跡、體態(tài)、體感、骨骼、語音、圖像、表情、交互、檢測圖像、面部矢量、肢體動作和專業(yè)設(shè)施變位信息),在現(xiàn)場數(shù)據(jù)服務(wù)器中進行預(yù)處理之后上傳到云端服務(wù)器;經(jīng)云端服務(wù)器的人工智能識別模塊識別后,作為“科目訓(xùn)練示范數(shù)據(jù)”保存;在相似度比較過程中,各維度關(guān)注點上的示范者現(xiàn)場操作數(shù)據(jù)的量化值被定義為標準值(100分),技能點區(qū)域以時間軸為基準對應(yīng)的采集信息和視頻信息被截取、加工成為碎片化素材作為補充學(xué)習建議內(nèi)容的一個部分。
[0145] 系統(tǒng)執(zhí)行智能化實訓(xùn)教材中指定訓(xùn)練科目的“訓(xùn)練過程跟蹤評估”的ID標識的技能學(xué)習路線圖分兩種情況:
[0146] (1)在智能教學(xué)終端APP上選擇指定訓(xùn)練科目下的“示范樣板信息錄入模塊”,然后通過ID掃描識別通信模塊調(diào)動終端中的掃描框掃描或屏幕觸摸智能化實訓(xùn)教材中設(shè)定的“訓(xùn)練過程跟蹤評估”的ID標識,發(fā)出用戶數(shù)據(jù)請求指令之后,系統(tǒng)將執(zhí)行示范者現(xiàn)場操作訓(xùn)練的模式;系統(tǒng)將對示范者的現(xiàn)場的操作過程數(shù)據(jù)信息進行采集,根據(jù)已經(jīng)錄入云端服務(wù)器的“科目訓(xùn)練流程”的細分規(guī)則、操作要求和相應(yīng)的閾值、權(quán)重系數(shù),由系統(tǒng)服務(wù)器進行處理后,生成樣板數(shù)據(jù)表(科目訓(xùn)練示范數(shù)據(jù)),保存到科目訓(xùn)練示范數(shù)據(jù)庫中;如前所述的圖6中左側(cè)的“其一輸出”所示。
[0147] (2)在智能教學(xué)終端APP上,單純通過ID標識掃描識別通信模塊調(diào)動終端中的掃描框掃描或屏幕觸摸智能化實訓(xùn)教材中指定訓(xùn)練科目下的“訓(xùn)練過程跟蹤評估”的ID標識,發(fā)出用戶數(shù)據(jù)請求指令之后,系統(tǒng)將默認執(zhí)行學(xué)習者現(xiàn)場操作訓(xùn)練的模式;系統(tǒng)將對學(xué)習者的現(xiàn)場的操作過程數(shù)據(jù)信息進行采集,根據(jù)已經(jīng)錄入云端服務(wù)器的“科目訓(xùn)練流程”的細分規(guī)則、操作要求和相應(yīng)的閾值、權(quán)重系數(shù),由系統(tǒng)服務(wù)器進行處理后生成“學(xué)習者訓(xùn)練數(shù)據(jù)”,保存到學(xué)習者訓(xùn)練數(shù)據(jù)庫中。之后,指定訓(xùn)練科目下對應(yīng)的“科目訓(xùn)練示范數(shù)據(jù)”和“學(xué)習者訓(xùn)練數(shù)據(jù)”會同時進入到系統(tǒng)服務(wù)器的相似度比較模塊(相似度比較器軟件)中進行相似度比較評價,然后通過偏離度評價模塊進行偏離度計算值,開始執(zhí)行“偏離度自動反饋數(shù)據(jù)閉環(huán)控制”過程。如前所述的圖6中右側(cè)的“其二輸出”所示。
[0148] 現(xiàn)場智能教學(xué)終端APP通過ID標識掃描識別通信模塊調(diào)動終端中的掃描框掃描智能化實訓(xùn)教材中設(shè)定的“訓(xùn)練過程跟蹤評估”的ID標識(圖8的實訓(xùn)環(huán)境介紹中的“訓(xùn)練過程跟蹤評估”),就是發(fā)出了“訓(xùn)練過程跟蹤評估”的指令;之后,現(xiàn)場輔助教學(xué)系統(tǒng)環(huán)境的操作數(shù)據(jù)采集,就由現(xiàn)場數(shù)據(jù)服務(wù)器、云端服務(wù)器和現(xiàn)場設(shè)備(技能訓(xùn)練專用設(shè)施和現(xiàn)場信息采集設(shè)備)組成的輔助系統(tǒng)“接管了”。現(xiàn)場智能教學(xué)終端APP的ID標識掃描識別通信模塊發(fā)出的指令,就是指定訓(xùn)練科目,也就是圖7中的實訓(xùn)科目介紹部分的各條內(nèi)容的操作聲明。然后,現(xiàn)場智能教學(xué)終端APP的ID標識掃描識別通信模塊的功能就將獲得跟蹤評估信息的偏離度反饋、糾偏建議和訓(xùn)練評價結(jié)果。
[0149] 6.3.3、相似度比較(相似度比較模塊)
[0150] 6.3.3.1、云端服務(wù)器中安裝有人工智能相似度比較軟件(相似度比較模塊),用于對操作者的面部表情、語言信息、聲音信息、關(guān)鍵詞比較和長句分析、關(guān)聯(lián)性和邏輯分析等復(fù)雜信息數(shù)據(jù)進行識別,并且與“科目訓(xùn)練示范數(shù)據(jù)”進行比較。特別是在針對于技能操作過程中的許多非量化指標的考核時,需要根據(jù)現(xiàn)場的實際環(huán)境情況,通過模糊比較來判斷學(xué)習者操作時有無明確的目的性、是否通過分析、思考和判斷之后才確定下一步的操作,這是一種對思維方式和操作流程的訓(xùn)練和多維度的綜合評估的設(shè)計方法。
[0151] 本發(fā)明在滿足行業(yè)技術(shù)規(guī)范和專業(yè)操作技能訓(xùn)練要求的同時,通過對示范者的技能操作過程跟蹤,按照相同的技能點屬性規(guī)則采集數(shù)據(jù)、建立評估樣板。將示范者和學(xué)習者的操作過程,在相同的時間軸下,通過量化和非量化的形式,對操作內(nèi)容、操作結(jié)果、操作姿態(tài)、邏輯順序、關(guān)鍵幀圖像、語音判別和工作狀態(tài)進行多重的相似程度比較,獲得綜合評估結(jié)論。
[0152] 6.3.3.2、當系統(tǒng)執(zhí)行智能化實訓(xùn)教材中的“訓(xùn)練過程跟蹤評估”的ID標識技能導(dǎo)航路線圖時,對應(yīng)的“科目訓(xùn)練示范數(shù)據(jù)”和“學(xué)習者訓(xùn)練數(shù)據(jù)”在“相似度比較模塊”中,按照預(yù)定的“細分規(guī)則設(shè)計、評價參數(shù)設(shè)計”進行相似度比較;即對各技能點區(qū)域內(nèi)采集的數(shù)據(jù)按“一次特征改進雷達圖”評價方法利用公式1或公式2進行評價;對科目訓(xùn)練全流程中各個技能點的評價結(jié)果按“二次特征改進雷達圖”評價方法利用公式3進行評價;然后進入偏離度評價模塊,按所述的偏離度評價方法利用公式4計算關(guān)鍵技能點操作的偏離度,利用公式5產(chǎn)生科目全流程訓(xùn)練記錄數(shù)據(jù)偏離度綜合評價成績;以上所述,利用公式4計算獲得的結(jié)果,是各技能點操作的偏離度信息和補充學(xué)習糾偏建議形成的依據(jù),利用公式5計算獲得的結(jié)果,是產(chǎn)生科目全流程訓(xùn)練偏離度情況的綜合評價成績的依據(jù)。
[0153] 6.3.3.3、在技能訓(xùn)練教學(xué)計劃中,圍繞實訓(xùn)設(shè)備,對操作者的移動路線有一個基本要求,這個移動路線是通過全景攝像機獲得的。在操作者的移動路線上,預(yù)設(shè)了相關(guān)的操作技能點,這些技能點分成關(guān)鍵技能點和一般技能點。將學(xué)習者的平面移動路線、方向矢量值和在各技能點操作區(qū)域內(nèi)的各種操作信息、語音信息分別與“科目訓(xùn)練示范數(shù)據(jù)”進行比較;
[0154] 平面移動軌跡的比較主要是坐標位置和方向矢量值的比較,其絕對差值的權(quán)重系數(shù)選擇為Gm=0.2-0.3;關(guān)鍵技能點操作區(qū)域內(nèi)的各種操作信息根據(jù)采樣密度進行比較,其差值的權(quán)重系數(shù)選擇為Gd=0.2-0.6;關(guān)鍵技能點操作區(qū)域內(nèi)的語音比較差值的權(quán)重系數(shù)選擇為0.2-0.3;
[0155] 由于在技能訓(xùn)練科目中,關(guān)鍵技能點操作區(qū)域可能是多個,所以,對于不同方面的關(guān)鍵技能點操作需要設(shè)置不同的權(quán)重系數(shù):Gp=0.1,0.3,0.5,0.7,0.9;
[0156] 以上Gm、Gd、Gp均為在專業(yè)教學(xué)設(shè)計中預(yù)先的設(shè)定值,不同的科目和技能之間互有差異,所以在運行時可以進行一些局部的修正;該類參數(shù)可以在現(xiàn)場通過“人機交互終端”輸入系統(tǒng)。
[0157] 6.3.3.4、由于采取了唯一的時間軸標識和統(tǒng)一的采樣規(guī)則和采樣密度,所以操作者操作時采集的數(shù)據(jù)和示范者操作時采集的數(shù)據(jù)之間的比較是一種相對性比較方式。訓(xùn)練時采集到的操作者的平面移動坐標和關(guān)鍵技能點操作區(qū)域內(nèi)的屬性數(shù)據(jù),與評估樣板中的“科目訓(xùn)練示范數(shù)據(jù)”進行比較,各對應(yīng)點的允許偏離的閾值的取值,應(yīng)該被限制在平均值(絕對值)的50%以內(nèi)。
[0158] 6.3.3.5、對操作過程中采集的語音信息,通過關(guān)鍵詞比較和長句分析,與“科目訓(xùn)練示范數(shù)據(jù)”進行比較。其中的關(guān)聯(lián)性和邏輯順序判斷是重點評估內(nèi)容。
[0159] 6.3.3.6、偏離度信息反饋內(nèi)容
[0160] 根據(jù)相似度比較和偏離度評價結(jié)果,系統(tǒng)向?qū)W習者推送的反饋信息類型如下:(1)訓(xùn)練結(jié)果評價信息;(2)補充學(xué)習糾偏建議,包括知識點和技能點知識內(nèi)容;(3)建議觀摩的示范視頻信息;(4)話術(shù)類語言表達示范信息。
[0161] 以上信息中的第一類是“文字+得分”評價信息,后面三類是針對性學(xué)習建議,是以ID標識表達的信息。其中的ID標識表達的信息,就是智能化實訓(xùn)教材中設(shè)定的ID標識,參見圖2、圖7-圖11所示;只要用手機APP或智能教學(xué)終端APP進行掃描、點擊或觸摸智能化實訓(xùn)教材中的ID標識,就可以直接從云端服務(wù)器獲得相應(yīng)的資源素材;學(xué)習者對偏離度信息反饋內(nèi)容,可以選擇自己認為最需要的部分進行補充學(xué)習。
[0162] 云端服務(wù)器內(nèi)相似度比較器運行的結(jié)果信息和處理建議最終會反饋到智能教學(xué)終端APP或者智能學(xué)習終端APP。云端服務(wù)器推送反饋信息的服務(wù)是被動的,是在智能教學(xué)終端APP的科目訓(xùn)練評估反饋模塊和智能學(xué)習終端APP的科目訓(xùn)練評估信息模塊分別通過各自的ID標識掃描識別通信模塊發(fā)出這個用戶數(shù)據(jù)請求指令之后才“響應(yīng)”。這個過程可以多次反復(fù),通過“跟蹤評估信息的反饋和結(jié)論”的改變,使“學(xué)習者訓(xùn)練數(shù)據(jù)”和“科目訓(xùn)練示范數(shù)據(jù)”之間的相似程度不斷提高并滿足要求。在技能訓(xùn)練科目流程中,學(xué)習者與示范者的操作過程的相似程度越高,說明技能習慣養(yǎng)成的效果越好。據(jù)此也可按照不同的量化分級指標,產(chǎn)生最終的技能訓(xùn)練成績。
[0163] 7、現(xiàn)場訓(xùn)練數(shù)據(jù)信息跟蹤評估方法,包括以下4個方面:
[0164] 7.1、對各技能點區(qū)域內(nèi)采集數(shù)據(jù)的一次特征改進雷達圖評價方法,該方法如下:
[0165] 通過現(xiàn)場信息采集設(shè)備,采集到各技能點區(qū)域內(nèi)的各個屬性關(guān)注點的現(xiàn)場數(shù)據(jù)(包括“訓(xùn)練數(shù)據(jù)”和“樣板數(shù)據(jù)”),通過現(xiàn)場數(shù)據(jù)服務(wù)器預(yù)處理之后,將帶有采集時間標志的各個數(shù)據(jù)包上傳到云端服務(wù)器內(nèi);云端服務(wù)器將采集到的各個屬性關(guān)注點的“訓(xùn)練數(shù)據(jù)”,按照現(xiàn)場全景攝像機提供的時間軸標記點,與“樣板數(shù)據(jù)”進行特征比較,然后根據(jù)教學(xué)設(shè)計中確定的閾值進行標定量化,得到標定量化值即屬性值ai;將該標定量化值按照預(yù)定的屬性關(guān)注點一次權(quán)重系數(shù)qti或者qSi進行修正后,生成多條同一點出發(fā)的矢量線,由此繪制出針對每一個關(guān)鍵技能點和一般技能點屬性評價的一次特征改進雷達圖;在繪制一次特征改進雷達圖時,用一根矢量線和對應(yīng)的夾角來表示一個“屬性關(guān)注點數(shù)據(jù)”,從同一原點出發(fā),按照各個屬性關(guān)注點的設(shè)定排列,順時針方向順序進行圖形繪制;其中,各屬性關(guān)注點的矢量線夾角與教學(xué)設(shè)計中預(yù)定的一次權(quán)重系數(shù)qti或者qSi相關(guān)聯(lián),權(quán)重系數(shù)越大、夾角越大;
[0166] 根據(jù)以下公式1、公式2,分別計算出各個關(guān)鍵技能點區(qū)域和一般技能點區(qū)域?qū)傩缘囊淮翁卣鞲倪M雷達圖的面積;
[0167]
[0168]
[0169] 其中:
[0170] At=實訓(xùn)科目中對應(yīng)的每一個關(guān)鍵技能點的一次特征改進雷達圖面積計算結(jié)果;即:A1是第一個關(guān)鍵技能點的一次特征改進雷達圖面積計算結(jié)果,A2是第二個關(guān)鍵技能點的一次特征改進雷達圖面積計算結(jié)果,以此類推;
[0171] Bs=實訓(xùn)科目中對應(yīng)的每一個一般技能點的一次特征改進雷達圖面積計算結(jié)果;即:B1是第一個一般關(guān)鍵技能點的一次特征改進雷達圖面積計算結(jié)果,B2是第二個一般技能點的一次特征改進雷達圖面積計算結(jié)果,以此類推;
[0172] n=各技能點區(qū)域內(nèi)設(shè)定的屬性關(guān)注點的個數(shù);計算At時,n是關(guān)鍵技能點區(qū)域內(nèi)設(shè)定的屬性關(guān)注點個數(shù);計算Bs時,n是一般技能點區(qū)域內(nèi)設(shè)定的屬性關(guān)注點個數(shù);
[0173] qti=第t個關(guān)鍵技能點的第i個屬性關(guān)注點的一次權(quán)重系數(shù);在計算At的公式1中用權(quán)重系數(shù)qti;
[0174] qsi=第s個一般技能點的第i個屬性關(guān)注點的一次權(quán)重系數(shù);在計算Bs的公式2中用權(quán)重系數(shù)qsi;
[0175] ai=對應(yīng)每一個技能點屬性關(guān)注點采集的數(shù)據(jù),經(jīng)過標定量化之后再經(jīng)過一次權(quán)重系數(shù)qti或qsi修正后的數(shù)據(jù),即繪制一次特征改進雷達圖時的一個軸長,即矢量線的長度;
[0176] a(i+1)mod?n=與ai相鄰的技能點屬性關(guān)注點采集的數(shù)據(jù),經(jīng)過標定后的量化值;
[0177] 當a(i+1)mod?n中n=i時,a(i+1)mod?n=a1;此時的模值mod?n是代表不同的關(guān)鍵技能點和一般技能點對應(yīng)的屬性關(guān)注點個數(shù);
[0178] t=實訓(xùn)科目中在操作者的移動路線上按順序排列的各個關(guān)鍵技能點的順序編號;
[0179] s=實訓(xùn)科目中在操作者的移動路線上按順序排列的各個一般技能點的順序編號;
[0180] Bs的計算公式與At的計算公式相同,但教學(xué)設(shè)計中設(shè)置的屬性關(guān)注點個數(shù)n不同,一次權(quán)重系數(shù)qti和qsi也不同;關(guān)鍵技能點的總數(shù)量和一般技能點的總數(shù)量也可能不同。
[0181] 7.2、對科目訓(xùn)練全流程中各個技能點評價結(jié)果采用“二次特征改進雷達圖”結(jié)果性評價方法,該方法如下:
[0182] 根據(jù)科目實訓(xùn)流程的技能點排列順序,將各技能點的一次特征改進雷達圖面積At、Bs按順序排列,亦即,按照“Th1=A1、Th2=B1、Th3=A2、Th4=B2、Th5=A3、Th6=B3、Th7=A4、Th8=B4”,依次類推的順序交替排列后,構(gòu)成新的科目訓(xùn)練全流程數(shù)據(jù)表Th;將科目訓(xùn)練全流程數(shù)據(jù)表Th中的數(shù)據(jù),按照預(yù)定的二次權(quán)重系數(shù)qTi進行修正后,生成多條從同一點出發(fā)的矢量線,由此繪制出反映訓(xùn)練全流程的二次特征改進雷達圖;在繪制二次特征改進雷達圖時,用一根矢量線和對應(yīng)的夾角來表示一個技能點的相似度評價結(jié)果,從同一原點出發(fā),按照順時針方向的順序進行圖形繪制;其中各技能點評價結(jié)果的矢量線夾角與教學(xué)設(shè)計中預(yù)定的二次權(quán)重系數(shù)qTi相關(guān)聯(lián),權(quán)重系數(shù)越大、夾角越大;
[0183] 根據(jù)以下公式3,計算出反映訓(xùn)練全流程的二次特征改進雷達圖的面積Ch;
[0184]
[0185] 其中:Ch=針對技能實訓(xùn)科目的全流程繪制的二次特征改進雷達圖面積計算結(jié)果;
[0186] h=實訓(xùn)科目全流程技能點數(shù)據(jù)表Th內(nèi)的數(shù)據(jù)總量,是關(guān)鍵技能點數(shù)量和一般技能點數(shù)量的疊加和;
[0187] qTi=對應(yīng)科目訓(xùn)練全流程數(shù)據(jù)表Th內(nèi)順序為i的數(shù)據(jù)的二次權(quán)重系數(shù);i從1到h;
[0188] Ti=科目訓(xùn)練全流程數(shù)據(jù)表Th中的第i個經(jīng)過二次權(quán)重系數(shù)qTi修正的數(shù)據(jù);即T1=qT1*A1,T2=qT2*B1,T3=qT3*A2,T4=qT4*B2,T5=qT5*A3,T6=qT6*B3,以此類推下去;i從1到h;
[0189] T(i+1)mod?h=實訓(xùn)科目全流程數(shù)據(jù)表Th中與Ti相鄰的下一個數(shù)據(jù);
[0190] 當T(i+1)mod?h中h=i時,T(i+1)mod?h=T1,與全流程數(shù)據(jù)表Th中第一個數(shù)據(jù)重合。
[0191] 7.3、對實訓(xùn)科目實訓(xùn)操作過程中的各個技能點區(qū)域,采用偏離度評價方法進行評估,產(chǎn)生對技能點操作的偏離度信息,產(chǎn)生偏離度反饋和補充學(xué)習糾偏建議;
[0192] 采用以下相對誤差計算公式4,對各技能點區(qū)域內(nèi)的操作進行偏離度評價:
[0193]
[0194] 其中:Δet=針對各個技能點的訓(xùn)練記錄數(shù)據(jù)的偏離度評價結(jié)果;通常僅用于評價各關(guān)鍵技能點的偏離情況;在科目訓(xùn)練需要時也可用于評價各一般技能點的偏離情況。
[0195] t=實訓(xùn)科目流程中的各個技能點的順序編號;
[0196] Tdt=各個技能點的示范樣板修正數(shù)據(jù)一次特性改進雷達圖面積計算結(jié)果,即At或Bs;該數(shù)據(jù)從樣板數(shù)據(jù)庫中獲??;
[0197] Ttrt=各個技能點的訓(xùn)練記錄修正數(shù)據(jù)一次特性改進雷達圖面積計算結(jié)果,即從學(xué)習者訓(xùn)練數(shù)據(jù)計算獲得的At或者Bs;該數(shù)據(jù)通過跟蹤現(xiàn)場訓(xùn)練數(shù)據(jù)后計算獲得。
[0198] 7.4、對科目訓(xùn)練流程的偏離度綜合評價成績產(chǎn)生方法如下:
[0199] 采用以下相對誤差計算公式5,對科目訓(xùn)練全流程的操作進行偏離度評價:
[0200]
[0201] 其中:Δe=科目全流程訓(xùn)練偏離度綜合評價成績;
[0202] Tdh=全流程示范樣板修正數(shù)據(jù)二次改進雷達圖面積計算結(jié)果,即針對樣板數(shù)據(jù)利用公式3計算得到的Ch,該數(shù)據(jù)從樣板數(shù)據(jù)庫中獲?。?/div>
[0203] Ttrh=全流程訓(xùn)練記錄修正數(shù)據(jù)二次改進雷達圖面積計算結(jié)果,即針對學(xué)習者訓(xùn)練數(shù)據(jù)利用公式3計算得到的Ch,該數(shù)據(jù)通過跟蹤現(xiàn)場訓(xùn)練數(shù)據(jù)后獲得。
[0204] 采用相對誤差計算公式4,對各個技能點區(qū)域內(nèi)的操作進行偏離度評價(通常僅考慮關(guān)鍵技能點的偏離情況,科目訓(xùn)練需要時也可以包括針對一般技能點區(qū)域內(nèi)操作的偏離度評價);采用相對誤差計算公式5,對科目訓(xùn)練全流程的操作進行偏離度評價,產(chǎn)生學(xué)習者訓(xùn)練過程的評估成績。
[0205] 7.5、上述公式4和公式5應(yīng)用于對以下過程數(shù)據(jù)的評價之中:
[0206] 1)訓(xùn)練時的各個關(guān)鍵技能點屬性的一次特征改進雷達圖的面積與示范樣板中對應(yīng)數(shù)據(jù)的比較;2)訓(xùn)練時的各個一般技能點屬性的一次特征改進雷達圖的面積與示范樣板中對應(yīng)數(shù)據(jù)的比較;3)針對訓(xùn)練全流程的二次特征改進雷達圖的面積與示范樣板中對應(yīng)數(shù)據(jù)的比較。
[0207] 進行上述評價時,采用“1)”和“2)”的比較結(jié)果(如比較結(jié)果的絕對值大于閾值,則判定為不合格),系統(tǒng)將根據(jù)比較結(jié)果自動產(chǎn)生向?qū)W習者有針對性的推送學(xué)習建議和示范資源(通過ID關(guān)聯(lián));通過“1)”、“2)”、“3)”的比較結(jié)果和相關(guān)輔助訓(xùn)練記錄(如學(xué)習記錄、效率等),系統(tǒng)將構(gòu)成向?qū)W習者反饋時的,對實訓(xùn)科目全流程記錄的評價信息和評估成績;在技能訓(xùn)練科目流程中,學(xué)習者與示范者的操作過程的相似度越高則偏離度越小,說明技能習慣的養(yǎng)成效果越好;據(jù)此也可以按照不同的量化分級指標,產(chǎn)生最終的技能訓(xùn)練成績。這些評價信息和評估成績最終通過ID關(guān)聯(lián)智能教學(xué)終端APP的科目訓(xùn)練評估反饋模塊反饋給專業(yè)教師。
[0208] 以上內(nèi)容中的各個公式計算,也可以通過積分計算并借助于計算機編程實現(xiàn)。
[0209] 8、“偏離度自動反饋數(shù)據(jù)閉環(huán)糾偏控制”過程的說明
[0210] 本發(fā)明中,“偏離度自動反饋數(shù)據(jù)閉環(huán)糾偏控制”的過程描述如下:首先,通過現(xiàn)場智能教學(xué)終端APP中的ID標識掃描識別通信模塊掃描或屏幕觸摸智能化實訓(xùn)教材中設(shè)定的“訓(xùn)練過程跟蹤評估”的ID標識,向系統(tǒng)服務(wù)器發(fā)出用戶數(shù)據(jù)請求指令,指定訓(xùn)練科目;隨后,啟動現(xiàn)場科目訓(xùn)練操作;現(xiàn)場信息采集設(shè)備對現(xiàn)場的科目訓(xùn)練操作數(shù)據(jù)進行跟蹤采集;現(xiàn)場數(shù)據(jù)服務(wù)器中的現(xiàn)場數(shù)據(jù)信息預(yù)處理模塊對采集到的現(xiàn)場實時數(shù)據(jù)進行預(yù)處理,數(shù)據(jù)信息壓縮傳輸模塊將預(yù)處理之后的數(shù)據(jù)信號,經(jīng)過壓縮和標定后形成帶有采集標志的數(shù)據(jù)包,上傳到云端服務(wù)器中;云端服務(wù)器內(nèi)的人工智能識別模塊對上傳的數(shù)據(jù)進行“運動軌跡信息提取”、“技能點屬性關(guān)注點信息提取”以及識別處理之后,分別獲得操作者的運動軌跡數(shù)據(jù)和細分操作數(shù)據(jù);隨后對數(shù)據(jù)的類型進行判斷識別,根據(jù)判別結(jié)果輸出兩個分支:其一輸出為“科目訓(xùn)練示范數(shù)據(jù)”,該數(shù)據(jù)通過“樣板曲線生成”形成樣板數(shù)據(jù)存入云端服務(wù)器中的樣板數(shù)據(jù)庫內(nèi),作為學(xué)習者訓(xùn)練評估時的對照數(shù)據(jù);其二輸出為“學(xué)習者訓(xùn)練數(shù)據(jù)”,作為訓(xùn)練過程中的被評估數(shù)據(jù);之后,對應(yīng)的“科目訓(xùn)練示范數(shù)據(jù)”和“學(xué)習者訓(xùn)練數(shù)據(jù)”在云端服務(wù)器的相似度比較模塊中,按照預(yù)定的“細分規(guī)則設(shè)計、評價參數(shù)設(shè)計”進行相似度比較;
進行相似度比較的方法包括:對各技能點區(qū)域內(nèi)采集的數(shù)據(jù)按“一次特征改進雷達圖”評價方法進行評價,對科目訓(xùn)練全流程中各個技能點評價結(jié)果按“二次特征改進雷達圖”評價方法進行結(jié)果性評價;之后,上述評價結(jié)果分別進入技能點偏離度評價模塊和科目訓(xùn)練全流程偏離度評價模塊進行偏離度計算產(chǎn)生偏離度評價結(jié)果;最后,通過自動反饋與糾偏建議形成及輸出模塊,形成并輸出自動反饋信息和糾偏建議及學(xué)習資源推送;學(xué)習者通過ID標識關(guān)聯(lián)獲取學(xué)習觀摩素材,針對性地選擇最需要的內(nèi)容進行觀摩和補充學(xué)習;之后,科目訓(xùn)練重新啟動;由此完成整個“偏離度自動反饋數(shù)據(jù)閉環(huán)糾偏控制”的過程。
[0211] 9、技能大賽成果的拓展應(yīng)用
[0212] 本發(fā)明的具有偏離度自動反饋數(shù)據(jù)閉環(huán)糾偏控制的專業(yè)技能實訓(xùn)輔助教學(xué)系統(tǒng)及輔助教學(xué)方法,可適用于不同層次的服務(wù)類技能大賽的成果的應(yīng)用和推廣;在進行“技能大賽成果推廣應(yīng)用”時,可以根據(jù)技能大賽中的評判規(guī)則要求,首先由專業(yè)教師對技能大賽中錄制的資源素材和評價規(guī)則來確定教學(xué)細分規(guī)則(對技能大賽的資源素材內(nèi)容按智能化實訓(xùn)教材的架構(gòu)設(shè)計進行細分處理);之后設(shè)計成為一個訓(xùn)練科目(章節(jié)),并錄入相關(guān)的訓(xùn)練科目學(xué)習、教學(xué)資源;通過智能教學(xué)終端中的“示范樣板信息錄入模塊”,錄入到云端服務(wù)器中,作為“科目訓(xùn)練示范數(shù)據(jù)”(樣板數(shù)據(jù)),形成評價依據(jù);此時的“科目訓(xùn)練示范數(shù)據(jù)”就具有了可復(fù)制性,在相同的環(huán)境設(shè)置下,可以實施相同科目的相似度訓(xùn)練,起到提升“偏遠地區(qū)教學(xué)資源”的均衡作用。由此能夠?qū)崿F(xiàn)技能大賽成果的推廣和應(yīng)用。
[0213] 本發(fā)明的輔助教學(xué)方法應(yīng)用于技能大賽成果拓展的實施途徑如下:
[0214] 1)、選擇與技能大賽相同的訓(xùn)練科目內(nèi)容,選擇技能訓(xùn)練專用設(shè)施和相應(yīng)輔助教學(xué)系統(tǒng),同專業(yè)的技能訓(xùn)練專用設(shè)施可以選擇多項科目;
[0215] 2)、組織專業(yè)教研室對訓(xùn)練科目內(nèi)容進行細分設(shè)計,確定跟蹤評估規(guī)則和相關(guān)資源素材內(nèi)容,產(chǎn)生不同訓(xùn)練科目的“科目訓(xùn)練示范數(shù)據(jù)”即樣板數(shù)據(jù);
[0216] 3)、按照前述的現(xiàn)場操作數(shù)據(jù)采集規(guī)則,完成對“大賽優(yōu)勝者”的示范操作過程的數(shù)據(jù)采集;
[0217] 4)、完成智能化實訓(xùn)教材中針對不同科目的章節(jié)設(shè)計內(nèi)容;
[0218] 5)、修改相應(yīng)的實訓(xùn)教學(xué)計劃安排,然后按照前述的內(nèi)容實施專業(yè)教學(xué);將技能大賽成果作為樣板,學(xué)習者在同科目訓(xùn)練過程中,根據(jù)偏離度反饋信息不斷的進行糾偏,達到科目訓(xùn)練時學(xué)習者的操作與大賽優(yōu)勝者的操作逐步“相似”的目標。
[0219] 以上方法,同樣適用于滿足區(qū)域教育均衡需要時,解決基層教學(xué)單位師資與環(huán)境的差異性問題的解決途徑。
[0220] 實施例2以《汽車六方位繞車介紹法技能實訓(xùn)科目》為例
[0221] 1、實訓(xùn)科目學(xué)習目標、學(xué)習內(nèi)容
[0222] 1.1實訓(xùn)科目學(xué)習目標:正確掌握汽車銷售中的商務(wù)禮儀;熟悉汽車上各個主要部分的名稱和參數(shù)指標;熟悉汽車六方位的概念、繞車步驟介紹內(nèi)容;熟記汽車六方位繞車介紹中的要點;
[0223] 1.2實訓(xùn)科目學(xué)習內(nèi)容包括:商務(wù)禮儀習慣訓(xùn)練;了解車輛信息和主要特征;汽車六方位繞車介紹步驟和專業(yè)話術(shù);汽車六方位繞車介紹中的體態(tài)、語態(tài)、表情;汽車六方位繞車介紹中客戶答疑與信息捕捉。
[0224] 2、技能訓(xùn)練要求:
[0225] 2.1按照汽車六方位繞車介紹順序,熟練地掌握不同的方位點介紹內(nèi)容時的體態(tài)、語態(tài)、話術(shù)和與客戶的相對位置。在有限的時間內(nèi),幫助客戶對新車特征有一個全面的了解。
[0226] 2.2汽車六方位繞車介紹法主要介紹點(關(guān)鍵技能點),關(guān)鍵技能點和一般技能點區(qū)域劃分:
[0227] 圖12中方位1,即車前方(右前方45度)①,為第一關(guān)鍵技能點區(qū)域t1;
[0228] 圖12中方位2,即車身右側(cè)②,為第二關(guān)鍵技能點區(qū)域t2;
[0229] 圖12中方位3,即車后方③,為第三關(guān)鍵技能點區(qū)域t3;
[0230] 圖12中方位4,即后排座椅④,為第四關(guān)鍵技能點區(qū)域t4;
[0231] 圖12中方位5,即駕駛室⑤,為第五關(guān)鍵技能點區(qū)域t5;
[0232] 圖12中方位6,即發(fā)動機艙⑥,為第六關(guān)鍵技能點區(qū)域t6;
[0233] 圖12中,方位1與方位2之間,為第一一般技能點區(qū)域s1;方位2與方位3之間,為第二一般技能點區(qū)域s2;方位3與方位4之間,為第三一般技能點區(qū)域s3;方位4與方位5之間,為第四一般技能點區(qū)域s4;方位5與方位6之間,為第五一般技能點區(qū)域s5。
[0234] 關(guān)鍵技能點和一般技能點區(qū)域的屬性關(guān)注點的數(shù)量、關(guān)鍵技能點和一般技能點區(qū)域的屬性關(guān)注點的設(shè)置,通過智能教學(xué)終端APP上的科目訓(xùn)練教學(xué)指導(dǎo)模塊導(dǎo)入。
[0235] 3、實訓(xùn)環(huán)境設(shè)置:如圖12所示。傳感器圍繞關(guān)鍵技能點和一般技能點區(qū)域進行設(shè)置,所采集的數(shù)據(jù)通過現(xiàn)場數(shù)據(jù)服務(wù)器預(yù)處理之后上傳至云端服務(wù)器。
[0236] 4、實訓(xùn)跟蹤、評估環(huán)境設(shè)置
[0237] 4.1、實訓(xùn)整車的上方安裝有一臺廣角的固定攝像機,視角覆蓋汽車繞車介紹技能訓(xùn)練區(qū)域,用于連續(xù)拍攝現(xiàn)場操作人員活動的平面圖像和矢量方向。當操作人員到達六個特定的方位點區(qū)域時,關(guān)鍵技能點區(qū)域信息采集將啟動,同時時間記錄和邏輯順序判斷功能也將啟動。
[0238] 4.2、RGBD傳感器矩陣和音頻采集裝置為可移動安裝型,設(shè)置在方位1-6的關(guān)鍵技能點區(qū)域旁,確保10-15米范圍內(nèi)可以獲得清晰的視頻和音頻信息圖像,并且能夠覆蓋“操作者”和“客戶”的站立位置。
[0239] 4.3、智慧教學(xué)設(shè)備選擇現(xiàn)場智能教學(xué)終端(大屏幕觸摸屏電腦一體機)和相應(yīng)的智慧教室信息化輔助設(shè)備(投影儀、音響、錄播系統(tǒng))。智能學(xué)習終端和一體化大屏幕觸摸屏安裝對應(yīng)的“APP”,每一個學(xué)習者擁有自身的賬號和信息區(qū)。專業(yè)教師具有不同權(quán)限賬號,智能化實訓(xùn)教材在學(xué)習者注冊時建立唯一的系統(tǒng)鏈接關(guān)系。現(xiàn)場智能教學(xué)終端、智慧教室信息化輔助設(shè)施根據(jù)教學(xué)區(qū)域設(shè)計選擇放置位置;智能學(xué)習終端或智能教學(xué)終端,通過智能學(xué)習終端APP或智能教學(xué)終端APP,與智能化實訓(xùn)教材、系統(tǒng)服務(wù)器建立連接。
[0240] 4.4、云端服務(wù)器主要應(yīng)用于專業(yè)資源存放、現(xiàn)場采集信息識別計算、技能訓(xùn)練評估、評價信息咨詢服務(wù)與匹配資源定向推送。
[0241] 4.5、現(xiàn)場數(shù)據(jù)服務(wù)器應(yīng)用于與現(xiàn)場信息采集設(shè)備之間的交互響應(yīng)以及數(shù)據(jù)預(yù)處理和轉(zhuǎn)換;同時起到緩沖作用,確?,F(xiàn)場教學(xué)和技能訓(xùn)練跟蹤過程的順暢性。
[0242] 5、“汽車六方位繞車介紹”實訓(xùn)科目訓(xùn)練的實施過程
[0243] (1)首先,在現(xiàn)場智能教學(xué)終端上,打開智能教學(xué)終端APP,登錄教師特定權(quán)限賬戶后,通過科目訓(xùn)練資源導(dǎo)入模塊,將與實訓(xùn)教學(xué)計劃相關(guān)的資源,即科目訓(xùn)練的內(nèi)容、學(xué)習資源、觀摩、教學(xué)課件,包括知識點、技能點內(nèi)容描述、虛擬仿真資源、訓(xùn)練設(shè)施和方法說明、安全要求等內(nèi)容,導(dǎo)入到系統(tǒng)服務(wù)器中;通過科目訓(xùn)練教學(xué)指導(dǎo)模塊,將與實訓(xùn)教學(xué)計劃相關(guān)的跟蹤評估規(guī)則和方法,包括科目訓(xùn)練要求、信息采集點、評估方法,還包括關(guān)鍵技能點數(shù)量、關(guān)鍵技能點屬性設(shè)置等,導(dǎo)入到系統(tǒng)服務(wù)器中。
[0244] (2)點擊或觸摸智能教學(xué)終端APP中的“示范樣板信息錄入”功能框,通過調(diào)動終端中的掃描框掃描智能化實訓(xùn)教材中設(shè)定的“訓(xùn)練過程跟蹤評估”的ID,進行科目訓(xùn)練示范數(shù)據(jù)(即示范樣板數(shù)據(jù))的采集。
[0245] (3)掃描或觸摸智能教學(xué)終端APP中的“訓(xùn)練過程跟蹤評估”的ID標識,進行學(xué)習者訓(xùn)練數(shù)據(jù)的采集。
[0246] 5.1、技能訓(xùn)練樣板數(shù)據(jù)可以由教師示范操作或者邀請企業(yè)專業(yè)技術(shù)骨干進行流程示范,按照圖10、圖11的要求自動記錄相關(guān)數(shù)據(jù),預(yù)先存入云端服務(wù)器之中。此時,人臉識別、表情識別、語音語態(tài)識別、長句和關(guān)鍵詞識別、體態(tài)姿態(tài)識別、與客戶之間的相對位置和視頻記錄等采集數(shù)據(jù)內(nèi)容,都將經(jīng)過處理之后作為“樣板數(shù)據(jù)”被保存下來。
[0247] 5.2、智能化實訓(xùn)教材中,根據(jù)實訓(xùn)教學(xué)計劃確定的該技能實訓(xùn)科目,包括如下內(nèi)容:1)汽車各主要部分結(jié)構(gòu)、功能和參數(shù)介紹;2)汽車營銷話術(shù)和各方位繞車介紹主要內(nèi)容;3)“汽車六方位繞車介紹”各方位商務(wù)禮儀介紹;4)“汽車六方位繞車介紹”各方位觀摩素材;5)新車六方位介紹考核要求;6)實訓(xùn)環(huán)境與相關(guān)設(shè)備介紹;7)全國技能大賽汽車營銷科目視頻觀摩。
[0248] 無論教師和學(xué)生,均可以通過掃描智能化實訓(xùn)教材中的ID標識,直接獲取以上“教學(xué)課件”、“科目介紹”、“環(huán)境介紹”、“知識點學(xué)習”、“技能點學(xué)習”、“考核標準”等技能訓(xùn)練資源。
[0249] 5.3、本科目訓(xùn)練中,關(guān)鍵技能點區(qū)域和一般技能點區(qū)域是圍繞如圖12所示的六個方位點設(shè)置的,加上禮儀和時間控制等方面,操作者需要以不同的形式向客戶傳輸?shù)男畔?。各方位介紹要求包括在各個方位時的體態(tài)、站姿、內(nèi)容、話術(shù)、禮儀等方面的技能要求和移動順序。
[0250] 5.4、“汽車六方位繞車介紹”各方位要求簡述如下:
[0251] 方位1、車前方(右前方45度);方位2、車身右側(cè);方位3、車后方;
[0252] 方位4、后排座椅;方位5、駕駛室;方位6、發(fā)動機艙;
[0253] 禮儀考核內(nèi)容包括:①站姿、蹲姿、鞠躬、微笑、引導(dǎo)手勢是否正確;②精神面貌是否飽滿;③語言是否清晰、流暢;④身體語言是否恰當;⑤站立點位置和身體朝向是否恰當;⑥語氣語態(tài)是否親切自然。
[0254] 時間控制包括:①周期時間控制;②各節(jié)點時間分配;③冗余循環(huán)情況;④實時交互效果。
[0255] 5.5、“汽車六方位繞車介紹”實訓(xùn)流程之“⑤駕駛室”方位介紹要求的舉例說明[0256] 汽車駕駛室位于左前方,“銷售顧問”首先應(yīng)該從汽車左后側(cè)位置,引導(dǎo)“客戶”到達駕駛室位置(此段屬于一般技能點)。然后,以規(guī)范的禮儀手勢打開駕駛室門,邀請客戶坐到駕駛員位置上。隨后,“銷售顧問者”應(yīng)該以蹲姿,向著兼顧客戶和儀表板的方向,以相關(guān)的話術(shù),向“客戶”進行介紹駕駛室內(nèi)部分的主要特點(此段屬于關(guān)鍵技能點)。
[0257] 6、本實訓(xùn)科目的訓(xùn)練過程跟蹤評估說明:
[0258] 1)、僅以實訓(xùn)流程之“⑤駕駛室”方位介紹為例,在“銷售顧問”到達駕駛室位置時,通過全景攝像機5提供的圖像信息,判定進入了實訓(xùn)中的一個“關(guān)鍵技能點區(qū)域”,系統(tǒng)將按照預(yù)定的“關(guān)鍵技能點屬性”內(nèi)容完成信息采集,進行對該方位區(qū)域的訓(xùn)練跟蹤評估。此時,RGBD傳感器矩陣和音頻采集裝置將判斷出“銷售顧問”的姿態(tài)、話術(shù)、與“客戶”的相對位置、物理位置的邏輯順序、使用時間、有無互動等內(nèi)容。而作為從方位4到方位5移動這樣的“一般技能點”區(qū)域,采集信息的內(nèi)容會簡化。其余各個方位的操作,將按照不同的細化要求內(nèi)容來完成信息采集。關(guān)鍵技能點的屬性構(gòu)成和操作要求,參見圖11所示。一般技能點的屬性關(guān)注點,主要是獲得操作者的移動邏輯、正面朝向、移動速度、交互信息和面部表情等。
[0259] 2)、學(xué)習者在按照實訓(xùn)操作步驟進行訓(xùn)練的同時,現(xiàn)場采集系統(tǒng)實時進行跟蹤,將上述信息數(shù)據(jù)分別與實訓(xùn)要求以及示范樣板數(shù)據(jù)進行比較,按照權(quán)重系數(shù)設(shè)定確定并反饋考核結(jié)果建議和成績。
[0260] 3)、根據(jù)對科目實訓(xùn)流程的評估結(jié)果,系統(tǒng)給出反饋信息和對應(yīng)的重復(fù)學(xué)習建議(通過ID關(guān)聯(lián))。學(xué)習者可以自行確定需要強化學(xué)習的內(nèi)容,通過掃描智能化實訓(xùn)教材上的相同的ID標識即可獲取。
[0261] 4)、本科目實訓(xùn)教學(xué)過程中的數(shù)據(jù)采集和自動跟蹤評估方法,按照實施例1中所述的數(shù)據(jù)采集方法和現(xiàn)場數(shù)據(jù)信息跟蹤評估方法進行。得到的第一關(guān)鍵技能點區(qū)域的屬性關(guān)注點評估數(shù)據(jù)見下表:
[0262]
[0263] 根據(jù)上表中數(shù)據(jù)繪制出的汽車銷售六方位繞車介紹法訓(xùn)練科目中第一關(guān)鍵技能點屬性一次特征改進雷達圖如圖13所示;根據(jù)按科目訓(xùn)練流程的技能點排列順序,將所有技能點的一次特征改進雷達圖面積,交替排列后構(gòu)成的新的科目訓(xùn)練全流程數(shù)據(jù)表Th,按照數(shù)據(jù)表Th中的數(shù)據(jù)繪制出的汽車銷售六方位繞車介紹法科目訓(xùn)練全流程二次特征改進雷達圖如圖14所示。
[0264] 圖14中的技能點1即第一關(guān)鍵技能點,其軸長T1=qT1*A1;技能點2即第一一般技能點,其軸長T2=qT2*B1;技能點3即第二關(guān)鍵技能點,其軸長T3=qT3*A2;技能點4即第二一般技能點,其軸長T4=qT4*B2;技能點5即第三關(guān)鍵技能點,其軸長T5=qT5*A3;技能點6即第三一般技能點,其軸長T6=qT6*B3;技能點7即第四關(guān)鍵技能點,其軸長T7=qT7*A4;技能點8即第四一般技能點,其軸長T8=qT8*B4;技能點9即第五關(guān)鍵技能點,其軸長T9=qT9*A5;技能點10即第五一般技能點,其軸長T10=qT10*B5;技能點11即第六關(guān)鍵技能點,其軸長T11=qT11*A6。其中的At、Bs按前述的公式1、公式2計算得到。
[0265] 5)學(xué)生的學(xué)習、觀摩、虛擬仿真練習等活動既可分組,也可獨立地進行,由此解決了實訓(xùn)設(shè)備和實訓(xùn)時間的有效匹配問題。學(xué)習者重復(fù)學(xué)習的情況和頻度、訓(xùn)練達標的程度和完成訓(xùn)練計劃的績效情況,都被記錄在學(xué)習者數(shù)據(jù)庫的自身賬戶之中,成為學(xué)習評價成績的組成部分。
[0266] 6)通過以上5.2-5.7內(nèi)容的循環(huán)練習,構(gòu)成了一個“閉環(huán)”的技能學(xué)習過程,為技能習慣的養(yǎng)成的“精準度”和“技能訓(xùn)練效率”的提高,起到了很好的幫助作用;
[0267] 7)由于本實訓(xùn)科目實施的計劃和規(guī)范要求和資源,已經(jīng)事先被導(dǎo)入到云端服務(wù)器內(nèi),專業(yè)教師在實訓(xùn)過程中的監(jiān)督、咨詢、糾偏、示范作用的大部分教學(xué)工作量,是可以被“本發(fā)明的專業(yè)技能實訓(xùn)輔助教學(xué)系統(tǒng)”替代的。
高效檢索全球?qū)@?/div>

專利匯是專利免費檢索,專利查詢,專利分析-國家發(fā)明專利查詢檢索分析平臺,是提供專利分析,專利查詢,專利檢索等數(shù)據(jù)服務(wù)功能的知識產(chǎn)權(quán)數(shù)據(jù)服務(wù)商。

我們的產(chǎn)品包含105個國家的1.26億組數(shù)據(jù),免費查、免費專利分析。

申請試用

分析報告

專利匯分析報告產(chǎn)品可以對行業(yè)情報數(shù)據(jù)進行梳理分析,涉及維度包括行業(yè)專利基本狀況分析、地域分析、技術(shù)分析、發(fā)明人分析、申請人分析、專利權(quán)人分析、失效分析、核心專利分析、法律分析、研發(fā)重點分析、企業(yè)專利處境分析、技術(shù)處境分析、專利壽命分析、企業(yè)定位分析、引證分析等超過60個分析角度,系統(tǒng)通過AI智能系統(tǒng)對圖表進行解讀,只需1分鐘,一鍵生成行業(yè)專利分析報告。

申請試用

QQ群二維碼
意見反饋