人(ren)(ren)工智能時代教育的痛(tong)點是單純(chun)知識型(xing)教學, 學習和運(yun)用(yong)知識較僵(jiang)化,缺(que)乏創新人(ren)(ren)才培養。瑞森(sen)(sen)可(ke)公司率先(xian)定義“智能協作(zuo)機(ji)器人(ren)(ren)”,在制(zhi)造與推廣智能協作(zuo)機(ji)器人(ren)(ren)Baxter和Sawyer基礎上,通過(guo)引進、消(xiao)化、吸收與再創新,形成了瑞森(sen)(sen)可(ke)智能協作(zuo)機(ji)器人(ren)(ren)、智能移動機(ji)器人(ren)(ren)、機(ji)器人(ren)(ren)末端配件等系列產品包,并搭建瑞森(sen)(sen)可(ke)創新應用(yong)服務方案平臺,為高(gao)校人(ren)(ren)工智能和機(ji)器人(ren)(ren)相關專業(ye)的科研工作(zuo)提供絕佳平臺。
該板塊旨(zhi)在分享各研究(jiu)(jiu)領域(yu)基于Baxter、Sawyer所做的研究(jiu)(jiu)成(cheng)果,拓寬Baxter、Sawyer使用用戶的研究(jiu)(jiu)思路,提供借鑒參照,加快研究(jiu)(jiu)工作者相關課題(ti)項目開發進程。
主要科研(yan)研(yan)究方(fang)向:運(yun)動(dong)學和運(yun)動(dong)規劃、人(ren)機(ji)交互、機(ji)器學習、自動(dong)化控(kong)制(zhi)、機(ji)器視(shi)覺、計算(suan)機(ji)視(shi)覺、機(ji)電一體化操作7個方(fang)面展開(kai),為了(le)便于復(fu)現應(ying)用(yong),我司針對每個方(fang)向都提(ti)供了(le)可操作性(xing)強的應(ying)用(yong)開(kai)發套件(jian)供用(yong)戶選擇,同時每個方(fang)向配有(you)論文(wen)集、視(shi)頻(pin)集供用(yong)戶參考。
一、運動學和運動規劃
基于演示訓練的機器人編程應用
重點研(yan)究的是目前協作機器人核(he)心功(gong)能課題:機械(xie)臂(bei)拖(tuo)拽編程
二、人機交互
基于語音開發平臺的情感交互應用
本應(ying)用是基(ji)于Research版(ban)Baxter智(zhi)能(neng)(neng)機(ji)器人,結合智(zhi)能(neng)(neng)語(yu)音技術和(he)Baxter控(kong)制(zhi)算法實(shi)現語(yu)音、表情、姿(zi)態動作等(deng)人機(ji)交互。
Greet Demo 實現(xian)的(de)功能是(shi)讓Baxter能夠跟(gen)人類交流并且作(zuo)出相(xiang)應(ying)的(de)動(dong)作(zuo)反應(ying),例如展示一(yi)張快樂或者(zhe)是(shi)悲(bei)傷的(de)臉,與人握手,用頭注視(shi)著人然(ran)后用聲音來回答人提出的(de)問題。
三、機器學習
基于人工智能算法的人機博弈應用套件
本應用(yong)是(shi)基于Baxter智(zhi)能(neng)雙臂機(ji)(ji)器人(ren)(ren),結合minimax算(suan)法和人(ren)(ren)工智(zhi)能(neng)領域重要的(de)視覺處理(li)算(suan)法,并(bing)且調用(yong)了baxter本身的(de)一些結構的(de)SDK,比如(ru)正(zheng)確開啟手(shou)臂攝像頭,如(ru)何(he)記錄(lu)手(shou)臂關(guan)節點位(wei)置,以及如(ru)何(he)通過(guo)關(guan)節點位(wei)置使手(shou)臂作相應移動等,實現了人(ren)(ren)與機(ji)(ji)器人(ren)(ren)互(hu)動進(jin)行四連棋對弈,或者Baxter雙臂相互(hu)對弈。
四、自動化控制
基于計算機視覺及運動控制的迷宮逃生應用套件
本應用是基于sawyer雙(shuang)系統柔性(xing)多(duo)關(guan)節(jie)機(ji)器人,綜合了計算(suan)機(ji)視覺技(ji)術、機(ji)械(xie)臂(bei)運動控制學、機(ji)械(xie)臂(bei)電機(ji)驅(qu)控PID算(suan)法。
視覺系(xi)統自主規劃迷宮球在(zai)迷宮盤內起點到終點的路徑,并實時分析當前球的位置,機器(qi)人(ren)根據(ju)視覺位置信息完(wan)成機電控制,調(diao)整迷宮盤姿態,完成(cheng)迷宮逃生。
基于深度視覺和智能語音技術的人機交互應用套件
本應用是(shi)基于Baxter智(zhi)能雙臂機器人,結(jie)合Kinect深度視(shi)覺(jue)、智(zhi)能語音(yin)技術(shu)及(ji)運動控(kong)制(zhi)算法等,
實現語(yu)音、表情、姿態(tai)動作等人(ren)機交互。
六、計算機視覺
基于圖像分析算法的人臉識別與跟蹤應用
本(ben)應用是基于Research版Sawyer智能機器(qi)人,結(jie)合(he)人臉識別算法與頭部關節(jie)控制(zhi),實現(xian)實時的人臉跟蹤。
七、機電一體化操作
基于視覺編程系統的機器學習應用套件
本應(ying)用是Baxter智能雙臂協(xie)作機器人基于視頻(pin)流自動學習動作序列,結合(he)多模傳感器進行視覺、觸覺等(deng)多源異(yi)
構數據(ju)的融合判斷,綜(zong)合產生有約束情(qing)形(xing)下的最優路徑(jing)。