最新公告

基于視覺的智能電子寵物 

來源：電子產品世界

1、創意來源 

隨著電子技術的進一步發展，電子寵物逐漸走入人們的家庭生活中，目前市面上相對成熟的電子寵物主要有兩大類：一類是生活在電子設備中的虛擬寵物，沒有任何的機械結構，純粹通過電子設備與之進行交互;另一類是具有一定機械機構的電子寵物，具有觸覺等功能，但由于其與逼真寵物外形想像的特性，交互方式也相對缺乏。

如今感知計算技術大為盛行，它重新定義了人與設備的溝通方式，通過更適合人類的溝通方式比如語言、表情、動作等，讓設備感知人類的意圖，智能分析人類的行為。

我們的作品，就是基于這一熱門技術，將感知計算應用到電子寵物身上，充分利用了感知計算的先進特性，實現了一個通過手勢、表情、語言與使用者進行感性互動的智能型電子寵物。具有如此豐富、生動交互方式的電子寵物，無疑會給使用者帶來全新的體驗?？梢韵胂?，一個比真實寵物更加方便、衛生、更加懂主人意思的智能電子寵物，無疑會引起廣大寵物愛好者的極大興趣，成為我們現代化家庭的重要一員。

2、關鍵技術

2.1 視覺處理程序

我們的項目采用的是Intel Creative Senz3D攝像頭，Creative Senz3D是Intel公司為感知計算技術開發的3D景深攝像頭。我們用3D攝像頭作為寵物的眼睛，是整個系統最核心的部分，實現與周圍環境的交互，支持人臉識別，表情識別和手勢識別。我們借用了配套的Intel perceptual computing SDK中提供的一些表情識別、手勢識別、人臉識別等模塊，用線程來分別管理。當3D攝像頭捕捉到圖像數據后會分析然后開啟線程執行上述三個模塊中的一個，然后把識別結果返回給服務器，讓服務器完成接下去的工作。

2.2 服務器

我們把服務器放在了Baytrail開發板上。服務器作為與每個子模塊溝通的橋梁，它的主要作用是一個數據中樞，它接收攝像頭的識別結果，然后根據情況選擇通過socket發送給手機，或用串口發送給Arduino開發板，協調各個部分的工作。同時，服務器要求具有一定的魯棒性，它需要能夠檢測各個部分是否正常工作并進行糾正。

2.3 Android移動應用

手機APP顯示的是寵物的臉，它承載的是寵物向用戶做出表情以及聲音的輸出，它會根據服務器發來的指令變換自己的表情，與用戶所做的表情同步，與用戶進行交互，同時用戶做的表情會對寵物自身的心情值產生影響，當心情值足夠高時，即使沒有外界**，寵物也會做出開心的表情。這一部分的主要實現方式是Android套接字(Socket)編程和異步消息處理機制，實現與服務器Baytrail開發板的通信，接收服務器發來的控制命令并返回反饋數據。表情切換用Android活動的切換來實現，表情顯示用Android Canvas類進行圖片播放來實現。

2.4 機械結構

因為機械臂等結構的實現比較復雜，所以我們用了一個Arduino小車來作為電子寵物的“腿”，用小車的各種前后左右運動模擬寵物的動作。Arduino小車的控制主要通過編程實現，電路板產生四路PWM

方波輸出，控制電機的前后轉動，使得小車做出各種運動。Arduino小車與服務器的通信采用串口實現。

3、應用前景

    隨著近幾年移動智能技術的發展，我們開始步入智能化，生活中，智能手機和個人電腦已經成了人們離不開的幫手，其它的諸如智能冰箱等智能家居系統也給人們的生活帶來了很大便利。那么，在家庭寵物娛樂方面是否也能做到智能化呢?答案是肯定的，我們的電子寵物就實現了這一想法。電子寵物市場前景廣闊，相比于傳統寵物，電子寵物不必主人精心呵護，而且更加干凈衛生，便于照料，許多商家也推出了自己的電子寵物，例如第一代的電子雞，第二代的任天堂的任天狗，Sony的AIBO，但是都或多或少存在缺陷。相比于同類產品，我們的電子寵物更加智能，克服了前幾代產品的缺點，集成了視覺交互、語音交互、移動便攜三大創新點和優勢，更加真切地模擬寵物的功能。

此外，當今社會的人們生活壓力陡增，結束了一天的工作后往往難以釋放內心的壓抑，而養一只真實的寵物卻難以照料它，這時，試想一下，當我們結束了一天的工作回到家時，我們的電子寵物會主動跑到跟前打招呼，送上一個微笑，我們可以控制電子寵物的動作，與寵物進行一場放松的舞蹈，我們還能與寵物進行表情交流，它甚至能夠看懂你的表情，在你失落傷心時送上安慰?？傊?，豐富的交互方式使得我們的電子寵物能給與主人精神寄托，它比真實寵物更加“懂事”。

當然，本項目還有尚待改進的部分，比如物體識別算法方面還需優化，比如適當地增加機械裝置，還能使寵物更加靈活，或許我們的寵物還能替人干家務，實現端茶送水掃地等功能。這些都需要我們團隊繼續努力，將我們的項目朝著智能化、市場化方向推進。