索尼半導體開放AR軟件開發(fā)工具包ToF AR 采用ToF傳感技術,可流暢表現手及手指動作

索尼半導體解決方案公司(下稱:SSS)發(fā)布軟件開發(fā)工具包(SDK)“ToF(Time of Flight飛行時間)AR”,可以流暢地識別并表現手和手指的動作,幫助推進AR開發(fā)。它將從6月15日起在Developer World(※1)上向公眾開放。 AR技術可以利用物體和建筑物的深度信息,將虛擬的視覺信息疊加在屏幕中的實景上,從而擴展和表達眼前所見的現實。它主要被用于智能手機等設備中的娛樂應用(APP)。

Developer World “ToF AR”: https://developer.sony.com/develop/tof-ar/

SSS開發(fā)的ToF AR采用了其與索尼集團公司研發(fā)中心聯合開發(fā)的獨創(chuàng)AI處理技術,可以流暢地表現手和手指的動作。 利用ToF AR開發(fā)者將可以在 Unity (* 2) 上開發(fā)出可實現以下功能的應用程序:(1) 手勢識別功能(2) 識別身體動作并流暢表現的功能(3) 生成3D 數據的建模功能④根據深度信息等構建周邊環(huán)境的Meshing功能。

視頻鏈接:https://www.sony.com.cn/content/dam/sonyportal/newscenter/images/vtuber%E5%8B%95%E7%94%BB3(%E9%AB%98%E7%94%BB%E8%B3%AA).mp4

該軟件開發(fā)工具包將有望應用在多種場景,包括使用AR的手機游戲;檢查衣服和鞋子的尺寸和設計是否適合自己的虛擬試穿;通過測量房間來選擇合適尺寸家具的虛擬家裝布局;將在空間中繪制的插圖和字符與周圍空間融為一體后與他人分享的新型交流等等。

虛擬試穿

虛擬家裝布局

新型交流

該軟件開發(fā)工具包將被應用于由索尼音樂娛樂公司和中國主流娛樂動畫平臺bilibili的運營方——上海寬娛數碼科技有限公司聯合開展的“虛擬灰姑娘計劃(VCP)”正式放送欄目等等。

虛擬灰姑娘計劃詳細信息:https://live.bilibili.com/23945568

虛擬灰姑娘計劃bilibili官方介紹頁面:https://space.bilibili.com/1400431115

通過開放“ToF AR”,索尼將推進利用深度信息的應用程序開發(fā),為創(chuàng)造嶄新的智能手機體驗做出貢獻。

※1: Developer World:由索尼歐洲運營的網站,集合了索尼支持的各類開發(fā)項目。網址:https://developer.sony.com/zh/

※2: Unity:Unity Technologies提供的綜合性游戲開發(fā)平臺,配備游戲引擎和運行環(huán)境等。

(免責聲明:本網站內容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網站出現的信息,均僅供參考。本網站將盡力確保所提供信息的準確性及可靠性,但不保證有關資料的準確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責。本網站對有關資料所引致的錯誤、不確或遺漏,概不負任何法律責任。
任何單位或個人認為本網站中的網頁或鏈接內容可能涉嫌侵犯其知識產權或存在不實內容時,應及時向本網站提出書面權利通知或不實情況說明,并提供身份證明、權屬證明及詳細侵權或不實情況證明。本網站在收到上述法律文件后,將會依法盡快聯系相關文章源頭核實,溝通刪除相關內容或斷開相關鏈接。 )