2月8日,今日頭條旗下的原創生活短視頻社區“火山小視頻”官方宣布將在春節期間推出“全民切紅包”AR游戲。
據介紹,活動期間用戶登錄火山小視頻手機客戶端后,點擊首頁“【全民切紅包】”按鈕選擇“開始挑戰”進入游戲頁面,用戶需在指示框內完成肢體識別方可進入游戲。游戲開始后,屏幕上會相繼出現紅包,用戶需用手/腳切中紅包,擊中獲得相應分值。當場游戲結束后,系統會根據用戶最終得分發放紅包。
值得一提的是,上述游戲模式將全程使用AR技術。
據介紹,火山春節切主要由肢體識別系統和紅包動畫系統組成。肢體識別基于深度學習技術,首先識別出人體關鍵點熱力圖,然后匹配紅包區域和人體關鍵點熱力區域,根據匹配度進行打分。然后依據打分反饋完美,很好,錯過三個級別。
依靠肢體識別技術,火山能夠檢測到圖像中所包含人體的各個關鍵點的位置,從而實現從用戶姿態到目標姿態的準確匹配。
切紅包的技術負責人表示,“之前的體感類游戲只能借助特定硬件設備才能玩。肢體識別技術的成熟讓我們能夠用手機實時、精準地“讀懂”人體的姿態和動作,讓普通用戶隨時隨地能夠體驗這種游戲形式。”
據介紹,這一技術在實現上有兩大難點。第一,人體的形變范圍比較大,受衣服變化、物體遮擋等影響嚴重。第二個難點是,要實現精準檢測,需要耗費高昂的計算資源,無法在手機端實現日常場景應用。
對此,今日頭條 AI lab 創新了技術方案。相比于業界流行的自頂向下(Top-Down)的方案,采用的是自底向上(Bottom-Up)的方案。針對移動端設備自研的網絡結構,極大地減少計算量,同時讓準確率大幅提升,實現了在移動端的實時無損運行。
火山的產品負責人孫致表示,“切紅包”這樣一個老少咸宜的游戲,能夠在春節期間幫助活躍家庭氣氛,增進家人之間的互動,讓大家一起玩起來。