智通財經APP獲悉，近日，由網易(09999)遊戲用戶體驗中心設計的《AI Eyes: Enhancing Visual Accessibility Using AI》(遊戲自適應視障模式：AI助力視覺無障礙設計，以下簡稱“AI Eyes”)獲得“設計界的奧斯卡”2024年iF設計獎。該方案運用網易互娛AI Lab等提供的AI圖像識別與語音技術，跟蹤遊戲畫面的變化，主動播報新生成的信息，使視障人士能夠從圖像、模型和場景等多個維度感知、理解和體驗遊戲。
這也是全球首個運用AI技術爲視障玩家提供無障礙遊戲的交互設計，讓視障人士從“聽遊戲”到真正沉浸式玩遊戲。接下來，該方案將在網易遊戲多款產品中探索應用落地，讓視障人羣也能跟健全人一樣享受社交娛樂的快樂。
3億視障人士被忽視的娛樂需求，視障人士也可成“喫雞”高手
視障人士是如何打遊戲的?
目前全世界的盲人及中重度視障人羣超過3億人，無障礙的交互設計逐漸成爲國際對網絡應用、電子遊戲的基礎要求。但相關數據報告顯示，受視力的侷限再加上很多遊戲應用並沒有進行無障礙優化，絕大多數的遊戲視障者很難參與到遊戲中。他們有的只能用“文本朗讀”功能“聽遊戲”，通過聲音在想象的世界裏馳騁。即使市面上有專門針對盲人玩家定製的小型遊戲，但玩法種類有侷限性、體量小，視障人士無法跟健全人一樣體驗更高質量、最熱門的遊戲。
“我們不能假想他們不喜歡玩，而將他們拒之門外。”網易遊戲用戶體驗中心相關團隊在無障礙研究中發現，殘障人士跟健全人士在娛樂上的需求是沒有區別的，遊戲是他們對外社交的橋樑，藉助遊戲，能幫助視障人士更好地融入社會。甚至，視障羣體在一些遊戲品類中還有更大的興趣和優勢。比如因爲聽覺靈敏，聽聲辯位是他們的樂趣，所以在射擊、槍戰類遊戲非常擅長，甚至比健全玩家還厲害。
因此，隨着AI生成技術湧現，網易遊戲用戶體驗中心團隊決定探索解決這一痛點，通過使用AI圖像識別、AI文本釋義、AI語音播報等技術，爲遊戲提供通用、低成本、易操作的是視障人士交互方案。
行業首創AI Eyes交互方案，從機械地聽文本朗讀到沉浸式體驗
什麼樣的方案能爲視障羣體搭建一個平等的場景，讓他們也可以與正常人一樣進行娛樂社交?
網易遊戲用戶體驗中心團隊設計研發的AI Eyes ，基於圖像識別、AI文本語義生成和AI語音生成技術，一旦識別到視障玩家在界面上的點觸、划動交互，AI將會執行畫面解釋，講述畫面上局部的內容。遊戲中精彩的場景畫面、角色、服飾、物品均可以實時呈現給視障玩家，提升了對遊戲畫面的感知範圍，讓視障玩家能夠更全面的瞭解遊戲畫面內容。
不僅如此，AI Eyes能實時感應遊戲內環境、事件、角色動作等情況，AI感應後對相關實時變化內容進行自主播報，視障玩家能夠第一時間瞭解遊戲內容變化信息，從而提高遊玩的沉浸感，包括天氣、彈窗UI、角色待機動作等……
研發團隊主設計師羅丹舉例說道：“假設你看不到這個屏幕上的任何東西，但我並不想告訴你，這裏有一個種植按鈕。而是告訴你——這裏是一個油畫風格的場景，是你的家園，這裏有一個簡單的庇護所，一方田地。你的寵物在圍着你轉圈。田地裏是枯萎的植物，界面上有一個澆水按鈕和種植按鈕。又比如在《蛋仔派對》中，其他玩家可以舉着視障玩家探索和感受樂園的溫暖。”
另外還值得注意的是，AI Eyes符合視障用戶交互習慣，在用戶端操作與當前主流的“talkback”“旁白模式”等盲人交互模式無太大區別，因此視障羣體能以通用、習慣的交互方式使用。
據介紹，該AI輔助無障礙遊戲交互方案具有跨國際、跨遊戲類型的普適性，既適用於如經營建造、RPG等以圖像、場景氛圍表現爲主的遊戲，又適用於2D遊戲等以界面控件爲主要形態的遊戲，還能適用於以圖像分享爲主的流媒體網站。接下來，該方案將在網易遊戲多款產品中探索應用落地。