視障者也能沉浸式玩游戲了 網(wǎng)易(09999)AI技術(shù)助力無(wú)障礙環(huán)境建設(shè)

智通財(cái)經(jīng)APP獲悉，近日，由網(wǎng)易(09999)游戲用戶體驗(yàn)中心設(shè)計(jì)的《AI Eyes: Enhancing Visual Accessibility Using AI》(游戲自適應(yīng)視障模式：AI助力視覺(jué)無(wú)障礙設(shè)計(jì)，以下簡(jiǎn)稱“AI Eyes”)獲得“設(shè)計(jì)界的奧斯卡”2024年iF設(shè)計(jì)獎(jiǎng)。該方案運(yùn)用網(wǎng)易互娛AI Lab等提供的AI圖像識(shí)別與語(yǔ)音技術(shù)，跟蹤游戲畫面的變化，主動(dòng)播報(bào)新生成的信息，使視障人士能夠從圖像、模型和場(chǎng)景等多個(gè)維度感知、理解和體驗(yàn)游戲。

這也是全球首個(gè)運(yùn)用AI技術(shù)為視障玩家提供無(wú)障礙游戲的交互設(shè)計(jì)，讓視障人士從“聽(tīng)游戲”到真正沉浸式玩游戲。接下來(lái)，該方案將在網(wǎng)易游戲多款產(chǎn)品中探索應(yīng)用落地，讓視障人群也能跟健全人一樣享受社交娛樂(lè)的快樂(lè)。

3億視障人士被忽視的娛樂(lè)需求，視障人士也可成“吃雞”高手

視障人士是如何打游戲的?

目前全世界的盲人及中重度視障人群超過(guò)3億人，無(wú)障礙的交互設(shè)計(jì)逐漸成為國(guó)際對(duì)網(wǎng)絡(luò)應(yīng)用、電子游戲的基礎(chǔ)要求。但相關(guān)數(shù)據(jù)報(bào)告顯示，受視力的局限再加上很多游戲應(yīng)用并沒(méi)有進(jìn)行無(wú)障礙優(yōu)化，絕大多數(shù)的游戲視障者很難參與到游戲中。他們有的只能用“文本朗讀”功能“聽(tīng)游戲”，通過(guò)聲音在想象的世界里馳騁。即使市面上有專門針對(duì)盲人玩家定制的小型游戲，但玩法種類有局限性、體量小，視障人士無(wú)法跟健全人一樣體驗(yàn)更高質(zhì)量、最熱門的游戲。

“我們不能假想他們不喜歡玩，而將他們拒之門外?！本W(wǎng)易游戲用戶體驗(yàn)中心相關(guān)團(tuán)隊(duì)在無(wú)障礙研究中發(fā)現(xiàn)，殘障人士跟健全人士在娛樂(lè)上的需求是沒(méi)有區(qū)別的，游戲是他們對(duì)外社交的橋梁，借助游戲，能幫助視障人士更好地融入社會(huì)。甚至，視障群體在一些游戲品類中還有更大的興趣和優(yōu)勢(shì)。比如因?yàn)槁?tīng)覺(jué)靈敏，聽(tīng)聲辯位是他們的樂(lè)趣，所以在射擊、槍戰(zhàn)類游戲非常擅長(zhǎng)，甚至比健全玩家還厲害。

因此，隨著AI生成技術(shù)涌現(xiàn)，網(wǎng)易游戲用戶體驗(yàn)中心團(tuán)隊(duì)決定探索解決這一痛點(diǎn)，通過(guò)使用AI圖像識(shí)別、AI文本釋義、AI語(yǔ)音播報(bào)等技術(shù)，為游戲提供通用、低成本、易操作的是視障人士交互方案。

行業(yè)首創(chuàng)AI Eyes交互方案，從機(jī)械地聽(tīng)文本朗讀到沉浸式體驗(yàn)

什么樣的方案能為視障群體搭建一個(gè)平等的場(chǎng)景，讓他們也可以與正常人一樣進(jìn)行娛樂(lè)社交?

網(wǎng)易游戲用戶體驗(yàn)中心團(tuán)隊(duì)設(shè)計(jì)研發(fā)的AI Eyes ，基于圖像識(shí)別、AI文本語(yǔ)義生成和AI語(yǔ)音生成技術(shù)，一旦識(shí)別到視障玩家在界面上的點(diǎn)觸、劃動(dòng)交互，AI將會(huì)執(zhí)行畫面解釋，講述畫面上局部的內(nèi)容。游戲中精彩的場(chǎng)景畫面、角色、服飾、物品均可以實(shí)時(shí)呈現(xiàn)給視障玩家，提升了對(duì)游戲畫面的感知范圍，讓視障玩家能夠更全面的了解游戲畫面內(nèi)容。

不僅如此，AI Eyes能實(shí)時(shí)感應(yīng)游戲內(nèi)環(huán)境、事件、角色動(dòng)作等情況，AI感應(yīng)后對(duì)相關(guān)實(shí)時(shí)變化內(nèi)容進(jìn)行自主播報(bào)，視障玩家能夠第一時(shí)間了解游戲內(nèi)容變化信息，從而提高游玩的沉浸感，包括天氣、彈窗UI、角色待機(jī)動(dòng)作等……

研發(fā)團(tuán)隊(duì)主設(shè)計(jì)師羅丹舉例說(shuō)道：“假設(shè)你看不到這個(gè)屏幕上的任何東西，但我并不想告訴你，這里有一個(gè)種植按鈕。而是告訴你——這里是一個(gè)油畫風(fēng)格的場(chǎng)景，是你的家園，這里有一個(gè)簡(jiǎn)單的庇護(hù)所，一方田地。你的寵物在圍著你轉(zhuǎn)圈。田地里是枯萎的植物，界面上有一個(gè)澆水按鈕和種植按鈕。又比如在《蛋仔派對(duì)》中，其他玩家可以舉著視障玩家探索和感受樂(lè)園的溫暖?！?/p>

另外還值得注意的是，AI Eyes符合視障用戶交互習(xí)慣，在用戶端操作與當(dāng)前主流的“talkback”“旁白模式”等盲人交互模式無(wú)太大區(qū)別，因此視障群體能以通用、習(xí)慣的交互方式使用。

據(jù)介紹，該AI輔助無(wú)障礙游戲交互方案具有跨國(guó)際、跨游戲類型的普適性，既適用于如經(jīng)營(yíng)建造、RPG等以圖像、場(chǎng)景氛圍表現(xiàn)為主的游戲，又適用于2D游戲等以界面控件為主要形態(tài)的游戲，還能適用于以圖像分享為主的流媒體網(wǎng)站。接下來(lái)，該方案將在網(wǎng)易游戲多款產(chǎn)品中探索應(yīng)用落地。