Ang pananaliksik ng NUS ay gumawa ng AI-powered na ‘mata’ para sa mga bulag upang makakita ng mga bagay

(SeaPRwire) –   SINGAPORE, Peb. 6, 2024 — Ang pagbili ng mga panggrocery ay isang karaniwang gawain para sa maraming tao, ngunit para sa mga bulag, mahirap na makilala ang mga item sa grocery. Isang pangkat ng mananaliksik mula sa Paaralang Computing ng Pambansang Unibersidad ng Singapore (NUS Computing) ay naglathala ng AiSee, isang abot-kayang wearable na gamit na tumutulong sa mga taong may kapansanan sa paningin na makakita ng mga bagay sa paligid nila sa tulong ng artificial intelligence (AI).

Nakakaranas ng araw-araw na pagsubok ang mga indibidwal na may kapansanan sa paningin, lalo na sa pagkilala ng mga bagay na mahalaga para sa simpleng at kumplikadong pagdedesisyon. Bagama’t lumawak ang kakayahan ng AI sa pagkilala ng larawan, nananatiling hamon at madaling magkamali ang aktuwal na paggamit ng mga advanced na teknolohiya sa mundo.

Layunin ng AiSee, na unang nilikha noong 2018 at tuloy-tuloy na pinagbuti sa loob ng limang taon, na malampasan ang mga limitasyong ito sa pamamagitan ng paggamit ng state-of-the-art na teknolohiyang AI.

“Sa pamamagitan ng AiSee, layunin namin na bigyan ng kakayahan ang mga gumagamit ng mas natural na interaksyon. Sa pamamagitan ng pagsubaybay sa proseso ng pagdidisenyo na nakatuon sa tao, nakahanap kami ng mga dahilan upang tanungin ang karaniwang paraan ng paggamit ng salamin na naka-augment ng kamera. Maaaring ayaw ng mga bulag na magsuot ng salamin upang maiwasan ang pagiging nakakahiya. Kaya inihahain namin ang isang alternatibong hardware na nag-iincorporate ng discreet na bone conduction na headphone,” ayon kay Associate Professor Suranga Nanayakkara, pinuno ng mananaliksik ng Project AiSee mula sa Kagawaran ng Information Systems and Analytics ng NUS Computing.

Ang gumagamit ay kailangan lang hawakan ang isang bagay at i-activate ang nakabuild-in na kamera upang kumuha ng larawan ng bagay. Sa tulong ng AI, makikilala ng AiSee ang bagay, at makakapagbigay din ito ng karagdagang impormasyon kung itatanong ng gumagamit.

Paano gumagana ang AiSee?

Binubuo ang AiSee ng tatlong pangunahing bahagi:

(1) Ang mata: Software ng computer para sa paningin engine

Nag-iincorporate ang AiSee ng micro-camera na kumukuha ng field of view ng gumagamit. Bubuo ito sa bahaging software ng AiSee, tinatawag ding ‘vision engine computer’. Kaya ng software na kumuha ng mga tampok tulad ng text, logo, at label mula sa kinuhanang larawan para sa pagproseso.

(2) Ang utak: AI-powered na pangproseso ng larawan at interaktibong sistema ng tanong at sagot

Pagkatapos kumuha ng larawan ng bagay na gustong malaman ng gumagamit, gagamitin ng AiSee ang sophisticated na cloud-based na algoritmo ng AI upang i-process at i-analyze ang mga kinuhanang larawan upang makilala ang bagay. Maaari ring magtanong ang gumagamit tungkol sa bagay.

Gumagamit ang AiSee ng advanced na text-to-speech at speech-to-text na pagkilala at pagproseso upang makilala ang mga bagay at maintindihan ang mga tanong ng gumagamit. Pinapatakbo ng isang malaking language model, mahusay ang AiSee sa interaktibong pagtatanong at sagot, na nagbibigay sa sistema ng kakayahang tama at maayos na maintindihan at sumagot sa mga tanong ng gumagamit nang mabilis at informatibo.

Sa halip na kailangan pang mag-pair ng smartphone, maaaring mag-operate nang independiyente ang AiSee nang walang pangangailangan ng karagdagang gadget.

(3) Ang speaker: Sistema ng bone conduction na tunog

Gumagamit ang headphone ng AiSee ng teknolohiyang bone conduction, na nagbibigay daan sa pagpapasa ng tunog sa pamamagitan ng mga buto ng bungo. Matiyak nito na maaaring makatanggap ng impormasyon sa pamamagitan ng tunog ang mga bulag habang bukas pa rin sila sa tunog mula sa labas tulad ng usapan o ingay ng trapiko. Lubhang mahalaga ito para sa mga bulag dahil nagbibigay ang mga tunog mula sa labas ng mahahalagang impormasyon para sa pagdedesisyon, lalo na sa mga sitwasyong may kaugnayan sa kaligtasan.

“Sa kasalukuyan, wala pang access ang mga bulag sa Singapore sa assistive na teknolohiyang AI na may ganitong antas ng kasophistication. Kaya naniniwala kami na may potensyal ang AiSee upang bigyan ng kakayahan ang mga bulag na magawa nang independiyente ang mga gawain na kailangan pa ngayon ng tulong,” paliwanag ni Assoc Prof Nanayakkara.

Sinabi ni Mark Myres, estudyante ng NUS na tumulong sa pagsubok ng AiSee bilang isang bulag na gumagamit, “Karaniwan, mukhang napapatungo talaga ang mga assistive na gamit sa mga totally blind o bulag na tao. Sa tingin ko maganda ang balanse ng AiSee. Pareho ang mga bulag at totally blind na tao ang makikinabang sa ganitong gamit.”

Pagsubok ng gamit at karagdagang pagpapabuti

Nasa pag-uusap ngayon sina Assoc Prof Nanayakkara at kanyang pangkat sa SG Enable sa Singapore upang magsagawa ng pagsubok ng gamit sa mga may kapansanan sa paningin. Makatutulong ang mga natuklasan upang baguhin at pahusayin ang mga tampok at kakayahan ng AiSee. Bukod pa rito, nagbigay ng malaking donasyon na S$150,000 ang B.P. De Silva Holdings Pte Ltd upang suportahan ang proyekto.

Nakabatay ang desisyon ng BPH na mag-ambag sa pagpapaunlad ng AiSee sa kanilang kompromiso sa corporate social responsibility at tunay na hangarin na magkaroon ng positibong epekto sa lipunan sa pamamagitan ng mas malawak na misyon ng pagpapalaganap ng pagkakapantay-pantay at pagiging accessible. Nagrereflect din ito sa kanilang paniniwala sa makapangyarihang epekto ng teknolohiya upang tugunan ang mga hamon sa lipunan at lumikha ng isang daigdig na mas pantay at mas inclusive.

Ayon kay Ku Geok Boon, Chief Executive Officer ng SG Enable, “Maaaring baguhin ng mga inobatibong solusyon na pinapagana ng assistive technologies ang buhay ng mga may kapansanan, sa pagtulong sa kanila na mabuhay nang mas independiyente o bumababa ang mga hadlang sa trabaho. Bilang sentral na ahensya at sector enabler para sa kapansanan at pagkakapantay-pantay sa Singapore, masaya ang SG Enable na makipagtulungan sa mga katulad ng NUS at B.P. De Silva Holdings Pte Ltd upang gamitin ang teknolohiya upang bigyan ng kakayahan ang mga may kapansanan.”

Bukod dito, hinahanap din ng SG Enable na makipagtulungan sa NUS upang alamin kung paano maaaring magbigay ng karagdagang pagpipilian sa mga may kapansanan ang AI, human-computer interface at assistive technology.

Basahin pa sa:

Ang artikulo ay ibinigay ng third-party content provider. Walang garantiya o representasyon na ibinigay ng SeaPRwire (https://www.seaprwire.com/) kaugnay nito.

Mga Sektor: Pangunahing Isturya, Balita Araw-araw

Nagde-deliver ang SeaPRwire ng sirkulasyon ng pahayag sa presyo sa real-time para sa mga korporasyon at institusyon, na umabot sa higit sa 6,500 media stores, 86,000 editors at mamamahayag, at 3.5 milyong propesyunal na desktop sa 90 bansa. Sinusuportahan ng SeaPRwire ang pagpapamahagi ng pahayag sa presyo sa Ingles, Korean, Hapon, Arabic, Pinasimpleng Intsik, Tradisyunal na Intsik, Vietnamese, Thai, Indones, Malay, Aleman, Ruso, Pranses, Kastila, Portuges at iba pang mga wika.