A woman uses a smartphone to search food to order online. gettyimagesbank
A leading online food-ordering platform has developed an artificial intelligence technology that provides more detailed audio descriptions of foods for visually impaired users.
The platform’s operator said it completed tests of the AI-based description technology with visually impaired users, in collaboration with an AI-based image startup, to verbally describe details such as doneness and ingredients shown in menu images.
The technology analyzes images to describe color, level of doneness, and the appearance of main ingredients, delivering these descriptions as spoken audio.
For example, it can provide a detailed description of a half-and-half pizza, noting that one side features golden-brown dough topped with pepperoni and juices, while the other side shows corn, ham, cheese and sauces layered together.
The AI audio function represents an advancement over screen-reader features that only read text displayed on a smartphone screen.
Testing occurred over three days at a center for the blind in Seoul’s Gwanak District, with about 30 visually impaired participants who listened to the AI-based food descriptions and evaluated their quality.
Participants rated the quality at 4.5 out of 5 on average, praising remarks such as “I can picture the food in my mind,” “I feel recognized as an equal consumer,” and “it helps address information sharing bias created by images.”
The project was conducted ahead of Disability Awareness Day in Korea.
The head of the platform’s sustainable management office said the company will pursue corporate social responsibility to improve accessibility so that everyone can benefit equally from technological advantages without discrimination.
In addition to the AI initiative, the operator has provided free meals to children from low-income families during school vacations, published a guidebook to improve digital literacy for its food-ordering app, and funded ramps for partner restaurants to improve wheelchair access.
여성이 스마트폰으로 온라인으로 주문할 음식을 검색하고 있다.
가장 큰 음식 주문 온라인 플랫폼은 시각 장애인을 위한 음식에 대한 보다 자세한 음성 설명을 제공하는 새로운 인공지능(AI) 기술을 개발했다.
플랫폼의 운영사는 이 AI 기반 설명 기술의 테스트를 시각 장애인 사용자 그룹에서 완료했다고 밝혔다. 이 기능은 메뉴 이미지에 표시된 요리의 익힘 정도와 재료 등의 세부 정보를 구두로 설명하는 기능으로, AI 기반 이미지 기술 업체와 협력해 개발됐다.
이 기술은 AI가 이미지를 분석해 색상, 익힘 정도, 주된 재료의 시각적 외관을 생생하게 묘사하고 이를 음성으로 전달하는 방식으로 작동한다.
예를 들어 반반 피자의 자세한 설명은 다음과 같다: 황금빛 반죽의 한 면에는 페퍼로니가 얹혀 있어 풍부한 육즙이 담긴 듯 보이고, 반대 면에는 옥수수, 햄, 치즈, 소스가 넉넉하게 얹혀 있다.
이 AI 음성 기능은 스마트폰 화면에 표시되는 문자 콘텐츠를 읽어 주는 화면 읽기 기능에서 한 단계 발전했다.
테스트는 서울 관악구의 시각 장애인 지원 센터에서 3일간 실시됐고, 시각 장애인 30명이 AI 기반 음식 설명을 듣고 품질을 평가했다.
참가자들은 평균 5점 만점에 4.5점을 주며 품질에 긍정적인 반응을 보였다. 평가에는 “음식을 머릿속에 그림으로 떠올릴 수 있다”, “동등한 소비자로 인정받는 느낌이다”, “이미지에 기반한 정보 공유의 불균형이 해소됐다”는 내용이 포함됐다.
이 기술의 개발은 다가오는 장애인 인식의 날을 앞두고 있다는 점도 회사 측이 밝혔다.
지속가능경영 담당 부서의 책임자는 모든 사람이 차별 없이 기술적 이점을 동등하게 누릴 수 있도록 접근성 개선에 대한 사회적 책임을 다하겠다"고 말했다.
해당 기업은 학기 중 방학 기간에 가난한 가정의 아동들에게 무료 식사를 제공해 왔으며, 최근에는 자사의 음식 주문 앱에 대한 디지털 리터러시를 높이고 정신적 장애를 가진 고객을 지원하기 위한 가이드를 발간했고, 파트너 레스토랑이 휠체어 이용자를 위한 경사로를 설치하도록 지원했다.