I can read(아이캔리드)
I can read(아이캔리드)

I can read(아이캔리드)

한 줄 소개
고령층을 위한 카페 메뉴판 외래어/외국어 뜻풀이 서비스
그룹
그룹 1
발표자료
https://drive.google.com/file/d/1cvicL9IKRSnCmIP8XY4MBz-HANc3hbQ7/view?usp=share_link
팀명
podong
소속 챕터
숙명여자대학교
행사 결과
예선 진출
본선 진출
우수상
2023 Solution Challenge 참가 여부
2023 Solution Challenge 참가 여부
SDGs 목표
목표 10. 부등식 감소
팀명 : 포동
서비스명 : I can read(아이캔리드)

1. 개요

팀의 아이디어에 대한 소개

notion image
💡
고령층을 위한 카페 메뉴판 외래어/외국어 뜻풀이 서비스
한국인의 하루 커피 섭취량이 평균 2잔으로 연간 커피 소비량은 전 세계 2위입니다. 그만큼 커피를 즐기는 사람들이 계속 증가하고 있으며 커피 없는 하루를 상상하기 힘든 사람들도 생겨나고 있습니다. 이에 한국의 커피 시장 규모도 세계 3위가 되었고 이제는 고령층이 대부분인 시골에서도 카페가 생기고 있습니다.
카페의 메뉴판은 대부분의 용어가 외래어나 외국어입니다. 카페를 찾는 고령층도 점차 늘고 있는 이 추세에 메뉴판 보는데 어려움을 겪고 있는 고령층을 위한 외래어/외국어로 된 카페 메뉴를 뜻풀이 해주는 앱을 고안했습니다.
 
notion image

🙋‍♀️ 이런 경우에 사용해보세요

  • 나만 모르나 싶어 물어보기 민망할 때
  • 인터넷 검색이 어려울 때
  • 메뉴판에 텍스트만 있어 어떤 메뉴인지 명확하게 인식하기 어려울 때
  • 어떤 메뉴를 먹어야 할지 아예 모르겠을 때
 
 

2. 제안 배경

선택한 주제에서 해결하고자 하는 목표가 무엇인지 또 그에 대한 계기는 무엇인가요?

문제 제기 및 근거

일상 속 외국어/외래어 남발로 인한 고령층 소외 문제
한 시민은 며칠 전 문 닫은 음식점 앞에서 노인 몇 분이 '공지도 없이 영업을 안 한다’며 불같이 화를 내고 있는 장면을 봤는데 문 앞에는 버젓이 'CLOSED'라고 적혀있었다는 경험담을 털어놨습니다. 문화체육관광부와 한글문화연대가 2020년 외국어 유래 용어 3500개에 대해 일반 국민이 얼마나 이해하고 있는지를 조사한 결과에 따르면 일반 국민의 이해도를 100점 만점으로 환산하면 전체 평균은 61.8점으로 나타났고 60대 이하가 66.9점인 반면 70세 이상은 28.4점으로 고령층들의 외국어 및 외래어 이해도는 현저히 낮은 수준을 보였습니다.
👨‍🦳
[김태빈 / 서울 성동구] "곤란한 적이 많아요 식당에 들어가도 그렇고. 내가 영어를 몰라가지고 상당히 불편해요 나이 먹어서 그런지"
👵
[박정숙 / 경기 의정부시] "이런 것도 못 알아듣나 이런 촌 사람 된 것 같아서 물어보기도 민망할 때가 있어요. 정 꼭 쓰고 싶으면 한국어라도 달아주든지"
하지만 외국어와 외래어가 이미 너무 우리 일상생활에 깊게 뿌리 내려있어 이러한 용어의 사용을 완전히 막을 수는 없을 뿐만 아니라 이를 대체할만한 한국어가 존재하지도 않습니다. 특히 카페의 경우, 커피가 외국에서 들여온 음료이기 때문에 많은 외국어와 외래어가 사용되는 곳 중 하나입니다. 아래는 어느 한 카페의 메뉴판입니다.
 
카페 메뉴판 전체가 외국어로 표시된 예시
카페 메뉴판 전체가 외국어로 표시된 예시
만약 어르신들이 이러한 카페에 방문하게 된다면 메뉴를 제대로 시키실 수 있을까요? 저희는 사진조차 없는 이 같은 ‘외국어 메뉴판’을 사라지게 할 뾰족한 방법은 없다고 생각했습니다. 사기업이 이국적인 것을 선호하는 고객들을 위해 내세운 마케팅 전략에 정부가 임의로 개입하기 어렵다는 이유도 존재하기 때문입니다.
 

해결 포인트

  • 단순 번역이 아닌 뜻풀이
  • 직관적인 UI
  • 누구나 사용 가능한 간편한 기능
 

해결책 제시 : 이미지 인식을 통해 재구성한 메뉴판

가장 근본적인 해결책은 일상 속 외국어 사용을 줄이는 것이지만 사람들의 수요에 맞게 늘어난 ‘외국어 메뉴판’을 없앨 수 있는 방법은 없습니다. 이러한 상황에 맞게 저희는 이 문제를 해결할 방안을 생각했습니다.
고령층에게 불친절한 메뉴판을 명확하게 인식할 수 있는 서비스를 개발함으로써 고령층 정보 소외 문제를 해결하고 평등한 메뉴 선택권을 보장하고자 합니다.
 

유사 서비스와의 차별점

  • 유사 서비스: 구글 렌즈, 네이버 렌즈
    • 기존 렌즈 앱의 경우, 사진을 찍고 텍스트를 드래그해서 검색 버튼을 눌러야 검색 결과가 나오는 기능은 고령층에게는 어렵게 느껴질 수 있습니다. 저희 서비스(I can read:아이캔리드)는 메뉴판 사진을 찍으면 텍스트를 인식해서 자동으로 검색을 해주고 그 결과를 이해하기 쉬운 메뉴판으로 재구성한다는 차별점을 가지고 있습니다. 저희는 사용자가 어려움을 느낄 수 있는 불필요한 액션을 줄이고 사용의 편리성을 높이는데 주안점을 두었습니다.
 

3. 해결 및 구현 방안

제시한 주제를 어떤 구글의 기술을 활용해 어떻게 해결할 예정인가요?

프론트엔드
메뉴판 사진을 찍어 Spring에 전달
메뉴판 사진을 찍어 Spring에 전달
 
백엔드
Flutter에서 사진 받아 ML에 전달
텍스트 인식 결과를 Flutter에 전달
Flutter에서 사진 받아 ML에 전달 텍스트 인식 결과를 Flutter에 전달
머신러닝
텍스트 인식 후 추출
텍스트 인식 후 추출
배포
notion image
부가 기능
부가 기능
 

서비스 개요

메뉴판 촬영을 통해 입력 받은 메뉴를 설명해줍니다.
 

서비스 대상 : 영어에 익숙하지 않은 고령층

외국어에 익숙하지 않을 경우 외국어를 읽고 이해하는것 뿐만 아니라 알파벳을 보고 검색하는데에도 큰 어려움이 있습니다. 따라서 사용자가 모르는 메뉴를 입력할 필요 없이 앱을 사용해서 사진 촬영을 하면 ML을 사용한 텍스트 추출을 통해 메뉴판 전체를 입력받을 수 있도록 기획했습니다.
또 대부분의 고령층이 디지털 기기 사용에 익숙하지 않은 것을 고려하여 최대한 편리한 UI/UX를 제공해 대상자들의 접근성을 높일 계획입니다.
 

사용할 구글 기술

  1. Flutter
    1. iOS, Android와 웹 앱, 데스크톱 앱을 단일 코드 베이스로 개발할 수 있는 크로스 플랫폼
    2. Material Design이라는 구글의 강력한 디자인 도구 활용 가능
  1. Google Cloud Platform
    1. 서버, DB 관리 및 배포 가능
    2. 높은 지속 가능성
  1. Tensorflow
    1. 초보자에게 친화적인 플랫폼
    2. ML 모델을 구축하고 배포하는 데 도움이 됨
  1. Firebase
    1. 더 나은 모바일 및 웹 애플리케이션을 구축하는 데 필요한 도구 및 인프라 보유
    2. 고령층의 편리한 사용을 위해 로그인을 하지 않고도 사용이 가능하도록 만들 계획이지만, 단어 학습 기능을 추가할 경우, 구글의 Firebase를 사용하여 유저 관리 및 학습장 기능을 제공할 계획입니다.
 

기능

  • 필수 기능
    • 카메라로 메뉴판 촬영
    • 메뉴판 이미지에서 텍스트 추출
    • 메뉴 이름, 메뉴의 뜻풀이, 메뉴 사진 리스트로 제공
    • 메뉴 더보기 버튼을 누르면, 구글링한 결과를 URL로 연결
    • 메뉴 추천 기능
 
  • 선택 기능
    • 글씨 확대 기능
    • 카메라에 네모 모양 띄워 가이드라인 제공
 

디자인 프로토타입

 

4. 기대 효과

이 프로젝트가 어떤 문제를 해결하나요? 또 이 프로젝트를 어떻게 개선시켜나갈 것인가요?

해결하고자 하는 UN 17가지 목표

notion image
 

기대 효과

기술 발전의 편리함을 다 함께 누리기 위해서 우리는 디지털 취약 계층의 어려움을 이해하고 그들에게 실질적인 도움을 드릴 수 있는 방법이 없을지 고민하다가 이 서비스를 제안하게 되었습니다.
  • 디지털 정보 격차로 인한 의사소통 제약을 완화할 수 있습니다.
  • 사회구성원으로서 제대로 소통하지 못하는 데서 오는 고령층 소외 현상 및 불평등을 해소시킬 수 있습니다.
  • 세대 단절 문제를 해결할 수 있습니다.
 

확장 방향

  • 중식, 일식, 양식 식당 등 다양한 음식점으로 서비스를 확장할 수 있습니다.
  • 메뉴에서 더 나아가 길거리, 간판 등 생활 반경에 있는 모든 글자들에도 서비스를 확장해 나갈 수 있습니다. 카페 메뉴를 통해 서비스를 안정화하면 더 나아가 다른 분야에서도 해당 기능을 사용할 수 있게 생각하면서 서비스를 기획하고 있습니다.
 
 

5. 참고자료