[5주차] 회의록

피드백 정리

문제점

• 특정 영역을 터치해서 읽기 어려울 것 같음
  
  • 특히 휴대폰에서 텍스트를 선택하기 어려울 것 같음
• 보이스오버/톡백 기능과의 차별화 되는 것이 중요할 것 같음
• 이미지에 대한 설명은 어떻게 제공할 것인지?
• 강의 자료는 대부분 pdf이기에 거기에 집중하는 것이 좋을 듯

보완점

• 텍스트 파일로도 제공 (원하는 만큼 확대 해서 읽기 편하게)
  • 텍스트로 변환해서 큰 화면으로 제공 (피피티 화면을 그대로 재현하는 대신 텍스트를 추출해서 자유롭게 확대 가능한 텍스트 박스에 담기?)
• 북마크 기능 / 태그를 나눠 섹션 별로 모아보게 하는 기능
• 터치 없이도 처음부터 끝까지 / 특정 구간만 자료를 오디오북 처럼 읽을 수 있는 기능
  • 터치 해서 읽는 부분은 선택사항으로 두되, 강의 자료를 넘길 때 마다 첫 문장부터 쭉 읽어주기
• 텍스트 터치가 편하게 자료를 텍스트 버튼으로 이뤄진 화면으로 재구성하자
• 이미지 캡션을 통해 이미지를 클릭 했을 때도 설명이 나오면 좋을 듯

개선 방향

• 피피티 화면 구성을 그대로 재현하기에는 무리가 있음 →텍스트 영역과 이미지 영역을 분리해서 나타내기
  • 이미지 자료는 확인용으로 상단에 두고 텍스트 영역은 별로 아래에 두기 (배치는 더 고민해 볼 것)
  • 핵심 기능 : 글은 오디오로 청취 가능하게 함 / 시각 자료에 대한 인지를 도움
• 자료에 글과 이미지가 함께 있으면 이미지가 있다는 것을 알려주고 글을 읽는 중에 이미지 영역을 터치하면 텍스트 오디오를 일시 중지하고 이미지 캡션을 청취 가능하게 함
• 글 부분 (텍스트 영역)에 대하여
  • 한 번 터치 → 텍스트 전체 읽어줌 / 두 번 터치 → 한 줄씩 읽어줌
  • pdf에서 텍스트를 추출한 거 덩어리 별 (문단/한 줄 단위)로 나열 
• 자료의 각 장마다 텍스트 영역/이미지 부분을 깔끔하게 추출하는 것이 중요할 듯
• UI와 햅틱을 좀 더 세세하게 설정할 것
• 북마크 기능의 구현 방향

 

To-Do

BE

1. DB 테이블 구상
2. API 명세 작성
3. 기술 조사 (redis, 소셜 로그인)

FE

1. 페이지 UI 재구성
2. 스크롤링 구현 방안/ 사용 오픈소스 조사 (오디오)

ML

1. pdf → img → 여기서 이미지를 추출시도
2. Vision API → 텍스트 추출 → tts까지 테스트