듣는이

2023 ICT 프로보노 멘토링 프로젝트 23-PF013

"청각장애인의 일상생활을 편리하고 안전하도록"
STT 기능 및 거울모드 대화창을 통한 실시간 대화가 가능하며, 주변 소리 종류를 분석해 위험상황을 알려주는 iOS 앱

💡Features

• 실시간 대화 기능

  • STT (Speech-to-Text) 기능을 통해 상대방이 말을 실시간으로 텍스트로 변환해 확인
  • 직접 메시지를 입력해 보여주거나, 미리 등록해둔 자주 사용하는 문장을 선택해 필담보다 빠른 대화가 가능

• 주변 소리 감지 및 알람 기능

  • 사용자의 주변 소리를 실시간으로 감지
  • 위험한 상황에 발생하는 소리 (예. 사이렌, 물 끓는 소리, 화재발생경보음 등) 가 감지되면 알람 발송
  • 웨어러블 기기 (Apple Watch 등) 와 연동해 스마트폰을 사용하고 있지 않더라도 바로 확인

📱 Screenshots

Name	Screenshot	Detail
실시간 소리 분석		- 실시간 음성 분석 - Chart를 통해 하루동안 발생한 소리에 대한 정보 제공 - 현재 나고 있는 소리에 대한 정보 제공 - 소리가 나는 경우와 나지 않는 경우를 구별할 수 있는 Lottie 이미지
응급상황 알람		- 사이렌, 큰 소리 등 응급상황으로 분류된 소리가 나는 경우 해당 뷰를 띄움 - 응급상황인 경우 연락처를 통해 연락 가능 - 애니메이션을 통해 소리가 나는 상황을 시각화
실시간 대화 화면		- 거울모드 UI - 상대방이 마이크 버튼을 눌러 말하면 사용자의 화면에 Text로 변환 (STT)
WatchOS View		- 실시간 음성 분석 - 분석 결과 시각화

✨ Skills & Tech Stack

구분	항목
Environment	iOS 15.0+, Xcode 14.0
Framework	UIKit, SwiftUI, Codebase, RxSwift, SoundAnalyzer, AVFoundation, Realm, Lottie, Animation
Version Control	Git, GitLab, GitHub
Design	Figma
Communication	Notion, Discord

🫂 Developers

석혜민	박준혁	김보영
Lena	Niro	Teemo
- 실시간 오디오 감지 및 분석 기능 - 차트 구현 - 메인 및 응급상황 뷰 - 개발보고서 작성	- STT 기능 구현 - 실시간 대화 뷰 - 즐겨찾는 문장 등록 기능 - 제작설계서 작성	- UI/UX 디자인 총괄 - 앱 아이콘 및 스크린샷 디자인 - WatchOS 디자인