ScreenRecording_05-30-2025 02-41-42_1.mp4

프로젝트 개요

"Lecture2Quiz"는 수업 중 녹음한 음성을 자동으로 텍스트로 변환하고, 해당 내용을 바탕으로 퀴즈를 생성·학습할 수 있는 iOS 앱입니다. 음성 인식에는 OpenAI Whisper 기반 STT 서버를 사용하며, 사용자의 학습 지속성과 이해도를 높이기 위해 카드덱 퀴즈 UI와 퀴즈 세션 기록 관리 기능을 포함하고 있습니다.

STT 처리가 된 텍스트는 벡터 데이터베이스를 통해 “외부 지식 검색” + “문맥 확장” 처리를 하여 RAG 시스템 아키텍처를 통해 컨텍스트 최적화를 진행하여 Claude API를 통해 퀴즈를 생성합니다.

역할

모든 iOS iOS 앱 개발을 혼자 하였습니다. 추가로 디자이너가 없는 프로젝트입니다.

iOS 개발자 - 1인

백엔드 개발자 - 2인

백엔드 + AI 개발자 - 1인

사용 기술 스택

• Frontend: SwiftUI, MVVM 아키텍처
• STT 처리: OpenAI Whisper 기반 WhisperLive (WebSocket 기반 실시간 음성 스트리밍)
• 네트워크: Moya + REST API, WebSocket 통신
• 오디오 처리: AVAudioEngine, AVAudioConverter, 실시간 리샘플링 및 RMS 정규화
• UX 최적화: 퀴즈 카드덱 슬라이딩 UI, 실시간 STT 오디오 녹음 및 변환 기능, 뷰 상태 자동 갱신

주요 기능