Game Vision Translator에 paddleOCR을 통합하여 글자를 인식하고 추적합니다.인식된 글자를 네이버 파파고(Papago)를 통해 번역하여 화면에 출력하였습니다. 현재는 paddleOCR의 연산을 최적화 하지 않은 속도입니다. Game Vision Translator와 paddleOCR 간 상호작용 및 연동되는 것을 목표로 하였습니다.
paddleOCR + 객체 추적(Object Tracking) + Papago를 이용하여 연산횟수를 획기적으로 줄였지만 프레임 처리속도는 기대에 못 미칩니다.
GVT(Game Vision Translator)를 이용한 SFC 데어 랑그릿사 시나리오1 기계 번역 영상입니다.
실험 환경 구성
- 닌텐도 슈퍼 패미컴 (SFC, SNES) 및 랑그릿사 (Der Langrisser)
- 파운드(Pound) AV to HDMI 영상 변환기
- 에버미디어(EverMedia) GC311 영상 & 음성 캡쳐 장비
GVT(GameVisionTranslator)는 현재 연구개발 단계입니다. 배포 가능한 품질을 확보한 v1.0이 만들어지면 베타 테스트를 위한 신청자를 모집하여 선택적으로 배포 예정입니다. 툴 자체는 무료 배포이나 게임 번역 DB는 유/무료로 구분되어 서비스될 수 있습니다. 참고부탁드립니다.