Game Vision Translator를 이용하여 SFC Slam Dunk SD Heat Up!! 의 등장인물들을 실시간으로 검출하는 영상입니다. 이번 한 주의 목표는 GVT와 Pytorch로 작성된 Yolo5 모델(.pt)을 ONNX(Open Neural Network Exchange)로 변환하여 적용하는 것을 목표로 하였습니다. 현재는 사람에 대해서 검출을 하지만 모델 파인 튜닝을 통해 텍스트만 검출 할 수 있도록 할 예정입니다.
실험 환경 구성
- 닌텐도 슈퍼 패미컴 (SFC) 및 슬램덩크 SD (From TV animation – Slam Dunk SD Heat Up!!)
- 파운드(Pound) AV to HDMI 영상 변환기
- 에버미디어(EverMedia) GC311 영상 & 음성 캡쳐 장비
GVT(GameVisionTranslator)는 현재 연구개발 단계입니다. 배포 가능한 품질을 확보한 v1.0이 만들어지면 베타 테스트를 위한 신청자를 모집하여 선택적으로 배포 예정입니다. 툴 자체는 무료 배포이나 게임 번역 DB는 유/무료로 구분되어 서비스될 수 있습니다. 참고부탁드립니다.
