(GVT v0.36) 번역된 대사 영역이 흔들리는 현상 개선

(GVT v0.36) 번역된 대사 영역이 흔들리는 현상 개선

by | 10월 4, 2023 | GVT

안녕하세요. 오토소장입니다. 이번 글은 GVT의 인식된 게임 대사 영역이 흔들리는 현상을 개선한 내용에 대해 설명합니다. GVT는 여러 가지 AI 모델을 이용하여 게임 화면 내에 존재하는 일본어를 자동으로 탐지(Detection) 및 추적(Tracking) 하는 알고리즘을 가지고 있습니다. 하지만 글자를 추적하는 과정에서 미세하게 x, y 좌표 1만큼 탐지하고 추적되기 때문에 추적 경계 박스 (Tracking Bounding Box)가 흔들리는 현상이 발생합니다. 이런 문제를...
(GVT v0.20) 단어집(WordBook) DB와 유사도 비교를 이용한 번역 정확성 개선

(GVT v0.20) 단어집(WordBook) DB와 유사도 비교를 이용한 번역 정확성 개선

by | 9월 23, 2023 | GVT

안녕하세요. 오토소장 입니다. 지난 글에서는 실시간 AI OCR을 이용하여 일본어를 인식하고 Text로 변환하는 작업을 진행했었는데요. 이번 시간은 수집된 일본어 단어 및 문장들은 네이버 파파고(Papago)를 사용하여 번역하였습니다. 이를 통해 만든 단어집(WordBook) DB와 유사도 비교 알고리즘 적용을 통해 번역의 정확성을 기존보다 크게 향상시켰습니다. 또한 한식구 네이버 카페의 낙월옥량님이 예전에 롬 분석을 해서 정리해놓은 랑그릿사 대사집 관련 강의글과 대사 추출...
(GVT v0.16) Yolo5 & paddleOCR AI 모델 적용을 통한 광학 문자 인식(OCR)

(GVT v0.16) Yolo5 & paddleOCR AI 모델 적용을 통한 광학 문자 인식(OCR)

by | 9월 20, 2023 | GVT

지난 시간에는 실시간 일본어 탐색(검출)을 진행했었는데요. 오늘은 GVT에 Yolo5 커스텀 모델 & paddleOCR 모델을 적용하여 일본어 텍스트 인식 속도를 높이고 이미지로 된 글자를 텍스트 문자로 변환하여 번역 화면에 전시하였습니다. OCR에서 많은 난관(프레임 드랍 등)이 있을것으로 예상했는데요. 완벽하진 않지만 꽤 괜찮은 인식 속도가 나와서 영상을 찍어 보았습니다. 큰 산을 하나 넘은 느낌입니다. 일본어 글자 탐색 및 인식 성능은 최소 30 fps 이상으로...