-
OpenAI Whisper 설명및 Unity와의 연동CS/졸업 프로젝트(Duk to Me) 2023. 11. 28. 01:02반응형
https://www.tecnoveste.com.br/whisper-da-open-ai-o-que-e-para-que-serve-e-como-funciona/#google_vignette ¶ OpenAI Whisper란?
OpenAI Whisper는 OpenAI에서 개발한 음성 생성 모델로, 자연스러운 음성을 생성하는 데 중점을 둔 고급 딥러닝 모델입니다. Whisper는 텍스트를 음성으로 변환하는 Text-to-Speech(TTS) 시스템으로 사용되며, 이를 통해 음성 인터페이스, 음성 콘텐츠 제작, 음성 광고, 오디오북 등 다양한 분야에서 적용될 수 있습니다.
Whisper는 매우 다양한 언어와 화자 스타일을 모방할 수 있는 능력을 가지고 있어, 글로벌한 음성 요구를 충족시킬 수 있습니다. 이 모델은 큰 규모의 데이터셋에서 학습되어 자연스럽고 감정을 담은 음성을 생성할 수 있습니다.
¶ Unity와 연동하기
① 지난 ChatGPT와 Unity 연동때 Package Manager에서 github URL(https://github.com/srcnalt/OpenAI-Unity.git)로 Package를 Import 받았던 것과 같이 OpenAI Unity Package의 Whisper Package를 Import 받아준다.
② Import가 잘 받아졌다면 Project에서 Whisper 폴더가 생성된 것을 확인할 수 있다. 이제 Whisper 기능을 사용할 Whisper Sample Game Scene을 열어준다.
③ Whisper Sample Scene에서 첫번째 빨간 박스로 표시된 곳에서 Local 기기에 연결된 마이크 Device를 찾아서 선택해주고, 밑에 'Record Audio' 버튼을 눌러 초록색 바가 끝날때까지 음성을 녹음해 주면 인식된 음성이 Text로 변환된 것을 확인할 수 있다.
이로써 OpenAI Whisper와 Unity의 연동을 마친다.
Reference
반응형'CS > 졸업 프로젝트(Duk to Me)' 카테고리의 다른 글
AWS Polly와 Unity 연동 (2) (1) 2023.12.06 AWS Polly 설명및 Unity와의 연동 (1) (0) 2023.12.06 ChatGPT 설명및 Unity와의 연동 (1) 2023.11.06 PlayFab과 Unity 연동 (4) - 게임 점수 Data 보내고 가져오기 (0) 2023.09.18 PlayFab과 Unity 연동 (3) - 닉네임 Data 보내고 가져오기 (0) 2023.09.18