목소리로 음악을 만드는 작은 AI 모델을 훈련하려는 고민
음악을 몰라도 목소리로 곡을 만들 수 있는 도구가 개발되고 있다. 멜로디를 흥얼거리면 실제 악기 소리로 연주된 결과를 돌려주고, 을 말로 설명하면 템포와 키에 맞는 을 만들어 주는 방식이다.
목표는 가 로 개발을 돕듯이, 음악 작업도 말과 소리로 다룰 수 있게 만드는 것이다. 현재 가장 큰 과제는 이 특정 작업에 맞는 작은 을 어떻게 훈련할지다.
특히 음악 생성과 쪽에서 어떤 데이터를 모아야 하는지, 어떤 훈련 방식이 맞는지, 어떤 자료나 사람을 참고해야 하는지가 핵심 질문이다. 실제로 비슷한 모델을 만들어 본 경험에서 무엇이 어려웠는지도 중요한 참고점으로 다뤄진다.
핵심 포인트
- 목소리나 설명으로 멜로디와 을 만드는 음악 제작 도구 다.
- 멜로디를 흥얼거리면 실제 악기처럼 들리는 결과를 만드는 것이 목표다.
- 은 곡의 템포와 키에 맞게 생성되어야 한다.
- 핵심 고민은 작은 을 이 작업에 맞게 어떻게 훈련할지다.
- 음악 데이터, , 실제 훈련 경험이 중요한 참고 자료가 된다.