구글 어시스턴트에 흥얼거리면 노래를 찾아주는 서비스 "Hum to Search" https://gigglehd.com/gg/8451376
구글은 구글 어시스턴트에 콧노래를 흥얼거리면 그 노래를 찾아주는 서비스를 10월부터 시작했습니다. 그게 어떻게 가능하냐고요?
우선 기계 학습 모델이 콧노래 멜로디의 주파수를 수열로 변환하고, 반주/음색/음질처럼 멜로디에 영향을 주지 않는 부분을 제거해 멜로디를 추측합니다.
그 다음에 구글이 보유중인 노래 데이터베이스와 대조해 비슷한 수열을 갖춘 노래를 찾아냅니다. 왼쪽이 콧노래, 중간은 비슷한거, 오른족이 일치하는 노래입니다.
신경망에서 수천만건의 학습을 진행해 정확도를 높였고, 음악은 멜로디를 추출해서 이걸 콧노래로 바꾸는 리버스 엔지니어링을 통해 샘플 데이터를 갖췄습니다.
지금 제 폰에서도 조용히 데이터를 넘기고 있을수도...