Reforge 오디오 엔진

하나의 목적을 위해 만들었어요

Ebbi의 사운드스케이프마다 그 증거를 담은 전용 연구 페이지가 있어요. Reforge는 그 소리들을 만드는 방법이에요. 어떤 소리를 어떻게 시험했는지는 아래에서 밝혀요.

대부분의 집중 앱과 수면 앱은 스톡 라이브러리에서 내려받은, 미리 녹음된 오디오 루프를 그대로 앱에 넣어요. 한 앱에서 듣는 비 소리는 수십 개의 다른 앱에도 팔린 똑같은 파일이에요. 계속 반복돼요. 되풀이돼요. 나를 위해 만든 소리가 아니에요.

Ebbi는 달라요. 저희는 이 앱만을 위해 Reforge라는 자체 오디오 엔진을 만들었어요. 듣게 되는 모든 사운드스케이프가 이 엔진에서 나와요. iPhone에서는 일부 소리를 수학 방정식으로 기기에서 실시간으로 생성해요. 오디오 파일도, 인터넷도 필요 없어요. Android에서는 같은 소리를 미리 렌더링해 앱에 저장해 둬요. 다른 소리들은 실제 음향 분석을 바탕으로 설계했어요. 녹음을 복사한 것이 아니라 그 수학적 구조로 다시 만든 거예요.

Reforge는 나중에 덧붙인 기능이 아니에요. 이 앱을 지탱하는 토대예요.

연구했어요. 설계했어요. 확인했어요.

세 단계예요. 각 단계를 거친 소리가 무엇인지 아래에서 밝혀요.

1. 연구했어요

Ebbi의 모든 소리는 ADHD, 인지, 심리음향학에 관해 발표된 연구를 염두에 두고 골랐어요. 다만 증거의 강도가 소리마다 같지는 않아요. 화이트 노이즈는 ADHD 증거가 가장 강해요. ADHD나 주의력 문제가 있는 젊은 층을 대상으로 한 연구 13건의 메타분석이 있어요. 로파이는 간접 증거에 기대요. ADHD가 있는 어린이와 없는 어린이 모두 배경 음악이 있을 때 오류가 더 적었지만, 로파이 자체를 시험한 연구는 없어요. 무음도 넣었어요. 모든 ADHD 뇌가 소음에서 이득을 얻는 것은 아니라고 연구가 보여 주기 때문이에요. 앱에는 이유 없이 들어간 것이 없고, 모든 이유를 인용과 함께 기록해 두었어요.

모든 소리에 대한 전체 연구 보기 →

2. 설계했어요

저희 소리 중 여섯 가지는 Reforge가 실제 녹음을 분석해서 음향 구조 전체를 뽑아내요. 모든 주파수, 모든 진폭 변화, 모든 시간 관계예요. 그 분석으로 소리의 수학적 설계도를 만들어요. 귀에 들리는 오디오를 만드는 것은 원래 녹음이 아니라 그 설계도예요.

iPhone에서는 소음 색깔과 비 같은 핵심 소리의 수학이 기기에서 실시간으로 돌아가요. 휴대폰 프로세서가 방정식으로 모든 샘플을 생성해요. Android에서는 같은 소리를 미리 렌더링해 앱에 저장해 둬요. 어느 쪽이든 내려받기도, 스트리밍도 없어요.

3. 확인했어요

저희는 오디오 분류 기술로 비 소리를 시험했어요. 실제 녹음을 대량으로 모아 훈련한 머신러닝 모델이에요. 저희 비 소리를 생성한 다음 분류기에 물었어요. 이 소리가 정말 의도한 소리처럼 들리나요? 분류기는 이 소리를 비로 인식했고, 비와 헷갈리지 않았으면 하는 소리들, 이를테면 바람, 불, 잡음보다 훨씬 앞섰어요. 이 시험은 저희 비 소리 설계를 렌더링한 파일로 했어요. 귀에 들리는 비 소리는 같은 설계로 만들어요. iPhone에서는 실시간으로 생성하고 Android에서는 더 최근에 만든 렌더링을 쓰는데, 그 버전들에는 분류기를 다시 돌리지 않았어요.

나머지 소리는 분류기에 넣지 않았어요. 소음 색깔과 로파이는 녹음을 본뜬 것이 아니라 수학만으로 만들었어요. 실제 녹음을 바탕으로 다시 만든 여섯 가지 소리(바다 파도, 벽난로, 시냇물, 바람, 뇌우, 카페)는 Reforge로 재구성한 소리이고, 출시 전에 저희가 하나하나 들어 보고 승인했어요.

이게 나에게 중요한 이유

엔진이 어떻게 작동하는지는 아마 궁금하지 않을 거예요. 대신 그 엔진에서 무엇을 얻는지 알려 드려요.

내 뇌에 맞춰 고른 소리. 흔한 이완 재생목록이 아니에요. 소리마다 그 증거를 담은 전용 연구 페이지가 있어요.
오프라인에서도 되는 소리. 모든 사운드스케이프는 앱 안에 들어 있고 오프라인으로 재생돼요. 인터넷도, 스트리밍도 없고, 집중 세션 중에 끊기는 일도 없어요.
저희가 실제로 확인한 소리. 사운드 디자이너가 믹싱해서 내놓는 데서 그치지 않아요. 저희 비 소리 설계는 오디오 분류기 시험을 통과했고 실제 비 소리 녹음과 비교했어요. 녹음에서 다시 만든 여섯 가지 소리는 각각 출시 전에 들어 보고 승인했어요.
직접 만들었어요. 라이선스를 받은 게 아니에요. Reforge는 Forge Hut LLC가 Ebbi만을 위해 개발했어요. 타사 플러그인도, 스톡 오디오 라이브러리도 아니에요. 저희 것이고, 특허 출원 중이에요.

엔진 속 들여다보기

궁금한 분들을 위한 내용이에요. 꼭 읽지 않아도 돼요.

저희가 쓴 분류기는 원래 현실 세계의 소리를 알아보도록 만든 머신러닝 모델이에요. 저희는 이것을 설계해서 만든 오디오의 품질 관문으로 다시 썼어요. “이 소리는 무엇인가?”라고 묻는 대신 “생성한 이 소리가 원래 의도한 소리와 맞는가?”라고 물어요. 지금까지는 저희 비 소리에만 써 봤어요. 합성한 결과물의 검증 단계로 오디오 분류를 쓰는 이 방식은 저희가 출원 중인 특허에 포함돼요.

비 소리의 경우, 저희 비 소리 설계를 렌더링한 것이 실제 비 소리 녹음과 음색, 스펙트럼 모양, 소리 크기가 오르내리는 방식, 밝기에서 얼마나 가까운지도 점수로 매겼어요. 점수는 0.815로, 저희가 세운 목표인 0.80을 넘었어요.

소리별 연구는 연구 페이지에서 확인해 보세요.