톤 전송 및 DDSP-VST 플러그인 (2023)

Google Magenta: 톤 전송

멜로디가 떠오를 때 그 느낌을 알지만, 나중에 잊어버리시나요? 고전적인 방법은 아이디어를 흥얼거리며 녹음하고 시간이 있을 때 개념을 발전시키는 것입니다. 하지만 흥얼거리지 않는 멜로디를 플루트나 바이올린 연주의 사실적인 오디오 샘플로 바꿀 수 있다면 어떨까요?

Tone Transfer는 기계 학습을 기반으로 하며 Google의 Magenta 팀이 디자인한 온라인 음악 앱입니다. 이 앱을 사용하면 사용자는 단일 음성이나 악기의 오디오를 업로드한 다음 다른 악기를 통해 재생할 수 있습니다. 사용자는 이러한 사운드 샘플을 wav 파일로 다운로드하여 DAW로 가져올 수 있습니다.

2023년 1월 26일, Google은 다음과 같은 새로운 AI 음악 제품을 선보이는 논문을 발표했습니다.음악LM텍스트 프롬프트를 음악으로 바꾸는 것입니다.

이 문서에서는 Tone Transfer(웹) 및 DDSP VST(플러그인) 사용 방법에 대한 기본 사항을 다룹니다. 또한 이 앱을 가능하게 하기 위해 신경망이 어떻게 작동하는지에 대한 자세한 내용을 보려면 마지막에 몇 가지 리소스를 포함하겠습니다.

음악 프로듀서이고 DAW에서 직접 작업하고 싶다면 다음을 확인하세요.오디오-미디 플러그인대신에.

기사 내용

톤 전송과 비교. DDSP 플러그인
톤 전송(웹 애플리케이션) 사용 방법
DDSP VST(톤 전송 플러그인) 설치 방법
DDSP 플러그인을 음악 제작자로 사용
DDSP 플러그인의 주요 기능
Magenta DDSP를 사용한 딥 러닝

톤 전송과 DDSP 플러그인

웹에서 톤 전송을 사용하는 방법

시작하려면톤 전송웹사이트를 방문하고 인트로 화면을 지나 앱으로 진행하세요. 주의 - 데스크톱, 노트북 또는 Android 브라우저에서 대시보드를 열 수 있지만 iOS 모바일 장치는 현재 지원되지 않습니다.

Tone Transfer에는 하나의 기본 대시보드가 있습니다. 여기에서는 기존 오디오 입력 중에서 선택하거나 직접 녹음할 수 있습니다. 출력에는 몇 가지 악기를 사용할 수 있습니다. 색소폰, 플루트, 바이올린, 트럼펫.

마음에 드는 오디오 샘플을 찾으면 다운로드 아이콘을 사용하여 하드 드라이브에 저장하세요. 여기에서 DAW로 드래그하여 로열티 프리 샘플로 사용하세요.

기계 학습 출력 제어

앱을 좀 더 자세히 살펴보려면 ML 모델 제어판을 열고 출력을 조정하세요. 대시보드 왼쪽 하단에 있는 아이콘을 통해 액세스하세요.

믹스 기능을 사용하면 원래 입력과 새로운 악기 출력을 혼합할 수 있습니다. 옥타브 슬라이더를 사용하여 악기의 음색에 대한 더 나은 레지스터를 찾을 수 있으며 음량 컨트롤은 출력의 주변 소음을 조정합니다.

재미있는 메모로 마무리하려면 Adam Nealy의 심층 데모 비디오를 시청하세요. 그는 Tone Transfer가 실제로 무엇을 할 수 있는지에 대한 솔직한 개요를 제공합니다. 따라서 직접 동작을 수행하고 싶지 않다면 이것을 확인하십시오.

DDSP-VST(톤 전송 플러그인) 설치 방법

Tone Transfer를 사용해 본 후DDSP-VST페이지를 방문하여 무료 플러그인을 다운로드하세요. 동일한 Tone Transfer 기능을 모두 이용할 수 있지만 선택할 수 있는 악기가 훨씬 더 많습니다. 또한 멋진 인터페이스로 톤을 형성하고, 소음 수준을 수정하고, 리버브를 추가하는 등의 멋진 작업을 수행할 수 있습니다.

DDSP zip 파일에는 독립형 애플리케이션이 포함되어 있지 않으므로 기존 설치 프로그램을 실행하지 않습니다. 대신 VST3 또는 구성 요소 파일을 적절한 폴더로 드래그하기만 하면 됩니다.

설치 지침

시작하려면 디지털 오디오 워크스테이션을 닫으세요.

Logic Pro를 사용하는 Mac 사용자는 구성 요소 파일을 사용하여 오디오 장치로 로드해야 합니다. 그렇지 않으면 나머지 DAW는 VST3 형식과 잘 작동하는 것 같습니다.

Mac 플러그인의 가장 일반적인 두 가지 경로는 다음과 같습니다.

라이브러리 > 오디오 > 플러그인 > 구성 요소

라이브러리 > 오디오 > 플러그인 > VST3

Windows VST3 플러그인의 가장 일반적인 경로:

C:\Program Files (x86)\Common Files\VST3.

여전히 도움이 필요한 경우 당사의 비디오 튜토리얼을 참조하십시오.자주하는 질문페이지. Mac 및 PC용 Logic Pro, Ableton 및 FL Studio 지침이 포함되어 있습니다.

DDSP 플러그인을 사용하는 방법

VST3 또는 구성 요소 파일이 올바른 폴더에 있으면 DAW를 열고 DDSP 플러그인을 트랙에 로드할 수 있습니다. 여기에서는 실시간으로 연주를 변환하거나 오디오를 새로운 악기로 재생하는 두 가지 선택 사항이 있습니다.

기억하시면 Tone Transfer는 입력을 위해 오디오 녹음만 했습니다. DDSP는 다릅니다.

DDSP 플러그인을 오디오에 로드하거나 MIDI 트랙이며 두 시나리오 모두에서 작동합니다. 다양한 악기의 멜로디를 들어보고 딱 맞을 때까지 음색을 미세 조정하세요. 그런 다음 이 오디오 샘플을 사용하여 새로운 음악을 만들어 보세요.

내 생각에 이 플러그인의 가장 흥미롭고 최첨단인 부분은 자신만의 DDSP 모델을 교육할 수 있는 옵션입니다.구글 주식회사. 이것은 고급 기능처럼 들릴 수도 있지만 실제로는 그렇게 어렵지 않습니다. 새로운 모델을 훈련시키면서 해당 사운드를 앱 내의 악기 컬렉션에 추가할 수 있습니다.

DDSP 플러그인 인터페이스

주요 특징들

모델 선택- 출력할 악기를 선택하세요. Google Colab 노트북에서 새 모델을 훈련한 다음 폴더를 열어 맞춤 모델에 액세스할 수 있습니다.
톤 쉐이핑- 장비의 이상적인 범위는 DDSP의 톤 상자(위 스크린샷의 보라색 직사각형)로 표시됩니다. 각 악기 모델에 따라 변경됩니다. 상자의 음영 부분을 원하는 방향으로 드래그하여 음색을 조정하세요. 이것은 놀라울 정도로 재미있습니다.
입력/출력 제어- 반음별 피치 이동, 고조파 톤 존재, 악기 소음, 출력 게인 등 다양한 컨트롤 중에서 선택하세요.
리버브 효과- 악기의 리버브 크기, 습기 및 습기를 조정합니다.
나만의 모델 학습- 첼로와 같은 악기를 한 번에 한 음씩 연주하는 10~20분 분량의 녹음을 업로드하세요. Magenta는 이를 사용하여 DDSP 플러그인에 다시 로드하고 오디오를 실행할 수 있는 사용자 정의 모델을 생성합니다.

Magenta DDSP를 사용한 딥 러닝

Tone Transfer 또는 DDSP가 유용하다고 생각되면 기본 기술이 어떻게 작동하는지 살펴보는 것이 좋습니다. 이는 기계 학습이라는 더 큰 주제에 대한 재미있는 시작점입니다.

Magenta는 일상적인 소리를 재현하기 위해 클래식 DSP와 기계 학습 모델을 결합하는 기술을 미분 가능한 디지털 신호 처리라고 부릅니다. Google Brain 연구 과학자가 등장하는 위의 동영상제시 엥겔에서는 이것이 어떻게 작동하는지에 대한 개요를 제공합니다.

DDSP고전적인 첨가 합성기와 동일한 기술에 의존하지 않습니다. 신경망은 모델을 생성하기 위해 고품질 사운드에 대한 훈련에 많은 시간을 소비합니다. Google Colab을 사용하면 자신만의 모델을 만들어 볼 수 있습니다.

다음에서 앱의 오픈 소스 코드 저장소를 살펴보세요.Github그리고 그들의 합류디스코드 채널성장하는 AI 음악 커뮤니티에 참여하고 싶습니다. 최근 기사를 확인하실 수도 있습니다.마젠타 스튜디오, 같은 팀의 MIDI 생성 프로젝트입니다. 우리는 다른 인기 있는 제품에 대한 광범위한 개요를 제공합니다.AI 음악 앱시장에.