OpenAI đang chuẩn bị một AI có thể sáng tác nhạc từ văn bản và âm thanh.

OpenAI phát triển một công cụ để tạo nhạc từ văn bản hoặc âm thanh.
Hợp tác với sinh viên tại Trường Juilliard để chú thích điểm số và tạo dữ liệu đào tạo.
Có thể sử dụng làm nhạc đệm cho đến nhạc cho video và quảng cáo.
Nó sẽ cạnh tranh với Suno và Udio trong bối cảnh pháp lý chưa chắc chắn và các mô hình phân phối có thể có.

OpenAI tiến bộ trong một công cụ sẽ cho phép soạn nhạc từ lời nhắc văn bản và mẫu âm thanh, theo một số ấn phẩm chuyên ngành. Ý tưởng là Bất kỳ người dùng nào cũng có thể yêu cầu giai điệu, phong cách cụ thể hoặc phần đệm cụ thể và nhận được kết quả có thể sử dụng ngay..

Các nguồn tin được trích dẫn bởi The Information và các phương tiện truyền thông khác cho biết hệ thống có thể Thêm nhạc vào video hiện có hoặc tạo bản nhạc không lời cho giọng hát đã ghi âm, chẳng hạn như dòng guitar, bass hoặc nhịp điệu cơ bản. Không có lịch phát hành Người ta vẫn chưa quyết định liệu nó sẽ ra mắt như một sản phẩm độc lập hay được tích hợp vào các dịch vụ như ChatGPT hoặc ứng dụng video Sora.

Những gì chúng tôi biết về dự án

AI của OpenAI dành cho âm nhạc

Công cụ đang được phát triển sẽ chấp nhận lời nhắc văn bản và đầu vào âm thanh cho tạo ra từ các mảnh vỡ thành các mảnh hoàn chỉnh theo hướng dẫnTrong thực tế, nó được dùng như một trợ lý hỗ trợ đệm nhạc, sắp xếp và thiết lập nhạc mà không cần đào tạo nâng cao.

Nội dung độc quyền - Bấm vào đây Cuộc đình công của diễn viên lồng tiếng kết thúc sau thỏa thuận quan trọng về AI

Theo thông tin có sẵn, OpenAI đang khám phá Nhiều chế độ sử dụng: tạo từ đầu, hỗ trợ bản nhạc có lời và nhạc nền cho videoCách tiếp cận này sẽ mở rộng phạm vi tiếp cận của những người sáng tạo âm thanh-hình ảnh, người làm podcast và các thương hiệu đang tìm kiếm âm nhạc tùy chỉnh một cách nhanh chóng.

Các ứng dụng có thể có và tích hợp

Tạo nhạc bằng AI

Trong số các ứng dụng được xem xét, các nguồn đề cập đến tạo ra các bản nhạc đệm cụ thể (ví dụ: guitar) và sáng tác nhạc cho các clipTrong lĩnh vực thương mại, các chiến dịch quảng cáo với âm thanh tùy chỉnh và quy trình làm việc kết nối với các công cụ sáng tạo hiện có đang được xem xét.

Một khả năng khác là tích hợp với nền tảng OpenAI: Kết nối với ChatGPT sẽ đơn giản hóa tương tác ngôn ngữ tự nhiên, trong khi kết nối với Sora sẽ tạo điều kiện thuận lợi cho việc chỉnh sửa nhạc phù hợp với các cảnh video do AI tạo ra. Tuy nhiên, đây chỉ là giả thuyết chưa được xác nhận chính thức.

Hợp tác với Juilliard và dữ liệu đào tạo

Một trong những khía cạnh nổi bật nhất là hợp tác với sinh viên từ Trường Juilliard, người sẽ chú thích bản nhạc để cung cấp dữ liệu chất lượng cao. Chú thích này bao gồm cấu trúc, hòa âm và sắc thái biểu cảm, với mục đích dạy cho người mẫu cả hình thức và ý đồ âm nhạc.

Nội dung độc quyền - Bấm vào đây 'The Simpsons' chắc chắn sẽ chiếu đến hết Phần 40 với sự gia hạn mới từ Fox và Disney.

Làm việc với điểm số có chú thích có thể cung cấp một cơ sở có cấu trúc hơn là chỉ sử dụng các bản âm thanh, giúp hệ thống học các tiến trình, động lực và phối hợp. Hơn nữa, phương pháp này nhằm mục đích giảm thiểu rủi ro pháp lý trong việc thu thập dữ liệu và cải thiện tính nhất quán của các thành phần được tạo ra.

Đối thủ cạnh tranh và khuôn khổ pháp lý

Suno AI

Động thái này sẽ đưa OpenAI vào cuộc cạnh tranh trực tiếp với các công ty khởi nghiệp như Suno và Udio, cũng như các tác nhân khác với các mô hình âm nhạc sáng tạo (ví dụ: nỗ lực của Google hoặc ElevenLabs). Trong khi đó, lĩnh vực này đang bị giám sát chặt chẽ do các vụ kiện gần đây Họ đặt câu hỏi về việc sử dụng tài liệu được bảo vệ để đào tạo người mẫu.

Trong bối cảnh này, các thông điệp từ người đứng đầu OpenAI đã xuất hiện về sự tiện lợi của điều đó người nắm giữ quyền chia sẻ doanh thuNgười ta vẫn phải chờ xem cơ chế bồi thường sẽ được thực hiện như thế nào, đây là vấn đề quan trọng đối với ngành công nghiệp âm nhạc châu Âu và toàn cầu.

Bối cảnh và thách thức kỹ thuật

OpenAI đã thử nghiệm khả năng tạo nhạc vào năm 2020 với Jukebox., một thử nghiệm không thành hiện thực thành một sản phẩm thương mại. Trong những năm gần đây, công ty đã tập trung vào Mô hình âm thanh cho văn bản thành giọng nói và giọng nói thành văn bảnvà hiện tại anh đang quay trở lại với âm nhạc với tham vọng lớn hơn.

Nội dung độc quyền - Bấm vào đây ChatGPT Atlas: Trình duyệt của OpenAI kết hợp trò chuyện, tìm kiếm và các tác vụ tự động

Những thách thức kỹ thuật liên quan đến việc duy trì một sự gắn kết quy mô lớn trong các sáng tác, chất lượng dữ liệu và chi phí tính toánSự minh bạch liên quan đến đào tạo và giám sát của con người trong giai đoạn sáng tạo cũng rất quan trọng để tạo ra những tác phẩm hữu ích được các nhạc sĩ và nhà sản xuất chấp nhận.

Nếu dự án thành công, nó có thể giúp các nhà sáng tạo châu Âu và Tây Ban Nha tiếp cận dễ dàng hơn. Nhạc phim và bản phối theo yêu cầu với chi phí thấp hơnMặc dù các cuộc tranh luận về sở hữu trí tuệ, cấp phép và truy xuất nguồn gốc vẫn sẽ tiếp diễn. Phản ứng của ngành sẽ phụ thuộc vào các thỏa thuận rõ ràng và chất lượng thực tế của bản demo khi chúng được phát hành.