Sonilo đã huy động $11 triệu trong vòng gọi vốn do B Capital dẫn dắt, với sự tham gia của Redpoint. Khoản đầu tư sẽ hỗ trợ công nghệ tạo nhạc và hiệu ứng âm thanh phù hợp với video của công ty.
Công ty đã dành nguồn vốn này cho:
- Hạ tầng tính toán để mở rộng năng lực của mô hình.
- Mở rộng hoạt động tiếp cận thị trường trên các nền tảng dành cho nhà sáng tạo và nhà phát triển.
- Phát triển hoạt động cấp phép âm nhạc.
Tạo âm thanh từ video và văn bản
Sonilo phát triển các mô hình âm nhạc và âm thanh độc quyền lấy video làm trọng tâm. Sound World Model của công ty kết hợp khả năng diễn giải video, tạo âm thanh và căn chỉnh thời gian trong một hệ thống trí tuệ nhân tạo (AI) đa phương thức.
Mô hình sử dụng nhịp thời gian, chuyển động và diễn biến cảm xúc của một cảnh để tạo âm thanh đi kèm. Các nhà sáng tạo có thể cung cấp cảnh quay, hướng dẫn bằng văn bản hoặc cả hai để tạo phần âm thanh đồng bộ phục vụ mục đích thương mại.
Shawn Song, CEO và đồng sáng lập Sonilo, cho biết các công cụ tạo âm thanh từ văn bản có thể khiến nhà sáng tạo phải dành hàng giờ để mô tả âm nhạc, căn chỉnh với cảnh quay và chọn hiệu ứng âm thanh cho một nội dung duy nhất.
Song cho biết Sonilo phân tích cảnh quay theo từng khung hình, sử dụng nhịp độ, cảm xúc và mạch kể chuyện để tạo nhạc cùng hiệu ứng phù hợp với cảnh.
Cách tiếp cận của đội ngũ dựa trên nhiều năm phát triển các hệ thống đề xuất và tạo nội dung ở quy mô nền tảng. Sonilo cho biết quy trình làm việc của nhà sáng tạo định hướng việc phát triển mô hình, thay vì các thước đo chuẩn của ngành.
Công cụ dành cho nhà sáng tạo và hoạt động phân phối
Đội ngũ sáng lập hướng tới việc kết hợp nghiên cứu AI đa phương thức, chuyên môn về cấp phép âm nhạc và phát triển sản phẩm xoay quanh cách các nhà sáng tạo làm việc.
Daisy Cai, general partner tại B Capital, nêu các tùy chọn đầu vào bằng văn bản và video của Sonilo, chuyên môn của Song về tạo nhạc đa phương thức và sự chú trọng của đội ngũ vào quy trình làm việc của nhà sáng tạo là những lý do đầu tư vào công ty.
Cai cho biết B Capital kỳ vọng âm thanh tạo sinh sẽ trở thành một thành phần thiết yếu của công nghệ video được xây dựng xoay quanh AI.
Sonilo cũng cung cấp tính năng lồng tiếng bằng AI với chuyển động môi đồng bộ, được thiết kế để giúp các hãng sản xuất phim ngắn nhiều tập và nội dung chuyển đổi video sang các ngôn ngữ khác nhau mà không cần hậu kỳ thủ công.
Các đối tác phân phối ban đầu bao gồm nền tảng tổng hợp công cụ AI dành cho nhà sáng tạo TapNow và ComfyUI.
Cấp phép âm nhạc và ra mắt ứng dụng cho người tiêu dùng
Sonilo đang phát triển hạ tầng âm nhạc thương mại dựa trên tư liệu nguồn được cấp phép, với Shutterstock là một trong những đối tác cấp phép ban đầu.
Công ty cho biết các mô hình của mình được huấn luyện trên những tập dữ liệu âm nhạc được cấp phép, đồng thời trả phí cấp phép và chia sẻ doanh thu cho các chủ sở hữu quyền và nghệ sĩ.
Sonilo đang hoàn tất các thỏa thuận về bản ghi âm gốc và xuất bản âm nhạc với các tổ chức quản lý quyền lớn. Những thỏa thuận này dự kiến sẽ được ký kết trong vài tuần tới.
Một ứng dụng dành cho người tiêu dùng dự kiến ra mắt vào quý tư, cho phép các nhà sáng tạo cá nhân tiếp cận trực tiếp công nghệ tạo nhạc từ video của Sonilo.
