Sonilo đã huy động $11 million trong vòng gọi vốn do B Capital dẫn dắt, với sự tham gia của Redpoint. Khoản đầu tư sẽ hỗ trợ công nghệ tạo nhạc và hiệu ứng âm thanh phù hợp với video của công ty.
Công ty đã phân bổ nguồn vốn cho các mục tiêu:
- Đầu tư hạ tầng tính toán để nâng cao hiệu năng mô hình.
- Mở rộng hoạt động tiếp cận thị trường trên các nền tảng dành cho nhà sáng tạo và nhà phát triển.
- Mở rộng hoạt động cấp phép âm nhạc.
Tạo âm thanh từ video và văn bản
Sonilo phát triển các mô hình âm nhạc và âm thanh độc quyền được xây dựng xoay quanh video. Sound World Model của công ty kết hợp khả năng diễn giải video, tạo âm thanh và căn chỉnh thời gian trong một hệ thống trí tuệ nhân tạo (AI) đa phương thức.
Mô hình sử dụng nhịp thời gian, chuyển động và diễn biến cảm xúc của một cảnh quay để tạo âm thanh đi kèm. Nhà sáng tạo có thể cung cấp cảnh quay, chỉ dẫn bằng văn bản hoặc cả hai để tạo phần âm thanh đồng bộ dành cho mục đích thương mại.
Shawn Song, CEO kiêm co-founder của Sonilo, cho biết các công cụ âm thanh dựa trên văn bản có thể khiến nhà sáng tạo phải dành hàng giờ để mô tả âm nhạc, căn chỉnh nhạc với cảnh quay và lựa chọn hiệu ứng âm thanh cho một nội dung duy nhất.
Song cho biết Sonilo phân tích cảnh quay theo từng khung hình, sử dụng nhịp độ, cảm xúc và mạch kể chuyện để tạo nhạc cùng hiệu ứng phù hợp với cảnh quay.
Cách tiếp cận của đội ngũ dựa trên nhiều năm phát triển các hệ thống đề xuất và tạo nội dung ở quy mô nền tảng. Sonilo cho biết quy trình làm việc của nhà sáng tạo định hướng việc phát triển mô hình, thay vì các chuẩn đánh giá trong ngành.
Công cụ dành cho nhà sáng tạo và hoạt động phân phối
Đội ngũ sáng lập đặt mục tiêu kết hợp nghiên cứu AI đa phương thức, chuyên môn cấp phép âm nhạc và hoạt động phát triển sản phẩm lấy cách làm việc của nhà sáng tạo làm trọng tâm.
Daisy Cai, general partner tại B Capital, cho biết các tùy chọn đầu vào bằng văn bản và video của Sonilo, chuyên môn của Song trong lĩnh vực tạo nhạc đa phương thức và sự chú trọng của đội ngũ vào quy trình làm việc của nhà sáng tạo là những lý do để đầu tư vào công ty.
Cai cho biết B Capital kỳ vọng công nghệ tạo âm thanh sẽ trở thành một thành phần thiết yếu của công nghệ video được xây dựng xoay quanh AI.
Sonilo cũng cung cấp tính năng lồng tiếng bằng AI đồng bộ với chuyển động môi, được thiết kế để giúp các đơn vị sản xuất phim ngắn nhiều tập và nội dung chuyển thể video sang các ngôn ngữ khác nhau mà không cần hậu kỳ thủ công.
Các đối tác phân phối ban đầu bao gồm nền tảng tổng hợp công cụ sáng tạo AI TapNow và ComfyUI.
Cấp phép âm nhạc và ra mắt ứng dụng cho người tiêu dùng
Sonilo đang phát triển cơ sở hạ tầng âm nhạc thương mại bằng tư liệu nguồn được cấp phép, trong đó Shutterstock là một trong những đối tác cấp phép ban đầu.
Công ty cho biết các mô hình của mình được huấn luyện trên những bộ dữ liệu âm nhạc được cấp phép, với phí cấp phép và khoản chia sẻ doanh thu được trả cho các chủ sở hữu quyền và nghệ sĩ.
Sonilo đang hoàn tất các thỏa thuận về bản ghi gốc và xuất bản âm nhạc với những tổ chức quyền lớn. Các thỏa thuận này dự kiến sẽ được ký kết trong những tuần tới.
Một ứng dụng dành cho người tiêu dùng dự kiến ra mắt vào quý tư, cho phép từng nhà sáng tạo trực tiếp tiếp cận công nghệ tạo nhạc từ video của Sonilo.
