Công ty cá nhân hóa video của Israel đang tung ra Strata, một mô hình nền tảng mà họ cho biết sẽ tạo ra các lớp riêng biệt, có thể chỉnh sửa cho văn bản, hoạt ảnh, cảnh quay và diễn viên thay vì một tệp phẳng duy nhất. Đó là thách thức trực tiếp đối với giới hạn kiến trúc của trình tạo video dựa trên khuếch tán.
Mọi mẫu video AI hiện có trên thị trường đều tạo ra một thứ giống nhau: một tệp phẳng. Bạn có thể xem, chia sẻ và cắt bớt các cạnh, nhưng nếu bạn muốn thay đổi phông chữ, điều chỉnh hoạt ảnh hoặc hoán đổi nền, về cơ bản bạn đang bắt đầu lại.
Hạn chế đó đã khiến video AI không thể tiếp cận được với quy trình sản xuất chuyên nghiệp, nơi video luôn được xây dựng theo lớp, các rãnh riêng biệt cho văn bản, đồ họa chuyển động, cảnh quay và âm thanh có thể được điều chỉnh độc lập cho đến thời điểm kết xuất cuối cùng.
Idomoocông ty cá nhân hóa video doanh nghiệp của Israel, hôm nay công bố Strata, một mô hình nền tảng AI tổng quát mà họ tuyên bố là mô hình đầu tiên được xây dựng có mục đích cho đầu ra video nhiều lớp. Thay vì tạo ra các pixel, như Danny Kalish, người đồng sáng lập và CTO của Idomoo, đóng khung nó, Strata tạo ra cấu trúc: các lớp độc lập với kiểu chữ, hoạt ảnh, đường dẫn chuyển động và âm thanh được đồng bộ hóa, tất cả được kết hợp thành cái mà công ty gọi là “bản thiết kế video sẵn sàng sản xuất”.
💜 của công nghệ EU
Những tin đồn mới nhất từ bối cảnh công nghệ EU, câu chuyện từ người sáng lập thông thái Boris của chúng tôi và một số tác phẩm nghệ thuật AI đáng nghi vấn. Nó miễn phí hàng tuần trong hộp thư đến của bạn. Đăng ký ngay bây giờ!
Sự khác biệt là kiến trúc. Các mô hình khuếch tán tiêu chuẩn thu gọn mọi thứ thành một tensor duy nhất trong quá trình tạo; mối quan hệ không gian và thời gian giữa các phần tử được đưa vào chính các pixel.
Strata, theo Idomoo, giải quyết một vấn đề tính toán khác: nó thiết kế bố cục đầy đủ, xác định vị trí, độ tương phản, chuyển động, thời gian và nhịp độ trên tất cả các lớp cùng một lúc, đồng thời thực thi các nguyên tắc thương hiệu. Kết quả đầu ra có thể chỉnh sửa được ở cấp độ lớp, giống như cách một chuyên gia sẽ làm việc trong Adobe After Effects.
Strata là một phần của Lucas, đại lý video AI của Idomoo, nằm trên Nền tảng video thế hệ tiếp theo hiện có của công ty. Một trong những khả năng cụ thể hơn về mặt kỹ thuật của nó là nhận thức về thương hiệu: Lucas phân tích nội dung đã được phê duyệt của công ty để trích xuất những gì Idomoo gọi là DNA thương hiệu, bao gồm thiết kế, tường thuật và tài sản.
Sau đó, Strata áp dụng thông số kỹ thuật đó cho mọi video được tạo thông qua nền tảng, thực thi kiểu chữ, tín hiệu chuyển động, giá trị màu sắc và âm sắc trên đầu ra ở quy mô lớn. Mục đích là để loại bỏ giải pháp mẫu mà hầu hết các sản phẩm “trình bao bọc AI” hiện đang dựa vào, trong đó cảnh quay được tạo bị hạn chế để phù hợp với bố cục đặt trước.
Lập luận của Idomoo là việc buộc nội dung vào các mẫu sẽ tạo ra sự thỏa hiệp về mặt hình ảnh dễ nhận biết; Thay vào đó, Strata thiết kế các bản thiết kế tùy chỉnh cho từng video.
Cá nhân hóa là trục khác. Bởi vì đầu ra của Strata được phân lớp chứ không phải phẳng, nên các trường dữ liệu riêng lẻ, tên, chi tiết tài khoản, lịch sử giao dịch, hình ảnh sản phẩm có thể được đưa vào các lớp cụ thể của thành phần video trong thời gian thực.
Đây là cốt lõi của mô hình kinh doanh hiện tại của Idomoo: nền tảng của công ty đã phục vụ JPMorganChase, Verizon và American Airlines, cùng nhiều hãng khác, tạo ra các video được cá nhân hóa trên quy mô lớn để liên lạc với khách hàng, giới thiệu và tiếp thị.
Về lý thuyết, Strata làm cho việc cá nhân hóa đó trở nên phức tạp hơn đáng kể vì nó hoạt động ở cấp độ bố cục chứ không phải ở dạng lớp phủ trên đầu clip được kết xuất trước.
Công ty đang cẩn thận về phạm vi ra mắt. Phiên bản truy cập sớm hiện đang được thử nghiệm bởi một số khách hàng lớn nhất của nó. Nó hiện có sẵn thông qua Đại lý video Lucas AInhưng Idomoo chưa tiết lộ khách hàng nào thuộc nhóm truy cập sớm, mô hình đã được thử nghiệm dựa trên những tiêu chuẩn nào hoặc so sánh mô hình này với các mô hình phổ biến sẵn có về số liệu chất lượng như thế nào.
Tuyên bố “mô hình nền tảng đầu tiên được xây dựng có mục đích cho video xếp lớp” là khung của chính Idomoo và chưa được đánh giá độc lập. Công nghệ Strata đang chờ cấp bằng sáng chế.
Điều đáng chú ý là cho đến nay, tài liệu nền tảng riêng của Idomoo đã tuyên bố rõ ràng rằng nó sử dụng các mô hình AI nền tảng sẵn có thay vì các mô hình độc quyền. Strata thể hiện sự thay đổi đáng kể trong định vị đó: từ một công ty áp dụng AI vào video sang một công ty đang xây dựng nền tảng AI cho video.
Liệu kiến trúc cơ bản có mang lại khung đó hay không sẽ trở nên rõ ràng hơn khi khách hàng doanh nghiệp chuyển từ quyền truy cập sớm sang triển khai sản xuất.
Được thành lập vào năm 2007 bởi Yaron Kalish, Danny Kalish và Assaf Fogel, công ty có trụ sở tại Ra’anana đã huy động được tổng tài trợ là 27 triệu đô la, bao gồm Series A trị giá 9 triệu đô la vào năm 2013 và Series B trị giá 18 triệu đô la vào năm 2019. Công ty đã xây dựng nền tảng video được cá nhân hóa cho khách hàng doanh nghiệp trong gần hai thập kỷ, mang lại cho công ty một lượng dữ liệu sản xuất video có cấu trúc bất thường để đào tạo.
Nguồn The Next Web