Moonvalley, startup AI tạo video tại Los Angeles, tin rằng việc chỉ dựa vào câu lệnh không đủ để làm phim. Vì vậy, hôm thứ Ba, công ty đã công bố mô hình "nhận thức 3D" của mình, hứa hẹn một phương pháp "lai" cho phép các nhà làm phim kiểm soát nhiều hơn so với các mô hình văn bản thành video tiêu chuẩn khác.

Moonvalley lần đầu ra mắt mô hình Marey phiên bản beta vào tháng 3 và hiện đã phát hành dưới dạng đăng ký tín dụng hàng tháng. Người dùng có thể trả 14,99 đô la cho 100 tín dụng, 34,99 đô la cho 250 tín dụng và 149,99 đô la cho 1.000 tín dụng. Người dùng có thể tạo các clip dài tối đa năm giây, phù hợp với tiêu chuẩn ngành cho các mô hình tạo video công khai.

Được đồng sáng lập bởi các nhà nghiên cứu cũ của DeepMind, những người đã làm việc trên mô hình tạo video của Google, startup này tuyên bố Marey là một trong số ít các mô hình được đào tạo hoàn toàn trên dữ liệu được cấp phép mở. Điều này phù hợp với khách hàng mục tiêu của Moonvalley: các nhà làm phim muốn tránh các vụ kiện trong tương lai về nội dung do AI tạo ra có thể giống với tài liệu có bản quyền.

Đối với nhà làm phim độc lập Ángel Manuel Soto, điểm mạnh nhất của Marey là việc dân chủ hóa quyền truy cập vào các công cụ kể chuyện bằng AI hàng đầu, đặc biệt là cho những người từ lâu cảm thấy bị loại khỏi nền điện ảnh truyền thống. Lớn lên ở Puerto Rico, Soto cho biết bạn cần phải có hàng trăm hoặc hàng ngàn đô la chỉ để thuê máy quay làm phim.

"Ở quê nhà, chúng tôi cần xin phép để kể những câu chuyện của mình," anh nói. "AI cho phép bạn làm điều đó theo cách riêng của mình mà không cần phải từ bỏ ước mơ vì ai đó từ chối tài trợ, vì họ không nghĩ rằng một câu chuyện từ đất nước của bạn có thể sinh lời."

Giờ đây, Soto nói, Marey đã giúp anh cắt giảm chi phí sản xuất từ 20% đến 40% và làm việc tự do hơn.

Soto trước đây đã làm việc với studio Asteria của Moonvalley trong bộ phim tài liệu "Menudo: Forever Young" của HBO. Asteria, còn được gọi là XTR, đã được Moonvalley mua lại trong năm nay, theo Hemant Taneja, CEO của General Catalyst. (GC là cổ đông lớn của Asteria và đã đầu tư thêm tiền vào thực thể hợp nhất.)

CEO kiêm đồng sáng lập Moonvalley, Naeem Talukdar, đã trình diễn cách Marey có thể được sử dụng trong tiền kỳ và hậu kỳ, cho dù là để thử nghiệm các cảnh trước khi quay hay điều chỉnh góc máy sau khi quay, và cách nó có thể kiểm soát các đối tượng, nhân vật, chuyển động và bố cục cảnh.

Talukdar nói với TechCrunch rằng Marey có hiểu biết về thế giới vật lý, điều này có thể chuyển thành cách kể chuyện tương tác hơn khi công nghệ phát triển. Hiện tại, sự hiểu biết đó — mà Marey chia sẻ với các mô hình khác như Veo 3 của Google và Sora của OpenAI (vẫn đang ở chế độ riêng tư) — cho phép Marey làm những việc như bắt chước chuyển động trong khi vẫn tuân theo các quy luật vật lý.

Ví dụ: video về một con bò rừng chạy nước kiệu qua đồng cỏ có thể được chuyển thành một chiếc Cadillac chạy đua trong cùng một môi trường, với cỏ và bụi đất phản ứng với chuyển động của chiếc xe. Hoặc, Marey có thể chồng một nhân vật trông giống George Washington lên một diễn viên, chuyển tất cả mọi thứ từ chuyển động trên khuôn mặt của diễn viên đến các cơ bắp ở cẳng tay khi anh ta diễn tả.

Có lẽ điểm độc đáo hơn là Marey hỗ trợ chuyển động máy quay tự do. Talukdar đã trình diễn cách nó cho phép bạn thay đổi quỹ đạo máy quay bằng chuột: Anh ấy đã tích hợp tính năng lia máy và phóng to vào video về một người phụ nữ trên tàu hỏa ở Rockies chỉ bằng cách kéo con trỏ. Ông cũng lưu ý rằng Marey có thể đạt được chuyển động máy quay gần 360 độ và tuân theo hướng dẫn để tạo cảnh quay như thể nó được quay từ máy quay cầm tay hoặc dolly.

Marey cũng có thể thay đổi hậu cảnh của video, cho phép các nhà làm phim bắt đầu với cảnh quay nguồn để xây dựng cảnh họ muốn. Talukdar đã phát một video về một người đàn ông lái xe máy trên đường phố ngoại ô, sau đó chuyển sang cùng một người đàn ông, không đội mũ bảo hiểm, lái một chiếc xe đạp hơi khác trên đường cao tốc nông thôn.

Kế hoạch của Moonvalley trong vài tháng tới là triển khai các điều khiển mới như ánh sáng, quỹ đạo vật thể sâu và thư viện nhân vật, Talukdar cho biết.

Việc phát hành công khai Marey đặt nó vào cuộc cạnh tranh trực tiếp với một lĩnh vực ngày càng phát triển của các trình tạo video AI — các mô hình như Runway Gen-3, Luma Dream Machine, Pika và Haiper.