Runway Gen-3 Alpha thêm khả năng AI chuyển hình ảnh thành video
Tham gia vào danh sách bản tin hàng ngày và hàng tuần của chúng tôi để cập nhật thông tin mới nhất và nội dung độc quyền về bảo vệ AI hàng đầu trong ngành. Tìm hiểu Thêm
Mặc dù đối mặt với nhiều tranh cãi – như nhiều nhà cung cấp mô hình AI gần đây đã phải đối mặt – về các phương pháp lấy dữ liệu và đào tạo của mình, startup đặt trụ sở tại New York mang tên Runway vẫn tiếp tục phát triển với các tính năng mới cho nền tảng video AI sinh động của mình. Hôm nay, công ty đã thông báo trên tài khoản X và server Discord của mình rằng Gen-3 Alpha, mô hình video AI mới mà đã giới thiệu vào giữa tháng 6 năm 2024 có khả năng tạo ra video cực kỳ sinh động từ phong cách văn bản đơn giản chỉ trong vài giây, hiện đã chấp nhận ảnh đứng làm gợi ý. Người dùng chỉ cần truy cập vào trang web của Runway, nhấp vào ngôn ngữ “thử Gen 3-Alpha” và họ sẽ được dẫn đến một màn hình nơi họ có thể tải lên hình ảnh và/hoặc tiếp tục nhập phong cách văn bản để hướng dẫn các thế hệ video AI mới có độ dài 5 hoặc 10 giây (người dùng lựa chọn). Một video được tạo ra trong 10 giây yêu cầu 40 tín dụng thông qua các cấp độ trả tiền và đăng ký của Runway, trong khi một thế hệ 5 giây sẽ mất 20 tín dụng.
Các bài kiểm tra cho thấy cập nhật hình ảnh thành video của Runway Gen-3 Alpha nhanh chóng và vẫn giữ chất lượng cao. Chúng tôi đã thử nghiệm tính năng này một cách ngắn gọn trên tài khoản cá nhân của tôi trên Runway và tôi đã bị ấn tượng bởi cả tốc độ (chỉ mất dưới một phút để tạo video từ một hình ảnh mà tôi cung cấp) và chất lượng. Xem ảnh của tôi (được tạo ra bằng dịch vụ AI riêng của Midjourney) và video được tạo ra bằng Runway Gen-3 Alpha được nhúng dưới đây. Biện pháp an toàn được thực hiện Mô hình tự động cố gắng phát hiện và chặn việc tạo video từ hình ảnh mạnh bạo hoặc các nhân vật nổi tiếng như các nhà chính trị. Tính năng này cũng đã được công bố sớm trên mạng cho một số người đăng ký của Runway vào cuối tuần trước khi bị rút xuống và sau đó đưa trở lại vào ngày hôm nay. Các ví dụ ban đầu rơi mọi nơi Trên tài khoản X của mình, Runway cũng đã nêu bật 10 video thú vị được tạo ra từ hình ảnh với mô hình Gen-3 Alpha. \
Hôm nay chúng tôi đã phát hành Gen-3 Alpha Image to Video. Cập nhật này cho phép bạn sử dụng bất kỳ hình ảnh nào làm khung đầu tiên cho việc tạo video, dù là riêng lẻ hoặc kèm với một phong cách văn bản để hướng dẫn thêm. Image to Video là cập nhật lớn mà cải thiện rõ rệt về kiểm soát nghệ thuật và…
Theo Runway đăng trên tweet của mình: “Image to Video là cập nhật lớn mà cải thiện rõ rệt về kiểm soát nghệ thuật và độ nhất quán của các thế hệ của bạn.”
Người sáng lập và CEO của Runway, Cristóbal Valenzuela giới thiệu tính năng mới trên tài khoản cá nhân của mình trên X bằng cụm từ đơn giản “đến lúc” kèm theo bài đăng về tác phẩm tạo video từ hình ảnh của riêng mình.
Cuộc đua về AI video dang dở – đợi xem sự kiện pháp lý
Runway là một trong số các công ty – bao gồm OpenAI với mô hình Sora của mình, Kuaishou Technology với mô hình AI Kling, Luma AI với Dream Machine của mình, và Pika với mô hình tựa “Pika” – đang cố gắng cung cấp AI video tạo video sinh động, nhanh chóng và chất lượng. Tuy nhiên, mô hình Sora của OpenAI vẫn chưa công cộng, trong khi các mô hình khác có sẵn cho công chúng sử dụng. Nhưng với cập nhật mới về hình ảnh thành video của Runway hứa hẹn một cách khác nhau để người dùng tạo ra video chất lượng Hollywood ngay lập tức, rõ ràng là cả lĩnh vực làm phim và sáng tạo video đang bị xáo trộn như chưa bao giờ. Nhưng liệu tòa án sẽ ngăn chặn sự đổi mới khi được yêu cầu bởi các nghệ sĩ tổn thương và chủ sở hữu quyền tác phẩm được bảo hộ bản quyền? Runway đang bị một số công ty AI khác đang bị kiện trong các vụ kiện đại diện bởi các tác giả cáo buộc rằng tư cách tổng thể của các công ty AI lấy dữ liệu và đào tạo trên dữ liệu được đăng công khai – bao gồm cả dữ liệu có bản quyền – mà không có sự cho phép, ủy quyền, bồi thường hoặc sự đồng ý rõ ràng, là vi phạm quyền tác giả. Cách tòa án quyết định về vấn đề này không nghi ngờ sẽ ảnh hưởng lớn đến hiện tại và tương lai của video AI và các công cụ sáng tạo. VB Daily
Hãy ở trong bản tin! Nhận tin tức mới nhất trong hộp thư đến của bạn hàng ngày Bằng cách đăng ký, bạn đồng ý với Điều khoản dịch vụ của VentureBeat. Cám ơn bạn đã đăng ký.Xem thêm các bản tin VB tại đây. Có lỗi xảy ra. #AI #ImageToVideo #RunwayGen3Alpha
Nguồn: https://venturebeat.com/ai/you-can-now-turn-still-images-into-ai-videos-with-runway-gen-3-alpha/
Join our daily and weekly newsletters for the latest updates and exclusive content on industry-leading AI coverage. Learn More
Despite facing controversy — as many AI model providers have lately — over its data scraping and training practices, the New York City-based startup Runway is plowing ahead with new marquee features for its realistic generative AI video platform.
Today, the company announced on its X account and its Discord server that Gen-3 Alpha, the new AI video model it unveiled back in mid June 2024 capable of generating incredibly realistic video in seconds from simple text prompts, now accepts still images as prompts as well.
The user simply has to navigate to Runway’s website, click on the “try Gen 3-Alpha” language and they will be taken to a screen where they can upload imagery and/or continue to enter text prompts to guide new AI video generations that are 5 or 10 seconds in length (the user chooses). A 10-second generated video requires 40 credits through Runway’s pay-to-play and subscription tiers, while a 5-second generation costs 20 credits.
Tests reveal Runway’s Gen-3 Alpha image-to-video update is surprisingly fast while retaining high quality
We tested the feature briefly on my personal Runway account and I was personally blown away by both the speed (it took less than a minute to generate the video from a still image I provided) and the quality. See my still (generated with separate AI service Midjourney) and video made with Runway Gen-3 Alpha embedded below.
Safety measures in place
The model automatically attempts to detect and block the creation of video from explicit still imagery or well-known figures such as politicians.
The feature also made its way online early briefly for some Runway subscribers over the weekend before being yanked down and then put back up today.
Initial examples abound
On its X account, Runway also highlighted 10 interesting videos generated from still images with the Gen-3 Alpha model.
As Runway posted in its tweet: “Image to Video is major update that greatly improves the artistic control and consistency of your generations.”
Runway’s co-founder and CEO Cristóbal Valenzuela introduced the new feature on his own personal account on X with the simple phrase “it’s time” followed by a post of his own image-to-video creation.
The video AI race is neck and neck — pending litigation
Runway is one of several companies — including OpenAI with its Sora model, Kuaishou Technology with its Kling AI model, Luma AI with its Dream Machine, and Pika with its self-titled model — vying to offer fast and high quality generative video to users.
However, OpenAI’s Sora still remains non-public for now, while the other models are accessible to members of the public to use.
But with Runway’s new still image-to-video update promising yet another way for users to make Hollywood-quality videos on the fly, it’s clear that the entire field of filmmaking and video creation is being upended like never before.
But will the courts stifle the innovation at the behest of aggrieved artists and rights’ holders of copyrighted material?
Runway is, after all, among several AI companies currently being sued in class action lawsuits by creators who allege that the general practice of AI companies scraping and training on publicly posted material — including copyrighted material — without express permission, authorization, compensation, or consent is a violation of copyright law. How the courts rule on this issue will no doubt greatly impact the present and future of AI video and creative tools.
VB Daily
Stay in the know! Get the latest news in your inbox daily