Các nhà làm phim cho biết AI sẽ thay đổi nghệ thuật – có lẽ vượt quá sự nhận biết. Các mô hình sinh sản mới nhất tạo ra các bản demo tuyệt vời, nhưng liệu chúng có thật sự đang thay đổi cách mà mọi người làm phim và TV không? Theo các chuyên gia làm phim và hiệu ứng đặc biệt, trong tương lai ngắn hạn, thay đổi có thể không quá lớn. Nhưng trong tương lai dài hạn, các thay đổi có thể vượt xa khả năng tưởng tượng của chúng ta.
Trên một bàn thảo tại SIGGRAPH ở Denver, Nikola Todorovic (Wonder Dynamics), Freddy Chavez Olmos (Boxel Studio) và Michael Black (Meshcapade, Viện Max Planck) đã thảo luận về tiềm năng của AI sinh sản và các hệ thống khác để thay đổi – nhưng không nhất thiết cải thiện – cách mà phương tiện truyền thông được tạo ra ngày nay. Sự đồng thuận của họ là trong khi chúng ta có thể đặt câu hỏi về tính hữu ích của các công cụ này trong tương lai ngắn hạn, tốc độ đổi mới đang diễn ra dữ dội đến nỗi chúng ta phải sẵn sàng cho sự thay đổi mạnh mẽ ở bất kỳ thời điểm nào vượt xa thời kỳ đó.
Một số vấn đề đầu tiên mà họ đã bàn đến là tính không thực tế của các trạm phát video hiện nay. Todorovic lưu ý rằng “có sự hiểu lầm về AI rằng đó là một giải pháp chỉ cần một cú nhấp chuột, nó sẽ giúp bạn có được một cảnh VFX cuối cùng, và đó thực sự không thể. Có thể chúng ta sẽ đến được đó, nhưng nếu bạn không thể chỉnh sửa, cái hộp đen đó sẽ không mang lại nhiều. Điều chúng ta thấy ngay bây giờ là giao diện người dùng vẫn đang được khám phá – những công ty nghiên cứu này đang bắt đầu tìm hiểu về cách làm việc trong 3D và các thuật ngữ làm phim.”
Black chỉ ra rằng ngôn ngữ thiếu khả năng miêu tả một số khía cạnh quan trọng nhất của sáng tạo hình ảnh. Chavez Olmos lưu ý rằng, với việc đến từ Mexico, anh không có cơ hội tham gia vào thế giới làm phim, vì tập trung tất cả vốn và chuyên môn vào LA. Nhưng anh nói rằng chuyên môn về AI (và nhu cầu về nó) đã được phân phối rộng rãi hơn. Black lo lắng rằng việc truy cập đột ngột đến các quy trình này có thể có những hậu quả không mong muốn trong tương lai ngắn hạn.
Trước khi điều đó xảy ra, Chavez Olmos nói rằng anh hy vọng một đường cong chấp nhận truyền thống hơn đối với hình ảnh và diễn viên được tạo ra bởi AI. “Điều quan trọng,” Black nói một cách riêng biệt, “và Pixar đã dạy cho chúng ta điều này rất rõ ràng: Đó là về câu chuyện. Đó là về việc kết nối với nhân vật. Đó là về trái tim. Và nếu bộ phim có trái tim, không quan trọng nếu nhân vật là AI, tôi nghĩ mọi người sẽ thích bộ phim đó.”
The latest generative models make for great demos, but are they really about to change how people make movies and TV? Not in the short term, according to filmmaking and VFX experts. But in the long term, the changes could be literally beyond our imagining.
On a panel at SIGGRAPH in Denver, Nikola Todorovic (Wonder Dynamics), Freddy Chavez Olmos (Boxel Studio) and Michael Black (Meshcapade, Max Planck Institute) discussed the potential of generative AI and other systems to change — but not necessarily improve — the way media is created today. Their consensus was that while we can justly question the usefulness of these tools in the immediate future, the rate of innovation is such that we should be prepared for radical change at any time beyond that.
One of the first topics tackled was the impractical nature of today’s video generators.
Todorovic noted the “misperception of AI that it’s a one-click solution, that it’s going to get you a final VFX shot, and that’s really impossible. Maybe we’ll get there, but if you don’t have editability, that black box doesn’t give you much. What we’re seeing right now is the UX is still being discovered — these research companies are starting to learn the ways of 3D and filmmaking terms.”
Black pointed out that language fundamentally lacks the ability to describe some of the most important aspects of visual creation.
“I mean, things like yoga poses, ballet poses — there’s some classic things we have names for, that we can define, but most of the stuff we do, we don’t have names for,” he said. “And there’s good reason for that: It’s because humans actually have inside them a generative model of behavior. But I don’t have a generative model of images in my head. If I want to explain to you what I’m seeing, I can’t project it out of my eyeballs, and I’m not a good enough artist to draw it for you. So I have to use words, and we have many words to describe the visual world. But if I want to describe to you a particular motion, I don’t have to describe it in words — I just do it for you, and then your motor system sees me and is active in understanding that. And so we, I think it’s a biological reason, a neuro-scientific reason, that we don’t have words for all of our motion.”
That may seem a bit philosophical, but the result is that text-based prompt systems for imagery are fundamentally limited in how they can be controlled. Even the hundreds of terms of tech and art used every day on set and in post-production are inadequate.
Chavez Olmos pointed out that, being from Mexico, he had little opportunity to take part in the filmmaking world, because all the money and expertise was concentrated in LA. But he said that AI expertise (and the demand for it) is more widely distributed. “I had to leave Mexico because I had no opportunity there; I can see, now, having that same opportunity for people who don’t need to go overseas to do it.”
Black, however, is worried that sudden access to these processes may have unintended consequences in the short term.
“You can give somebody a powerful car, that doesn’t make them a Formula One driver, right? That’s a little bit like what we have now. People are talking about, everyone’s going to be making films. They’re going to be s—–, quite honestly,” he said. “The democratization thing is exactly what (Chavez Olmos) said, and the power is that maybe some new voice will have an opportunity that they wouldn’t otherwise. But the number of people making really good films is still going to be small, in my opinion.”
“The real revolution,” he continued, “the real power of what we’re seeing in AI is we’re going to see an entirely new genre of entertainment, and I don’t know exactly what it’s going to look like. I predict it’ll be something between video game and film and real life. The film industry is passive storytelling: I sit there and observe, it’s like theater or a podcast. I’m the passive recipient of the entertainment. But in our day to day life, we tell stories to each other, we chat about what we did on the weekend and so on. And that’s a very active kind of interactive storytelling.”
Before that happens, though, Chavez Olmos said he expects a more traditional acceptance curve on AI-generated imagery and actors.
“It’s gonna have the same, I think, reaction that we had when we saw the first ‘Final Fantasy’ movie or ‘The Polar Express’ — something’s going to be not quite there yet, but people are going to start accepting these films,” he said. “And instead of a full CG film, it’s going to be a full AI film, which I think we’re going to see even at the end of this year. I think people are going to get past that, like ‘OK, this is AI,’ people are going to accept that.”
“The important thing,” Black said separately, “and Pixar taught us this very clearly: It’s all about story. It’s all about connecting to the characters. It’s about heart. And if the movie has heart, it doesn’t matter if the characters are AI, I think people will enjoy the movie,” he said. “That doesn’t mean that they’re going to not want human actors. There’s an excitement to knowing it’s real humans like us, but like way better than us, to see a human at the peak of their game, it inspires all of us, and I don’t think that’s going to go away.”
