Nvidia dùng AI để tạo nên video slow motion 240fps từ video 30fps

Theo dõi Nếu muốn chuyển một video bình thường thành slow motion thì cách làm hiệu ứng xưa giờ là kéo giãn thời gian ra, thêm vào rất nhiều frame hình không tồn tại và kết quả là một đoạn video bị giật, không thuyết phục.

0
43

Nếu muốn chuyển một video bình thường thành slow motion thì cách làm hiệu ứng xưa giờ là kéo giãn thời gian ra, thêm vào rất nhiều frame hình không tồn tại và kết quả là một đoạn video bị giật, không thuyết phục. Tuy nhiên nhờ sự hỗ trợ của công nghệ trí thông minh nhân tạo deep learningNvidia đã có thể tạo ra thêm những khung hình giả nằm ở khoảng giữa những khung hình thật trong một video clip, từ đó tạo ra một video slow motion cực kỳ mượt mà như quay bằng máy chuyên nghiệp.

Chi tiết hơn, nếu bạn lấy điện thoại ra quay một clip 30 fps, sau đó muốn có video chuyển động chậm 240 fps thì cần phải thêm vào 210 khung hình, hoặc 7 khung hình mới giữa 2 khung hình quay thật ban đầu. Biện pháp trước đây là pha trộn hoặc biến đổi một vài khung hình trước và sau mỗi khung hình thật vẫn không đủ để lấp đầy các khoảng trống nhằm đạt được video quay chậm thuyết phục. Đây chính là lý do mà các chuyển động chậm thường chỉ xuất hiện trong các phim điện ảnh hơn so với trong thể thao.

Kỳ thực trước đây vẫn có một số phần mềm giả lập ra các video slow motion một cách mượt mắt nhất có thể, tuy nhiên nó đòi hỏi phải phân tích chuyển động trong clip và tốn rất nhiều tài nguyên lẫn thời gian render. Tuy nhiên, cách tiếp cận của Nvidia lại hoàn toàn khác nhưng lại cho video sản phẩm hiệu quả hơn. Cụ thể, họ dùng deep learning để dạy cho nó 11 ngàn video slow motion chuẩn nội dung thể thao quay bằng 240 fps native. Lúc này AI sẽ dự đoán được 210 khung hình nằm trước và sau mỗi frame hình.

Hiện tại nhiều chiếc smartphone hoặc camera cao cấp đã có thể quay được những đoạn slowmotion lên tới 240fps nhưng đổi lại độ phân giải phải chấp nhận giảm xuống do không đủ băng thông xử lý dữ liệu liên tục. Trong khi đó, cách tiếp cận của Nvidia được cho là rẻ hơn nhưng vẫn cho hiệu quả như các máy quay chuyên dụng, thí dụ như các máy của Phantom lên tới hàng chục ngàn đô. Dù vậy thì hiện. AI vẫn chưa cho ra được video slow motion ngay lập tức như máy quay chuyên nghiệp, do đó họ cần có thêm thời gian để hoàn thiện để AI thông minh hơn, hướng tới tham vọng có được cả những video 8K slow motion chỉ với một nút bấm.

Tham khảo Gizmodo