Prompt làm phim bằng AI: điều gì thực sự hiệu quả

Viết prompt cho phim không phải một cuộc thi viết văn. Đó là thiết kế cú máy bằng chữ, và phần lớn tay nghề nằm ở việc quyết định cái gì thuộc về prompt ngay từ đầu. Hai kiểu thất bại gây ra phần lớn những lần tạo sinh đáng thất vọng: prompt mô tả một cảm giác mà không hề nhắc đến máy quay, và prompt mô tả toàn bộ cảnh, kể cả mọi thứ đã hiện rõ trong ảnh tham chiếu, đến mức mô hình không còn chỗ để chuyển động. Một prompt hiệu quả nằm giữa hai thái cực đó. Nó nêu chủ thể, hành động, máy quay và ánh sáng, rồi dừng lại.

Mỗi lần một cú máy

Mỗi lần tạo sinh nên ứng với một cú máy mà bạn định dựng vào phim. Hướng dẫn video Gen-4 của Runway mô tả các clip năm và mười giây và gợi ý hoạch định mỗi clip như một cảnh, không phải một chuỗi bị nén lại. Đây không phải giới hạn cần lách; đây là kỷ luật giúp phim tốt hơn. Nếu một cú máy cần ba hành động riêng biệt, thì nó có lẽ là ba cú máy.

Hãy viết prompt bằng vốn từ của công đoạn dựng. Nếu bạn không nói được cú máy ấy làm gì cho cảnh, thì bao nhiêu chi tiết trong prompt cũng không sửa được điều đó.

Dùng bốn ô, rồi dừng lại

Một prompt video đáng tin có bốn ô, đại khái theo thứ tự này:

1. Chủ thể và hành động. Ai ở trong khung hình và họ làm gì về mặt thể chất. Hãy viết thành một hành động nhìn thấy được, không phải một ý định.
2. Máy quay. Cỡ cảnh và chuyển động: một cú trung, một cú đẩy vào chậm, một cú toàn cố định, một cú theo tay cầm. Những thuật ngữ này đáng học cho đúng, và bảng tham chiếu máy quay của Runway ghép mỗi thuật ngữ với một kết quả mẫu.
3. Ánh sáng và không khí. Hướng, tính chất và màu: nắng thấp từ bên trái khung hình, một ngọn đèn thực dụng duy nhất, ánh sáng khuếch tán của trời âm u, sương mù. Từ ngữ về ánh sáng thay đổi hình ảnh nhiều hơn từ ngữ về phong cách.
4. Phong cách và quang học, thật ngắn. Loại phim, hạt, tính chất ống kính, bảng màu. Một hai tính từ thường đủ; cả một đoạn tính từ có xu hướng tranh chấp với cú máy.

Prompt ảnh có nhiệm vụ hơi khác. Hướng dẫn ảnh Gen-4 của Runway liệt kê chủ thể, cảnh, bố cục, ánh sáng, màu, phong cách, lấy nét, góc máy, chữ và cảm xúc như những yếu tố có thể dùng, và ghi chú rằng câu dài hơn đổi được nhiều kiểm soát hơn trong khi prompt ngắn đổi được nhiều biến thể hơn. Không cái nào sai. Điều quan trọng là bạn biết mình đang chọn cái nào.

Mô tả chuyển động, không mô tả bức ảnh

Khi một lần tạo sinh bắt đầu từ ảnh đầu vào, việc kể lại bức ảnh bằng lời có xu hướng làm giảm chuyển động: mô hình nhận cùng một thông tin hai lần và trở nên dè dặt. Hướng dẫn của Runway nói thẳng về điều này — dùng prompt văn bản để mô tả cái gì nên chuyển động, và nhắc đến chủ thể đã có bằng những từ chung chung như “chủ thể” hay “cô ấy”. Hãy để phần mô tả chi tiết cho những yếu tố bạn muốn thêm vào hoặc thay đổi.

Đó cũng là lý do những prompt chuyển động tốt nhất thường khiêm tốn. “Cô ấy quay đầu về phía cửa sổ, rồi nhìn xuống” thường thắng một câu cố biên đạo sáu giây diễn xuất. Bạn đang đạo diễn một cử chỉ, không phải một cảnh.

Nói điều nên xảy ra, không nói điều không nên

Cách diễn đạt phủ định là một cái bẫy ở hầu hết các mô hình hiện nay. Hướng dẫn của Runway nêu rõ rằng prompt phủ định không được hỗ trợ cho ảnh hay video Gen-4, và việc mô tả thứ không nên xuất hiện có thể tạo ra kết quả ngược lại. “Không có chuyển động máy” là một chỉ dẫn tồi; “máy cố định, chủ thể đứng yên” là một chỉ dẫn tốt. “Một người đàn ông không có tóc” trở thành “một người đàn ông hói”.

Nguyên tắc thực dụng: mỗi câu trong prompt nên mô tả một thứ nhìn thấy được trong khung hình. Nếu một câu chỉ mô tả sự vắng mặt, hãy viết lại thành sự hiện diện.

Tách danh tính khỏi phong cách

Sự nhất quán đến từ ảnh tham chiếu và sự lặp lại, không từ những mô tả dài hơn. Các hệ thống tham chiếu hiện nay có thể giữ một nhân vật qua nhiều điều kiện ánh sáng và bối cảnh, và hướng dẫn References của Runway khuyên dùng một ảnh sạch, sáng đều, biểu cảm trung tính làm nền — và cho phép tối đa ba ảnh tham chiếu mỗi lần tạo sinh. Hãy dùng một ảnh tham chiếu cho nhân vật, một cho bối cảnh, một cho việc chỉnh màu, và giữ chúng nguyên vẹn suốt phim.

Cũng nên giữ một bản mô tả nhân vật bằng văn bản: độ tuổi, vóc dáng, tóc, trang phục, hai ba đặc điểm nhận dạng. Khi một bản dựng bị trôi, hãy so với bản mô tả trước khi đổ lỗi cho mô hình. Trôi thường là do một prompt đã lặng lẽ thay đổi.

Giữ nhật ký để các bản dựng có thể lặp lại

Mỗi bản dựng đã duyệt nên có thể dựng lại được. Hãy ghi mô hình và phiên bản, thiết lập, ảnh tham chiếu, prompt chính xác, và một dòng về điều gì đã thay đổi so với lần thử trước. Điều này biến việc viết prompt từ một cái máy đánh bạc thành một quy trình có ký ức.

Mỗi lần chỉ thay một biến. Nếu bạn đổi cả máy quay, ánh sáng và trang phục cùng lúc, bạn chẳng học được gì từ kết quả ngoài việc mình có thích nó hay không. Logic tương tự áp dụng cho các lô: hãy tạo những biến thể khác nhau ở một chiều duy nhất để so sánh cho trung thực.

Viết prompt cho công đoạn dựng

Một prompt có thể tạo ra cú máy đẹp mà vô dụng khi dựng. Hãy phòng điều đó bằng cách viết prompt theo cái công đoạn dựng cần: một lối vào, một lối ra, một ánh nhìn, một sự hé lộ, một phản ứng. Chuyển động bắt đầu và kết thúc trong clip dễ cắt hơn chuyển động vẫn còn tăng tốc khi clip dừng. Cú máy tĩnh làm được nhưng cần được yêu cầu rõ ràng và nhấn mạnh, vì mô hình được thiết kế để chuyển động.

Nếu một cú máy cứ thất bại, đừng tiếp tục quay lại cùng một prompt. Hãy đổi một trong ba thứ: prompt (làm hành động thể chất hơn), ảnh tham chiếu (làm danh tính mạnh hơn), hoặc cú máy (cắt bỏ nó, hoặc tách thành hai). Cách thứ ba là thứ nhiều nhà làm phim quên nhất, và thường là nhanh nhất. Khi việc viết prompt đã ổn, phần còn lại của quy trình được trình bày trong hướng dẫn làm phim đầu tay từng bước; khi chưa ổn, mẹo tạo sinh video AI bao quát những cách sửa thường gặp. Dù thế nào, hãy giữ prompt đủ ngắn để bạn có thể nói to với một diễn viên mà họ hiểu được cú máy.