จะทำซีรีส์ด้วย AI จะรับประกันอย่างไรให้การเชื่อมต่อฉากระหว่างช็อตไม่หลุด?
จะทำซีรีส์ด้วย AI จะรับประกันอย่างไรให้การเชื่อมต่อฉากระหว่างช็อตไม่หลุด?
ผมได้ทำการทดลองจุดยึดต่อเนื่องของซีเควนซ์ "แก้วแดงในครัว" ใน 纳逗Pro: ภาพอ้างอิงฉากขนาด 2K หนึ่งภาพ ต่อด้วยช็อตสั้นไม่เกิน 5 วินาทีหนึ่งช็อต ก่อนส่งงานประเมินราคาเป็น 3 และ 7 คะแนนตามลำดับ รวมคาดว่าจะใช้ 10 คะแนน การทำซีรีส์ด้วย AI จุดที่มักจะถูกมองข้ามที่สุดคือจังหวะการตัดช็อต: ในช็อตก่อนแก้วยังคงอยู่ในมือ แต่ช็อตถัดมาแก้วกลับหายไป เพื่อลดปัญหาการหลุดเช่นนี้ ตัวละคร ฉาก และพร็อพต้องมีการกำหนดให้เป็นหนึ่งเดียวกัน และต้องจดบันทึกสถานะเริ่ม-สิ้นสุดของแต่ละช็อต หลังการสร้างผลงานต้องนำมาประกบดูด้วยตา การใช้คำสั่งหรือเฟรมสุดท้ายของช็อตก่อนหน้าไม่สามารถทดแทนขั้นตอนนี้ได้
ก่อนจะทำการแก้ไขให้ตรวจสอบก่อนว่าเกิดความผิดพลาดจากจุดไหน หากตัวละครหรือตกแต่งฉากถูกวาดผิด ต้องแก้ไขภาพอ้างอิงหรือทำสื่อใหม่ หากวิดีโอสองชิ้นดูปกติแยกกัน แต่พอนำมาต่อกันแล้วเหมือนไม่ใช่ห้องเดียวกัน ก็ต้องตรวจสอบสตอรี่บอร์ดและจุดตัด การแยกให้ชัดจะช่วยให้ไม่ต้องสร้างซ้ำไปซ้ำมาโดยไม่แก้ปัญหาจริง
ระบุก่อนว่าการผิดต่อเนื่องเกิดขึ้นในระดับใด
ปัญหาที่พบ | ควรตรวจสอบอะไร | วิธีแก้ไขลำดับความสำคัญ |
|---|---|---|
ในช็อตก่อนตัวละครยังสวมเสื้อคลุม แต่ช็อตถัดมารายการเสื้อคลุมหายไป | ตรวจว่าทั้งสองช็อตอ้างอิงลุคเดียวกันหรือไม่ และบทมีระบุการเปลี่ยนชุดหรือไม่ | แก้ไขภาพอ้างอิงของลุคและคำอธิบายช็อต |
ประตู หน้าต่าง หรือโต๊ะถูกย้ายตำแหน่ง | ตำแหน่งกล้องใหม่สอดคล้องกับการจัดฉากเดิมหรือไม่ | วาดสตอรี่บอร์ดที่สอดคล้องก่อน แล้วจึงสร้างวิดีโอ |
แก้วจากมือขวากลายเป็นมือซ้ายทันที | ตรวจการเคลื่อนไหวเริ่ม-สิ้นสุดและสถานะการถือของในทั้งสองช็อต | ปรับออกแบบท่าทางหรือจุดตัด |
คนสองคนโต้ตอบกันแต่กลับมองไปทางเดียวกัน | ทิศทางสายตาและตำแหน่งยืนของตัวละคร | ปรับการจัดองค์ประกอบภาพ ให้ความสัมพันธ์เชิงพื้นที่ชัดเจน |
ฉากเดียวกัน ช็อตหนึ่งโทนเย็น อีกช็อตโทนอุ่น | การตั้งค่าแหล่งกำเนิดแสงสอดคล้องกันหรือไม่ เป็นเพียงความคลาดเคลื่อนของสีหรือไม่ | ปรับสีเล็กน้อยในขั้นตอนหลังการถ่าย; หากทิศทางแสงขัดแย้งชัดเจนให้ถ่ายซ้ำช็อตนั้น |
ก่อนถ่าย ทำบันทึกความต่อเนื่องสำหรับแต่ละฉาก
แม้จะมีภาพกำหนดตัวละครแล้ว ก็ต้องจดว่าตัวละครผ่านอะไรในฉากนี้ เสื้อคลุมถอดหรือไม่ เสื้อผ้าเปียกหรือเปล่า โทรศัพท์ใส่กระเป๋าไหน รายละเอียดเหล่านี้จะไม่ต่อเนื่องโดยอัตโนมัติเพียงเพราะใช้ภาพตัวละครภาพเดียว
สำหรับแต่ละฉากสามารถบันทึกข้อมูล 4 ประเภทได้:
-
สภาพตัวละคร:ลุค เครื่องประดับ บาดแผลหรือคราบเปื้อน รวมถึงการเปลี่ยนแปลงที่เกิดขึ้นในฉากนี้
-
ความสัมพันธ์เชิงพื้นที่:ประตู หน้าต่าง โต๊ะ เก้าอี้ แหล่งกำเนิดแสงหลัก และตำแหน่งตัวละคร หากจำเป็นให้ร่างแผนผังเรียบง่าย
-
สถานะอุปกรณ์ประกอบฉาก:ใครถืออะไร ถือด้วยมือข้างไหน วัตถุเปิดอยู่หรือเสียหายหรือไม่
-
ความคืบหน้าของการกระทำ:ช็อตก่อนทำถึงจุดไหน ช็อตถัดไปจะเริ่มจากที่ไหน
ต่อไปนี้เป็นตัวอย่างซีเควนซ์สมมติ:
ช็อต | สถานะเริ่มต้น | สถานะสิ้นสุด | ข้อมูลที่ช็อตถัดไปต้องสานต่อ |
|---|---|---|---|
A:ตัวละครเข้ามาในประตู | ถือแก้วด้วยมือขวา ประตูปิด | ประตูเปิด ตัวละครหยุดอยู่ในกรอบประตู | แก้วยังคงอยู่ในมือขวา ประตูยังเปิดอยู่ |
B:โคลสอัพตัวละคร | ยืนอยู่ในกรอบประตู มองไปทางโต๊ะ | ยกมือขวาขึ้นเพื่อส่งสัญญาณ | สายตามุ่งไปที่โต๊ะ แก้วต้องไม่หายไป |
C:ปฏิกิริยาของตัวละครที่โต๊ะ | นั่งที่โต๊ะ มองไปทางประตู | ลุกขึ้น | ความสัมพันธ์การสบตาและทิศทางของที่นั่งชัดเจน |
บันทึกนี้ควรปรับตามความคืบหน้าของเนื้อเรื่อง ถ้าตัวละครคนเดียวกันเปลี่ยนเสื้อผ้าในฉากถัดไป นั่นเป็นการเปลี่ยนแปลงของบท แต่หากในการกระทำเดียวกันมีการเปลี่ยนเสื้อผ้าโดยไม่มีเหตุผล นั่นคือความผิดพลาดด้านความต่อเนื่องที่ต้องแก้
เมื่อ生成ให้เก็บต้นฉบับอ้างอิงไว้ อย่าใช้แค่ช็อตก่อนหน้า
ภาพอ้างอิงตัวละคร ฉาก และพร็อพต้นฉบับควรถูกเก็บไว้เสมอ เพื่อให้สามารถกลับไปตรวจสอบเมื่อสร้างช็อตใหม่ได้ ช็อตก่อนหน้าสามารถช่วยบอกสถานะปัจจุบันของตัวละคร แต่ต้องตรวจว่าช็อตนั้นถูกต้องหรือไม่ หากข้อมือหรือแก้วในเฟรมก่อนหน้าผิดแล้วนำมาใช้ต่อ ความคลาดเคลื่อนอาจถูกส่งต่อไปยังช็อตถัด ๆ ไป
เฟรมสุดท้ายเหมาะอย่างยิ่งสำหรับช่วยทำความเข้าใจจุดเริ่มต้นของการเคลื่อนไหวต่อเนื่อง หากช็อตถัดไปเป็นช็อตสวนมุมหรือเปลี่ยนมุมกล้องอย่างมาก ควรออกแบบคอมโพสใหม่ตามฉากต้นทาง ไม่ควรยึดเฟรมสุดท้ายเป็นจุดเริ่มต้นของทุกช็อตอย่างเป็นอัตโนมัติ
ใน 纳逗Pro สามารถใช้โหมดอ้างอิงหลายรูปของวิดีโอเพื่อให้ภาพอ้างอิงของวัตถุหลักได้; โหมดเฟรมต้น-ท้ายจะใช้ภาพเริ่มและภาพสิ้นสุดเพื่อสร้างการเปลี่ยนแปลงระหว่างกลาง ความสามารถในการป้อนข้อมูลขึ้นอยู่กับโมเดลที่เลือก โปรดตรวจสอบตาม คู่มือการสร้างสื่อ ฟังก์ชันเหล่านี้ให้เงื่อนไขการควบคุม ผลลัพธ์ยังต้องได้รับการตรวจสอบการเชื่อมต่อโดยมนุษย์
แยกการจัดการระหว่างการตัดช็อตธรรมดากับการเปลี่ยนผ่านแบบต่อเนื่อง
เมื่อคนนึงพูดจบแล้วตัดไปยังปฏิกิริยาของอีกคน มักจะพอแค่หาจังหวะตัดที่เหมาะสม ที่นี่ไม่ได้ขาดการ์ตูนเปลี่ยนผ่านเพิ่ม แถมการเพิ่มการเคลื่อนที่หรือการเปลี่ยนรูปมากเกินไปอาจตัดบทสนทนา
ถ้าต้องการแสดงกระบวนการต่อเนื่องจากประตูมาที่โต๊ะ จำเป็นต้องตรวจเส้นทาง ทิศทางการเคลื่อนไหว และการเปลี่ยนแปลงของสภาพแวดล้อม ยืนยันก่อนว่าภาพเริ่มและภาพสิ้นสุดอยู่ในพื้นที่เดียวกัน แล้วค่อยลองสร้างการเปลี่ยนผ่าน หากการจัดวางฉากทั้งสองด้านขัดแย้งกัน การใส่การเปลี่ยนผ่านเพิ่มก็ไม่ได้แก้ปัญหา
สำหรับการสัมผัสเช่นการถือแก้วหรือการส่งของ ให้เก็บเฉพาะผลลัพธ์สำคัญเพื่อประหยัดขั้นตอนซับซ้อนที่ไม่กระทบความเข้าใจ เช่น จัดช็อตเป็น “ภาพรายละเอียดของวัตถุก่อนถือ—ปฏิกิริยาตัวละคร—มิดช็อตหลังถือ” แต่ต้องมั่นใจว่าผู้ชมยังเข้าใจว่าการกระทำเกิดขึ้นอย่างไร
หลังตัดต่อ ให้ตรวจทานด้วย 3 วิธี
ดูแบบปิดเสียงก่อนหนึ่งรอบ。 ให้มุ่งตรวจสอบตำแหน่งตัวละคร สายตา ทิศทางการเข้าออกจอ และการสานต่อของท่าทาง หากมีการกระโดดของพื้นที่ที่ไม่สามารถอธิบายด้วยบทสนทนา ควรกลับไปแก้ที่ภาพ
แล้วเทียบกรอบภาพขอบของช็อตที่อยู่ติดกัน。 เน้นดูวัตถุในมือ รายละเอียดเครื่องแต่งกาย และการจัดวางพื้นหลัง แม้ภายในช็อตจะปกติ แต่การสลับอาจทำให้เกิดการเปลี่ยนแปลงทันที
สุดท้ายเล่นพร้อมเสียงครบถ้วน。 ตรวจสอบว่าบทสนทนาถูกตัดหรือไม่ เสียงบรรยากาศเปลี่ยนกระทันหันหรือไม่ ปฏิกิริยาตามบททันหรือไม่ ความต่อเนื่องของฉากรวมถึงเสียงด้วย
วิธีการแก้ขึ้นอยู่กับปัญหา: ช่วงหยุดที่เกินสามารถตัดออกได้ ความคลาดเคลื่อนสีเล็กน้อยสามารถปรับหลังถ่ายได้ ใบหน้าและข้อผิดพลาดของพร็อพควรทำสื่อใหม่ ส่วนข้อผิดผลาดด้านตรรกะของพื้นที่ควรแก้ด้วยสตอรี่บอร์ดก่อน การแก้สีไม่สามารถทำให้ประตู/หน้าต่างที่ย้ายตำแหน่งหรือแก้วที่เปลี่ยนมือกลับคืนได้
ลุคและฉากที่ใช้ในตอนนี้ ให้จัดเก็บตามฉากเมื่อปิดงาน ในการทำตอนต่อไปให้ดูว่าเนื้อเรื่องมีการเปลี่ยนชุด ย้ายสถานที่ หรือตำแหน่งพร็อพหรือไม่ แล้วจึงตัดสินใจว่าจะใช้เวอร์ชันใด ด้วยวิธีนี้จะทราบสถานะตัวละครในเรื่องโดยเฉพาะเจาะจง ไม่ต้องคาดเดาด้วยคำบรรยายทุกตอน
กรณีตัวอย่างจริงบนแคนวาส: ตรวจสอบจุดยึดต่อเนื่องก่อน อย่าใช้แทนการตรวจรับการเชื่อมต่อข้ามช็อต
ผมได้บันทึกสี่จุดยึดใน แคนวาสตัวอย่างของ 纳逗Pro: หน้าต่างด้านซ้าย ประตูด้านหลัง แก้วแดงบนโต๊ะไม้ด้านขวา และเสื้อคลุมสีเขียวเข้มของตัวละคร แคนวาสเชื่อมการ์ดคำอธิบาย ภาพอ้างอิงฉาก และช็อตสั้นเข้าด้วยกัน ตัวละครและครัวเป็นฉากสมมติ ที่นี่มีเพียงวิดีโอหนึ่งชิ้น จึงสามารถตรวจสอบการสืบทอดองค์ประกอบจากภาพอ้างอิงถึงเฟรมแรกของช็อตสั้น แต่ไม่สามารถยืนยันได้ว่าสองวิดีโอเชื่อมต่อกันสำเร็จ
ภาพอ้างอิงฉากที่สร้างด้วย Seedream 5.0 Pro มีขนาดจริง 2816×1584 ภาพด้านซ้ายมีหน้าต่าง ด้านหลังมีประตูไม้ ตัวละครสวมเสื้อคลุมสีเขียวเข้มยืนอยู่ข้างโต๊ะ และมีแก้วแดงวางบนโต๊ะ ไฟล์นี้ให้จุดยึดตำแหน่งและลุคที่สามารถใช้ตรวจสอบสำหรับขั้นตอนต่อไป

อ้างอิงจากภาพนี้ Seedance 2.0 Mini สร้างช็อตเดียวขนาด 1280×720 ประมาณ 5 วินาที ไม่มีเสียง เฟรมแรกของช็อตยังพอบอกได้ว่ามีหน้าต่างด้านซ้าย ประตูด้านหลัง ตัวละครใส่เสื้อคลุมสีเขียวเข้ม และแก้วแดงบนโต๊ะ ความสัมพันธ์ตำแหน่งใกล้เคียงกับภาพอ้างอิง สำหรับการเชื่อมต่อจริงควรสร้างช็อตที่อยู่ติดกัน A และ B ในเส้นเวลาเดียวกันเพื่อเทียบ A เฟรมสุดท้าย, B เฟรมแรก, ทิศทางการเคลื่อนไหว, สถานะแก้ว และเสียง; ตัวอย่างช็อตเดี่ยวไม่ครอบคลุมการตรวจรับนี้
ภาพด้านล่างเป็นสกรีนช็อตแคนวาสจริงของงานนี้ ซึ่งใช้ตรวจสอบคำอธิบายซีเควนซ์ ภาพอ้างอิงฉาก ช็อตสั้น และเส้นเชื่อมอ้างอิง
