จะทำซีรีส์ด้วย AI จะรับประกันอย่างไรให้การเชื่อมต่อฉากระหว่างช็อตไม่หลุด?

จะทำซีรีส์ด้วย AI จะรับประกันอย่างไรให้การเชื่อมต่อฉากระหว่างช็อตไม่หลุด?

ผมได้ทำการทดลองจุดยึดต่อเนื่องของซีเควนซ์ "แก้วแดงในครัว" ใน 纳逗Pro: ภาพอ้างอิงฉากขนาด 2K หนึ่งภาพ ต่อด้วยช็อตสั้นไม่เกิน 5 วินาทีหนึ่งช็อต ก่อนส่งงานประเมินราคาเป็น 3 และ 7 คะแนนตามลำดับ รวมคาดว่าจะใช้ 10 คะแนน การทำซีรีส์ด้วย AI จุดที่มักจะถูกมองข้ามที่สุดคือจังหวะการตัดช็อต: ในช็อตก่อนแก้วยังคงอยู่ในมือ แต่ช็อตถัดมาแก้วกลับหายไป เพื่อลดปัญหาการหลุดเช่นนี้ ตัวละคร ฉาก และพร็อพต้องมีการกำหนดให้เป็นหนึ่งเดียวกัน และต้องจดบันทึกสถานะเริ่ม-สิ้นสุดของแต่ละช็อต หลังการสร้างผลงานต้องนำมาประกบดูด้วยตา การใช้คำสั่งหรือเฟรมสุดท้ายของช็อตก่อนหน้าไม่สามารถทดแทนขั้นตอนนี้ได้

ก่อนจะทำการแก้ไขให้ตรวจสอบก่อนว่าเกิดความผิดพลาดจากจุดไหน หากตัวละครหรือตกแต่งฉากถูกวาดผิด ต้องแก้ไขภาพอ้างอิงหรือทำสื่อใหม่ หากวิดีโอสองชิ้นดูปกติแยกกัน แต่พอนำมาต่อกันแล้วเหมือนไม่ใช่ห้องเดียวกัน ก็ต้องตรวจสอบสตอรี่บอร์ดและจุดตัด การแยกให้ชัดจะช่วยให้ไม่ต้องสร้างซ้ำไปซ้ำมาโดยไม่แก้ปัญหาจริง

ระบุก่อนว่าการผิดต่อเนื่องเกิดขึ้นในระดับใด

ปัญหาที่พบ

ควรตรวจสอบอะไร

วิธีแก้ไขลำดับความสำคัญ

ในช็อตก่อนตัวละครยังสวมเสื้อคลุม แต่ช็อตถัดมารายการเสื้อคลุมหายไป

ตรวจว่าทั้งสองช็อตอ้างอิงลุคเดียวกันหรือไม่ และบทมีระบุการเปลี่ยนชุดหรือไม่

แก้ไขภาพอ้างอิงของลุคและคำอธิบายช็อต

ประตู หน้าต่าง หรือโต๊ะถูกย้ายตำแหน่ง

ตำแหน่งกล้องใหม่สอดคล้องกับการจัดฉากเดิมหรือไม่

วาดสตอรี่บอร์ดที่สอดคล้องก่อน แล้วจึงสร้างวิดีโอ

แก้วจากมือขวากลายเป็นมือซ้ายทันที

ตรวจการเคลื่อนไหวเริ่ม-สิ้นสุดและสถานะการถือของในทั้งสองช็อต

ปรับออกแบบท่าทางหรือจุดตัด

คนสองคนโต้ตอบกันแต่กลับมองไปทางเดียวกัน

ทิศทางสายตาและตำแหน่งยืนของตัวละคร

ปรับการจัดองค์ประกอบภาพ ให้ความสัมพันธ์เชิงพื้นที่ชัดเจน

ฉากเดียวกัน ช็อตหนึ่งโทนเย็น อีกช็อตโทนอุ่น

การตั้งค่าแหล่งกำเนิดแสงสอดคล้องกันหรือไม่ เป็นเพียงความคลาดเคลื่อนของสีหรือไม่

ปรับสีเล็กน้อยในขั้นตอนหลังการถ่าย; หากทิศทางแสงขัดแย้งชัดเจนให้ถ่ายซ้ำช็อตนั้น

ก่อนถ่าย ทำบันทึกความต่อเนื่องสำหรับแต่ละฉาก

แม้จะมีภาพกำหนดตัวละครแล้ว ก็ต้องจดว่าตัวละครผ่านอะไรในฉากนี้ เสื้อคลุมถอดหรือไม่ เสื้อผ้าเปียกหรือเปล่า โทรศัพท์ใส่กระเป๋าไหน รายละเอียดเหล่านี้จะไม่ต่อเนื่องโดยอัตโนมัติเพียงเพราะใช้ภาพตัวละครภาพเดียว

สำหรับแต่ละฉากสามารถบันทึกข้อมูล 4 ประเภทได้:

  • สภาพตัวละคร:ลุค เครื่องประดับ บาดแผลหรือคราบเปื้อน รวมถึงการเปลี่ยนแปลงที่เกิดขึ้นในฉากนี้

  • ความสัมพันธ์เชิงพื้นที่:ประตู หน้าต่าง โต๊ะ เก้าอี้ แหล่งกำเนิดแสงหลัก และตำแหน่งตัวละคร หากจำเป็นให้ร่างแผนผังเรียบง่าย

  • สถานะอุปกรณ์ประกอบฉาก:ใครถืออะไร ถือด้วยมือข้างไหน วัตถุเปิดอยู่หรือเสียหายหรือไม่

  • ความคืบหน้าของการกระทำ:ช็อตก่อนทำถึงจุดไหน ช็อตถัดไปจะเริ่มจากที่ไหน

ต่อไปนี้เป็นตัวอย่างซีเควนซ์สมมติ:

ช็อต

สถานะเริ่มต้น

สถานะสิ้นสุด

ข้อมูลที่ช็อตถัดไปต้องสานต่อ

A:ตัวละครเข้ามาในประตู

ถือแก้วด้วยมือขวา ประตูปิด

ประตูเปิด ตัวละครหยุดอยู่ในกรอบประตู

แก้วยังคงอยู่ในมือขวา ประตูยังเปิดอยู่

B:โคลสอัพตัวละคร

ยืนอยู่ในกรอบประตู มองไปทางโต๊ะ

ยกมือขวาขึ้นเพื่อส่งสัญญาณ

สายตามุ่งไปที่โต๊ะ แก้วต้องไม่หายไป

C:ปฏิกิริยาของตัวละครที่โต๊ะ

นั่งที่โต๊ะ มองไปทางประตู

ลุกขึ้น

ความสัมพันธ์การสบตาและทิศทางของที่นั่งชัดเจน

บันทึกนี้ควรปรับตามความคืบหน้าของเนื้อเรื่อง ถ้าตัวละครคนเดียวกันเปลี่ยนเสื้อผ้าในฉากถัดไป นั่นเป็นการเปลี่ยนแปลงของบท แต่หากในการกระทำเดียวกันมีการเปลี่ยนเสื้อผ้าโดยไม่มีเหตุผล นั่นคือความผิดพลาดด้านความต่อเนื่องที่ต้องแก้

เมื่อ生成ให้เก็บต้นฉบับอ้างอิงไว้ อย่าใช้แค่ช็อตก่อนหน้า

ภาพอ้างอิงตัวละคร ฉาก และพร็อพต้นฉบับควรถูกเก็บไว้เสมอ เพื่อให้สามารถกลับไปตรวจสอบเมื่อสร้างช็อตใหม่ได้ ช็อตก่อนหน้าสามารถช่วยบอกสถานะปัจจุบันของตัวละคร แต่ต้องตรวจว่าช็อตนั้นถูกต้องหรือไม่ หากข้อมือหรือแก้วในเฟรมก่อนหน้าผิดแล้วนำมาใช้ต่อ ความคลาดเคลื่อนอาจถูกส่งต่อไปยังช็อตถัด ๆ ไป

เฟรมสุดท้ายเหมาะอย่างยิ่งสำหรับช่วยทำความเข้าใจจุดเริ่มต้นของการเคลื่อนไหวต่อเนื่อง หากช็อตถัดไปเป็นช็อตสวนมุมหรือเปลี่ยนมุมกล้องอย่างมาก ควรออกแบบคอมโพสใหม่ตามฉากต้นทาง ไม่ควรยึดเฟรมสุดท้ายเป็นจุดเริ่มต้นของทุกช็อตอย่างเป็นอัตโนมัติ

ใน 纳逗Pro สามารถใช้โหมดอ้างอิงหลายรูปของวิดีโอเพื่อให้ภาพอ้างอิงของวัตถุหลักได้; โหมดเฟรมต้น-ท้ายจะใช้ภาพเริ่มและภาพสิ้นสุดเพื่อสร้างการเปลี่ยนแปลงระหว่างกลาง ความสามารถในการป้อนข้อมูลขึ้นอยู่กับโมเดลที่เลือก โปรดตรวจสอบตาม คู่มือการสร้างสื่อ ฟังก์ชันเหล่านี้ให้เงื่อนไขการควบคุม ผลลัพธ์ยังต้องได้รับการตรวจสอบการเชื่อมต่อโดยมนุษย์

แยกการจัดการระหว่างการตัดช็อตธรรมดากับการเปลี่ยนผ่านแบบต่อเนื่อง

เมื่อคนนึงพูดจบแล้วตัดไปยังปฏิกิริยาของอีกคน มักจะพอแค่หาจังหวะตัดที่เหมาะสม ที่นี่ไม่ได้ขาดการ์ตูนเปลี่ยนผ่านเพิ่ม แถมการเพิ่มการเคลื่อนที่หรือการเปลี่ยนรูปมากเกินไปอาจตัดบทสนทนา

ถ้าต้องการแสดงกระบวนการต่อเนื่องจากประตูมาที่โต๊ะ จำเป็นต้องตรวจเส้นทาง ทิศทางการเคลื่อนไหว และการเปลี่ยนแปลงของสภาพแวดล้อม ยืนยันก่อนว่าภาพเริ่มและภาพสิ้นสุดอยู่ในพื้นที่เดียวกัน แล้วค่อยลองสร้างการเปลี่ยนผ่าน หากการจัดวางฉากทั้งสองด้านขัดแย้งกัน การใส่การเปลี่ยนผ่านเพิ่มก็ไม่ได้แก้ปัญหา

สำหรับการสัมผัสเช่นการถือแก้วหรือการส่งของ ให้เก็บเฉพาะผลลัพธ์สำคัญเพื่อประหยัดขั้นตอนซับซ้อนที่ไม่กระทบความเข้าใจ เช่น จัดช็อตเป็น “ภาพรายละเอียดของวัตถุก่อนถือ—ปฏิกิริยาตัวละคร—มิดช็อตหลังถือ” แต่ต้องมั่นใจว่าผู้ชมยังเข้าใจว่าการกระทำเกิดขึ้นอย่างไร

หลังตัดต่อ ให้ตรวจทานด้วย 3 วิธี

ดูแบบปิดเสียงก่อนหนึ่งรอบ。 ให้มุ่งตรวจสอบตำแหน่งตัวละคร สายตา ทิศทางการเข้าออกจอ และการสานต่อของท่าทาง หากมีการกระโดดของพื้นที่ที่ไม่สามารถอธิบายด้วยบทสนทนา ควรกลับไปแก้ที่ภาพ

แล้วเทียบกรอบภาพขอบของช็อตที่อยู่ติดกัน。 เน้นดูวัตถุในมือ รายละเอียดเครื่องแต่งกาย และการจัดวางพื้นหลัง แม้ภายในช็อตจะปกติ แต่การสลับอาจทำให้เกิดการเปลี่ยนแปลงทันที

สุดท้ายเล่นพร้อมเสียงครบถ้วน。 ตรวจสอบว่าบทสนทนาถูกตัดหรือไม่ เสียงบรรยากาศเปลี่ยนกระทันหันหรือไม่ ปฏิกิริยาตามบททันหรือไม่ ความต่อเนื่องของฉากรวมถึงเสียงด้วย

วิธีการแก้ขึ้นอยู่กับปัญหา: ช่วงหยุดที่เกินสามารถตัดออกได้ ความคลาดเคลื่อนสีเล็กน้อยสามารถปรับหลังถ่ายได้ ใบหน้าและข้อผิดพลาดของพร็อพควรทำสื่อใหม่ ส่วนข้อผิดผลาดด้านตรรกะของพื้นที่ควรแก้ด้วยสตอรี่บอร์ดก่อน การแก้สีไม่สามารถทำให้ประตู/หน้าต่างที่ย้ายตำแหน่งหรือแก้วที่เปลี่ยนมือกลับคืนได้

ลุคและฉากที่ใช้ในตอนนี้ ให้จัดเก็บตามฉากเมื่อปิดงาน ในการทำตอนต่อไปให้ดูว่าเนื้อเรื่องมีการเปลี่ยนชุด ย้ายสถานที่ หรือตำแหน่งพร็อพหรือไม่ แล้วจึงตัดสินใจว่าจะใช้เวอร์ชันใด ด้วยวิธีนี้จะทราบสถานะตัวละครในเรื่องโดยเฉพาะเจาะจง ไม่ต้องคาดเดาด้วยคำบรรยายทุกตอน

กรณีตัวอย่างจริงบนแคนวาส: ตรวจสอบจุดยึดต่อเนื่องก่อน อย่าใช้แทนการตรวจรับการเชื่อมต่อข้ามช็อต

ผมได้บันทึกสี่จุดยึดใน แคนวาสตัวอย่างของ 纳逗Pro: หน้าต่างด้านซ้าย ประตูด้านหลัง แก้วแดงบนโต๊ะไม้ด้านขวา และเสื้อคลุมสีเขียวเข้มของตัวละคร แคนวาสเชื่อมการ์ดคำอธิบาย ภาพอ้างอิงฉาก และช็อตสั้นเข้าด้วยกัน ตัวละครและครัวเป็นฉากสมมติ ที่นี่มีเพียงวิดีโอหนึ่งชิ้น จึงสามารถตรวจสอบการสืบทอดองค์ประกอบจากภาพอ้างอิงถึงเฟรมแรกของช็อตสั้น แต่ไม่สามารถยืนยันได้ว่าสองวิดีโอเชื่อมต่อกันสำเร็จ

ภาพอ้างอิงฉากที่สร้างด้วย Seedream 5.0 Pro มีขนาดจริง 2816×1584 ภาพด้านซ้ายมีหน้าต่าง ด้านหลังมีประตูไม้ ตัวละครสวมเสื้อคลุมสีเขียวเข้มยืนอยู่ข้างโต๊ะ และมีแก้วแดงวางบนโต๊ะ ไฟล์นี้ให้จุดยึดตำแหน่งและลุคที่สามารถใช้ตรวจสอบสำหรับขั้นตอนต่อไป

架空厨房红杯的场景基准图,用于核对窗、门、木桌、红杯及人物外套

อ้างอิงจากภาพนี้ Seedance 2.0 Mini สร้างช็อตเดียวขนาด 1280×720 ประมาณ 5 วินาที ไม่มีเสียง เฟรมแรกของช็อตยังพอบอกได้ว่ามีหน้าต่างด้านซ้าย ประตูด้านหลัง ตัวละครใส่เสื้อคลุมสีเขียวเข้ม และแก้วแดงบนโต๊ะ ความสัมพันธ์ตำแหน่งใกล้เคียงกับภาพอ้างอิง สำหรับการเชื่อมต่อจริงควรสร้างช็อตที่อยู่ติดกัน A และ B ในเส้นเวลาเดียวกันเพื่อเทียบ A เฟรมสุดท้าย, B เฟรมแรก, ทิศทางการเคลื่อนไหว, สถานะแก้ว และเสียง; ตัวอย่างช็อตเดี่ยวไม่ครอบคลุมการตรวจรับนี้

ภาพด้านล่างเป็นสกรีนช็อตแคนวาสจริงของงานนี้ ซึ่งใช้ตรวจสอบคำอธิบายซีเควนซ์ ภาพอ้างอิงฉาก ช็อตสั้น และเส้นเชื่อมอ้างอิง

纳逗Pro文章227真实画布全景,连戏记录、厨房红杯基准图及短镜节点依次连接