ทำความเข้าใจ Generative AI Fill
เรียนรู้เทคโนโลยีเบื้องหลัง generative fill และเข้าใจว่า AI สร้างเนื้อหาภาพใหม่ที่กลมกลืนกับภาพถ่ายเดิมได้อย่างไร
Learning Objectives
- 1เข้าใจว่าโมเดล inpainting ที่ใช้ diffusion สร้างเนื้อหาใหม่ภายในบริเวณที่เลือกได้อย่างไร
- 2ระบุปัจจัยที่ส่งผลต่อคุณภาพของ generative fill รวมถึงขนาดของพื้นที่ที่เลือก บริบท และความเฉพาะเจาะจงของพรอมต์
- 3ตระหนักถึงข้อพิจารณาทางจริยธรรมและข้อจำกัดของเนื้อหาที่สร้างโดย AI ในภาพถ่าย
สิ่งที่ generative fill ทำต่างออกไป
Generative fill ใช้โมเดล AI ที่อิงกับ diffusion เพื่อสร้างเนื้อหาภาพใหม่ทั้งหมดภายในพื้นที่ที่เลือก ต่างจาก content-aware fill แบบดั้งเดิมที่โคลนและผสมพิกเซลที่มีอยู่จากบริเวณใกล้เคียง generative fill สามารถสร้างวัตถุ พื้นผิว และฉากที่ไม่มีอยู่ที่ใดในภาพได้ โมเดลจะวิเคราะห์บริบทโดยรอบ ทั้งสี ทิศทางแสง เส้นเปอร์สเปกทีฟ และเนื้อหาของวัตถุ เพื่อสร้างเนื้อหาที่ดูเป็นส่วนหนึ่งของภาพถ่ายต้นฉบับอย่างเป็นธรรมชาติ
AI สร้างเนื้อหาตามบริบทอย่างไร
คุณภาพของผลลัพธ์ generative fill ขึ้นอยู่กับปัจจัยสำคัญหลายอย่าง ขนาดของพื้นที่ที่เลือกเมื่อเทียบกับภาพโดยรวมมีความสำคัญ พื้นที่เล็ก ๆ ที่มีบริบทโดยรอบมากมายให้ผลลัพธ์ที่น่าเชื่อถือที่สุด เพราะโมเดลมีข้อมูลภาพที่ชัดเจนให้จับคู่ ความเฉพาะเจาะจงของพรอมต์เป็นอีกปัจจัยหนึ่ง เพราะการให้คำอธิบายข้อความว่าคุณต้องการสร้างอะไรจะนำทางโมเดลไปสู่ผลลัพธ์ที่คุณตั้งใจแทนที่จะปล่อยให้มันคาดเดาเอง ความสม่ำเสมอของแสง ความถูกต้องของเปอร์สเปกทีฟ และการจับคู่พื้นผิวล้วนถูกประเมินภายในโดยโมเดล แต่ฉากที่ซับซ้อนซึ่งมีแสงทิศทางแรงหรือเปอร์สเปกทีฟผิดปกติอาจต้องสร้างหลายครั้ง
สถานการณ์ที่เหมาะที่สุดสำหรับ generative fill
แม้ generative fill จะเป็นเครื่องมือเชิงสร้างสรรค์ที่ทรงพลัง แต่สิ่งสำคัญคือต้องพิจารณาผลกระทบทางจริยธรรมของการสร้างเนื้อหาในภาพถ่าย การเพิ่มวัตถุหรือผู้คนลงในภาพที่ไม่เคยมีอยู่ก่อให้เกิดคำถามเกี่ยวกับความแท้จริงของภาพ โดยเฉพาะในงานข่าว หลักฐานทางกฎหมาย และบริบทสารคดี องค์กรมืออาชีพหลายแห่งกำหนดให้ต้องเปิดเผยเมื่อมีการเพิ่มเนื้อหาที่สร้างโดย AI ลงในภาพถ่าย แนวปฏิบัติที่ดีคือบันทึกไฟล์ต้นฉบับที่ยังไม่ได้แก้ไขแยกไว้ และโปร่งใสเกี่ยวกับการแก้ไขด้วย generative เมื่อบริบทเรียกร้องความแท้จริง
Key Takeaways
- ✓Generative fill สร้างเนื้อหาใหม่โดยใช้โมเดล diffusion ไม่ใช่แค่การโคลนจากพิกเซลที่มีอยู่
- ✓พื้นที่ที่เลือกขนาดเล็กลงพร้อมบริบทโดยรอบที่หลากหลายและพรอมต์ข้อความที่เฉพาะเจาะจงให้ผลลัพธ์ที่ดีที่สุด
- ✓เก็บรักษาไฟล์ต้นฉบับและเปิดเผยส่วนที่เพิ่มโดย AI เมื่อความแท้จริงเป็นสิ่งสำคัญ