Nvidia เปิดตัว AI Blueprint ใหม่ เชื่อมโยง Blender กับการสร้างภาพด้วย AI

Key takeaway

• Nvidia ได้เปิดตัว AI Blueprint ใหม่ที่เชื่อมต่อระหว่าง Blender กับ AI image generation ผ่าน Flux.1 ของ Black Forest Lab โดยช่วยให้ผู้ใช้สามารถควบคุมการสร้างภาพได้แม่นยำมากขึ้นด้วยการสร้างฉาก 3D เป็นต้นแบบ
• ระบบนี้ช่วยลดความไม่แน่นอนในการสร้างภาพด้วย AI โดยผู้ใช้สามารถกำหนดโครงสร้างและองค์ประกอบต่างๆ ผ่าน Blender ก่อน แทนที่จะต้องพึ่งพาการคาดเดาจากคำพรอมพ์เพียงอย่างเดียว
• Blueprint นี้ได้รับการออกแบบมาสำหรับการใช้งานที่ไม่ใช่เชิงพาณิชย์ และต้องใช้การ์ดจอ Nvidia RTX 4080 หรือสูงกว่า พร้อมมาพร้อมกับคู่มือแนะนำ ไฟล์ตัวอย่าง และการเร่งความเร็วด้วยเทคโนโลยี TensorRT และ FP4

การสร้างภาพด้วย AI ยังคงเป็นกระบวนการที่มีความไม่แน่นอนสูง แม้จะมีการระบุสไตล์และโครงสร้างที่ต้องการ ผู้ใช้ยังคงต้องอาศัยการคาดเดาจากคำพรอมพ์และทดลองหลายครั้งเพื่อให้ได้ภาพตามที่ต้องการ ล่าสุด Nvidia ยักษ์ใหญ่วงการ GPU ได้นำเสนอทางออกผ่านการใช้ Blender ซึ่งเป็นหนึ่งในซอฟต์แวร์สร้างโมเดล 3D ชั้นนำ

Nvidia AI Blueprint สำหรับ 3D-guided generative AI มุ่งมอบการควบคุมที่แม่นยำยิ่งขึ้นในการสร้างภาพด้วย AI โดยให้ผู้ใช้สร้างฉากในรูปแบบ 3D ก่อน แล้วจึงส่งต่อฉาก 3D ไปยังเครื่องมือสร้างภาพ Flux.1 ของ Black Forest Lab

แนวคิดหลักคือผู้ใช้สามารถวางโครงร่างของภาพด้วย Blender โดยจัดวางองค์ประกอบต่างๆ เช่น อาคาร พืช ยานพาหนะ และวัตถุอื่นๆ ในตำแหน่งที่ต้องการ การใช้ Blender ยังช่วยให้สามารถปรับมุมกล้องได้อย่างอิสระ ฉาก 3D ที่ร่างขึ้นจะถูกใช้เป็นกรอบอ้างอิงสำหรับโมเดล AI ในการสร้างภาพ 2D

กระบวนการนี้ให้อำนาจในการควบคุมมากกว่าการใช้เพียงคำพรอมพ์ เนื่องจากฉากอ้างอิงใน Blender สามารถปรับแต่งได้ด้วยตนเอง ช่วยลดความจำเป็นในการทดลองพรอมพ์หลายๆ แบบเพื่อให้ได้องค์ประกอบภาพที่ต้องการ นอกจากนี้ ฉากใน Blender ไม่จำเป็นต้องมีรายละเอียดหรือความประณีตมาก เพราะมีไว้เพียงเพื่อกำหนดโครงสร้างและองค์ประกอบเท่านั้น

Blueprint นี้มาพร้อมกับคู่มือแนะนำทีละขั้นตอน ไฟล์ตัวอย่าง และสภาพแวดล้อมที่กำหนดค่าไว้ล่วงหน้า รวมถึงซอร์สโค้ดที่สามารถปรับแต่งได้และการสาธิตวิธีผสานกับ ComfyUI workflows ประสิทธิภาพการทำงานได้รับการปรับให้เหมาะสมสำหรับ RTX AI PC ผ่าน Nvidia NIM microservices และเร่งความเร็วด้วยเทคโนโลยี TensorRT และ FP4

ทั้งนี้ Nvidia ระบุว่า Blueprint นี้เหมาะสำหรับการใช้งานที่ไม่ใช่เชิงพาณิชย์เท่านั้น

Why it matters

💡 ข่าวนี้น่าสนใจเพราะเป็นการเปิดตัวเทคโนโลยีใหม่จาก Nvidia ที่จะปฏิวัติวงการสร้างภาพด้วย AI โดยการผสานการทำงานระหว่าง Blender กับ AI เข้าด้วยกัน ช่วยให้ผู้ใช้สามารถควบคุมผลลัพธ์ได้แม่นยำมากขึ้น ลดความยุ่งยากในการทดลองใช้คำพรอมพ์หลายๆ ครั้ง เป็นประโยชน์อย่างมากสำหรับนักออกแบบ ครีเอเตอร์ และผู้ที่ต้องการสร้างภาพด้วย AI อย่างมีประสิทธิภาพ

ข้อมูลอ้างอิงจาก https://www.creativebloq.com/3d/new-nvidia-ai-blueprint-is-a-bridge-between-blender-and-ai-image-generation