ทีมนักวิจัยชาวญี่ปุ่นในโอซาก้าได้ใช้ Stable Diffusion AI เพื่อช่วยสร้างภาพโดยใช้การสแกน MRI ในการป้อนข้อมูล ผลลัพธ์ที่ได้นั้นน่าประหลาดใจ
นักวิจัย Yu Takagi และ Shinji Nishimoto จาก Graduate School of Frontier Biosciences จากมหาวิทยาลัยโอซาก้าได้เผยแพร่ ข้อค้นพบในเอกสารสั้น
ทีมวิจัยนำเสนออาสาสมัครด้วยชุดภาพและใช้ fMRI (การถ่ายภาพด้วยคลื่นแม่เหล็กไฟฟ้าเชิงฟังก์ชัน) สแกนสมองของอาสาสมัครในขณะที่พวกเขาจดจ่ออยู่กับภาพ
ภาพสุดท้ายคือสุดยอดของหลายส่วน รวมถึง fMRI เอาต์พุตรูปภาพและ Semantic Decoder ซึ่งมีอยู่แล้ว
อย่างไรก็ตาม การเพิ่ม Stable Diffusion ดูเหมือนจะทำให้รูปภาพที่สร้างขึ้นสอดคล้องกับแหล่งที่มามากขึ้นตามที่เราเห็นด้านล่าง
ภาพซ้ายสุดคือต้นฉบับ ส่วนภาพขวาสุดคือสุดยอดของ Stable Diffusion ตัวถอดรหัสความหมายและการสร้างภาพ fMRI คอลัมน์ z แทน”เวกเตอร์แฝง”ที่ได้มาจากการสร้างภาพ ขณะที่ c แทน”อินพุตการปรับสภาพ”ที่ได้จากข้อความ
แม้ว่าจะยังไม่ได้รับการตรวจสอบโดยเพื่อน แต่กระดาษก็มีช่องโหว่อยู่แล้ว อย่างน้อยหนึ่ง รายบุคคล ได้ชี้ให้เห็นว่าการใช้ Semantic Decoding กำลังดำเนินการอย่างหนัก นอกจากนี้ยังบอกเป็นนัยว่าการใช้ข้อความเป็นส่วนหนึ่งของพรอมต์จะบ่อนทำลายความถูกต้องของผลลัพธ์สุดท้ายในฐานะผลิตภัณฑ์ของการแพร่กระจายแบบเสถียร
การถอดรหัสความหมายมีมาตั้งแต่ปี 2016 เป็นอย่างน้อย และคุณสามารถอ่านเพิ่มเติมเกี่ยวกับสิ่งนี้ได้ ที่นี่
คุณคิดอย่างไร Stable Diffusion เป็นความล้ำยุคของการแสดงภาพความคิดหรือไม่? หรือเป็นเพียงการขัดเกลาเทคโนโลยีที่มีอยู่แล้วเพียงเล็กน้อย
นี่คือเทคโนโลยี”All Things Game”ในคอลัมน์นี้ เรามักจะกล่าวถึงเทคโนโลยีและสิ่งต่างๆ ที่เกี่ยวข้องกับอุตสาหกรรมเทคโนโลยี