ทีมนักวิจัยของแอปเปิลเผยแพร่งานวิจัยใหม่ Ferret-UI ซึ่งเป็น Generative AI หรือ AI สร้างเนื้อหา ที่ต้องการแก้ไขปัญหาโมเดลภาษาขนาดใหญ่ข้อมูลผส
ซึ่งเป็น Generative AI หรือ AI สร้างเนื้อหา ที่ต้องการแก้ไขปัญหาโมเดลภาษาขนาดใหญ่ข้อมูลผสมผสาน ที่ยังมีข้อจำกัดสำหรับอินพุทรูปภาพ ที่มีรายละเอียดเยอะมาก แต่อาจมีจุดสำคัญไม่กี่อย่าง เช่น ภาพจับหน้าจอโทรศัพท์
สิ่งที่ท้าทายของอินพุทภาพหน้าจอโทรศัพท์คือ อัตราส่วนภาพหน้าจอโทรศัพท์ ที่แตกต่างจากรูปที่ AI นิยมใช้เทรนกัน, ในภาพหน้าจอมีไอคอนหรือปุ่ม ที่มีขนาดเล็ก ความละเอียดต่ำ AI อาจแยกแยะไม่ได้ และหลายกรณีปุ่มเหล่านั้นคือประเด็นสำคัญของอินพุทอีกด้วย Ferret-UI ถูกเทรนด้วยภาพหน้าจอที่มีคำสั่งหรือสิ่งที่ให้ทำต่าง ๆ จึงสามารถแยกแยะไอคอน ค้นหาข้อความสำคัญ จนถึงข้อมูลวิดเจ็ต ได้โดดเด่นกว่าโมเดลอื่น และความสามารถในการทำงานรองรับกับสิ่งที่เกิดบนหน้าจอได้ ผลทดสอบพบว่าทำงานได้ดีกว่า GPT-4V และ MLLM ตัวอื่นที่เน้นการทำงานกับภาพหน้าจอก็เห็นมีข่าวแว่วๆ ว่าจะทำ Home robot ก็น่าจะตัวนั้นแหล่ะมั้ง สไตล์ Apple ต้องปะติดปะต่อข่าวเอาเอง เพราะจดสิทธิบัตรชอบจดแบบกำกวม แต่การ Tag หาตำแหน่งบนหน้าจอ มันคิดได้ไม่กี่อย่าง เช่น การทำ Gesture ด้วยมือ...
เอาเป็นไอเดียผมก่อนแล้วกัน ถ้าเป็นผมก็จะทำจอสำหรับควบคุมอุปกรณ์ Smart Home ติดไว้ทั่วบ้าน แล้วมี Home Robot ตัวนึงที่รู้แผนที่ในบ้าน พอเราสั่งงานด้วยเสียง หุ่นยนต์ก็จะแปลคำสั่งแล้วดูว่าเราต้องการทำอะไร แล้ววิ่งไปจอที่ใกล้ที่สุดเพื่อกดหน้าจอเพื่อสั่งไปที่อุปกรณ์ Smart Home ให้เกิดผลลัพท์ตามที่เราต้องการ วิธีนี้จะลดขั้นตอนการต้องเรียนรู้ตำแหน่งของจุดติดตั้งของอุปกรณ์ Smart Home ภายในบ้าน รวมถึงวิธีใช้งานไปได้เลย เพียงเชื่อมต่อตามมาตรฐานผ่านเครือข่ายไร้สายเข้ากับหน้าจอสัมผัส...
ประเทศไทย ข่าวล่าสุด, ประเทศไทย หัวข้อข่าว
Similar News:คุณยังสามารถอ่านข่าวที่คล้ายกันนี้ซึ่งเรารวบรวมจากแหล่งข่าวอื่น ๆ ได้
Apple กำลังเจรจากับ Google เพื่อนำเอา Gemini AI มาใช้ใน iOS 18Apple พิจารณานำ Gemini AI ของ Google มาใช้ใน iPhone โดยอาจเปิดตัวใน iOS 18 ซึ่งจะทำให้การแข่งขันในตลาด AI ดุเดือดยิ่งขึ้น
อ่านเพิ่มเติม »
Apple เจรจา Google ดีลสุดล้ำ ดึง Gemini ฟีเจอร์ AI ลงใน iPhoneหลังถูกมองว่าล่าช้าในการเข้าสู่โลกของ AI ล่าสุด Bloomberg News รายงานว่า Apple กำลังเจรจาเพื่อสร้างเครื่องมือปัญญาประดิษฐ์ Gemini (AI) ของ Google ลงใน iPhone
อ่านเพิ่มเติม »
ส่อง 5 ฟีเจอร์ลับใน iPhone ที่ใช้เทคโนโลยี AI มาแล้วแม้ Apple จะยังไม่มี Generative AI แบบ ChatGPT เป็นของตัวเอง แต่เครื่องมือ AI หลายตัวก็มีบทบาทเบื้องหลังในการทำงานของ iPhone มาหลายปีแล้ว
อ่านเพิ่มเติม »
Apple อาจใช้ Baidu AI เพื่อประมวลผลฟีเจอร์ AI บน iPhone 16 รุ่นที่วางขายในจีนThe First Android Community in Thailand
อ่านเพิ่มเติม »
Samsung ชูวิสัยทัศน์หลัก “Lead Future of AI Innovation” ประกาศเป็นผู้นำใช้ AI สร้างนวัตกรรมเครื่องใช้ไฟฟ้าซัมซุง สร้างแรงกระเพื่อมด้วยพลัง AI อย่างต่อเนื่องโดยชูวิสัยทัศน์หลัก “Lead Future of AI Innovation” ประกาศเป็นผู้นำการใช้ AI สร้างนวัตกรรมเครื่องใช้ไฟฟ้าแห่งอนาคต โดยตั้งเป้าเป็นเบอร์หนึ่ง AI-Product ทุกเซกเมนต์
อ่านเพิ่มเติม »
3 เหรียญ AI สุดฮอต AGIX, OCEAN, FET ประกาศรวมร่างเป็น ASI Token เตรียมปลุกพลัง AI สู่ยุคใหม่Fetch.ai, SingularityNET และ Ocean Protocol สามบริษัทชั้นนำในแวดวง AI บนบล็อกเชน ได้ประกาศความร่วมมือครั้งสำคัญ มุ่งสร้างพันธมิตรเพื่อพัฒนา AI
อ่านเพิ่มเติม »