Gemini ก้าวไปอีกขั้นบน Android: แอปที่ชาญฉลาดกว่าและระบบอัตโนมัติเต็มรูปแบบบนมือถือของคุณ

การบูรณาการของ Gemini บน Android ตอนนี้มันได้ก้าวไปอีกขั้นด้วยการเพิ่มฟีเจอร์ที่สามารถจัดการแอปพลิเคชันและทำงานที่ซับซ้อนได้โดยที่ผู้ใช้ไม่ต้องรับรู้ทุกขั้นตอน จากเดิมที่เป็นเพียงผู้ช่วยสนทนา มันก็กลายเป็นระบบที่ทันสมัยขึ้นมากแล้ว มันกำลังค่อยๆ กลายเป็นตัวแทนที่ทำงานอยู่ภายในโทรศัพท์มือถือโดยเน้นเป็นพิเศษที่ โทรศัพท์เรือธงรุ่นล่าสุดของซัมซุง และ Google

แม้ว่าในตอนนี้ การส่งกำลังทหารครั้งนี้มุ่งเน้นไปที่สหรัฐอเมริกาและเกาหลีใต้และในขั้นตอนการทดสอบแบบจำกัด สิ่งที่ Google กำลังนำเสนอนั้นคาดว่าจะนำมาซึ่งการเปลี่ยนแปลงอย่างลึกซึ้งในวิธีการที่เราใช้สมาร์ทโฟน Android: ตั้งแต่การเรียกรถแท็กซี่หรือการซื้อของ ไปจนถึงการใช้งานแอปต่างๆ ทั้งหมดนี้จะถูกจัดการในเบื้องหลังโดย AI เน้นหนักที่ ความเป็นส่วนตัว ความปลอดภัย และการควบคุมของผู้ใช้.

Gemini ในฐานะตัวแทน: ควบคุมแอปของคุณบน Android ได้โดยตรง

Google ยืนยันแล้วว่า Gemini จะเริ่มรวมเอาคุณสมบัติดังกล่าวเข้าไปด้วย ความสามารถเชิงตัวแทนกล่าวคือ ฟังก์ชันที่ช่วยให้สามารถควบคุมแอปพลิเคชันที่ติดตั้งบนอุปกรณ์เคลื่อนที่เพื่อดำเนินการต่างๆ ที่ก่อนหน้านี้ต้องใช้การโต้ตอบด้วยตนเองหลายขั้นตอน ในทางปฏิบัติ หมายความว่าผู้ใช้จะสามารถกำหนดรูปแบบการทำงานได้ การร้องขอเพียงครั้งเดียวทางเสียงหรือข้อความ และปล่อยให้ AI จัดการส่วนที่เหลือ

ตัวอย่างที่ชัดเจนที่สุดอย่างหนึ่งคือ งานต่างๆ เช่น ขอการขนส่ง ผ่านแอปพลิเคชันบนมือถือ สั่งอาหารส่งถึงบ้าน บนแพลตฟอร์มการจัดส่งหรือ เตรียมรายการซื้อของ ในบริการซูเปอร์มาร์เก็ต กระบวนการทั้งหมด ตั้งแต่การเปิดแอปพลิเคชันที่เหมาะสมไปจนถึงการยืนยันคำสั่งซื้อ จะดำเนินการโดย Gemini

ประเด็นสำคัญประการหนึ่งคือ การกระทำเหล่านี้ได้ถูกดำเนินการแล้ว ในฉากหลังดังนั้นคุณจึงสามารถใช้งานโทรศัพท์ได้ตามปกติ เช่น แชท ตรวจสอบอีเมล หรือท่องเว็บ ในขณะที่ผู้ช่วยจะดำเนินการผ่านแอปที่เกี่ยวข้องและดำเนินการตามขั้นตอนที่จำเป็นโดยไม่รบกวนสิ่งที่คุณกำลังทำอยู่

เพื่อป้องกันไม่ให้กระบวนการดูไม่โปร่งใส Android จะแสดงข้อมูลดังนี้ การแจ้งเตือนเกี่ยวกับความคืบหน้าของงานในประสบการณ์ที่คล้ายกับ Live Activities บนระบบอื่นๆ จากนั้นผู้ใช้สามารถติดตามแต่ละขั้นตอน แทรกแซงหากมีสิ่งใดดูไม่ถูกต้อง หรือ หยุดระบบอัตโนมัติ เมื่อใดก็ตาม

Google ยังได้เพิ่มชั้นทางเทคนิคที่ออกแบบมาเพื่อสร้างความมั่นใจให้กับผู้ใช้ด้วย: การทำงานของ Gemini จะดำเนินการในหน้าต่างเสมือนจริงที่แยกต่างหากภายในสมาร์ทโฟน"สภาพแวดล้อมจำลอง" แบบนี้จะจำกัดสิ่งที่ AI สามารถทำได้ให้เฉพาะแอปพลิเคชันหรืองานที่ได้รับมอบหมายเท่านั้น ลดความเสี่ยงจากการเข้าถึงระบบส่วนที่เหลือหรือแอปพลิเคชันที่สำคัญอื่นๆ โดยไม่ได้รับอนุญาต.

ความพร้อมใช้งาน: รุ่นเบต้าแบบจำกัดบน Galaxy S26 และ Pixel 10

คุณสมบัติใหม่ของ แอป Gemini สำหรับ Android ฟีเจอร์เหล่านี้จะไม่ปรากฏขึ้นพร้อมกันทั่วทั้งระบบนิเวศ Google เลือกที่จะทยอยเปิดใช้งานในรูปแบบต่างๆ ดังนี้ เวอร์ชันเบต้าเริ่มต้นด้วยรายชื่ออุปกรณ์ระดับไฮเอนด์จำนวนไม่มาก ซึ่งคุณสามารถทดสอบเทคโนโลยีได้อย่างมีประสิทธิภาพมากขึ้น

ทีมใหม่ที่ได้รับการยืนยันเป็นกลุ่มแรกๆ นั้นรวมถึงทีมที่เพิ่งก่อตั้งด้วย ซัมซุง กาแล็กซี เอส26 และ Google Pixel 10ในโทรศัพท์เหล่านี้ แอป Gemini จะมีตัวเลือกให้มอบหมายงานที่ใช้เวลานานและซ้ำซากให้กับ AI โดยเน้นเป็นพิเศษที่แอปพลิเคชันสำหรับ อาหาร การช้อปปิ้ง และการขนส่งยังไม่มีการเผยแพร่รายชื่อแอปพลิเคชันที่ใช้งานร่วมกันได้ทั้งหมด แต่มีการระบุชัดเจนว่าในระยะเริ่มต้นจะมีแอปพลิเคชันให้เลือกจำกัด

ข้อจำกัดที่สำคัญอีกประการหนึ่งคือ อายุของผู้ถือบัญชี Googleการควบคุมแอป Gemini จะใช้งานได้เฉพาะผู้ใช้ที่มีอายุ 18 ปีขึ้นไปเท่านั้น ตัวกรองนี้มีจุดประสงค์เพื่อป้องกันสถานการณ์ที่ละเอียดอ่อนซึ่งเกี่ยวข้องกับผู้เยาว์ โดยเฉพาะอย่างยิ่งเนื่องจากฟีเจอร์ต่างๆ อาจเกี่ยวข้องกับการชำระเงิน บริการด้านการเดินทาง หรือการเก็บรวบรวมข้อมูลที่ละเอียดอ่อน

ในขณะนี้ การขยายขอบเขตทางภูมิศาสตร์มุ่งเน้นเฉพาะในพื้นที่ต่อไปนี้เท่านั้น สหรัฐอเมริกาและเกาหลีใต้ยังไม่มีกำหนดวันที่แน่นอนสำหรับการเปิดตัวในสเปนหรือประเทศอื่นๆ ในยุโรป แต่การเคลื่อนไหวนี้สอดคล้องกับกลยุทธ์ปกติของ Google คือ เริ่มต้นด้วยโครงการนำร่องขนาดเล็กก่อน แล้วค่อยๆ ขยายไปยังประเทศอื่นๆ เมื่อเทคโนโลยีและกฎระเบียบเอื้ออำนวย

เมื่อฟีเจอร์นี้พัฒนาขึ้น บริษัทก็ยืนยันว่าระบบทั้งหมดนี้ได้รับการออกแบบโดยคำนึงถึง... ความเป็นส่วนตัวและความปลอดภัยเป็นสิ่งสำคัญอันดับแรกเวอร์ชันเบต้าจะใช้เพื่อปรับปรุงประสบการณ์การใช้งานและรวบรวมข้อเสนอแนะจากผู้ใช้และนักพัฒนา ก่อนที่จะขยายขีดความสามารถไปยังตลาดและรุ่นมือถืออื่นๆ ต่อไป

ฟังก์ชันแอปพลิเคชันและการทำงานอัตโนมัติของอินเทอร์เฟซ: เบื้องหลังการทำงานเป็นอย่างไร

เพื่อให้ Gemini สามารถใช้งานแอปพลิเคชันต่างๆ และดำเนินการได้อย่างมีประสิทธิภาพ Android จึงได้รวมเอาเครื่องมือหลายอย่างที่ออกแบบมาเพื่อให้แอปสามารถสื่อสารกับตัวแทน AI ในลักษณะที่... มีโครงสร้างและปลอดภัยเสาหลักสำคัญแรกของสถาปัตยกรรมนี้เรียกว่า ฟังก์ชันแอป.

AppFunctions คือ คุณสมบัติของแพลตฟอร์ม Android 16นอกจากนี้ยังมีไลบรารี Jetpack ซึ่งช่วยให้นักพัฒนาสามารถเปิดเผยฟังก์ชันเฉพาะของแอปพลิเคชันของตนในรูปแบบ "เครื่องมือ" ที่เอเจนต์ เช่น Gemini สามารถใช้งานได้โดยตรงบนอุปกรณ์ แนวคิดนี้ชวนให้นึกถึงระบบเครื่องมือ MCP (Model Context Protocol) แต่ในกรณีนี้แตกต่างออกไป ทุกอย่างเกิดขึ้น ในพื้นที่บนมือถือโดยไม่ต้องพึ่งพาบริการระยะไกลเพียงอย่างเดียว

ด้วยวิธีการนี้ แอปสามารถประกาศความสามารถได้ เช่น การสร้างงาน การจัดการรายการซื้อของ การสร้างเพลย์ลิสต์ หรือการเพิ่มกิจกรรมลงในปฏิทิน ราศีเมถุนหรือผู้ช่วยเสมือนอื่นที่ใช้งานร่วมกันได้ จากนั้นคุณสามารถเรียกใช้ฟังก์ชันเหล่านั้นได้อย่างเป็นระบบโดยใช้ประโยชน์จากบริบทของคำขอของผู้ใช้เพื่อกรอกข้อมูลที่จำเป็น

ตัวอย่างที่ Google นำมาใช้มีตั้งแต่การแจ้งเตือนง่ายๆ เช่น "เตือนฉันให้ไปรับพัสดุที่ทำงานตอนห้าโมงเย็น" ไปจนถึงขั้นตอนการทำงานที่ซับซ้อนกว่า เช่น ค้นหาอีเมลที่มีสูตรอาหารเฉพาะ และจากเนื้อหานั้น ก็ถ่ายโอนส่วนผสมไปยังแอปรายการซื้อของ ทั้งหมดนี้เกิดขึ้นผ่านแอปหลายตัว แต่ผู้ใช้ไม่จำเป็นต้องเปิดแอปทีละแอป

นอกเหนือจาก AppFunctions แล้ว Android กำลังเตรียมสิ่งอื่นๆ อีกด้วย เฟรมเวิร์กการทำงานอัตโนมัติของส่วนติดต่อผู้ใช้ นี่จะเป็นชั้นการบูรณาการชั้นที่สอง ช่วยให้เอเจนต์สามารถทำงานทั่วไปได้มากขึ้นในแอปพลิเคชันที่ยังไม่ได้นำฟังก์ชันเฉพาะมาใช้ ซึ่งจะช่วยเติมเต็มช่องว่างขนาดใหญ่ที่เกิดจากระบบนิเวศของแอปที่ไม่ปรับตัวให้เข้ากับยุคใหม่ของ AI

เฟรมเวิร์กการทำงานอัตโนมัติของอินเทอร์เฟซนี้จะทำการ "ประมวลผลที่ซับซ้อน" เบื้องหลัง และได้รับการออกแบบมาเพื่อช่วยให้นักพัฒนาบรรลุเป้าหมาย การผสานรวมเข้ากับเอเจนต์โดยไม่ต้องเขียนโค้ดมากเกินไปในทางปฏิบัติแล้ว วิธีนี้ช่วยให้แอปต่างๆ สามารถใช้งานร่วมกับ Gemini ได้ในระดับเบื้องต้น โดยไม่ต้องลงทุนด้านวิศวกรรมจำนวนมากตั้งแต่เริ่มต้น

Google ได้ประกาศไปแล้วว่า Android 17 จะขยายขีดความสามารถเหล่านี้ให้มากขึ้นเป้าหมายคือการเข้าถึงผู้ใช้ ผู้ผลิต และนักพัฒนาให้มากขึ้น ในขณะนี้ บริษัทกำลังทำงานร่วมกับพันธมิตรกลุ่มเล็กๆ เพื่อปรับปรุงประสบการณ์การใช้งาน และสัญญาว่าจะแบ่งปันรายละเอียดเพิ่มเติมเกี่ยวกับวิธีการใช้ประโยชน์จาก AppFunctions และระบบอัตโนมัติของอินเทอร์เฟซตลอดทั้งปีนี้

ตัวอย่างที่เป็นรูปธรรม: ตั้งแต่แกลเลอรีภาพถ่ายไปจนถึงงานประจำวัน

ตัวอย่างการใช้งานบางส่วนเริ่มแสดงให้เห็นถึงความหมายของระบบอัจฉริยะระดับใหม่นี้ในโทรศัพท์ Android รุ่นใหม่ หนึ่งในนั้นคือการบูรณาการกับ แอป Samsung Gallery บน Galaxy S26โดยที่ Gemini สามารถทำงานร่วมกับแอปพลิเคชันภาพถ่ายของผู้ผลิตได้โดยที่ผู้ใช้ไม่ต้องค้นหาด้วยตนเอง

เพียงแค่ขออะไรทำนองนี้ “แสดงรูปแมวของฉันในแกลเลอรีให้ฉันดูหน่อย"เพื่อให้ Gemini สามารถระบุฟังก์ชันที่เหมาะสมภายใน Samsung Gallery และเปิดใช้งานได้" นำเสนอภาพโดยตรง เกี่ยวข้องกับการใช้งานภายในแอป Gemini เอง กระบวนการนี้สามารถทำได้ผ่านเสียงหรือข้อความ และรูปภาพที่ได้สามารถนำไปใช้ซ้ำในบทสนทนาได้ทันที เป็นต้น ส่งผ่านทางข้อความ ไปยังผู้ติดต่อ

จากข้อมูลของ Google แอป Gemini ใช้ AppFunctions ภายในอยู่แล้วเพื่อรองรับการผสานรวมกับแอปพลิเคชันอื่นๆ ปฏิทิน บันทึก และงาน สิ่งนี้สามารถทำได้ทั้งในแอปพลิเคชันของตนเองและในการตั้งค่าเริ่มต้นของผู้ผลิตบางราย ตัวอย่างเช่น ช่วยให้สามารถสร้างกิจกรรม ตั้งเตือนความจำ หรือจัดการรายการต่างๆ ได้โดยที่ผู้ใช้ไม่ต้องสลับไปมาระหว่างหน้าจอต่างๆ

ในด้านการเพิ่มประสิทธิภาพการทำงาน กรณีการใช้งานกำลังขยายตัวอย่างรวดเร็ว: จาก การจัดการและกำหนดตารางนัดหมาย ตั้งแต่การสร้างเพลย์ลิสต์เพลงตามเกณฑ์ต่างๆ เช่น "อัลบั้มแจ๊สที่ดีที่สุดของปีนี้" ไปจนถึงการทำงานร่วมกันระหว่างแอปพลิเคชันต่างๆ ที่เชื่อมโยงอีเมล บันทึก และรายการซื้อของ

ทั้งหมดนี้ชี้ให้เห็นถึงสถานการณ์ที่ผู้ใช้จะเลิกคิดมากเกี่ยวกับการ "เปิดแอปนี้หรือแอปนั้น" และเริ่มกำหนดเป้าหมายหรือภารกิจในภาษาธรรมชาติ ในขณะที่ AI จะทำหน้าที่ประสานงานการทำงานร่วมกันระหว่างส่วนต่างๆ ของระบบนิเวศ Android

นอกเหนือจากระบบอัตโนมัติ: ความปลอดภัย การค้นหาด้วยภาพ และอนาคตของระบบนิเวศ

ความสามารถใหม่ของ แอป Gemini สำหรับ Android พวกเขาไม่ได้มุ่งเน้นแค่การทำงานอัตโนมัติเท่านั้น Google ยังเสริมบทบาทของ AI ในฐานะส่วนหนึ่งของระบบอีกด้วย ความปลอดภัยและความช่วยเหลือตามบริบท ภายในระบบปฏิบัติการ มีฟีเจอร์ต่างๆ ตั้งแต่การตรวจจับการหลอกลวงไปจนถึงการปรับปรุงการค้นหาด้วยภาพ

ตัวอย่างเช่น ใน Galaxy S26 แอปพลิเคชัน Gemini ได้ถูกรวมเข้าไว้ในระบบแล้ว โทรศัพท์ซัมซุง เพื่อช่วยในการตรวจจับ การหลอกลวงทางโทรศัพท์ที่อาจเกิดขึ้นแม้ว่าปัจจุบันตัวเลือกนี้จะใช้งานได้เฉพาะในภาษาอังกฤษและในสหรัฐอเมริกาเท่านั้น แต่แนวคิดก็คือ AI จะวิเคราะห์การโทรแบบเรียลไทม์และสามารถเตือนผู้ใช้ได้หากตรวจพบรูปแบบที่น่าสงสัย ซึ่งเป็นการเสริมการทำงานของตัวกรองแบบดั้งเดิม

Android ได้อัปเดตระบบป้องกันการฉ้อโกงในแอปแล้วเช่นกัน ข้อความจาก Googleอีกครั้ง นี่อาศัยโมเดล AI ที่ระบุข้อความที่อาจเป็นอันตราย ทั้งหมดนี้สอดคล้องกับแนวทางที่ Gemini ไม่เพียงแต่ทำหน้าที่อัตโนมัติเท่านั้น แต่ยังช่วย... ตรวจสอบและป้องกันความเสี่ยง ในการสื่อสารประจำวัน

อีกหนึ่งฟังก์ชันที่ได้รับการปรับปรุงให้ดียิ่งขึ้นด้วยการพัฒนาเหล่านี้คือ “ค้นหาด้วยวงกลม”เครื่องมือที่ช่วยให้คุณได้รับข้อมูลเพิ่มเติมเกี่ยวกับองค์ประกอบใดๆ บนหน้าจอได้ง่ายๆ เพียงแค่เลื่อนเมาส์ไปวางเหนือองค์ประกอบนั้นด้วยท่าทางสัมผัส บน Galaxy S26 และ Pixel 10 ความสามารถนี้ได้รับการขยายเพิ่มเติมให้... ค้นหาชุดเสื้อผ้าครบชุด ในการค้นหาเพียงครั้งเดียว ระบบจะผสานรวมรูปภาพ บริบท และผลลัพธ์เชิงพาณิชย์ โดยที่ผู้ใช้ไม่ต้องพิมพ์คำใดๆ เลย

ท้ายที่สุดแล้ว องค์ประกอบทั้งหมดเหล่านี้ชี้ไปในทิศทางเดียวกัน นั่นคือการทำให้ราศีเมถุนเป็น แก่นหลักอันชาญฉลาดของประสบการณ์การใช้งาน Androidมันสามารถเข้าใจสิ่งที่เกิดขึ้นบนอุปกรณ์ ทำงานแทนผู้ใช้เมื่อได้รับการร้องขอ และในขณะเดียวกันก็ทำหน้าที่เป็นเกราะป้องกันการพยายามฉ้อโกงหรือเนื้อหาที่น่าสงสัย สำหรับคำแนะนำเชิงปฏิบัติเกี่ยวกับการรักษาความปลอดภัยในผู้ช่วยและแชทบอท ขอแนะนำให้ตรวจสอบรายการต่างๆ เช่น รายการนี้ รายการตรวจสอบความปลอดภัยของแชทบอท.

ยังต้องรอดูกันต่อไปว่า การใช้งานระบบทั้งหมดนี้จะสามารถปรับตัวให้เข้ากับข้อกำหนดด้านกฎระเบียบและความเป็นส่วนตัวของภูมิภาคต่างๆ ได้อย่างไร สหภาพยุโรปโดยที่การประมวลผลข้อมูลอัตโนมัติและการควบคุมการตัดสินใจของ AI กำลังถูกตรวจสอบอย่างเข้มงวด ไม่ว่าในกรณีใด การที่ Google ยึดมั่นในโมเดลที่อิงตามหน้าต่างเสมือน การอนุญาตที่ชัดเจน และฟังก์ชันที่จำกัด บ่งชี้ว่าการถกเถียงทางกฎหมายและทางเทคนิคจะยังคงดำเนินต่อไปอย่างดุเดือดในอีกหลายเดือนข้างหน้า

ด้วยการเปลี่ยนแปลงไปสู่ระบบอัตโนมัติขั้นสูง การผสมผสานระหว่าง เจมินีและแอนดรอยด์ ภาพที่ปรากฏคือวิวัฒนาการของโทรศัพท์มือถือจากเพียงแค่ชุดแอปพลิเคชันไปสู่ผู้ช่วยอัจฉริยะที่ทำงานได้อย่างเต็มรูปแบบ สามารถจัดการงานต่างๆ ได้ทั้งหมด ในขณะที่ยังคงมีการควบคุมดูแลจากมนุษย์อยู่ เมื่อการเปิดตัวเวอร์ชันเบต้าขยายไปยังอุปกรณ์และประเทศต่างๆ มากขึ้น รวมถึงสเปนและตลาดอื่นๆ ในยุโรป ก็จะเห็นได้ชัดเจนว่าผู้ใช้เต็มใจที่จะมอบการควบคุมแอปพลิเคชันในชีวิตประจำวันบางส่วนให้กับปัญญาประดิษฐ์มากน้อยเพียงใด และพลวัตใหม่นี้จะเข้ากับกิจวัตรทางเทคโนโลยีของพวกเขาได้อย่างไร

บทความที่เกี่ยวข้อง:

Apple เสริมความเข้มงวดในการตรวจสอบอายุในระบบต่างๆ และ App Store ของตน

อัลแบร์โต นาวาร์โร

ฉันเป็นผู้ชื่นชอบเทคโนโลยีที่เปลี่ยนความสนใจ "เกินบรรยาย" ของเขาให้กลายเป็นอาชีพ ฉันใช้เวลามากกว่า 10 ปีในชีวิตไปกับเทคโนโลยีล้ำสมัยและปรับแต่งโปรแกรมทุกประเภทด้วยความอยากรู้อยากเห็น ตอนนี้ฉันมีความเชี่ยวชาญในด้านเทคโนโลยีคอมพิวเตอร์และวิดีโอเกม เนื่องจากเป็นเวลากว่า 5 ปีแล้วที่ฉันเขียนให้กับเว็บไซต์ต่างๆ เกี่ยวกับเทคโนโลยีและวิดีโอเกม โดยสร้างบทความที่พยายามให้ข้อมูลที่คุณต้องการในภาษาที่ทุกคนเข้าใจได้

หากคุณมีคำถามใดๆ ความรู้ของฉันมีตั้งแต่ทุกอย่างที่เกี่ยวข้องกับระบบปฏิบัติการ Windows รวมถึง Android สำหรับโทรศัพท์มือถือ และความมุ่งมั่นของฉันคือคุณ ฉันยินดีสละเวลาสักครู่เสมอและช่วยคุณแก้ไขคำถามใดๆ ที่คุณอาจมีในโลกอินเทอร์เน็ตนี้