นี่คืออัลกอริทึม Grok แบบโอเพนซอร์สที่ขับเคลื่อนฟีด X

แพลตฟอร์ม X ซึ่งเดิมคือทวิตเตอร์และเป็นของอีลอน มัสก์ ได้ดำเนินการที่ผิดปกติในวงการนี้โดย เผยแพร่อัลกอริทึม Grok ในรูปแบบโอเพนซอร์ส ซึ่งเป็นตัวกำหนดว่าอะไรจะปรากฏในฟีดของผู้ใช้ บริษัท ได้เผยแพร่สถาปัตยกรรมแมชชีนเลิร์นนิงที่ขับเคลื่อนแท็บ "สำหรับคุณ" บน GitHub แล้วซึ่งเป็นหนึ่งในซอฟต์แวร์ที่มีความละเอียดอ่อนที่สุดในเครือข่ายสังคมออนไลน์ใดๆ ก็ตาม

ด้วยการเคลื่อนไหวนี้ X การเปิดเผยตรรกะที่ผสมผสานเนื้อหาจากธรรมชาติและโฆษณาเข้าไว้ด้วยกันนั้น ทำให้สาธารณชนสามารถตรวจสอบได้จากภายนอก ในไทม์ไลน์ ซึ่งเป็นสิ่งที่จนถึงตอนนี้ถูกเก็บเป็นความลับทางการค้า มัสก์และทีมวิศวกรรมยืนยันว่า ความโปร่งใสจะช่วยปรับปรุงคุณภาพของคำแนะนำให้ดีขึ้น และในขณะเดียวกันก็ช่วยเสริมสร้างความน่าเชื่อถือของแพลตฟอร์มต่อหน่วยงานกำกับดูแล โดยเฉพาะในสหภาพยุโรป

อัลกอริทึมแบบเปิดที่พัฒนาขึ้นบนสถาปัตยกรรม Grok

ทีมวิศวกรรม X ประกาศว่าได้เปิดตัวเวอร์ชันใหม่แล้ว อัลกอริทึมการแนะนำใหม่ระบบนี้ใช้สถาปัตยกรรม Transformer เดียวกันกับที่ใช้ในโมเดล Grok ซึ่งพัฒนาโดย xAI โดยใน GitHub repository นี้ได้อธิบายถึงระบบแมชชีนเลิร์นนิงแบบครบวงจรที่จัดอันดับโพสต์ในฟีด "สำหรับคุณ" โดยพิจารณาจากความเป็นไปได้ที่ผู้ใช้จะโต้ตอบกับโพสต์นั้น

ในเชิงเทคนิค X หมายถึงรายละเอียดของ... โมเดล Transformer ที่ได้รับการฝึกฝนเพื่อทำนายการกระทำ เช่น การกดไลค์ การตอบกลับ การแชร์ต่อ และการมีส่วนร่วมรูปแบบอื่นๆ แทนที่จะใช้กฎที่เขียนด้วยมือ ระบบจะเรียนรู้โดยตรงจากรูปแบบพฤติกรรมของผู้ใช้ ซึ่งช่วยลดสิ่งที่เรียกว่า "การสร้างคุณลักษณะด้วยตนเอง" และทำให้โครงสร้างพื้นฐานของข้อมูลง่ายขึ้น

การดำเนินการนี้ขึ้นอยู่กับ Rust และ Python สำหรับการดึงข้อมูลและการให้คะแนนเนื้อหาระบบนี้มีสถาปัตยกรรมแบบโมดูลาร์ที่แยกขั้นตอนการค้นหาเอกสารเผยแพร่เบื้องต้นออกจากขั้นตอนการจัดอันดับในภายหลัง โค้ดประกอบด้วยแผนภาพและเอกสารประกอบที่เข้าถึงได้ง่าย ซึ่งอธิบายโดยคร่าวๆ ว่าส่วนประกอบภายในต่างๆ ของระบบเชื่อมต่อกันอย่างไร

อีลอน มัสก์เองยอมรับต่อสาธารณะว่าอัลกอริทึมนั้น "โง่และต้องการการปรับปรุงครั้งใหญ่" แต่ก็ยังปกป้องการกระทำดังกล่าว แสดงกระบวนการปรับปรุงแบบเรียลไทม์ และการเปิดเผยข้อมูลอย่างโปร่งใสย่อมดีกว่าการเก็บงำความลับไว้ นักธุรกิจรายนี้กล่าวว่า ไม่มีเครือข่ายสังคมออนไลน์รายใหญ่ใดเปิดเผยกลไกการแนะนำข้อมูลหลักของตนในลักษณะนี้

ผู้เชี่ยวชาญในอุตสาหกรรม เช่น Midhun Krishna M ผู้ร่วมก่อตั้งและซีอีโอของแพลตฟอร์ม TknOps.io ชี้ให้เห็นว่า การเปิดเผยสถาปัตยกรรมที่ใช้ Grok นี้ มันเป็นแผนที่อ้างอิงสำหรับชุมชน เพื่อทำความเข้าใจและปรับปรุงระบบแนะนำที่แต่เดิมเข้าถึงได้ยาก สำหรับนักพัฒนาและบริษัทในยุโรป ข้อมูลทางเทคนิคนี้สามารถใช้เป็นพื้นฐานในการสร้างโซลูชันของตนเองหรือตรวจสอบแนวทางปฏิบัติบนแพลตฟอร์มอื่นๆ ได้

Grok ตัดสินใจอย่างไรว่าอะไรจะปรากฏในฟีด "สำหรับคุณ"

ตามเอกสารที่เผยแพร่ อัลกอริทึมของ X ดึงเนื้อหาจากแหล่งข้อมูลขนาดใหญ่สองแหล่ง: โพสต์จากบัญชีที่ผู้ใช้ติดตาม และสิ่งพิมพ์ "ออฟไลน์" พบได้โดยใช้แบบจำลองการกู้คืนที่ใช้การเรียนรู้ของเครื่อง ทั้งสองอย่างรวมกัน จากนั้นจึงนำมาจัดทำเป็นรายการเดียวโดยใช้ระบบการให้คะแนนที่ประเมินความน่าจะเป็นของการมีปฏิสัมพันธ์กับแต่ละทวีต

กระบวนการนี้รวมถึงขั้นตอนการกรอง ซึ่งสิ่งต่อไปนี้จะถูกคัดทิ้ง ทวีตจากบัญชีที่ถูกบล็อก เนื้อหาที่ถูกปิดเสียง ระบบจะคัดกรองเนื้อหาโดยใช้คำหลัก โพสต์ที่ถูกระบุว่ารุนแรงเกินไป หรือจัดว่าเป็นสแปม รวมถึงหมวดหมู่อื่นๆ หลังจากคัดกรองเสร็จแล้ว ระบบจึงจะดำเนินการจัดเรียงเนื้อหาตามความเกี่ยวข้องที่คาดหวัง

โมเดลทรานส์ฟอร์เมอร์ที่ใช้พื้นฐานจากโกรค ขับเคลื่อนด้วย... ประวัติการเข้าร่วมของผู้ใช้แต่ละคนระบบนี้จะติดตามว่าผู้ใช้ดูโพสต์อะไรบ้าง คลิกโพสต์ไหน กดถูกใจทวีตไหน ตอบกลับใคร และแชร์เนื้อหาอะไรบ้าง จากรูปแบบเหล่านี้ ระบบจะเรียนรู้ที่จะคาดการณ์ว่าข้อความประเภทใดมีแนวโน้มที่จะสร้างการมีส่วนร่วมมากที่สุดในครั้งต่อไป

Grok ถึงกับวิเคราะห์อัลกอริทึมของตัวเองและชี้ให้เห็นปัจจัยสำคัญ 5 ประการที่อยู่เบื้องหลังการแพร่กระจายของโพสต์ ได้แก่ การคาดการณ์การมีปฏิสัมพันธ์โดยอิงจากประวัติการใช้งานของผู้ใช้ ความเกี่ยวข้องและความทันเวลาของเนื้อหา ความหลากหลายของผู้เขียน เพื่อหลีกเลี่ยงการซ้ำซ้อน ควรสร้างความสมดุลระหว่างบัญชีผู้ใช้ที่ต่อเนื่องกันและคำแนะนำจากแบบจำลอง รวมถึงสัญญาณเชิงลบ เช่น การบล็อกหรือการเงียบ ซึ่งจะลดคะแนนของบัญชีผู้ใช้บางบัญชี

ด้วยข้อมูลนี้ ผู้สร้างสรรค์และบริษัทต่างๆ จะสามารถเข้าใจได้ดียิ่งขึ้น เหตุใดสิ่งพิมพ์บางฉบับจึงได้รับความนิยมอย่างมาก? และบางคนก็ไม่ทำเช่นนั้น โดยไม่หันไปใช้ทฤษฎีสมคบคิดเกี่ยวกับ "การแบนแบบเงียบๆ" หรือบทลงโทษที่มองไม่เห็น โค้ดนี้ไม่ได้ตอบคำถามทั้งหมด แต่เป็นพื้นฐานที่มั่นคงกว่าสำหรับการวิเคราะห์พฤติกรรมในฟีด

เนื้อหาออร์แกนิก โฆษณา และตัวชี้วัด "วินาทีที่ไม่ทำให้เสียใจ"

หนึ่งในคุณสมบัติใหม่ของสิ่งพิมพ์นี้คือ X ได้ให้คำมั่นสัญญาว่าจะเปิด รวมถึงตรรกะที่จัดการการผสมผสานระหว่างโพสต์ทั่วไปและโฆษณา ในฟีด เป้าหมายที่ระบุไว้คือการชี้แจงว่าเนื้อหาที่โปรโมตนั้นถูกผสานรวมเข้ากับประสบการณ์ประจำวันของผู้ใช้อย่างไรโดยไม่รบกวน

ในบรรดาตัวชี้วัดต่างๆ ที่ปรากฏในเอกสาร แนวคิดเรื่อง "ตัวชี้วัด" นั้นโดดเด่นเป็นพิเศษ "วินาทีการใช้งานที่ไร้ความเสียใจ"นี่คือตัวชี้วัดระยะเวลาที่บุคคลใช้ไปกับการรับชมเนื้อหาโดยไม่รู้สึกว่าเสียเวลาไปเปล่าประโยชน์ อัลกอริทึมใช้ตัวชี้วัดนี้ในการประเมินว่าประสบการณ์ที่ได้รับจากทวีตหรือโฆษณานั้นเป็นไปในเชิงบวกหรือไม่

ในทางปฏิบัติ โพสต์ทั่วไปจะได้รับการจัดอันดับโดยพิจารณาจากสัญญาณต่างๆ เช่น จำนวนการเข้าชม จำนวนไลค์ จำนวนการตอบกลับ และจำนวนการแชร์ ในขณะที่โฆษณาจะได้รับการประเมินโดยใช้เกณฑ์ความเกี่ยวข้องและประสิทธิภาพที่คล้ายคลึงกันมาก ระบบจึงพยายาม... ค่อยๆ ผสานการโฆษณาเข้าไปโดยการแทรกข้อความโฆษณาที่สอดคล้องกับความสนใจที่ตรวจพบของผู้ใช้แต่ละราย

สำหรับผู้ลงโฆษณาในยุโรป ความชัดเจนที่มากขึ้นนี้ช่วยลดการ "เล่นโดยไม่รู้ข้อมูล" ที่มักเกิดขึ้นในแพลตฟอร์มหลักๆ พวกเขาสามารถมองเห็นได้ อย่างน้อยก็ในภาพรวม อัลกอริทึมให้คุณค่ากับสัญญาณอะไรบ้าง และวิธีการที่เนื้อหาเหล่านั้นผสานรวมกับเนื้อหาที่ไม่ได้รับการโปรโมต ซึ่งอาจส่งผลต่อการวางแผนแคมเปญและการออกแบบสร้างสรรค์

การเปลี่ยนแปลงนี้ส่งผลกระทบต่อผู้ใช้ทั่วไปด้วยเช่นกัน: การที่ระบบการจัดระดับความเกี่ยวข้องเดียวกันนี้ส่งผลต่อทั้งทวีตปกติและโฆษณาทำให้... ประเมินให้ดียิ่งขึ้นว่าการโฆษณามีอิทธิพลต่อฟีดมากน้อยเพียงใด และตรวจจับความผิดปกติหรือความลำเอียงที่อาจเกิดขึ้นในการเผยแพร่ข้อความโฆษณา

ซอฟต์แวร์โอเพนซอร์สอยู่ภายใต้แรงกดดันด้านกฎระเบียบอย่างเข้มงวดจากสหภาพยุโรป

การตัดสินใจของ X ที่จะเปิดเผยอัลกอริทึม Grok เกิดขึ้นในช่วงเวลาที่ละเอียดอ่อน แรงกดดันด้านกฎระเบียบจากบรัสเซลส์เพิ่มมากขึ้นแพลตฟอร์มดังกล่าวมีข้อขัดแย้งกับสหภาพยุโรปในประเด็นเรื่องความโปร่งใสและการควบคุมเนื้อหา รวมถึงบทลงโทษทางการเงินที่เชื่อมโยงกับการปฏิบัติตามพระราชบัญญัติบริการดิจิทัล (Digital Services Act หรือ DSA)

DSA บังคับให้แพลตฟอร์มหลักๆ ในยุโรปต้องปฏิบัติตาม อธิบายวิธีการทำงานของระบบแนะนำของพวกเขา และวิธีที่อัลกอริทึมเหล่านี้ขยายเนื้อหาบางประเภท การเผยแพร่รหัสของอัลกอริทึมถูกตีความว่าเป็นกลยุทธ์ที่วางแผนไว้: X ปฏิบัติตามข้อกำหนดด้านความโปร่งใสอย่างน้อยบางส่วน ในขณะเดียวกันก็ผลักภาระการพิสูจน์ไปให้หน่วยงานกำกับดูแล

ด้วยการนำเสนอคลังข้อมูลแบบเปิด X สามารถขอให้หน่วยงานของยุโรปดำเนินการได้ อย่าใช้หลักฐานใด ๆ มาอ้างอิงในการกล่าวหาว่ามีการลำเอียงหรือบิดเบือนข้อมูล ในการวิเคราะห์รายละเอียดของรหัสที่มีอยู่ ด้วยวิธีนี้ บริษัทไม่เพียงแต่ยืนยันถึงความโปร่งใสของตนเท่านั้น แต่ยังเน้นย้ำถึงความสามารถในการกำกับดูแลทางเทคนิคของหน่วยงานกำกับดูแลอีกด้วย

นักวิจารณ์แพลตฟอร์มนี้อธิบายการกระทำดังกล่าวว่าเป็น "กับดัก" สำหรับสถาบันต่างๆ ที่ออกแบบมาเพื่อขัดขวางข้อโต้แย้งทางกฎหมาย ในขณะที่ผู้สังเกตการณ์คนอื่นๆ มองว่าเป็นโอกาสที่จะ ยกระดับมาตรฐานความรับผิดชอบ ครอบคลุมทั้งภาคเทคโนโลยี บังคับให้คู่แข่งต้องอธิบายว่าทำไมพวกเขาถึงเก็บรักษาอัลกอริทึมของตนไว้เป็นความลับ

ไม่ว่าในกรณีใด การเผยแพร่อัลกอริทึม Grok ถือเป็นการเปิดแนวรบใหม่ในการถกเถียงในยุโรปเกี่ยวกับเรื่องนี้ ควรมีการออกกฎระเบียบอย่างไรสำหรับการนำปัญญาประดิษฐ์มาประยุกต์ใช้ในเครือข่ายสังคมออนไลน์?นับจากนี้เป็นต้นไป นักวิชาการ องค์กรภาคประชาสังคม และหน่วยงานภาครัฐ จะสามารถเปรียบเทียบคำพูดสาธารณะของ X กับการทำงานจริงของโค้ดที่โพสต์บน GitHub ได้

ความโปร่งใสที่มากขึ้นสำหรับผู้สร้างสรรค์และธุรกิจขนาดเล็ก

สำหรับผู้ที่หารายได้จากการใช้สื่อสังคมออนไลน์ การเปิดเสรีอัลกอริทึมถือเป็นการเปลี่ยนแปลงครั้งสำคัญ ผู้สร้างเนื้อหา นักข่าว ธุรกิจขนาดเล็ก และผู้เชี่ยวชาญที่พึ่งพา X ในการเข้าถึงกลุ่มเป้าหมาย ตอนนี้สามารถเข้าถึง... ภาพเอ็กซ์เรย์ที่แม่นยำกว่ามาก แสดงให้เห็นถึงการกระจายตัวของทัศนวิสัย บนแพลตฟอร์ม

คลังข้อมูลนี้ช่วยให้คุณระบุได้ว่าการกระทำใดมีน้ำหนักมากที่สุดเมื่อไต่ระดับในฟีด: ข้อความที่จุดประกายการสนทนา การแชร์ต่อที่ขยายวงกว้างออกไปปฏิสัมพันธ์ที่ต่อเนื่องยาวนาน หรือสัญญาณเชิงลบ เช่น การบล็อกและการเงียบ ที่ทำให้คะแนนของบัญชีลดลง ด้วยข้อมูลเหล่านี้ ทำให้การออกแบบกลยุทธ์การโพสต์ทำได้ง่ายขึ้น โดยใช้ข้อมูลพื้นฐานเพียงเล็กน้อย

สำหรับผู้ประกอบอาชีพอิสระและวิสาหกิจขนาดเล็กในยุโรป ซึ่งมักดำเนินงานด้วยทรัพยากรที่จำกัดมาก ความเป็นไปได้ของ ทำความเข้าใจและตรวจสอบระบบโดยไม่ต้องผ่านตัวกลาง สิ่งนี้สามารถลดการพึ่งพาที่ปรึกษาหรือหน่วยงานภายนอกได้ การวิเคราะห์โค้ดและเอกสารช่วยให้พวกเขาสามารถปรับรูปแบบ ตารางเวลา และสไตล์เนื้อหาให้เข้ากับพฤติกรรมที่อัลกอริทึมให้รางวัลได้

บริษัทยังได้ให้คำมั่นที่จะเผยแพร่ผลงานอีกด้วย มีการอัปเดตเป็นประจำ (ประมาณทุกสี่สัปดาห์) พร้อมบันทึกจากผู้พัฒนาที่ระบุรายละเอียดการเปลี่ยนแปลงที่เกิดขึ้น หากรักษาอัตรานี้ไว้ ผู้ที่ทำงานกับระบบ X เป็นประจำทุกวันจะสามารถติดตามวิวัฒนาการของระบบและตรวจจับได้อย่างรวดเร็วว่าการแก้ไขใด ๆ เป็นประโยชน์หรือเป็นอันตรายต่อพวกเขา

นั่นไม่ได้หมายความว่าข้อร้องเรียนหรือความไม่พอใจจะหายไป แต่ในทางทฤษฎีแล้ว มันช่วยลดความรู้สึกของการต่อสู้กับกลไกที่ไม่โปร่งใสอย่างสิ้นเชิง ชุมชนด้านเทคนิคของยุโรปได้มีสิ่งนี้เป็นครั้งแรก โค้ดเบสจริงสำหรับการทดลองเสนอแนะแนวทางการปรับปรุง หรือแม้กระทั่งสร้างเครื่องมือวิเคราะห์อิสระขึ้นมาใหม่

ขีดจำกัดของความเปิดเผย: ความโปร่งใสใช่ แต่ต้องมีข้อแม้

แม้ว่าการประกาศดังกล่าวจะดูน่าสนใจ แต่ผู้เชี่ยวชาญหลายคนชี้ให้เห็นว่า การเปิดเผยโค้ดไม่ได้หมายความว่าต้องเปิดเผยระบบทั้งหมดโครงสร้างทางสถาปัตยกรรมของอัลกอริทึม Grok นั้นเปิดเผยต่อสาธารณะแล้ว แต่ข้อมูลที่ใช้ในการฝึกอบรมและโครงสร้างพื้นฐานการประมวลผลฝั่งเซิร์ฟเวอร์ยังคงเป็นความลับ

นักวิเคราะห์บางคนนิยามสถานการณ์นี้ว่าเป็น "กล่องแก้ว": คุณสามารถมองเห็นโครงสร้างและตรรกะโดยรวมได้ แต่... ไม่สามารถสังเกตการไหลของข้อมูลทั้งหมดได้แบบเรียลไทม์หากไม่มีชุดข้อมูลฝึกฝนหรือพารามิเตอร์ที่อัปเดตแล้ว ก็ยากที่จะตรวจสอบได้อย่างแน่ชัดว่าอคติได้รับการแก้ไขอย่างไร หรือเนื้อหาที่ละเอียดอ่อนได้รับการจัดการอย่างไรในทางปฏิบัติ

แนวทางแบบผสมผสานนี้ทำให้เกิดคำถามว่า การเปลี่ยนไปใช้โอเพนซอร์สเป็นผลมาจากอะไรกันแน่ แบบฝึกหัดประชาสัมพันธ์ มากกว่าการเปิดเผยข้อมูลอย่างครบถ้วน นักวิจารณ์จำได้ว่าครั้งแรกที่ทวิตเตอร์เปิดเผยอัลกอริทึมบางส่วนเมื่อหลายปีก่อน การกระทำดังกล่าวถูกหลายคนมองว่าเป็น "การแสดงความโปร่งใสจอมปลอม" เนื่องจากข้อมูลจำนวนมากที่ไม่ได้เปิดเผย

สถานการณ์ยิ่งซับซ้อนขึ้นเนื่องจากบริบทล่าสุด: บริษัท X ตกอยู่ภายใต้การตรวจสอบเกี่ยวกับการใช้แชทบอท Grok ของตนเพื่อ... สร้างและแก้ไขภาพที่มีลักษณะทางเพศรวมถึงภาพของเด็กและเยาวชน ซึ่งทำให้พนักงานอัยการและหน่วยงานกำกับดูแลในหลายประเทศเปิดการสอบสวน เพื่อแก้ไขปัญหาเหล่านี้ บริษัทจึงได้จำกัดการใช้งานฟังก์ชันการสร้างและแก้ไขภาพบางอย่างสำหรับผู้ใช้ที่ชำระเงิน และได้ใช้มาตรการทางเทคนิคเพื่อป้องกันการดัดแปลงภาพถ่ายของบุคคลจริง

ในขณะเดียวกัน X ได้เพิกถอนสิทธิ์การเข้าถึง API สำหรับบางโครงการที่ให้สิ่งจูงใจทางการเงินแก่ผู้ใช้ในการเผยแพร่เนื้อหา โดยอ้างว่า ความเสี่ยงจากสแปมที่สร้างโดย AIการเปลี่ยนแปลงทั้งหมดนี้เกิดขึ้นควบคู่ไปกับวาทกรรมเรื่องความเปิดเผยของอัลกอริทึม ซึ่งยิ่งทำให้เกิดความรู้สึกว่าบริษัทกำลังแสดงออกถึงความโปร่งใส แต่กลับมีการตัดสินใจที่เข้มงวดมากขึ้นในด้านอื่นๆ

ด้วยการเปิดเผยอัลกอริทึม Grok เป็นโอเพนซอร์ส X ได้เปิดเผยหนึ่งในสินทรัพย์ทางเทคโนโลยีที่ละเอียดอ่อนที่สุดของตน และในขณะเดียวกันก็ได้วางรากฐานที่บริษัทต้องการให้ถูกตัดสิน: ระบบแนะนำที่ตรวจสอบได้ในการออกแบบอย่างไรก็ตาม การนำไปใช้งานจริงยังคงขึ้นอยู่กับข้อมูลและการตัดสินใจภายใน สำหรับผู้ใช้งาน ผู้สร้างสรรค์ หน่วยงานกำกับดูแล และบริษัทต่างๆ ในยุโรป ความท้าทายคือการใช้ประโยชน์จากข้อมูลเหล่านี้โดยไม่มองข้ามแง่มุมต่างๆ ที่ยังคงอยู่นอกเหนือสายตาของสาธารณชน