มีบัญชีอยู่แล้ว?
โมเดลประมวลผลภาษาสุดล้ำกลับมีกลไกการทำงานคล้ายสมองมนุษย์โดยบังเอิญ
ปัจจุบันนี้โมเดลเอไอด้านภาษา เช่น โมเดลด้าน Natural Language Processing ได้มีพัฒนาการที่ก้าวหน้าขึ้นเรื่อย ๆ โดยเฉพาะอย่างยิ่งโมเดลที่ใช้ทำนายคำต่อไปในประโยค ซึ่งนวัตกรรมล่าสุดของโมเดลเหล่านี้คือ สามารถเรียนรู้และเข้าใจความหมายแฝงของประโยคได้ จนนอกจากจะคาดเดาคำได้อย่างถูกต้องแล้ว ยังสามารถตอบคำถาม สรุปความ และเขียนเรื่องต่อจนจบได้
จากนวัตกรรมล่าสุดนี้ การที่โมเดลสามารถเข้าใจความหมายของคำและประโยค จนสามารถคาดเดาคำต่อไปได้นั้นมาจากการสร้างโมเดลให้เข้าใจความหมายของภาษาจริง ๆ โดยไม่ได้พยายามเลียนแบบกลไกสมองของมนุษย์ แต่สิ่งที่น่าทึ่งคือ งานวิจัยล่าสุดของ MIT รายงานว่านักประสาทวิทยาหลายคนมองว่ากระบวนการประมวลผลของโมเดลคาดเดาคำนั้น จริง ๆ แล้วใช้วิธีเดียวกับการประมวลผลทางด้านภาษาของสมองมนุษย์ ซึ่งเป็นการเหมือนกันโดยบังเอิญ โดยที่ตัวผู้สร้างไม่ได้มีสมองมนุษย์เป็นต้นแบบแต่อย่างใด
โมเดลคาดเดาคำแบบใหม่ล่าสุดนี้ใช้โมเดลประเภท Deep Neural Networks ซึ่งมีโหนดและเลเยอร์เชื่อมต่อกันคอยส่งข้อมูลให้กัน มีการใช้โมเดลแบบเดียวกันนี้ในการตรวจจับวัตถุ ซึ่งก็ได้รับการวิจัยว่ามีโครงสร้างการทำงานที่เหมือนกับสมองมนุษย์ส่วน Primate visual cortex โดยที่ก็ไม่ได้สร้างเลียนแบบสมองมนุษย์เช่นกัน
นักวิจัยได้ทำการวิเคราะห์โมเดลทำนายคำกว่า 43 โมเดล รวมถึง GPT-3 จาก Open AI ด้วย โดยกำหนดหัวข้อและให้โมเดลทำนายคำต่อไปในประโยค ซึ่งผลออกมาว่าโมเดลทำนายได้ใกล้เคียงกับสิ่งที่สมองของเราคิดมาก นักวิจัยยังวิเคราะห์การทำงานของแต่ละโหนดในเครือข่ายในแต่ละกิจกรรมเช่น การฟังเรื่องเล่า การอ่านหลายประโยคพร้อมกัน รวมถึงการอ่านประโยคที่ค่อย ๆ โผล่มาทีละคำ เพื่อมาเปรียบเทียบกับการทำงานภายในสมองมนุษย์ในกิจกรรมเดียวกัน ซึ่งก็พบว่ามีรูปแบบการทำงานที่คล้ายคลึงกันระหว่างโมเดลและสมองของเรา
ที่ผ่านมาการสร้างโมเดลเอไอด้านภาษาเป็นงานที่ท้าทายมาก โดยมีผู้ที่คิดค้นโมเดลหลากหลายรูปแบบมาเพื่อตอบโจทย์การทำงาน แต่ท้ายที่สุดกลายเป็นว่าโมเดลที่ล้ำสมัยที่สุดกลับมีการทำงานที่เหมือนสมองมนุษย์แบบไม่ได้ตั้งใจมาก่อน บางทีการวิวัฒนาการของปัญญาประดิษฐ์ อาจมีรูปแบบเดียวกับการวิวัฒนาการของสมองเราเมื่อล้านปีก่อนก็เป็นได้
Language processing models resemble the human brain's counterpart function.
Nowadays, language-wise models such as Natural Language Processing models have progressed to the level that it is able to predict the next words in sentences. Furthermore, its semantic understanding enables it to answer questions, summarise, and finish a story.
The models' semantic understanding has nothing to do with mimicking human brains. It is a genuine understanding. What is interesting is that according to a recent study from MIT, neuroscientists suggest that the underlying function of the next-word prediction model works in the same way as language-processing centres in the human brain, which is a coincidence. The developers never intend to imitate human brains.
The most advanced next-word prediction models belong to a class of deep neural networks containing nodes and layers that pass information between one another. The same kind of models are used for object recognition models and was discovered to unintendedly match the organisation of the primate visual cortex of human brains as well.
The researchers analysed 43 different language models, including GPT-3 from Open AI, by giving them prompts and letting them predict the next words. The result shows that they can generate similar words to what human brains would produce. The researchers also analyse the activity of the nodes in language tasks such as listening to stories, reading sentences one at a time, and reading sentences in which one word is revealed at a time. The result indicates that the nodes' activity patterns are also similar to the human brain's.
Building perfect language models have been challenging. Several kinds of models have been developed to meet the needs. But eventually, the most advanced model works the same way as our human brains do, which is absolutely unintended. However, the evolution of artificial intelligence might work the same pattern as what we have had a million years ago, maybe.
บทความโดย: ทีม Sertis
    • กำลังนิยมในบล็อกดิต
      ต้นทุนมีก็ต้องใช้สิ😁😁😁 ช่วงนี้ข่าวแม่ค้าแต่งตัววาบหวิวเรียกลูกค้าเยอะนะครับ
      ## ลุย! ใช้ ATK คุณภาพดีและประหยัดตรวจสัปดาห์ละ 2 ครั้ง ช่วยสะกัดการแพร่ระบาดของโควิดอย่างได้ผล ## แม้ตอนนี้จะเลยช่วงโปรโมชั่น 11.11 มาแล้ว แต่องค์การเภสัชกรรม ก็ได้จัดจำหน่ายชุดตรวจโควิดแบบเร็ว (Rapid Antigen Test Kit: ATK) ผ่านเว็บไซต์ในราคาเฉลี่ยชุดละ 40 บาท ซึ่งถือเป็นเรื่องดี
      ⚠️[BREAKING]⚠️ ช็อกวงการ ! Jack Dorsey ผู้ก่อตั้ง Twitter ประกาศลาออกจากตำแหน่ง CEO ของบริษัท ! หลายฝ่ายพยายามโยงว่า Jack อาจจะไปใช้เวลาพัฒนาชุมชน Bitcoin มากขึ้นตามคำที่เขาได้ลั่นไว้ก่อนหน้านี้ ! 📌 Jack Dorsey หนึ่งในผู้ทรงอิทธิพลสูงสุดในโลกโซเชียลมีเดีย ได้ประกาศวางมือจากการบริหารบริษัท Twitter ที่เขาเป็นผู้ร่วมก่อตั้งขึ้นมา
      แนะนำ 4 เหรียญคริปโตสัญชาติไทยที่กำลังมาแรง การเทรด Bitcoin หรือ คริปโต สมกับเป็นการลงทุนสมัยใหม่ที่เหมาะกับคนยุคใหม่ แต่หลายคนอาจยังไม่ทราบว่าปัจจุบันการลงทุนเหรียญดิจิตอลไทย หรือที่เรารู้จักกันในอีกชื่อคือ Cryptocurrency ของคนไทยที่มีให้เลือกมากมาย อีกทั้งมีมูลค่าไม่เบาเลยทีเดียวเมื่อเทียบกับเงินดิจิตอลสกุลต่างประเทศ
      ดูทั้งหมด