ข้ามไปยังเนื้อหาหลัก

คู่มือ GPT-4o: ทำงานอย่างไร กรณีการใช้งาน ราคา ผลทดสอบมาตรฐาน

เรียนรู้เกี่ยวกับ GPT-4o ของ OpenAI โมเดล AI แบบมัลติโหมดที่ประมวลผลข้อมูลตัวอักษร เสียง และภาพ พร้อมค้นหาว่าเปรียบเทียบกับ GPT-4 Turbo สำหรับกรณีการใช้งานต่าง ๆ อย่างไร
อัปเดตแล้ว 31 ส.ค. 2569  · 8 นาที อ่าน

สำรวจด้วย AI

ChatGPTClaudePerplexity

OpenAI ได้ประกาศ โมเดลภาษาขนาดใหญ่รุ่นล่าสุด GPT-4o ผู้สืบทอดของ GPT-4 Turbo อ่านต่อเพื่อค้นหาความสามารถ ประสิทธิภาพ และแนวทางการใช้งานที่เหมาะสม

GPT-4o ของ OpenAI คืออะไร?

GPT-4o คือ LLM รุ่นล่าสุดของ OpenAI ตัวอักษร 'o' ใน GPT-4o มาจากคำว่า "omni"—ภาษาละตินแปลว่า "ทุกสิ่ง"—สื่อถึงความจริงที่ว่าโมเดลใหม่นี้สามารถรับพรอมต์ที่ผสมผสานข้อความ เสียง รูปภาพ และวิดีโอได้ เดิมที อินเทอร์เฟซของ ChatGPT ใช้โมเดลแยกกันสำหรับเนื้อหาแต่ละประเภท

ตัวอย่างเช่น เมื่อคุยกับ ChatGPT ผ่าน โหมดเสียง คำพูดจะถูกแปลงเป็นข้อความด้วย Whisper จากนั้นสร้างคำตอบเป็นข้อความด้วย GPT-4 Turbo และแปลงคำตอบนั้นกลับเป็นเสียงด้วย TTS

GPT-4o vs GPT-4 Turbo

การเปรียบเทียบวิธีที่ GPT-4 Turbo และ GPT-4o ประมวลผลอินพุตเสียง

ในทำนองเดียวกัน การทำงานกับภาพใน ChatGPT เกี่ยวข้องกับการผสมผสานของ GPT-4 Turbo และ DALL-E 3

การมีโมเดลเดียวสำหรับสื่อเนื้อหาต่างชนิด สัญญาถึงความเร็วและคุณภาพของผลลัพธ์ที่ดีขึ้น อินเทอร์เฟซที่เรียบง่ายขึ้น และกรณีการใช้งานใหม่ ๆ

GPT-4o mini คืออะไร?

GPT-4o Mini เป็นรุ่นที่กะทัดรัดและรวดเร็วกว่า GPT-4o ออกแบบมาเพื่อจัดการงานโดยให้ความสำคัญกับความเร็วและประสิทธิภาพมากขึ้น พัฒนามาจากโมเดล GPT-4o ขนาดใหญ่ผ่านกระบวนการที่เรียกว่า distillation

แม้ยังคงความสามารถส่วนใหญ่ของโมเดลต้นฉบับในการประมวลผลอินพุตแบบมัลติโหมด—ข้อความ เสียง และภาพ—GPT-4o mini ได้รับการปรับแต่งสำหรับแอปพลิเคชันที่ต้องการความเบาและเวลาตอบสนองที่รวดเร็วเป็นสำคัญ

เหมาะอย่างยิ่งสำหรับนักพัฒนาที่ต้องการโซลูชันคุ้มค่าสำหรับการเขียนโค้ด ดีบัก และปฏิสัมพันธ์แบบเรียลไทม์ที่ไม่ต้องใช้พลังประมวลผลเต็มรูปแบบของ GPT-4o

อ่านรายละเอียดเพิ่มเติมได้ในบทความเกี่ยวกับ GPT-4o mini

อะไรทำให้ GPT-4o แตกต่างจาก GPT-4 Turbo?

แนวทางโมเดลรวมหนึ่งเดียวทำให้ GPT-4o แก้ข้อจำกัดหลายประการของความสามารถโต้ตอบด้วยเสียงก่อนหน้านี้ได้

1. คำนึงถึงน้ำเสียง ช่วยให้ตอบสนองเชิงอารมณ์ได้

ด้วยระบบเดิมของ OpenAI ที่ผสาน Whisper, GPT-4 Turbo และ TTS แบบเป็นขั้นตอน กลไกให้เหตุผลอย่าง GPT-4 จะเข้าถึงได้เฉพาะคำพูดที่ถูกถอดความ วิธีนี้ทำให้สิ่งต่าง ๆ เช่น น้ำเสียง เสียงรบกวนพื้นหลัง และการรู้จำเสียงจากผู้พูดหลายคน ถูกทิ้งไป ส่งผลให้ GPT-4 Turbo ไม่สามารถแสดงคำตอบด้วยอารมณ์หรือสไตล์การพูดที่หลากหลายได้จริง

เมื่อมีโมเดลเดียวที่ให้เหตุผลได้ทั้งข้อความและเสียง ข้อมูลเสียงที่หลากหลายนี้จึงถูกนำมาใช้เพื่อให้คำตอบที่มีคุณภาพสูงขึ้นและมีรูปแบบการพูดที่หลากหลายกว่า

ในตัวอย่างต่อไปนี้ที่ OpenAI จัดให้ GPT-4o ให้เอาต์พุตเชิงเสียดสี

2. ความหน่วงต่ำลง ช่วยการสนทนาแบบเรียลไทม์

ไปป์ไลน์สามโมเดลแบบเดิมทำให้เกิดความล่าช้าเล็กน้อย ("latency") ระหว่างการพูดกับ ChatGPT และการได้รับคำตอบ

OpenAI เปิดเผยว่าโหมดเสียงมีค่า latency เฉลี่ย 2.8 วินาทีสำหรับ GPT-3.5 และ 5.4 วินาทีสำหรับ GPT-4 ขณะที่ GPT-4o มีค่าเฉลี่ยเพียง 0.32 วินาที เร็วกว่า GPT-3.5 เก้าเท่าและเร็วกว่า GPT-4 สิบเจ็ดเท่า

ความหน่วงที่ลดลงนี้เข้าใกล้เวลาโต้ตอบเฉลี่ยของมนุษย์ (0.21 วินาที) และมีความสำคัญสำหรับกรณีการสนทนา ที่มีการโต้ตอบไปมาจำนวนมาก ซึ่งช่วงว่างระหว่างคำตอบจะสะสมรวมกัน

คุณสมบัตินี้ชวนให้นึกถึงตอน Google เปิดตัว Instant ระบบเติมคำค้นหาอัตโนมัติในปี 2010 แม้ว่าการค้นหาจะไม่ได้ใช้เวลานาน แต่การประหยัดเวลาได้ไม่กี่วินาทีทุกครั้งที่ใช้งานก็ทำให้ประสบการณ์ดีขึ้น

กรณีใช้งานหนึ่งที่เป็นไปได้มากขึ้นด้วยความหน่วงที่ลดลงของ GPT-4o คือการแปลคำพูดแบบเรียลไทม์ OpenAI ยกตัวอย่างการสนทนาระหว่างเพื่อนร่วมงานสองคน คนหนึ่งพูดอังกฤษ อีกคนพูดสเปน โดยให้ GPT-4o แปลบทสนทนาให้

3. การมองเห็นแบบบูรณาการ ช่วยบรรยายสตรีมจากกล้อง

นอกเหนือจากการผสานเสียงและข้อความ GPT-4o ยังรวมฟีเจอร์ภาพและวิดีโอด้วย ซึ่งหมายความว่าหากให้มันเข้าถึงหน้าจอคอมพิวเตอร์ ก็สามารถบรรยายสิ่งที่แสดงบนหน้าจอ ตอบคำถามเกี่ยวกับภาพบนหน้าจอ หรือทำหน้าที่เป็นผู้ช่วยร่วมงานได้

ในวิดีโอจาก OpenAI ที่มี Sal Khan จาก Khan Academy GPT-4o ช่วยงานการบ้านคณิตศาสตร์ของลูกชาย Sal

เหนือไปกว่าการทำงานกับหน้าจอ หากให้ GPT-4o เข้าถึงกล้อง เช่น สมาร์ตโฟน ก็สามารถบรรยายสิ่งที่มองเห็นได้

เดโมที่ยาวขึ้นซึ่ง OpenAI นำเสนอผสานคุณสมบัติทั้งหมดนี้ สมาร์ตโฟนสองเครื่องที่รัน GPT-4o สนทนากัน GPT เครื่องหนึ่งเข้าถึงกล้องของสมาร์ตโฟนและบรรยายสิ่งที่เห็นให้กับ GPT อีกเครื่องที่มองไม่เห็น

ผลลัพธ์คือการสนทนาแบบสามฝ่ายระหว่างมนุษย์และ AI สองตัว วิดีโอยังมีช่วงที่ AI ร้องเพลง ซึ่งเป็นสิ่งที่โมเดลก่อนหน้าไม่สามารถทำได้

4. การโทเค็นไนซ์ที่ดีขึ้นสำหรับอักษรที่ไม่ใช่โรมัน ช่วยเพิ่มความเร็วและความคุ้มค่า

หนึ่งในขั้นตอนของเวิร์กโฟลว์ LLM คือการแปลงข้อความพรอมต์เป็นโทเค็น ซึ่งเป็นหน่วยของข้อความที่โมเดลเข้าใจได้

ในภาษาอังกฤษ โทเค็นมักเป็นหนึ่งคำหรือเครื่องหมายวรรคตอน แม้บางคำจะถูกแบ่งเป็นหลายโทเค็น โดยเฉลี่ยแล้วสามคำภาษาอังกฤษใช้พื้นที่ประมาณสี่โทเค็น

หากภาษาใดสามารถแทนในโมเดลด้วยจำนวนโทเค็นที่น้อยกว่า ก็ต้องคำนวณน้อยลง และความเร็วในการสร้างข้อความจะเพิ่มขึ้น

นอกจากนี้ เนื่องจาก OpenAI คิดค่าบริการ API ต่อโทเค็นที่ป้อนหรือส่งออก โทเค็นน้อยลงย่อมหมายถึงราคาที่ต่ำลงสำหรับผู้ใช้ API

GPT-4o มีโมเดลโทเค็นไนซ์ที่ปรับปรุงใหม่ ทำให้ต้องใช้โทเค็นต่อเนื้อความน้อยลง ความเปลี่ยนแปลงจะเห็นได้ชัดในภาษาที่ไม่ใช้อักษรโรมัน

ตัวอย่างเช่น ภาษาอินเดียหลายภาษาได้ประโยชน์มาก โดยภาษาฮินดี มาราฐี ทมิฬ เตลูกู และคุชราตี มีจำนวนโทเค็นลดลง 2.9 ถึง 4.4 เท่า ภาษาอาหรับลดลง 2 เท่า และภาษาเอเชียตะวันออกอย่างจีน ญี่ปุ่น เกาหลี และเวียดนามลดลงระหว่าง 1.4x ถึง 1.7x

5. เปิดให้ใช้งานในแผนฟรี

ด้วยกลยุทธ์ราคาเดิมของ OpenAI สำหรับ ChatGPT ผู้ใช้ต้องจ่ายเพื่อเข้าถึงโมเดลที่ดีที่สุด: GPT-4 Turbo เปิดให้ใช้เฉพาะในแผน Plus และ Enterprise แบบชำระเงิน

สิ่งนี้กำลังจะเปลี่ยน โดย OpenAI สัญญาว่าจะทำให้ GPT-4o ใช้ได้ในแผนฟรีด้วย ผู้ใช้ Plus จะส่งข้อความได้มากกว่าผู้ใช้แผนฟรีห้าเท่า

การเปิดใช้งานจะค่อยเป็นค่อยไป โดยเริ่มให้ red team (ผู้ทดสอบที่พยายามทำให้โมเดลล้มเหลวเพื่อหาปัญหา) เข้าถึงได้ทันที และขยายไปยังผู้ใช้อื่นตามเวลา

6. เปิดตัวแอปเดสก์ท็อปของ ChatGPT

แม้จะไม่ใช่อัปเดตที่มีเฉพาะใน GPT-4o แต่ OpenAI ก็ได้ประกาศเปิดตัวแอปเดสก์ท็อปของ ChatGPT ด้วย การอัปเดตด้านความหน่วงและความเป็นมัลติโหมดข้างต้น ร่วมกับการเปิดตัวแอป หมายความว่าวิธีการทำงานกับ ChatGPT น่าจะเปลี่ยนไป ตัวอย่างเช่น OpenAI แสดงเดโมเวิร์กโฟลว์การเขียนโค้ดแบบเสริมด้วยเสียงและแอปเดสก์ท็อปของ ChatGPT เลื่อนลงในส่วนกรณีการใช้งานเพื่อดูตัวอย่างนั้นจริง ๆ

GPT-4o ทำงานอย่างไร?

หลายประเภทคอนเทนต์ หนึ่งโครงข่ายประสาท

รายละเอียดการทำงานของ GPT-4o ยังมีไม่มาก ข้อมูลเดียวที่ OpenAI ให้ไว้ในประกาศคือ GPT-4o เป็น โครงข่ายประสาท เพียงตัวเดียวที่ฝึกด้วยอินพุตข้อความ ภาพ และเสียง

แนวทางใหม่นี้ต่างจากเทคนิคก่อนหน้าที่มีโมเดลแยกกันซึ่งฝึกด้วยข้อมูลคนละประเภท

อย่างไรก็ตาม GPT-4o ไม่ใช่โมเดลแรกที่ใช้แนวทางมัลติโหมด ในปี 2022 TenCent Lab สร้าง SkillNet โมเดลที่ผสานคุณลักษณะทรานส์ฟอร์เมอร์ของ LLM เข้ากับเทคนิควิชันคอมพิวเตอร์เพื่อพัฒนาความสามารถในการรู้จำอักษรจีน

ในปี 2023 ทีมจาก ETH Zurich, MIT และ Stanford University สร้าง WhisBERT ซึ่งเป็นความแปรผันของตระกูล BERT แม้ไม่ใช่รายแรก แต่ GPT-4o ก็ทะเยอทะยานและทรงพลังยิ่งกว่าความพยายามก่อนหน้านั้นมาก

GPT-4o เปลี่ยนแปลงจาก GPT-4 Turbo อย่างสุดโต่งหรือไม่?

ความสุดโต่งของการเปลี่ยนแปลงสถาปัตยกรรมของ GPT-4o เมื่อเทียบกับ GPT-4 Turbo ขึ้นกับว่าถามทีมวิศวกรรมหรือการตลาดของ OpenAI ในเดือนเมษายน บอทชื่อ "im-also-a-good-gpt2-chatbot" ปรากฏบน Chatbot Arena ของ LMSYS กระดานจัดอันดับสำหรับ AI สร้างสรรค์ที่ดีที่สุด และภายหลังก็ถูกเปิดเผยว่าเป็น GPT-4o

ส่วน "gpt2" ของชื่อนั้นสำคัญ อย่าสับสนกับ GPT-2 ซึ่งเป็นรุ่นก่อนของ GPT-3.5 และ GPT-4 เครื่องหมาย "2" นี้ถูกมองอย่างกว้างขวางว่าเป็นสถาปัตยกรรมชุดใหม่ทั้งหมดสำหรับตระกูล GPT

เห็นได้ชัดว่าใครบางคนในทีมวิจัยหรือวิศวกรรมของ OpenAI คิดว่าการรวมข้อความ ภาพ และเสียงเข้าไว้ในโมเดลเดียวเป็นการเปลี่ยนแปลงใหญ่พอที่จะขยับหมายเลขเวอร์ชันครั้งแรกในรอบหกปี

ในอีกด้าน ทีมการตลาดเลือกการเปลี่ยนชื่อที่ค่อนข้างสุภาพ โดยยังคงใช้ธรรมเนียม "GPT-4" ต่อไป

ประสิทธิภาพของ GPT-4o เทียบกับโมเดลอื่น

OpenAI เปิดเผยตัวเลขผลทดสอบมาตรฐานของ GPT-4o เทียบกับโมเดลระดับไฮเอนด์อื่นหลายตัว

  • GPT-4 Turbo
  • GPT-4 (รุ่นแรก)
  • Claude 3 Opus
  • Gemini Pro 1.5
  • Gemini Ultra 1.0
  • Llama 3 400B

ในบรรดานี้ มีเพียงสามโมเดลที่สำคัญต่อการเปรียบเทียบจริง ๆ GPT 4 Turbo, Claude 3 Opus และ Gemini Pro 1.5 ที่ช่วงหลายเดือนที่ผ่านมาแย่งชิงอันดับต้นบนกระดานจัดอันดับ LMSYS Chatbot Arena

Llama 3 400B อาจเป็นผู้ท้าชิงในอนาคต แต่ยังไม่เสร็จสิ้น ดังนั้นที่นี่จึงนำเสนอเฉพาะผลลัพธ์ของสามโมเดลนี้และ GPT-4o

ใช้ผลการทดสอบมาตรฐานหกรายการ

  • Massive Multitask Language Understanding (MMLU). งานด้านคณิตศาสตร์ขั้นพื้นฐาน ประวัติศาสตร์สหรัฐ วิทยาการคอมพิวเตอร์ กฎหมาย และอื่น ๆ เพื่อทำคะแนนสูง โมเดลต้องมีทั้งความรู้รอบโลกและความสามารถในการแก้ปัญหา
  • Graduate-Level Google-Proof Q&A (GPQA). คำถามแบบปรนัยที่เขียนโดยผู้เชี่ยวชาญด้านชีววิทยา ฟิสิกส์ และเคมี คำถามมีคุณภาพสูงและยากมาก: ผู้เชี่ยวชาญที่จบหรือกำลังศึกษาปริญญาเอกทำได้แม่นยำ 74%
  • MATH. โจทย์คณิตศาสตร์ระดับมัธยมศึกษาตอนต้นและตอนปลาย
  • HumanEval. การทดสอบความถูกต้องเชิงฟังก์ชันของโค้ดคอมพิวเตอร์ ใช้ตรวจสอบการสร้างโค้ด
  • Multilingual Grade School Math (MSGM). โจทย์คณิตศาสตร์ระดับประถมศึกษา แปลเป็นสิบภาษา รวมถึงภาษาที่มีตัวแทนน้อยอย่างเบงกาลีและสวาฮีลี
  • Discrete Reasoning Over Paragraphs (DROP). คำถามที่ต้องเข้าใจย่อหน้าทั้งหมด เช่น การบวก นับ หรือจัดเรียงค่าที่กระจายตามหลายประโยค

ผลทดสอบมาตรฐานของ GPT-4o เทียบกับโมเดลอื่น

ประสิทธิภาพของ GPT-4o, GPT-4 Turbo, Gemini Pro 1.5 และ Claude 3 Opus เทียบกับหกมาตรฐาน LLM คะแนนของแต่ละมาตรฐานอยู่ระหว่าง 0 ถึง 100 สร้างใหม่จากข้อมูลที่ OpenAI ให้ ไม่มีข้อมูลของ Gemini Pro 1.5 สำหรับมาตรฐาน GPQA

GPT-4o ได้คะแนนสูงสุดในสี่มาตรฐาน แต่แพ้ Claude 3 Opus ในมาตรฐาน MSGM และแพ้ GPT-4 Turbo ในมาตรฐาน DROP โดยรวมแล้วประสิทธิภาพถือว่าน่าประทับใจ และแสดงถึงแนวโน้มที่ดีของแนวทางการฝึกแบบมัลติโหมด

หากมองตัวเลขของ GPT-4o เทียบกับ GPT-4 Turbo อย่างใกล้ชิด จะเห็นว่าการเพิ่มขึ้นของประสิทธิภาพมีเพียงไม่กี่เปอร์เซ็นต์พอยต์

ถือเป็นแรงส่งที่ดีภายในหนึ่งปี แต่ยังห่างไกลจากการกระโดดด้านประสิทธิภาพแบบน่าทึ่งจาก GPT-1 ไป GPT-2 หรือ GPT-2 ไป GPT-3

การเก่งขึ้น 10% ในการให้เหตุผลเกี่ยวกับข้อความแบบปีต่อปี น่าจะกลายเป็นเรื่องปกติใหม่ งานที่ทำได้ง่ายถูกเก็บเกี่ยวไปแล้ว และยากที่จะกระโดดครั้งใหญ่ต่อไปในด้านเหตุผลเชิงข้อความ

ในอีกด้าน สิ่งที่มาตรฐาน LLM เหล่านี้ไม่สะท้อนคือประสิทธิภาพของ AI บนปัญหาแบบมัลติโหมด แนวคิดนี้ใหม่มากจนเรายังไม่มีวิธีที่ดีในการวัดว่ามodel เก่งแค่ไหนครอบคลุมข้อความ เสียง และภาพ

โดยรวมแล้ว ประสิทธิภาพของ GPT-4o น่าประทับใจ และแสดงถึงแนวโน้มที่ดีของแนวทางการฝึกแบบมัลติโหมด

กรณีการใช้งานของ GPT-4o มีอะไรบ้าง?

1. GPT-4o สำหรับการวิเคราะห์ข้อมูลและงานโค้ดดิ้ง

โมเดล GPT รุ่นใหม่ ๆ และอนุพันธ์อย่าง GitHub Copilot มีความสามารถในการช่วยเขียนโค้ดอยู่แล้ว รวมถึงเขียนโค้ด อธิบาย และแก้ข้อผิดพลาด ความสามารถแบบมัลติโหมดของ GPT-4o เปิดโอกาสที่น่าสนใจ

ในวิดีโอโปรโมตที่โฮสต์โดย Mira Murati CTO ของ OpenAI นักวิจัยสองคนของ OpenAI คือ Mark Chen และ Barret Zoph สาธิตการใช้ GPT-4o ทำงานกับโค้ด Python

โค้ดถูกส่งให้ GPT เป็นข้อความ และใช้ฟีเจอร์โต้ตอบด้วยเสียงเพื่อให้ GPT อธิบายโค้ด ภายหลังเมื่อรันโค้ดแล้ว ความสามารถด้านการมองเห็นของ GPT-4o ถูกใช้เพื่ออธิบายกราฟ

โดยรวมแล้ว การแสดงหน้าจอให้ ChatGPT ดูและถามด้วยเสียง อาจเป็นเวิร์กโฟลว์ที่ง่ายกว่าการบันทึกกราฟเป็นไฟล์รูปภาพ อัปโหลดขึ้น ChatGPT แล้วพิมพ์คำถาม

2. GPT-4o สำหรับการแปลแบบเรียลไทม์

เตรียมพา GPT-4o ไปท่องเที่ยวได้เลย ความสามารถด้านคำพูดที่มีความหน่วงต่ำของ GPT-4o ทำให้การแปลแบบเรียลไทม์เป็นไปได้แล้ว (หากมีดาต้าโรมมิ่งในแพ็กเกจมือถือ!) นั่นหมายความว่าการเดินทางในประเทศที่ไม่รู้ภาษา จะง่ายขึ้นมาก

3. สวมบทบาทกับ GPT-4o

ChatGPT มีประโยชน์กับการสวมบทบาทมาสักพักแล้ว ไม่ว่าจะเป็นการเตรียมสัมภาษณ์งานในสายข้อมูลที่ใฝ่ฝัน หรือฝึกทีมขายให้ขายผลิตภัณฑ์ได้ดีขึ้น

จนถึงตอนนี้ มันทำงานได้ดีที่สุดกับการสวมบทบาทด้วยข้อความเท่านั้น ซึ่งไม่เหมาะนักสำหรับกรณีเหล่านั้น ความสามารถด้านคำพูดที่ดีขึ้นหมายความว่าการสวมบทบาทด้วยเสียงเป็นทางเลือกที่ใช้ได้จริงแล้ว

4. GPT-4o เพื่อช่วยผู้ใช้ที่มีความบกพร่องทางการมองเห็น

ความสามารถของ GPT-4o ในการเข้าใจวิดีโอจากกล้องและบรรยายฉากด้วยเสียง อาจเป็นฟีเจอร์ที่ต้องมีสำหรับผู้บกพร่องทางการมองเห็น โดยพื้นฐานแล้วคล้ายฟีเจอร์บรรยายเสียงที่ทีวีมี แต่สำหรับโลกจริง

ลองใช้งาน GPT-4o ด้วยตนเอง

ได้เข้าถึงคุณสมบัติใหม่บางอย่างของ GPT-4o ตั้งแต่หลังประกาศไม่นาน (น่าเสียดายที่ยังไม่มีแชทเสียง) และรู้สึกประทับใจกับเอาต์พุตหลายอย่าง คำตอบดูเร็วและสม่ำเสมอขึ้น และดูเหมือนจะเข้าใจคำขอได้ดีกว่าเดิม แม้ว่าจะยังไม่สมบูรณ์แบบก็ตาม

นี่คือตัวอย่างบางส่วนของการโต้ตอบกับ ChatGPT-4o:

งานวิเคราะห์ข้อมูล

เริ่มแรก ใช้แชทเสียง ถามว่ามีไอเดียอย่างไรในการวิเคราะห์ผลงานของสโมสรฟุตบอลที่เชียร์ คือ Leeds United ที่ยิ่งใหญ่ นอกจากให้ตัวเลือกหลายอย่างแล้ว ยังให้ตัวอย่างโค้ด Python มาด้วย:

import pandas as pd

# Sample data for Leeds United's match results
data = {
    'Match': ['Match1', 'Match2', 'Match3', 'Match4', 'Match5'],
    'Result': ['Win', 'Draw', 'Loss', 'Win', 'Win'],
    'Goals Scored': [2, 1, 0, 3, 2]
}

# Create a DataFrame
df = pd.DataFrame(data)

# Summarize match results
summary = df['Result'].value_counts()
total_goals = df['Goals Scored'].sum()
average_goals = df['Goals Scored'].mean()

# Display summary
print("Match Results Summary:")
print(summary)
print("\nTotal Goals Scored:", total_goals)
print("Average Goals Per Match:", round(average_goals, 2))

การสร้างโค้ดด้วย GPT-4o

อย่างไรก็ตาม เมื่อเจาะลึกแนวคิดนี้มากขึ้น สิ่งต่าง ๆ ก็เริ่มเพี้ยน ถามหาข้อมูลจริงมาใช้—มันค้นเว็บและพบแหล่งข้อมูลที่ดีสองแหล่ง แต่รายงานสถิติผิด Leeds เล่น 46 นัดในฤดูกาลปกติ ยิงได้ 81 ประตู ผลต่างประตูได้เสียนั้น +38 ไม่ใช่ 40 นัดอย่างที่ระบุไว้ในคำตอบ

จากนั้นขอให้ ChatGPT สร้างภาพรวมจำนวนประตูที่ยิงใส่แต่ละทีม:

การแสดงภาพข้อมูลด้วย GPT-4o

อีกครั้งที่งานสำเร็จแค่ครึ่งเดียว มันสร้างภาพตามที่ร้องขอ ซึ่งดูดีบนผิวเผิน แต่ในความเป็นจริง ข้อมูลจำนวนมากถูกแต่งขึ้นและไม่ถูกต้อง (ทีมซ้ำ ประตูไม่ครบ และทีมที่ไม่ได้อยู่ดิวิชันเดียวกับ Leeds)

โดยความยุติธรรม คาดว่าประสิทธิภาพจะดีกว่านี้หากให้ชุดข้อมูลเต็มด้วยตนเอง แต่ก็อยากให้มันบอกเช่นนั้น แทนการพูดอย่างมั่นใจทั้งที่แต่งคำตอบ

การวิเคราะห์ภาพ

ต่อมา ขอให้ GPT-4o วิเคราะห์รูปต้นไม้ต้นหนึ่งของตัวเอง ขณะนี้ยังไม่มีสิทธิ์ใช้ฟีเจอร์วิชั่นแบบบูรณาการ จึงต้องถ่ายรูปและถาม ChatGPT ว่าพืชชนิดใด:

การวิเคราะห์ภาพของ GPT-4o

ถือว่าไม่เลว แม้จะไม่แม่นยำนัก จริง ๆ แล้วเป็นบอนไซ แต่เป็น Ilex crenata ไม่ใช่ Carmona retusa อย่างไรก็ตาม ทั้งสองดูคล้ายกันมาก จึงเป็นความผิดพลาดที่เข้าใจได้ และชื่นชมที่ให้บริบทเพิ่มเติมเกี่ยวกับการดูแลต้นไม้

การสร้างภาพ

สุดท้าย ต้องการทดสอบความสามารถด้านภาพของโมเดลใหม่ แสดงรูปเต่าบกชื่อ Darwin และให้มันบอกเกี่ยวกับเพื่อนตัวนี้:

การวิเคราะห์ภาพของ GPT-4o 2

อีกครั้งที่ใกล้เคียงแต่ไม่สมบูรณ์ Darwin แท้จริงเป็นเต่า Horsefield ไม่ใช่ Hermann’s แต่ทั้งสองดูคล้ายกันมาก จากนั้นขอให้ ChatGPT-4o นำภาพต้นฉบับไปสร้างใหม่ในสไตล์โฮคุไซ ได้ผลลัพธ์ดังนี้:

การสร้างภาพด้วย GPT-4o

ถือว่าดีทีเดียว แม้จะไม่ค่อยเหมือนภาพต้นฉบับนัก แต่ก็พอเข้าใจได้ ทั้งยังใช้เวลาสร้างนานเล็กน้อยด้วย

โดยรวมแล้ว ประทับใจกับความตอบสนองของโมเดลใหม่และความเข้าใจคำขอที่ดีขึ้น ยังห่างไกลจากความไร้ที่ติ และยังมีอาการแต่งข้อมูลอย่างมั่นใจอยู่บ้าง แต่แทบรอไม่ไหวที่จะได้ลองใช้ฟีเจอร์คำพูดและวิชั่นแบบบูรณาการที่ดีขึ้น

ข้อจำกัดและความเสี่ยงของ GPT-4o

กฎระเบียบสำหรับ AI สร้างสรรค์ยังอยู่ในระยะเริ่มต้น EU AI Act เป็นกรอบกฎหมายที่โดดเด่นเพียงฉบับเดียวในขณะนี้ นั่นหมายความว่าบริษัทที่สร้าง AI ต้องตัดสินใจเองบางส่วนว่าอะไรคือ AI ที่ปลอดภัย

OpenAI มี กรอบความพร้อม ที่ใช้พิจารณาว่าโมเดลใหม่พร้อมจะปล่อยสู่สาธารณะหรือไม่

กรอบนี้ทดสอบสี่ประเด็นที่น่ากังวล

  • ความมั่นคงปลอดภัยไซเบอร์ AI ช่วยเพิ่มผลิตภาพของอาชญากรไซเบอร์และช่วยสร้างช่องโหว่ได้หรือไม่
  • BCRN AI ช่วยผู้เชี่ยวชาญสร้างภัยคุกคามทางชีวภาพ เคมี รังสี หรือ นิวเคลียร์ได้หรือไม่
  • การชักจูง AI สร้างเนื้อหา (ที่อาจโต้ตอบได้) เพื่อชักจูงให้ผู้คนเปลี่ยนความเชื่อได้หรือไม่
  • ความเป็นอิสระของโมเดล AI ทำหน้าที่เป็นเอเจนต์ ดำเนินการกับซอฟต์แวร์อื่นได้หรือไม่

แต่ละประเด็นถูกจัดระดับเป็น ต่ำ ปานกลาง สูง หรือ วิกฤต และคะแนนของโมเดลคือระดับสูงสุดที่ได้ในสี่หมวด

OpenAI ให้สัญญาว่าจะไม่ปล่อยโมเดลที่อยู่ในระดับน่ากังวลอย่างวิกฤต แม้เกณฑ์ความปลอดภัยนี้จะค่อนข้างต่ำ: ตามนิยาม ระดับวิกฤตสอดคล้องกับสิ่งที่จะพลิกโฉมอารยธรรมมนุษย์ GPT-4o หลีกเลี่ยงได้สบาย ๆ โดยได้ระดับความกังวลปานกลาง

เอาต์พุตไม่สมบูรณ์แบบ

เช่นเดียวกับ AI สร้างสรรค์ทั้งหมด โมเดลไม่ได้ทำงานตามที่ตั้งใจไว้เสมอไป วิชันคอมพิวเตอร์ไม่ได้สมบูรณ์แบบ การตีความภาพหรือวิดีโอจึงไม่รับประกันว่าจะทำงานได้

ในทำนองเดียวกัน การถอดความคำพูดแทบไม่เคยถูกต้อง 100% โดยเฉพาะหากผู้พูดมีสำเนียงจัดหรือใช้คำเทคนิค

OpenAI จัดวิดีโอบางช็อตที่ GPT-4o ทำงานไม่เป็นไปตามที่ตั้งใจ

ที่น่าสังเกตคือ การแปลระหว่างสองภาษาที่ไม่ใช่ภาษาอังกฤษเป็นหนึ่งในกรณีที่ล้มเหลว ปัญหาอื่น ๆ รวมถึงน้ำเสียงไม่เหมาะสม (ดูแคลน) และพูดภาษาผิด

ความเสี่ยงของดีพเฟกลเสียงที่เร่งตัว

ประกาศของ OpenAI ระบุว่า "ตระหนักว่าความสามารถด้านเสียงของ GPT-4o ก่อให้เกิดความเสี่ยงรูปแบบใหม่หลากหลาย" ในหลายด้าน GPT-4o สามารถเร่งการเพิ่มขึ้นของ สายหลอกลวงด้วยดีพเฟก ที่ AI เลียนเสียงคนดัง นักการเมือง และเพื่อนหรือครอบครัวของผู้คน นี่เป็นปัญหาที่จะแย่ลงก่อนจะถูกแก้ และ GPT-4o มีพลังทำให้สายหลอกลวงด้วยดีพเฟกน่าเชื่อยิ่งขึ้น

เพื่อบรรเทาความเสี่ยงนี้ เอาต์พุตเสียงจึงเปิดใช้ได้เฉพาะชุดเสียงสำเร็จรูปบางแบบ

เป็นไปได้ว่านักต้มตุ๋นที่เชี่ยวชาญเทคนิคจะใช้ GPT-4o เพื่อสร้างเอาต์พุตเป็นข้อความ แล้วใช้โมเดลแปลงข้อความเป็นเสียงของตนเอง แม้ยังไม่ชัดเจนว่าจะยังคงได้ประโยชน์ด้านความหน่วงต่ำและน้ำเสียงที่ GPT-4o มอบให้หรือไม่

กำหนดการปล่อย GPT-4o

ณ วันที่ 19 กรกฎาคม 2024 คุณสมบัติหลายอย่างของ GPT-4o ได้ทยอยเปิดใช้งานแล้ว ความสามารถด้านข้อความและภาพถูกเพิ่มให้กับผู้ใช้จำนวนมากในแผน Plus และแผนฟรี รวมถึง ChatGPT บนเบราว์เซอร์มือถือ เช่นเดียวกัน ฟีเจอร์ข้อความและวิชั่นของ GPT-4o พร้อมใช้งานผ่าน API แล้ว

คุณสมบัติเหล่านี้ของ GPT-4o พร้อมใช้งานอย่างกว้างขวางบนแอปมือถือ iOS และ Android อย่างไรก็ตาม ยังรอโหมดเสียงแบบใหม่ที่จะอัปเดตให้ใช้ GPT-4o, API จะเพิ่มความสามารถด้านเสียงและวิดีโอสำหรับ GPT-4o และโมเดลใหม่จะใช้ได้บน Mac Desktop การเข้าถึงอย่างหลังนี้กำลังทยอยปล่อยให้ผู้ใช้ Plus และวางแผนมีแอปเดสก์ท็อปสำหรับ Windows ภายในปีนี้

ด้านล่างเป็นสรุปกำหนดการปล่อย GPT-4o:

  • ประกาศ GPT-4o: 13 พฤษภาคม 2024
  • ทยอยเปิดความสามารถด้านข้อความและภาพของ GPT-4o: เริ่ม 13 พฤษภาคม 2024
  • ความพร้อมใช้งานของ GPT-4o ในชั้นฟรีและผู้ใช้ Plus: เริ่ม 13 พฤษภาคม 2024
  • การเข้าถึง API สำหรับ GPT-4o (ข้อความและวิชั่น): เริ่ม 13 พฤษภาคม 2024
  • ความพร้อมใช้งานของ GPT-4o บนเดสก์ท็อป Mac สำหรับผู้ใช้ Plus: ภายในไม่กี่สัปดาห์ (เริ่ม 13 พฤษภาคม 2024)
  • เวอร์ชันใหม่ของโหมดเสียงที่ใช้ GPT-4o ในสถานะอัลฟา: ภายในไม่กี่สัปดาห์/เดือน (หลัง 13 พฤษภาคม 2024)
  • การรองรับ API สำหรับความสามารถด้านเสียงและวิดีโอ: ภายในไม่กี่สัปดาห์/เดือน (หลัง 13 พฤษภาคม 2024)
  • GPT-4o mini: 18 กรกฎาคม 2024

อย่างไรก็ตาม หลังจากข้อถกเถียงที่เกิดจากเดโมความสามารถด้านเสียงแบบใหม่ ดูเหมือน OpenAI จะระมัดระวังการปล่อยใช้งานมากขึ้น ตามบล็อกที่อัปเดตของพวกเขา 'ในช่วงสัปดาห์และเดือนข้างหน้า เราจะทำงานด้านโครงสร้างพื้นฐานทางเทคนิค การใช้งานได้จริงผ่านการฝึกหลังการเรียนรู้ และความปลอดภัยที่จำเป็นเพื่อปล่อยมัลติโหมดอื่น ๆ ตัวอย่างเช่น ตอนเปิดตัว เอาต์พุตเสียงจะจำกัดอยู่ที่เสียงสำเร็จรูปบางแบบและจะปฏิบัติตามนโยบายความปลอดภัยที่มีอยู่' 

GPT-4o มีค่าใช้จ่ายเท่าไร?

แม้จะเร็วกว่า GPT-4 Turbo และมีความสามารถด้านวิชั่นที่ดีกว่า แต่ GPT-4o จะมีราคาถูกกว่ารุ่นก่อนราว 50% ตามเว็บไซต์ของ OpenAI การใช้โมเดลจะมีค่าใช้จ่าย $5 ต่อหนึ่งล้านโทเค็นสำหรับอินพุต และ $15 ต่อหนึ่งล้านโทเค็นสำหรับเอาต์พุต

จะเข้าถึง GPT-4o บนเวอร์ชันเว็บของ ChatGPT ได้อย่างไร?

อินเทอร์เฟซผู้ใช้ของ ChatGPT เปลี่ยนไป ข้อความทั้งหมดใน ChatGPT จะใช้ GPT-4o เป็นค่าเริ่มต้น และสามารถสลับเป็น GPT-3.5 ได้ด้วยตัวเลือกสวิตช์ใต้คำตอบ

GPT-4o หมายถึงอนาคตอย่างไร?

มีสองแนวคิดเกี่ยวกับทิศทางที่ AI ควรมุ่งไป แนวหนึ่งคือ AI ควรทรงพลังขึ้นเรื่อย ๆ และทำงานได้กว้างขึ้น อีกแนวคือ AI ควรเก่งขึ้นในการแก้ปัญหาเฉพาะให้คุ้มค่าที่สุด

พันธกิจของ OpenAI ที่จะสร้างปัญญาทั่วไปเทียม (AGI) รวมถึงรูปแบบธุรกิจ วางตำแหน่งไว้อย่างชัดเจนในแนวทางแรก GPT-4o เป็นอีกก้าวสู่เป้าหมายของ AI ที่ทรงพลังยิ่งขึ้น

นี่เป็นเจเนอเรชันแรกของสถาปัตยกรรมโมเดลแบบใหม่ทั้งหมดสำหรับ OpenAI นั่นหมายความว่าบริษัทยังมีสิ่งให้เรียนรู้และปรับให้เหมาะสมอีกมากในเดือนต่อ ๆ ไป

ในระยะสั้น คาดว่าจะมีอาการแปลกใหม่และการแต่งข้อมูลรูปแบบใหม่ ๆ และในระยะยาว คาดว่าจะมีการปรับปรุงประสิทธิภาพ ทั้งด้านความเร็วและคุณภาพของผลลัพธ์

จังหวะเวลาของ GPT-4o น่าสนใจ ขณะที่บริษัทยักษ์ใหญ่ด้านเทคโนโลยีตระหนักว่า Siri, Alexa และ Google Assistant ไม่ใช่เครื่องทำเงินอย่างที่เคยหวัง OpenAI หวังทำให้ AI กลับมาพูดคุยได้อีกครั้ง ในกรณีที่ดีที่สุด สิ่งนี้จะนำพากรณีใช้งานใหม่ ๆ สำหรับ AI สร้างสรรค์ อย่างน้อยที่สุด ตอนนี้สามารถตั้งเวลาเป็นภาษาใดก็ได้ตามต้องการ

สรุป

GPT-4o แสดงถึงความก้าวหน้าเพิ่มเติมใน AI สร้างสรรค์ โดยผสานการประมวลผลข้อความ เสียง และภาพไว้ในโมเดลเดียวที่มีประสิทธิภาพ นวัตกรรมนี้สัญญาถึงการตอบสนองที่เร็วขึ้น ปฏิสัมพันธ์ที่ลึกซึ้งขึ้น และการใช้งานที่กว้างขึ้น ตั้งแต่การแปลแบบเรียลไทม์ไปจนถึงการวิเคราะห์ข้อมูลที่ดียิ่งขึ้นและการเข้าถึงที่ดีขึ้นสำหรับผู้บกพร่องทางการมองเห็น

แม้มีข้อจำกัดและความเสี่ยงเบื้องต้น เช่น การนำไปใช้ผิดวัตถุประสงค์ในสายหลอกลวงด้วยดีพเฟก และความจำเป็นต้องปรับแต่งเพิ่มเติม แต่ GPT-4o ก็เป็นอีกก้าวสู่เป้าหมาย AGI ของ OpenAI เมื่อเข้าถึงได้มากขึ้น GPT-4o อาจเปลี่ยนวิธีการโต้ตอบกับ AI ผสานเข้ากับงานประจำวันและงานอาชีพ

ด้วยต้นทุนที่ต่ำลงและความสามารถที่เพิ่มขึ้น GPT-4o พร้อมกำหนดมาตรฐานใหม่ในอุตสาหกรรม AI ขยายขอบเขตความเป็นไปได้ให้ผู้ใช้ในหลากหลายสาขา

อนาคตของ AI น่าตื่นเต้น และเวลานี้เหมาะที่สุดในการเริ่มเรียนรู้วิธีการทำงานของเทคโนโลยีนี้ หากยังใหม่ในสายนี้ เริ่มต้นด้วย เส้นทางทักษะ AI Fundamentals ที่ครอบคลุมความรู้เชิงปฏิบัติเกี่ยวกับหัวข้ออย่าง ChatGPT, โมเดลภาษาขนาดใหญ่, AI สร้างสรรค์ และอื่น ๆ นอกจากนี้ยังเรียนรู้เพิ่มเติมเกี่ยวกับ การทำงานกับ OpenAI API ในคอร์สแบบลงมือทำ หรือดู แคตตาล็อกคอร์ส AI แบบเต็ม ของเราได้

คำถามที่พบบ่อย

GPT-4o จัดการการสนทนาหลายภาษาได้หรือไม่?

ได้ GPT-4o จัดการการสนทนาหลายภาษาได้ ให้การแปลแบบเรียลไทม์ระหว่างภาษาได้ด้วยความสามารถด้านคำพูดที่มีความหน่วงต่ำ อย่างไรก็ตาม ในการสาธิตยังพบข้อผิดพลาดบางอย่างเมื่อประมวลผลการแปล

GPT-4o รองรับทุกภาษาได้ดีเท่ากันหรือไม่?

แม้ GPT-4o จะปรับปรุงการโทเค็นไนซ์สำหรับอักษรที่ไม่ใช่โรมัน แต่ประสิทธิภาพอาจแตกต่างกันไปตามภาษา โดยเฉพาะภาษาที่มีตัวแทนในข้อมูลฝึกน้อย

GPT-4o จัดการเสียงรบกวนพื้นหลังในอินพุตเสียงอย่างไร?

GPT-4o สามารถคำนึงถึงเสียงรบกวนพื้นหลังเมื่อประมวลผลอินพุตเสียง ซึ่งอาจนำไปสู่คำตอบที่ตระหนักบริบทมากขึ้น

GPT-4o สร้างวิดีโอได้หรือไม่?

ไม่ GPT-4o สามารถวิเคราะห์และบรรยายเนื้อหาวิดีโอได้ แต่ไม่สามารถสร้างวิดีโอใหม่ได้ Sora ของ OpenAI เป็นโมเดลที่สามารถสร้างวิดีโอ

GPT-4o เลียนเสียงเฉพาะบุคคลได้หรือไม่?

ไม่ GPT-4o ใช้ชุดเสียงสำเร็จรูปบางแบบสำหรับเอาต์พุตเสียงเพื่อบรรเทาความเสี่ยง เช่น สายหลอกลวงด้วยดีพเฟก

ข้อมูลที่ป้อนเข้า GPT-4o ปลอดภัยแค่ไหน?

OpenAI ปฏิบัติตามมาตรการความปลอดภัยที่เข้มงวด แต่ผู้ใช้ควรใช้ความระมัดระวังและหลีกเลี่ยงการแบ่งปันข้อมูลอ่อนไหวเสมอ

สามารถผสาน GPT-4o เข้ากับแอปที่มีอยู่แล้วได้หรือไม่?

ได้ GPT-4o สามารถผสานเข้ากับแอปพลิเคชันต่าง ๆ ผ่าน OpenAI API เพื่อเพิ่มความสามารถบนแพลตฟอร์มต่าง ๆ

เริ่มต้นเส้นทางพัฒนาแอปที่ขับเคลื่อนด้วย AI ด้วยคอร์ส Working with the OpenAI API

ควรใช้ GPT-4o Mini แทน GPT-4o เมื่อใด?

GPT-4o Mini เหมาะสำหรับงานที่ให้ความสำคัญกับความเร็วและประสิทธิภาพมากกว่าการให้เหตุผลที่ซับซ้อนหรือปฏิสัมพันธ์แบบมัลติโหมด เหมาะกับงานเขียนโค้ดง่าย ๆ การดีบัก หรือการตอบกลับอย่างรวดเร็วในแอปพลิเคชันที่เบา ทำให้เป็นทางเลือกที่คุ้มค่าสำหรับโปรเจกต์ที่ไม่ต้องใช้พลังเต็มรูปแบบของ GPT-4o

ความแตกต่างระหว่าง GPT-4o และโมเดล o1 คืออะไร?

GPT-4o ออกแบบมาสำหรับงานมัลติโหมด จัดการอินพุตข้อความ เสียง และภาพได้อย่างมีประสิทธิภาพ ขณะที่โมเดล o1 มุ่งเน้นการให้เหตุผลขั้นสูงและการแก้ปัญหาที่ซับซ้อน โดดเด่นในสาขาอย่างการเขียนโค้ดและวิทยาศาสตร์ GPT-4o มอบความอเนกประสงค์และความเร็ว ส่วนโมเดล o1 ให้ความสำคัญกับการประมวลผลเชิงตรรกะลึกซึ้งสำหรับงานให้เหตุผลที่ซับซ้อน

หัวข้อ
ปัญญาประดิษฐ์
OpenAI
ChatGPT

เรียนรู้การสร้างเครื่องมือ AI ด้วย OpenAI วันนี้!

Courses

การทำงานกับ OpenAI API

3 ชม.
172.6K
เริ่มต้นเส้นทางของคุณในการพัฒนาแอปพลิเคชันที่ขับเคลื่อนด้วย AI ด้วย OpenAI API. เรียนรู้ฟังก์ชันการทำงานที่เป็นพื้นฐานของแอป AI ยอดนิยมอย่าง ChatGPT
ดูรายละเอียดRight Arrow
เริ่มหลักสูตร
ดูเพิ่มเติมRight Arrow