Kursus
Perilisan GPT-4 menandai tonggak penting dalam bidang kecerdasan buatan, khususnya dalam pemrosesan bahasa alami. Dalam artikel ini, kami menyajikan analisis menyeluruh tentang kemampuan lanjutannya dan menelusuri sejarah serta pengembangan Generative Pre-trained Transformers (GPT), beserta kemampuan baru yang dihadirkan GPT-4.
Lihat artikel kami tentang GPT-4o, iterasi terbaru GPT, untuk mengetahui lebih lanjut. Selain itu, pelajari lebih lanjut tentang Large Language Model seperti GPT-4 di AI Fundamentals Track kami.
Apa itu Generative Pre-trained Transformers?
Generative Pre-trained Transformers (GPT) adalah jenis model deep learning yang digunakan untuk menghasilkan teks menyerupai manusia. Penggunaan umumnya mencakup
- menjawab pertanyaan
- meringkas teks
- menerjemahkan teks ke bahasa lain
- menghasilkan kode
- menghasilkan posting blog, cerita, percakapan, dan jenis konten lainnya.
Ada banyak sekali aplikasi untuk model GPT, dan Anda bahkan dapat melakukan fine-tuning pada data spesifik untuk memperoleh hasil yang lebih baik. Dengan menggunakan transformer, Anda akan menghemat biaya komputasi, waktu, dan sumber daya lainnya.
Sebelum GPT
Revolusi AI saat ini untuk bahasa alami baru menjadi mungkin berkat penemuan model transformer, dimulai dengan BERT dari Google pada 2017. Sebelumnya, generasi teks dilakukan dengan model deep learning lain, seperti jaringan saraf rekursif (RNN) dan jaringan saraf long short-term memory (LSTM). Model-model ini bekerja baik untuk menghasilkan kata tunggal atau frasa pendek, tetapi tidak dapat menghasilkan konten panjang yang realistis.
Pendekatan transformer BERT merupakan terobosan besar karena bukan teknik pembelajaran terawasi. Artinya, BERT tidak memerlukan dataset beranotasi yang mahal untuk melatihnya. BERT digunakan oleh Google untuk menafsirkan penelusuran bahasa alami, namun tidak dapat menghasilkan teks dari sebuah prompt.
GPT-1

Arsitektur transformer | Paper GPT-1
Pada 2018, OpenAI menerbitkan sebuah paper (Improving Language Understanding by Generative Pre-Training) tentang pemahaman bahasa alami menggunakan model bahasa GPT-1 mereka. Model ini merupakan bukti konsep dan tidak dirilis secara publik.
GPT-2

Kinerja model pada berbagai tugas | Paper GPT-2
Tahun berikutnya, OpenAI menerbitkan paper lain (Language Models are Unsupervised Multitask Learners) tentang model terbaru mereka, GPT-2. Kali ini, model tersebut tersedia bagi komunitas machine learning dan mulai diadopsi untuk tugas generasi teks. GPT-2 sering kali dapat menghasilkan beberapa kalimat sebelum mulai menyimpang. Ini merupakan state-of-the-art pada 2019.
GPT-3

Hasil pada tiga tugas Open-Domain QA | Paper GPT-3
Pada 2020, OpenAI menerbitkan paper lain (Language Models are Few-Shot Learners) tentang model GPT-3 mereka. Model ini memiliki 100 kali lebih banyak parameter dibanding GPT-2 dan dilatih pada dataset teks yang lebih besar lagi, menghasilkan kinerja model yang lebih baik. Model ini terus disempurnakan dengan berbagai iterasi yang dikenal sebagai seri GPT-3.5, termasuk ChatGPT yang berfokus pada percakapan.
Versi ini menggemparkan dunia setelah mengejutkan banyak orang dengan kemampuannya menghasilkan halaman demi halaman teks menyerupai manusia. ChatGPT menjadi aplikasi web dengan pertumbuhan tercepat dalam sejarah, mencapai 100 juta pengguna hanya dalam dua bulan.
Anda dapat mempelajari lebih lanjut tentang GPT-3, penggunaannya, dan cara menggunakannya dalam artikel terpisah.
Apa itu GPT-4?
GPT-4 dikembangkan untuk meningkatkan "alignment" model—kemampuan mengikuti maksud pengguna sekaligus membuatnya lebih faktual serta menghasilkan keluaran yang lebih sedikit menyinggung atau berbahaya.
Untuk tetap mendapatkan pembaruan tentang model terbaru, Anda dapat melihat panduan kami tentang GPT-4 Turbo dan artikel GPT-4o kami untuk rincian lebih lanjut.
Peningkatan kinerja GPT-4
Seperti yang dapat Anda harapkan, GPT-4 meningkatkan ketepatan faktual jawaban dibanding model GPT-3.5. Jumlah "halusinasi", ketika model membuat kesalahan fakta atau penalaran, lebih rendah, dengan GPT-4 mencetak 40% lebih tinggi daripada GPT-3.5 pada tolok ukur kinerja faktual internal OpenAI.
GPT-4 juga meningkatkan "steerability", yaitu kemampuan mengubah perilaku sesuai permintaan pengguna. Misalnya, Anda dapat memintanya menulis dalam gaya, nada, atau suara yang berbeda. Coba mulai prompt dengan "Anda adalah pakar data yang cerewet" atau "Anda adalah pakar data yang ringkas" dan minta ia menjelaskan suatu konsep data science kepada Anda. Anda dapat membaca lebih lanjut tentang merancang prompt yang bagus untuk model GPT di sini.
Peningkatan lain adalah kepatuhan model terhadap guardrail. Jika Anda memintanya melakukan sesuatu yang ilegal atau tidak pantas, model lebih baik dalam menolak permintaan tersebut.
Menggunakan input visual di GPT-4
Salah satu perubahan besar adalah GPT-4 dapat menggunakan input gambar (hanya pratinjau riset; belum tersedia untuk publik) selain teks. Pengguna dapat menentukan tugas visi atau bahasa apa pun dengan memasukkan teks dan gambar secara berselang-seling.
Contoh yang ditampilkan menyoroti GPT-4 yang mampu menafsirkan gambar kompleks dengan benar seperti bagan, meme, dan tangkapan layar dari makalah akademik.
Per Juni 2024, kemampuan input gambar GPT-4 telah tersedia untuk kelompok pengguna yang lebih luas. Misalnya, saya meminta GPT-4o menganalisis foto salah satu tanaman saya. Dan, meskipun saya masih belum memiliki akses ke fitur visi terintegrasi seperti di GPT-4o, saya harus mengambil foto dan meminta ChatGPT tanaman apa itu:

Ini bukan upaya yang buruk, meskipun belum sepenuhnya akurat. Meskipun memang pohon bonsai, itu adalah Ilex crenata, bukan Carmona retusa. Namun, keduanya terlihat cukup mirip sehingga mudah tertukar dan saya menghargai konteks tambahan tentang cara merawat tanaman tersebut.
Di bawah ini, kita juga dapat melihat contoh penalaran visual dari sebuah bagan:


Tolok Ukur Kinerja GPT-4
OpenAI mengevaluasi GPT-4 dengan mensimulasikan ujian yang dirancang untuk manusia, seperti Uniform Bar Examination dan LSAT untuk pengacara, serta SAT untuk penerimaan universitas. Hasilnya menunjukkan bahwa GPT-4 mencapai kinerja setingkat manusia pada berbagai tolok ukur profesional dan akademis.

OpenAI juga mengevaluasi GPT-4 pada tolok ukur tradisional yang dirancang untuk model machine learning, di mana GPT-4 melampaui model bahasa besar yang ada dan sebagian besar model mutakhir lainnya yang mungkin mencakup perancangan khusus tolok ukur atau protokol pelatihan tambahan. Tolok ukur ini mencakup pertanyaan pilihan ganda di 57 mata pelajaran, penalaran akal sehat tentang peristiwa sehari-hari, pertanyaan sains pilihan ganda tingkat sekolah dasar, dan lainnya.
OpenAI menguji kemampuan GPT-4 dalam bahasa lain dengan menerjemahkan tolok ukur MMLU, seperangkat 14.000 soal pilihan ganda yang mencakup 57 mata pelajaran, ke berbagai bahasa menggunakan Azure Translate. Pada 24 dari 26 bahasa yang diuji, GPT-4 melampaui kinerja berbahasa Inggris GPT-3.5 dan model bahasa besar lainnya.
Pengujian terbaru menunjukkan bahwa GPT-4 terus unggul dalam kemampuan multibahasa, khususnya pada bahasa yang kurang terwakili, menunjukkan kinerja superior pada 28 dari 30 bahasa yang diuji terhadap model-model terbaru.
Secara keseluruhan, hasil GPT-4 yang lebih terukur menunjukkan kemajuan signifikan dalam upaya OpenAI mengembangkan model AI dengan kemampuan yang semakin maju.
Cara Mengakses GPT-4 dan Variannya
Ingin memanfaatkan kekuatan GPT-4, GPT-4 Turbo, GPT-4o, dan GPT-4o mini? Berikut caranya:
Menggunakan ChatGPT
- Gratis:
- Akses GPT-4o secara default, dengan batas pesan terbatas.
- Alat tingkat lanjut seperti analisis data dan kemampuan visi juga tersedia.
- ChatGPT Plus dan Team:
- Berlangganan Plus atau bergabung dengan Team untuk batas penggunaan yang lebih besar.
- Kirim hingga 80 pesan setiap 3 jam di GPT-4o dan hingga 40 di GPT-4.
- ChatGPT Enterprise:
- Dirancang untuk organisasi besar dengan akses tak terbatas ke GPT-4o dan GPT-4.
- Mencakup fitur tambahan seperti keamanan kelas perusahaan dan alat tingkat lanjut.
Menggunakan OpenAI API
- Akses API:
- Daftar akun OpenAI API.
- Lakukan pembayaran $5 untuk mengakses GPT-4 dan GPT-4 Turbo.
- GPT-4o dan GPT-4o mini tersedia bagi semua pengguna API.
- Harga dan Batas:
- GPT-4o lebih murah dan lebih cepat daripada GPT-4 Turbo.
- Periksa halaman harga API OpenAI untuk detailnya.
- Penanganan Data:
- Data Anda aman dan tidak digunakan untuk pelatihan kecuali Anda ikut serta (opt-in).
Kemampuan Model: Semua model mendukung input/output teks, gambar, dan audio.
OpenAI telah membuka sumber OpenAI Evals, kerangka kerja untuk evaluasi otomatis kinerja model AI, agar siapa pun dapat melaporkan kekurangan dalam model mereka dan memandu peningkatan lebih lanjut.
Tingkatkan ke Level Berikutnya
Sambil menunggu, Anda dapat belajar AI dan membaca lebih lanjut tentang topik seperti GPT-4 dan ChatGPT melalui sumber berikut:
- Kursus cara menggunakan ChatGPT secara efektif
- Pelajari cara membuat model generasi teks deep learning Anda sendiri di kursus Natural Language Generation in Python.
- Unduh lembar contekan prompt ChatGPT untuk data science yang praktis ini.
- Dengarkan episode podcast tentang Bagaimana ChatGPT dan GPT-3 Meningkatkan Alur Kerja untuk memahami bagaimana ChatGPT dapat menguntungkan bisnis Anda.
- Lihat semua kursus AI DataCamp
FAQ
Apa itu GPT-4?
GPT-4 adalah versi terbaru dari Generative Pre-trained Transformers, jenis model deep learning yang digunakan untuk pemrosesan bahasa alami dan generasi teks. Ini menandai tonggak penting dalam bidang kecerdasan buatan, khususnya dalam pemrosesan bahasa alami.
Apa saja kemampuan model GPT?
Model GPT dapat menghasilkan teks menyerupai manusia, menjawab pertanyaan, meringkas teks, menerjemahkan teks ke bahasa lain, menghasilkan kode, dan menghasilkan berbagai jenis konten seperti posting blog, cerita, dan percakapan.
Bagaimana sejarah model GPT?
Model GPT dimungkinkan oleh penemuan model transformer, dimulai dengan BERT dari Google pada 2017. Sebelumnya, generasi teks dilakukan dengan model deep learning lain, seperti jaringan saraf rekursif (RNN) dan jaringan saraf long short-term memory (LSTM).
Bagaimana GPT-4 meningkatkan model sebelumnya?
GPT-4 meningkatkan "alignment" model—kemampuan mengikuti maksud pengguna—sekaligus membuatnya lebih faktual dan menghasilkan keluaran yang lebih sedikit menyinggung atau berbahaya. GPT-4 juga meningkatkan ketepatan faktual dan "steerability", yaitu kemampuan mengubah perilaku sesuai permintaan pengguna. Selain itu, GPT-4 dapat menggunakan input gambar selain teks.
Bagaimana kinerja GPT-4 pada tolok ukur?
GPT-4 mencapai kinerja setingkat manusia pada berbagai tolok ukur profesional dan akademis, termasuk Uniform Bar Examination dan LSAT untuk pengacara, serta SAT untuk penerimaan universitas. GPT-4 juga melampaui model bahasa besar yang ada dan sebagian besar model mutakhir pada tolok ukur machine learning tradisional.
Sebagai data scientist tersertifikasi, saya bersemangat memanfaatkan teknologi mutakhir untuk menciptakan aplikasi machine learning yang inovatif. Dengan latar belakang kuat di pengenalan ucapan, analisis dan pelaporan data, MLOps, conversational AI, dan NLP, saya mengasah keterampilan dalam mengembangkan sistem cerdas yang berdampak nyata. Selain keahlian teknis, saya juga komunikator andal yang mampu menyederhanakan konsep kompleks menjadi bahasa yang jelas dan ringkas. Karena itu, saya menjadi blogger yang dicari di bidang data science, membagikan wawasan dan pengalaman kepada komunitas profesional data yang terus berkembang. Saat ini, saya berfokus pada pembuatan dan penyuntingan konten, bekerja dengan large language model untuk mengembangkan konten yang kuat dan menarik agar membantu bisnis dan individu memaksimalkan data mereka.

