Build your ultimate AI agent
Deskripsi Kursus
Pelajari cara beralih dari pemanggilan LLM sederhana ke alur kerja RAG multi-modal dengan Weaviate! Anda akan memproses dokumen PDF untuk mengekstrak konten teks utama seperti paragraf, judul, dan tabel. Anda akan melakukan embedding dan menyimpan data ini untuk pengambilan kembali dengan Weaviate. Terakhir, Anda akan menyusun prompt pengambilan yang efektif untuk diteruskan ke model generatif. Sebagai penutup, Anda akan memperlakukan PDF sebagai gambar agar dapat menangkap konteks yang hilang dari gambar dan plot. Anda akan menggunakan model embedding multi-modal ColPali bersama model generatif multi-modal dari OpenAI untuk mulai melakukan percakapan dengan gambar dan dokumen!
Prasyarat
Kurikulum
Garis besar kursus
1
Dasar-dasar RAG dengan Weaviate
Temukan bagaimana Weaviate mendukung aplikasi RAG! Anda akan membangun alur kerja RAG ujung-ke-ujung secara manual untuk memahami langkah-langkah Retrieval-Augmentation-Generation. Pemahaman ini akan memungkinkan alur kerja RAG yang tangguh dan teroptimasi di Bab 2 menggunakan Weaviate.
2
RAG Ujung-ke-Ujung dengan Weaviate
Walaupun menulis kode alur kerja RAG secara manual itu menyenangkan, Anda bisa jadi melewatkan optimasi yang disediakan oleh alat seperti Weaviate. Di bab ini, Anda akan melakukan embedding, penyimpanan, pengambilan, dan pembuatan respons semuanya menggunakan Weaviate!
3
RAG Multi-Modal
Di bab sebelumnya, Anda menggunakan konten teks dari dokumen PDF untuk membangun potongan dokumen, namun meninggalkan konten gambar. Hal ini menyebabkan banyak konteks hilang yang sebenarnya bermanfaat untuk pengambilan dan generasi! Di bab ini, Anda akan menggunakan model multi-modal ColPali untuk melakukan embedding dan menghasilkan teks serta gambar guna memberikan lebih banyak konteks bagi respons model Anda.
RAG Ujung-ke-Ujung dengan Weaviate
Kursus
Selesai
