PENGEMBANGAN MODEL CHATBOT DENGAN RETRIEVAL AUGMENTED GENERATION DAN FINE-TUNING BERBASIS LARGE LANGUAGE MODEL

2107412001, Muhamad Atsil Rifqi Riyansyah (2025) PENGEMBANGAN MODEL CHATBOT DENGAN RETRIEVAL AUGMENTED GENERATION DAN FINE-TUNING BERBASIS LARGE LANGUAGE MODEL. D4 thesis, Politeknik Negeri Jakarta.

[thumbnail of Judul, Pendahuluan, dan Penutup] Text (Judul, Pendahuluan, dan Penutup)
Halaman Identitas Skripsi.pdf

Download (2MB)
[thumbnail of Isi (Bab 2 s/d 4)] Text (Isi (Bab 2 s/d 4))
Isi.pdf
Restricted to Hanya Civitas Akademika PNJ

Download (2MB)
[thumbnail of Manuskrip Jurnal] Text (Manuskrip Jurnal)
Jurnal Multinetics_Muhamad Atsil Rifqi Riyansyah.pdf
Restricted to Hanya Staff Repositori

Download (577kB)

Abstrak

Penelitian ini bertujuan untuk mengembangkan sistem chatbot yang mampu memberikan informasi seputar Penerimaan Mahasiswa Baru (PMB) di Politeknik Negeri Jakarta (PNJ) dengan pendekatan berbasis Large Language Model (LLM). Dua metode utama dibandingkan dalam penelitian ini, yaitu Fine-Tuning dan Retrieval-Augmented Generation (RAG). Dataset berupa 188 pasang pertanyaan dan jawaban dikembangkan secara manual dari sumber resmi PMB dan digunakan untuk pelatihan model. Model TinyLLaMA 1B dan LLaMa 3.2 1B digunakan dalam eksperimen fine-tuning, sementara sistem RAG diintegrasikan dengan FAISS untuk pencarian informasi berbasis embedding. Evaluasi performa dilakukan menggunakan metrik BERTScore, UniEval, dan Human Evaluation. Hasil penelitian menunjukkan bahwa kombinasi metode RAG dan Fine-Tuning pada model LLaMa 3.2 1B memberikan performa terbaik dengan skor BERTScore F1 sebesar 94.84 dan skor UniEval rata-rata 76.54. Sistem chatbot juga menunjukkan konsistensi performa setelah diintegrasikan ke dalam sistem web. Temuan ini mengindikasikan bahwa integrasi retrieval dan fine-tuning dapat menghasilkan jawaban yang lebih relevan, akurat, dan mudah dipahami oleh pengguna.

Tipe Dokumen: Thesis / Skripsi / Tugas Akhir (D4)
Subjek: 000 - Komputer, Informasi dan Referensi Umum > 000 Ilmu komputer, ilmu pengetahuan dan sistem-sistem > 000 Ilmu komputer, informasi dan pekerjaan umum
000 - Komputer, Informasi dan Referensi Umum > 000 Ilmu komputer, ilmu pengetahuan dan sistem-sistem > 004 Pemrosesan data dan ilmu komputer
Bidang, Unit, atau Jurusan Yang Ditujukan: Teknik Informatika dan Komputer > Teknik Informatika D4
User ID Pengunggah: Muhamad Atsil Rifqi Riyansyah
Date Deposited: 14 Jul 2025 02:36
Last Modified: 14 Jul 2025 02:36
URI: https://repository.pnj.ac.id/id/eprint/27327

Actions (login required)

View Item
View Item