2107412001, Muhamad Atsil Rifqi Riyansyah (2025) PENGEMBANGAN MODEL CHATBOT DENGAN RETRIEVAL AUGMENTED GENERATION DAN FINE-TUNING BERBASIS LARGE LANGUAGE MODEL. D4 thesis, Politeknik Negeri Jakarta.
![[thumbnail of Judul, Pendahuluan, dan Penutup]](https://repository.pnj.ac.id/style/images/fileicons/text.png)
Halaman Identitas Skripsi.pdf
Download (2MB)
![[thumbnail of Isi (Bab 2 s/d 4)]](https://repository.pnj.ac.id/style/images/fileicons/text.png)
Isi.pdf
Restricted to Hanya Civitas Akademika PNJ
Download (2MB)
![[thumbnail of Manuskrip Jurnal]](https://repository.pnj.ac.id/style/images/fileicons/text.png)
Jurnal Multinetics_Muhamad Atsil Rifqi Riyansyah.pdf
Restricted to Hanya Staff Repositori
Download (577kB)
Abstrak
Penelitian ini bertujuan untuk mengembangkan sistem chatbot yang mampu memberikan informasi seputar Penerimaan Mahasiswa Baru (PMB) di Politeknik Negeri Jakarta (PNJ) dengan pendekatan berbasis Large Language Model (LLM). Dua metode utama dibandingkan dalam penelitian ini, yaitu Fine-Tuning dan Retrieval-Augmented Generation (RAG). Dataset berupa 188 pasang pertanyaan dan jawaban dikembangkan secara manual dari sumber resmi PMB dan digunakan untuk pelatihan model. Model TinyLLaMA 1B dan LLaMa 3.2 1B digunakan dalam eksperimen fine-tuning, sementara sistem RAG diintegrasikan dengan FAISS untuk pencarian informasi berbasis embedding. Evaluasi performa dilakukan menggunakan metrik BERTScore, UniEval, dan Human Evaluation. Hasil penelitian menunjukkan bahwa kombinasi metode RAG dan Fine-Tuning pada model LLaMa 3.2 1B memberikan performa terbaik dengan skor BERTScore F1 sebesar 94.84 dan skor UniEval rata-rata 76.54. Sistem chatbot juga menunjukkan konsistensi performa setelah diintegrasikan ke dalam sistem web. Temuan ini mengindikasikan bahwa integrasi retrieval dan fine-tuning dapat menghasilkan jawaban yang lebih relevan, akurat, dan mudah dipahami oleh pengguna.
Tipe Dokumen: | Thesis / Skripsi / Tugas Akhir (D4) |
---|---|
Subjek: | 000 - Komputer, Informasi dan Referensi Umum > 000 Ilmu komputer, ilmu pengetahuan dan sistem-sistem > 000 Ilmu komputer, informasi dan pekerjaan umum 000 - Komputer, Informasi dan Referensi Umum > 000 Ilmu komputer, ilmu pengetahuan dan sistem-sistem > 004 Pemrosesan data dan ilmu komputer |
Bidang, Unit, atau Jurusan Yang Ditujukan: | Teknik Informatika dan Komputer > Teknik Informatika D4 |
User ID Pengunggah: | Muhamad Atsil Rifqi Riyansyah |
Date Deposited: | 14 Jul 2025 02:36 |
Last Modified: | 14 Jul 2025 02:36 |
URI: | https://repository.pnj.ac.id/id/eprint/27327 |