UNESAUNESA
Journal of Informatics and Computer Science (JINACS)Journal of Informatics and Computer Science (JINACS)Akses informasi akademik di Universitas Negeri Surabaya (UNESA) melalui website panduan saat ini dinilai belum optimal karena kurangnya interaktivitas, sehingga mahasiswa seringkali harus menghubungi pihak administrasi secara langsung. Penelitian ini bertujuan untuk melakukan evaluasi kinerja Retrieval-Augmented Generation (RAG), yaitu RAG Klasik guna menguji kinerja sistem dalam menghasilkan respon yang relevan, akurat, dan kontekstual pada chatbot akademik. Lingkup penelitian ini difokuskan pada pengujian evaluasi kinerja dan efisiensi metode tersebut dalam mengolah data multimodal yang bersumber dari portal SSO UNESA, mencakup format teks, gambar, dan dokumen PDF.
Penelitian ini menyimpulkan bahwa RAG Klasik sangat ideal untuk informasi prosedural yang membutuhkan respon instan meskipun memiliki keterbatasan dalam pemahaman semantic yang mendalam.Hasil penelitian menunjukkan bahwa RAG Klasik memiliki efisiensi luar biasa dengan waktu respon rata-rata dibawah 0,01 detik.Namun, dari sisi kinerja, metode ini sangat bergantung pada kualitas pelabelan.
Berdasarkan hasil penelitian, terdapat beberapa arah pengembangan penelitian lanjutan yang menarik untuk dieksplorasi. Pertama, penelitian selanjutnya dapat menginvestigasi potensi penggabungan RAG Klasik dengan model bahasa generatif yang lebih canggih, seperti model berbasis transformer, untuk meningkatkan kemampuan pemahaman konteks dan menghasilkan jawaban yang lebih akurat dan relevan. Kedua, perlu dilakukan penelitian lebih lanjut mengenai strategi pelabelan data multimodal yang optimal, termasuk eksplorasi teknik semi-supervised learning atau active learning untuk mengurangi kebutuhan akan pelabelan manual yang intensif. Ketiga, pengembangan sistem dapat difokuskan pada integrasi dengan sumber data akademik yang lebih luas, seperti repositori skripsi dan disertasi, untuk memperkaya basis pengetahuan chatbot dan meningkatkan kemampuannya dalam menjawab pertanyaan-pertanyaan yang lebih kompleks.
- [2302.13971] LLaMA: Open and Efficient Foundation Language Models. llama open efficient foundation language... arxiv.org/abs/2302.139712302 13971 LLaMA Open and Efficient Foundation Language Models llama open efficient foundation language arxiv abs 2302 13971
- Integration Of NLP-Based Chatbot On University Academic Service System | Jurnal Komputer. integration... jurnal.geinrafflesia.com/index.php/JK/article/view/110Integration Of NLP Based Chatbot On University Academic Service System Jurnal Komputer integration jurnal geinrafflesia index php JK article view 110
- PERBANDINGAN KINERJA WORD EMBEDDING WORD2VEC, GLOVE, DAN FASTTEXT PADA KLASIFIKASI TEKS | Nurdin | Jurnal... ejurnal.teknokrat.ac.id/index.php/teknokompak/article/view/732PERBANDINGAN KINERJA WORD EMBEDDING WORD2VEC GLOVE DAN FASTTEXT PADA KLASIFIKASI TEKS Nurdin Jurnal ejurnal teknokrat ac index php teknokompak article view 732
| File size | 459.85 KB |
| Pages | 5 |
| DMCA | Report |
Related /
UNIKSUNIKS Permasalahan utama yang muncul akibat tingginya aktivitas di kawasan Pasar Lubuk Jambi adalah meningkatnya hambatan samping yang berdampak terhadap kinerjaPermasalahan utama yang muncul akibat tingginya aktivitas di kawasan Pasar Lubuk Jambi adalah meningkatnya hambatan samping yang berdampak terhadap kinerja
METROMETRO Secara teoritis, penelitian ini memperkaya diskusi tentang tata kelola zakat; secara praktis, menawarkan model operasional yang dapat diulang untuk meningkatkanSecara teoritis, penelitian ini memperkaya diskusi tentang tata kelola zakat; secara praktis, menawarkan model operasional yang dapat diulang untuk meningkatkan
STEBIS IGMSTEBIS IGM Lebih lanjut, akurasi data berperan sebagai mediator parsial yang signifikan antara SIMEDHI dan kinerja serta kompetensi mediator. Temuan ini menunjukkanLebih lanjut, akurasi data berperan sebagai mediator parsial yang signifikan antara SIMEDHI dan kinerja serta kompetensi mediator. Temuan ini menunjukkan
UNIBUNIB Dengan demikian, penggabungan metode kasus dan alat teknologi dalam instrumen pengajaran memungkinkan dosen menyediakan pengalaman belajar berbasis praktikDengan demikian, penggabungan metode kasus dan alat teknologi dalam instrumen pengajaran memungkinkan dosen menyediakan pengalaman belajar berbasis praktik
TRI GUNA DHARMATRI GUNA DHARMA Rifqil Group Barokah adalah sebuah perusahaan yang bergerak di sektor ritel. Dengan banyaknya cabang yang dimiliki oleh Rifqil Group Barokah, diperlukanRifqil Group Barokah adalah sebuah perusahaan yang bergerak di sektor ritel. Dengan banyaknya cabang yang dimiliki oleh Rifqil Group Barokah, diperlukan
UNIRA MALANGUNIRA MALANG Penelitian ini diharapkan dapat dijadikan referensi untuk memperbaiki dan mengembangkan strategi pengelolaan pembudidayaan ikan menjadi baik. Fungsi-fungsiPenelitian ini diharapkan dapat dijadikan referensi untuk memperbaiki dan mengembangkan strategi pengelolaan pembudidayaan ikan menjadi baik. Fungsi-fungsi
UNIRA MALANGUNIRA MALANG Namun, masih terdapat tantangan dalam keseimbangan gender, pengisian jabatan, dan pengembangan sistem evaluasi kinerja yang komprehensif. Penelitian iniNamun, masih terdapat tantangan dalam keseimbangan gender, pengisian jabatan, dan pengembangan sistem evaluasi kinerja yang komprehensif. Penelitian ini
NEOLECTURANEOLECTURA Pasal 158 Undang-Undang Republik Indonesia Nomor. 04 Tahun 2009 tentang Pertambangan Mineral dan Batubara juncto Pasal 55 Ayat (1) Ke-1 KUHP menjadi pertimbanganPasal 158 Undang-Undang Republik Indonesia Nomor. 04 Tahun 2009 tentang Pertambangan Mineral dan Batubara juncto Pasal 55 Ayat (1) Ke-1 KUHP menjadi pertimbangan
Useful /
UNESAUNESA Dengan demikian, sistem yang dikembangkan tidak hanya sesuai dengan kebutuhan pengguna, tetapi juga memiliki performa yang stabil dan layak digunakan untukDengan demikian, sistem yang dikembangkan tidak hanya sesuai dengan kebutuhan pengguna, tetapi juga memiliki performa yang stabil dan layak digunakan untuk
STAIKUSTAIKU Kondisi ini mencerminkan persoalan keadilan lingkungan, di mana kelompok rentan menanggung beban risiko lingkungan akibat kepadatan, keterbatasan lahan,Kondisi ini mencerminkan persoalan keadilan lingkungan, di mana kelompok rentan menanggung beban risiko lingkungan akibat kepadatan, keterbatasan lahan,
STAIKUSTAIKU Keberhasilan kebijakan sangat dipengaruhi oleh penguatan tata kelola data penerima, koordinasi antar‑lembaga, mekanisme komunikasi pra‑distribusi,Keberhasilan kebijakan sangat dipengaruhi oleh penguatan tata kelola data penerima, koordinasi antar‑lembaga, mekanisme komunikasi pra‑distribusi,
4141 Adapun faktor yang paling dominan berpengaruh terhadap perjalanan dalam hal ini biaya operasionalnya yaitu pemakaian bahan bakar. Biaya Operasional KendaraanAdapun faktor yang paling dominan berpengaruh terhadap perjalanan dalam hal ini biaya operasionalnya yaitu pemakaian bahan bakar. Biaya Operasional Kendaraan