UNESAUNESA

Journal of Informatics and Computer Science (JINACS)Journal of Informatics and Computer Science (JINACS)

Akses informasi akademik di Universitas Negeri Surabaya (UNESA) melalui website panduan saat ini dinilai belum optimal karena kurangnya interaktivitas, sehingga mahasiswa seringkali harus menghubungi pihak administrasi secara langsung. Penelitian ini bertujuan untuk melakukan evaluasi kinerja Retrieval-Augmented Generation (RAG), yaitu RAG Klasik guna menguji kinerja sistem dalam menghasilkan respon yang relevan, akurat, dan kontekstual pada chatbot akademik. Lingkup penelitian ini difokuskan pada pengujian evaluasi kinerja dan efisiensi metode tersebut dalam mengolah data multimodal yang bersumber dari portal SSO UNESA, mencakup format teks, gambar, dan dokumen PDF.

Penelitian ini menyimpulkan bahwa RAG Klasik sangat ideal untuk informasi prosedural yang membutuhkan respon instan meskipun memiliki keterbatasan dalam pemahaman semantic yang mendalam.Hasil penelitian menunjukkan bahwa RAG Klasik memiliki efisiensi luar biasa dengan waktu respon rata-rata dibawah 0,01 detik.Namun, dari sisi kinerja, metode ini sangat bergantung pada kualitas pelabelan.

Berdasarkan hasil penelitian, terdapat beberapa arah pengembangan penelitian lanjutan yang menarik untuk dieksplorasi. Pertama, penelitian selanjutnya dapat menginvestigasi potensi penggabungan RAG Klasik dengan model bahasa generatif yang lebih canggih, seperti model berbasis transformer, untuk meningkatkan kemampuan pemahaman konteks dan menghasilkan jawaban yang lebih akurat dan relevan. Kedua, perlu dilakukan penelitian lebih lanjut mengenai strategi pelabelan data multimodal yang optimal, termasuk eksplorasi teknik semi-supervised learning atau active learning untuk mengurangi kebutuhan akan pelabelan manual yang intensif. Ketiga, pengembangan sistem dapat difokuskan pada integrasi dengan sumber data akademik yang lebih luas, seperti repositori skripsi dan disertasi, untuk memperkaya basis pengetahuan chatbot dan meningkatkan kemampuannya dalam menjawab pertanyaan-pertanyaan yang lebih kompleks.

  1. [2302.13971] LLaMA: Open and Efficient Foundation Language Models. llama open efficient foundation language... arxiv.org/abs/2302.139712302 13971 LLaMA Open and Efficient Foundation Language Models llama open efficient foundation language arxiv abs 2302 13971
  2. Integration Of NLP-Based Chatbot On University Academic Service System | Jurnal Komputer. integration... jurnal.geinrafflesia.com/index.php/JK/article/view/110Integration Of NLP Based Chatbot On University Academic Service System Jurnal Komputer integration jurnal geinrafflesia index php JK article view 110
  3. PERBANDINGAN KINERJA WORD EMBEDDING WORD2VEC, GLOVE, DAN FASTTEXT PADA KLASIFIKASI TEKS | Nurdin | Jurnal... ejurnal.teknokrat.ac.id/index.php/teknokompak/article/view/732PERBANDINGAN KINERJA WORD EMBEDDING WORD2VEC GLOVE DAN FASTTEXT PADA KLASIFIKASI TEKS Nurdin Jurnal ejurnal teknokrat ac index php teknokompak article view 732
Read online
File size459.85 KB
Pages5
DMCAReport

Related /

JURIS Klasifikasi Tinta Cartridge Berdasarkan Warna Pada Gudang Barang Menggunakan Algoritma Convolutional Neural Network 2026More at 2026

UNSURYAUNSURYA Toko akan mengirimkan barang dari gudang, namun sering terjadi kesalahan barang. Hal ini dapat mempengaruhi kepuasan pengguna, sehingga penting bagi tokoToko akan mengirimkan barang dari gudang, namun sering terjadi kesalahan barang. Hal ini dapat mempengaruhi kepuasan pengguna, sehingga penting bagi toko

JURIS Analisis kepuasan masyarakat terhadap pelayanan publik di DPMPTSP Provinsi Kalimantan Timur menggunakan metode SERVQUAL 2026More at 2026

UNSURYAUNSURYA Pendekatan kualitatif dan kuantitatif dilakukan berdasarkan data sekunder dari Survei Kepuasan Masyarakat (SKM) Semester 1 Tahun 2024 yang mencakup penilaianPendekatan kualitatif dan kuantitatif dilakukan berdasarkan data sekunder dari Survei Kepuasan Masyarakat (SKM) Semester 1 Tahun 2024 yang mencakup penilaian

JURIS Enhancing Self Competence Developing Inclusive Outdoor Learning Media for Children with Special Needs at Sekolah Alam Catur Cendikia 2026More at 2026

RESCOLLACOMMRESCOLLACOMM Program pengabdian masyarakat ini berhasil mengembangkan dan mengimplementasikan media pembelajaran luar ruangan inklusif berupa fasilitas panjat dindingProgram pengabdian masyarakat ini berhasil mengembangkan dan mengimplementasikan media pembelajaran luar ruangan inklusif berupa fasilitas panjat dinding

JURIS Quality of Birth Certificate Processing Services Based On Klampid New Generation in Kedung Cowek Urban Village Surabaya City 2025More at 2025

UMTSUMTS Hasil penelitian menunjukkan bahwa kualitas pelayanan akta kelahiran berdasarkan klampid new generation di Kelurahan Kedung Cowek Kota Surabaya tergolongHasil penelitian menunjukkan bahwa kualitas pelayanan akta kelahiran berdasarkan klampid new generation di Kelurahan Kedung Cowek Kota Surabaya tergolong

JURIS Penataan Dan Penyimpanan Dokumen Perjalanan Dinas Di Lingkungan Bpkp Dalam Rangka Pembayaran Biaya Perjalanan Dinas 2025More at 2025

PUBLIKASIINDONESIAPUBLIKASIINDONESIA Penelitian ini memberikan rekomendasi untuk meningkatkan efisiensi proses pembayaran dan pengelolaan dokumen perjalanan dinas di BPKP. Penelitian ini menyimpulkanPenelitian ini memberikan rekomendasi untuk meningkatkan efisiensi proses pembayaran dan pengelolaan dokumen perjalanan dinas di BPKP. Penelitian ini menyimpulkan

JURIS Pengembangan Perpustakaan Digital Berbasis Slims Pada SD Muhammadiyah IDI Tello Baru 2025More at 2025

POLITALAPOLITALA IDI Tello Baru Makassar merupakan salah satu dari Perpustakaan SD Muhammadiyah yang dinaungi oleh Persyarikatan Muhammadiyah. Saat ini mengelola 600 eksemplarIDI Tello Baru Makassar merupakan salah satu dari Perpustakaan SD Muhammadiyah yang dinaungi oleh Persyarikatan Muhammadiyah. Saat ini mengelola 600 eksemplar

JURIS Evaluasi Sistem Informasi Manajemen Rumah Sakit dalam Penerapan Rekam Medis Elektronik Menggunakan Metode HOT FIT di Rumah Sakit Umum Daerah Wangaya Denpasar 2025More at 2025

UNDHIRA BALIUNDHIRA BALI Instrumen dalam penelitian yang digunakan adalah pedoman wawancara. Penelitian ini menggunakan kualitatif dengan tiga orang petugas SIMRS. Instrumen menggunakanInstrumen dalam penelitian yang digunakan adalah pedoman wawancara. Penelitian ini menggunakan kualitatif dengan tiga orang petugas SIMRS. Instrumen menggunakan

JURIS Optimalisasi Perencanaan Administratif dalam Administrasi Pendidikan untuk Peningkatan Mutu Layanan Pendidikan di Indonesia 2024More at 2024

PENERBITPENERBIT Dengan demikian, lembaga pendidikan dapat memastikan bahwa tenaga administrasi memiliki kompetensi yang diperlukan untuk mengelola tugas-tugas administratifDengan demikian, lembaga pendidikan dapat memastikan bahwa tenaga administrasi memiliki kompetensi yang diperlukan untuk mengelola tugas-tugas administratif

Useful /

JURIS Rekayasa Kebutuhan dan Implementasi Website Manajemen Esport PUBGM Mighty Organizer 2026More at 2026

UNESAUNESA Permasalahan tersebut menyebabkan proses manajemen turnamen menjadi kurang efisien dan berpotensi menimbulkan kesalahan data. Penelitian ini bertujuanPermasalahan tersebut menyebabkan proses manajemen turnamen menjadi kurang efisien dan berpotensi menimbulkan kesalahan data. Penelitian ini bertujuan

JURIS Hubungan Antara Parent Child Communication Dengan Brain Rot Pada Generasi Z 2025More at 2025

PUBLIKASIINDONESIAPUBLIKASIINDONESIA Data dikumpulkan melalui kuesioner dan dianalisis menggunakan uji korelasi Pearson dan regresi linear. Hasil menunjukkan adanya hubungan negatif yang signifikanData dikumpulkan melalui kuesioner dan dianalisis menggunakan uji korelasi Pearson dan regresi linear. Hasil menunjukkan adanya hubungan negatif yang signifikan

JURIS Analisa Daya Motor Induksi 3 Fasa Sebagai Penggerak Conveyor Di Pt Pesona Khatulistiwa Nusantara 2023More at 2023

UBTUBT Daya output motor juga meningkat seiring beban, dengan nilai efisiensi rata-rata mencapai 99% hingga 100%, menunjukkan kinerja motor masih sangat baik.Daya output motor juga meningkat seiring beban, dengan nilai efisiensi rata-rata mencapai 99% hingga 100%, menunjukkan kinerja motor masih sangat baik.

JURIS Biaya Operasional Sepeda Motor Matic Dan Manual 2018More at 2018

4141 Dari hasil penelitian diperoleh model analisis Biaya Operasional Kendaraan (BOK) roda dua di Desa Blang Puuk adalah Y = 11,167 0,004X1 0,001X2 0,000X3Dari hasil penelitian diperoleh model analisis Biaya Operasional Kendaraan (BOK) roda dua di Desa Blang Puuk adalah Y = 11,167 0,004X1 0,001X2 0,000X3

ads-block-test