UNIBAUNIBA

Jurnal Teknik Elektro Uniba (JTE UNIBA)Jurnal Teknik Elektro Uniba (JTE UNIBA)

Penelitian ini bertujuan mengevaluasi kinerja, fungsionalitas, dan usability Dental Tutor AI, sebuah chatbot pembelajaran berbasis document-driven conversational AI yang dikembangkan menggunakan platform Chatbase dengan sumber pengetahuan utama buku Newman and Carranzas Essentials of Clinical Periodontology. Proses pengembangan meliputi ekstraksi teks, text chunking, dan pembuatan semantic embeddings untuk memungkinkan pencarian konteks yang akurat. Pengujian dilakukan melalui tiga pendekatan: black-box testing pada delapan skenario fungsional, evaluasi usability menggunakan System Usability Scale (SUS), serta audit teknis antarmuka menggunakan Lighthouse. Hasil pengujian menunjukkan bahwa seluruh skenario fungsional dinyatakan pass, menandakan chatbot mampu menangani variasi input secara konsisten. Evaluasi SUS menghasilkan skor 90,17 dari rentang 0–100 yang termasuk kategori Excellent, mengindikasikan bahwa sistem mudah digunakan dan diterima dengan baik oleh pengguna. Audit Lighthouse memperlihatkan performa dan best practices yang sangat baik, meskipun aspek aksesibilitas masih memerlukan peningkatan. Berdasarkan hasil evaluasi, sistem menunjukkan kelayakan dan potensi efektivitas sebagai alat bantu pembelajaran di bidang periodonsia.

Penelitian ini berhasil mengembangkan Dental Tutor AI, sebuah chatbot pembelajaran berbasis document-driven conversational AI yang memanfaatkan buku Newman and Carranzas Essentials of Clinical Periodontology sebagai sumber pengetahuan utama.Proses ekstraksi dokumen, text chunking, dan semantic embedding melalui platform Chatbase berjalan efektif sehingga memungkinkan chatbot memberikan respons yang relevan dan sesuai literatur.Hasil pengujian menunjukkan bahwa sistem memiliki kinerja yang sangat baik.Seluruh skenario pada pengujian fungsional black-box testing dinyatakan pass, menandakan kemampuan chatbot dalam menangani variasi input seperti pertanyaan relevan, pertanyaan luar konteks, kesalahan pengetikan, percakapan berkelanjutan, dan kecepatan respons.Penilaian usability menggunakan instrumen SUS menghasilkan skor 90,17 dari rentang 0–100 yang termasuk kategori Excellent (Grade A), menunjukkan bahwa sistem mudah digunakan, intuitif, dan memiliki tingkat penerimaan pengguna yang tinggi.Pengujian dinamis menggunakan Lighthouse juga memperlihatkan hasil positif, terutama pada aspek Performance dan Best Practices yang mendapatkan skor tinggi.Meskipun demikian, nilai Accessibility menunjukkan bahwa masih diperlukan beberapa penyempurnaan agar antarmuka lebih inklusif bagi berbagai kelompok pengguna.Secara keseluruhan, hasil penelitian menunjukkan bahwa Dental Tutor AI layak diterapkan sebagai media pembelajaran digital berbasis AI, terutama dalam bidang periodonsia.

Untuk penelitian lanjutan, dapat dipertimbangkan beberapa arah studi berikut: . . 1. Mengembangkan metode ekstraksi konten dari dokumen PDF yang lebih komprehensif, termasuk tabel, gambar, dan diagram, untuk meningkatkan akurasi dan keakuratan respons chatbot. . . 2. Mengeksplorasi pendekatan integrasi antara model bahasa generatif dengan basis pengetahuan yang lebih luas, seperti database medis atau jurnal ilmiah, untuk memperluas cakupan dan kedalaman informasi yang dapat diakses oleh chatbot. . . 3. Melakukan penelitian empiris yang lebih mendalam mengenai dampak penggunaan Dental Tutor AI terhadap proses belajar dan pemahaman konsep periodonsia oleh mahasiswa, serta mengukur efektivitasnya dalam meningkatkan hasil belajar.

Read online
File size681.62 KB
Pages8
DMCAReport

Related /

ads-block-test