STTSSTTS
INSYST: Journal of Intelligent System and ComputationINSYST: Journal of Intelligent System and ComputationEvaluasi tugas pemrograman dalam pendidikan ilmu komputer seringkali memakan waktu dan bersifat subjektif ketika dilakukan secara manual oleh instruktur. Studi ini mengusulkan sistem evaluasi kode berbasis web otomatis yang memanfaatkan Kecerdasan Buatan (AI) untuk memberikan umpan balik segera dan objektif. Sistem dibangun dengan framework Next.js untuk antarmuka pengguna dan mengintegrasikan Model Bahasa Besar (LLM), DeepSeek-R1, melalui framework LangChain sebagai perantara komunikasi AI. Melalui integrasi ini, sistem secara otomatis menganalisis penyerahan kode sumber siswa terhadap tugas pemrograman dan rubrik penilaian yang diberikan, menghasilkan umpan balik dan skor secara real-time. Uji kinerja sistem yang diimplementasikan menghasilkan rata-rata waktu respons 5,7 detik, throughput 10,86 permintaan per detik, dan skor kinerja beban depan 78. Evaluasi pengguna menggunakan Skala Ketergunaan Sistem (SUS) menghasilkan skor 77, menunjukkan pengalaman pengguna yang positif. Sistem berfungsi efektif selama uji coba, menunjukkan bahwa evaluasi kode berbasis AI dapat mempercepat dan menyederhanakan proses penilaian dalam pendidikan pemrograman sambil mempertahankan akurasi dan ketergunaan yang memuaskan. Temuan ini menunjukkan bahwa mengintegrasikan LLM ke dalam platform pendidikan pemrograman menawarkan pendekatan yang skalabel dan efektif untuk penilaian otomatis, dengan potensi signifikan untuk meningkatkan hasil belajar dan mengurangi beban kerja instruktur di lingkungan akademis.
Penelitian ini menunjukkan bahwa sistem evaluasi kode otomatis berbasis web yang dikembangkan berhasil mengatasi tantangan yang diidentifikasi dalam pendidikan pemrograman.Integrasi DeepSeek-R1 LLM dengan framework LangChain dan Next.js menciptakan platform yang mengubah cara tugas pemrograman dinilai dan umpan balik disampaikan.Kesepakatan AI-manusia (Cohens Kappa = 0,76) dan korelasi kuat (r = 0,847) memvalidasi akurasi penilaian yang sebanding dengan penilai manusia ahli.Platform juga mempertahankan stabilitas operasional dengan rata-rata waktu respons 5,7 detik, yang terbukti dapat diterima untuk konteks pendidikan di mana umpan balik segera meningkatkan hasil belajar.Kapasitas throughput 10,86 permintaan per detik, dikombinasikan dengan pengujian skalabilitas hingga 150 pengguna simultan, menunjukkan bahwa platform dapat mendukung lingkungan kelas yang tipikal tanpa bottleneck kinerja.Dari perspektif institusi, analisis ekonomi menunjukkan keberlanjutan yang menjanjikan.Setiap penilaian hanya berbiaya sekitar $0,003, menjadikan teknologi ini secara finansial layak untuk adopsi pendidikan yang luas.Keunggulan ini, dikombinasikan dengan penghematan waktu yang dilaporkan oleh instruktur, menawarkan kasus yang kuat untuk implementasi di seluruh kurikulum pemrograman.
Penelitian lanjutan dapat fokus pada pengembangan antarmuka pengguna yang lebih intuitif untuk meningkatkan pengalaman pengguna, terutama bagi pemula dalam pemrograman. Selain itu, integrasi fitur editor kode canggih seperti auto-complete atau debugging otomatis bisa memperkaya sistem untuk mendukung pembelajaran mandiri lebih efektif. Aspek lain yang menarik adalah optimasi kecepatan proses AI untuk mengurangi waktu respons, sehingga sistem menjadi lebih responsif dalam skenario penilaian real-time. Peneliti juga dapat mengeksplorasi penerapan model LLM lainnya untuk mengevaluasi bahasa pemrograman yang berbeda, memperluas aplikasi sistem ke berbagai konteks pendidikan teknik. Akhirnya, pengembangan alat analisis data untuk memahami pola kesalahan umum siswa bisa membantu instruktur merancang strategi pengajaran yang lebih tepat guna.
| File size | 676.88 KB |
| Pages | 7 |
| DMCA | Report |
Related /
APTIIAPTII Penelitian ini bertujuan untuk merancang dan menciptakan sistem informasi yang berbasis web, yang dapat membantu institusi pendidikan dalam mengelola layananPenelitian ini bertujuan untuk merancang dan menciptakan sistem informasi yang berbasis web, yang dapat membantu institusi pendidikan dalam mengelola layanan
APTIIAPTII Hasil penelitian menghasilkan sebuah aplikasi e-learning dengan fitur utama berupa pengelolaan materi pembelajaran, penyediaan latihan soal interaktif,Hasil penelitian menghasilkan sebuah aplikasi e-learning dengan fitur utama berupa pengelolaan materi pembelajaran, penyediaan latihan soal interaktif,
APTIIAPTII Evaluasi fungsional dilakukan dengan black‑box testing pada skenario inti (login, penjadwalan periode, pengisian, rekap, dan ekspor) dan menunjukkanEvaluasi fungsional dilakukan dengan black‑box testing pada skenario inti (login, penjadwalan periode, pengisian, rekap, dan ekspor) dan menunjukkan
JOURNAL COMPUTINGJOURNAL COMPUTING Pembangunan aplikasi sistem pakar ini menggunakan metode pengembangan sistem pakar dan bahasa pemrograman yang digunakan PHP, sedangkan untuk databasePembangunan aplikasi sistem pakar ini menggunakan metode pengembangan sistem pakar dan bahasa pemrograman yang digunakan PHP, sedangkan untuk database
STMIKJAYAKARTASTMIKJAYAKARTA Proses rekap data juga masih menggunakan cara manual sehingga prosesnya akan lama dan sulit dalam pengerjaannya. Hambatan yang dihadapi dalam proses sewaProses rekap data juga masih menggunakan cara manual sehingga prosesnya akan lama dan sulit dalam pengerjaannya. Hambatan yang dihadapi dalam proses sewa
STMIKJAYAKARTASTMIKJAYAKARTA Sistem informasi perpustakaan keliling berbasis web mampu mengatasi masalah administratif dan mempercepat proses peminjaman serta pengembalian buku. SistemSistem informasi perpustakaan keliling berbasis web mampu mengatasi masalah administratif dan mempercepat proses peminjaman serta pengembalian buku. Sistem
STMIKJAYAKARTASTMIKJAYAKARTA Sistem Informasi penerimaan peserta didik baru berbasis web pada hasil penelitian ini bisa membantu kemudahan akses informasi dan metode pendaftaran kepadaSistem Informasi penerimaan peserta didik baru berbasis web pada hasil penelitian ini bisa membantu kemudahan akses informasi dan metode pendaftaran kepada
PIPI Pengelolaan tugas akhir yang baik tentunya dengan dukungan teknologi yang tepat menjadi cita-cita bersama perguruan tinggi khususnya para pengelola programPengelolaan tugas akhir yang baik tentunya dengan dukungan teknologi yang tepat menjadi cita-cita bersama perguruan tinggi khususnya para pengelola program
Useful /
ISWISW Integrasi ekonomi sirkular dengan kerangka maqāṣid al-syarīah memperkuat dimensi kemaslahatan, yang tercermin dalam perlindungan jiwa (ḥifẓ al-nafs)Integrasi ekonomi sirkular dengan kerangka maqāṣid al-syarīah memperkuat dimensi kemaslahatan, yang tercermin dalam perlindungan jiwa (ḥifẓ al-nafs)
JOURNAL IASSSFJOURNAL IASSSF Untuk mencapai ekonomi sirkular yang matang, diperlukan indikator harmonisasi, regulasi yang dapat ditegakkan, serta mekanisme pembiayaan yang kuat danUntuk mencapai ekonomi sirkular yang matang, diperlukan indikator harmonisasi, regulasi yang dapat ditegakkan, serta mekanisme pembiayaan yang kuat dan
STKIP JBSTKIP JB Pendekatan semiotik ini dapat dianggap sebagai pembacaan yang terbuka, plural, dan komprehensif yang mencakup hampir seluruh realitas kehidupan. Ayat‑ayatPendekatan semiotik ini dapat dianggap sebagai pembacaan yang terbuka, plural, dan komprehensif yang mencakup hampir seluruh realitas kehidupan. Ayat‑ayat
PIPI Lembaga Penelitian Pengabdian Masyarakat (LPPM) STTIND Padang adalah unsur pelaksana akademik yang melaksanakan sebagian tugas pokok dan fungsi STTINDLembaga Penelitian Pengabdian Masyarakat (LPPM) STTIND Padang adalah unsur pelaksana akademik yang melaksanakan sebagian tugas pokok dan fungsi STTIND