STTSSTTS
INSYST: Journal of Intelligent System and ComputationINSYST: Journal of Intelligent System and ComputationEvaluasi tugas pemrograman dalam pendidikan ilmu komputer seringkali memakan waktu dan bersifat subjektif ketika dilakukan secara manual oleh instruktur. Studi ini mengusulkan sistem evaluasi kode berbasis web otomatis yang memanfaatkan Kecerdasan Buatan (AI) untuk memberikan umpan balik segera dan objektif. Sistem dibangun dengan framework Next.js untuk antarmuka pengguna dan mengintegrasikan Model Bahasa Besar (LLM), DeepSeek-R1, melalui framework LangChain sebagai perantara komunikasi AI. Melalui integrasi ini, sistem secara otomatis menganalisis penyerahan kode sumber siswa terhadap tugas pemrograman dan rubrik penilaian yang diberikan, menghasilkan umpan balik dan skor secara real-time. Uji kinerja sistem yang diimplementasikan menghasilkan rata-rata waktu respons 5,7 detik, throughput 10,86 permintaan per detik, dan skor kinerja beban depan 78. Evaluasi pengguna menggunakan Skala Ketergunaan Sistem (SUS) menghasilkan skor 77, menunjukkan pengalaman pengguna yang positif. Sistem berfungsi efektif selama uji coba, menunjukkan bahwa evaluasi kode berbasis AI dapat mempercepat dan menyederhanakan proses penilaian dalam pendidikan pemrograman sambil mempertahankan akurasi dan ketergunaan yang memuaskan. Temuan ini menunjukkan bahwa mengintegrasikan LLM ke dalam platform pendidikan pemrograman menawarkan pendekatan yang skalabel dan efektif untuk penilaian otomatis, dengan potensi signifikan untuk meningkatkan hasil belajar dan mengurangi beban kerja instruktur di lingkungan akademis.
Penelitian ini menunjukkan bahwa sistem evaluasi kode otomatis berbasis web yang dikembangkan berhasil mengatasi tantangan yang diidentifikasi dalam pendidikan pemrograman.Integrasi DeepSeek-R1 LLM dengan framework LangChain dan Next.js menciptakan platform yang mengubah cara tugas pemrograman dinilai dan umpan balik disampaikan.Kesepakatan AI-manusia (Cohens Kappa = 0,76) dan korelasi kuat (r = 0,847) memvalidasi akurasi penilaian yang sebanding dengan penilai manusia ahli.Platform juga mempertahankan stabilitas operasional dengan rata-rata waktu respons 5,7 detik, yang terbukti dapat diterima untuk konteks pendidikan di mana umpan balik segera meningkatkan hasil belajar.Kapasitas throughput 10,86 permintaan per detik, dikombinasikan dengan pengujian skalabilitas hingga 150 pengguna simultan, menunjukkan bahwa platform dapat mendukung lingkungan kelas yang tipikal tanpa bottleneck kinerja.Dari perspektif institusi, analisis ekonomi menunjukkan keberlanjutan yang menjanjikan.Setiap penilaian hanya berbiaya sekitar $0,003, menjadikan teknologi ini secara finansial layak untuk adopsi pendidikan yang luas.Keunggulan ini, dikombinasikan dengan penghematan waktu yang dilaporkan oleh instruktur, menawarkan kasus yang kuat untuk implementasi di seluruh kurikulum pemrograman.
Penelitian lanjutan dapat fokus pada pengembangan antarmuka pengguna yang lebih intuitif untuk meningkatkan pengalaman pengguna, terutama bagi pemula dalam pemrograman. Selain itu, integrasi fitur editor kode canggih seperti auto-complete atau debugging otomatis bisa memperkaya sistem untuk mendukung pembelajaran mandiri lebih efektif. Aspek lain yang menarik adalah optimasi kecepatan proses AI untuk mengurangi waktu respons, sehingga sistem menjadi lebih responsif dalam skenario penilaian real-time. Peneliti juga dapat mengeksplorasi penerapan model LLM lainnya untuk mengevaluasi bahasa pemrograman yang berbeda, memperluas aplikasi sistem ke berbagai konteks pendidikan teknik. Akhirnya, pengembangan alat analisis data untuk memahami pola kesalahan umum siswa bisa membantu instruktur merancang strategi pengajaran yang lebih tepat guna.
| File size | 676.88 KB |
| Pages | 7 |
| DMCA | Report |
Related /
APTIIAPTII Dengan adanya sistem ini, proses administrasi akademik di SMA Negeri 2 Kodi Utara menjadi lebih terorganisir, efisien, dan transparan. Penelitian ini berhasilDengan adanya sistem ini, proses administrasi akademik di SMA Negeri 2 Kodi Utara menjadi lebih terorganisir, efisien, dan transparan. Penelitian ini berhasil
APTIIAPTII Berdasarkan hasil pengujian, aplikasi terbukti berjalan dengan baik, praktis digunakan, serta efektif mendukung proses pembelajaran. Guru merasa terbantuBerdasarkan hasil pengujian, aplikasi terbukti berjalan dengan baik, praktis digunakan, serta efektif mendukung proses pembelajaran. Guru merasa terbantu
SAINTEKMUSAINTEKMU Berdasarkan analisis, perancangan, dan pengujian sistem, dapat disimpulkan bahwa aplikasi ini menyajikan materi pelajaran, soal ujian, serta fasilitasBerdasarkan analisis, perancangan, dan pengujian sistem, dapat disimpulkan bahwa aplikasi ini menyajikan materi pelajaran, soal ujian, serta fasilitas
APTIIAPTII Penelitian ini bertujuan merancang, membangun, dan mengevaluasi sistem EDOM berbasis web menggunakan pendekatan MODEL PROTOTYPE untuk meningkatkan efisiensiPenelitian ini bertujuan merancang, membangun, dan mengevaluasi sistem EDOM berbasis web menggunakan pendekatan MODEL PROTOTYPE untuk meningkatkan efisiensi
STMIKJAYAKARTASTMIKJAYAKARTA Penerimaan Peserta Didik Baru (PPDB) online sebagai salah satu cara atau metode yang bertujuan untuk melakukan pendaftaran secara online bagi calon taruna/iPenerimaan Peserta Didik Baru (PPDB) online sebagai salah satu cara atau metode yang bertujuan untuk melakukan pendaftaran secara online bagi calon taruna/i
STMIKLOMBOKSTMIKLOMBOK Diharapkan bisa menambah informasi kepada masyarakat dan wisatawan luar daerah mengenai ekowisata penangkaran rusa di Desa Api-Api, serta menarik minatDiharapkan bisa menambah informasi kepada masyarakat dan wisatawan luar daerah mengenai ekowisata penangkaran rusa di Desa Api-Api, serta menarik minat
UNIDAYANUNIDAYAN Hasil penelitian berupa rumusan pemetaan MacFarland Grid terhadap strategi sistem informasi yang mengacu pada rencana bisnis organisasi Universitas XYZ.Hasil penelitian berupa rumusan pemetaan MacFarland Grid terhadap strategi sistem informasi yang mengacu pada rencana bisnis organisasi Universitas XYZ.
PIPI Mahasiswa dapat mengajukan judul tugas akhir secara online dengan smartphone. Hasil pengujian sistem menunjukkan bahwa sistem ini sangat efisien dan efektif,Mahasiswa dapat mengajukan judul tugas akhir secara online dengan smartphone. Hasil pengujian sistem menunjukkan bahwa sistem ini sangat efisien dan efektif,
Useful /
UMPWRUMPWR Implementasi LSLC telah dilakukan pada setiap mata pelajaran di sekolah tersebut, menunjukkan komitmen guru untuk meningkatkan kualitas pembelajaran.melaluiImplementasi LSLC telah dilakukan pada setiap mata pelajaran di sekolah tersebut, menunjukkan komitmen guru untuk meningkatkan kualitas pembelajaran.melalui
SAINTEKMUSAINTEKMU Kulit pisang diaktivasi secara kimia menggunakan NaOH 0,5 M, dikarakterisasi dengan FTIR, SEM-EDS, dan BET, kemudian diuji pada variasi pH, waktu kontak,Kulit pisang diaktivasi secara kimia menggunakan NaOH 0,5 M, dikarakterisasi dengan FTIR, SEM-EDS, dan BET, kemudian diuji pada variasi pH, waktu kontak,
IAINPTKIAINPTK Praktik ini menarik, karena masyarakat dan tokoh agama masih menganggapnya sah secara hukum agama walaupun tidak mendapatkan putusan cerai dari Pengadilan,Praktik ini menarik, karena masyarakat dan tokoh agama masih menganggapnya sah secara hukum agama walaupun tidak mendapatkan putusan cerai dari Pengadilan,
APTKLHIAPTKLHI Penelitian ini bertujuan mengevaluasi potensi limbah cair kelapa sawit (POME) sebagai media kultur bagi Chlorella vulgaris sekaligus merancang skala-upPenelitian ini bertujuan mengevaluasi potensi limbah cair kelapa sawit (POME) sebagai media kultur bagi Chlorella vulgaris sekaligus merancang skala-up