Evaluation of AI Use in Indonesian Language Learning to Enhance Official Document Composition Skills
Abstract
This study aims to measure and evaluate the effectiveness and impact of integrating Artificial Intelligence (AI)-based tools in Indonesian language learning on improving the skills of compiling official documents among 35 students of the Digital Office Operations Study Program, AKN Putra Sang Fajar Blitar. The core issue examined is the necessity of grammatical competence in the preparation of professional formal documents. The research employed a combination approach (Mixed-Methods) with a One Group Pre-test-Post-test design. Data were collected through tests, questionnaires, and observation, then analyzed using the Paired Sample T-test, N-Gain Score, and a qualitative interactive model. The results indicate a significant improvement in students' grammatical competence after the AI-based learning intervention. AI proved effective as a learning assistant, providing instant and specific feedback that significantly fostered students' learning independence in self-revising their work. The main supporting factors include infrastructure readiness and high student motivation, while inhibiting factors are the risk of over-reliance on AI and digital literacy constraints. The study concludes that AI provides a positive and strategic impact, but must be balanced with pedagogical strategies such as ethics training, prompt engineering, and reflective activities to ensure AI remains a supporting tool, and not a replacement for, students' critical thinking skills.
References
Apriliani, D. (2024). Penggunaan Artificial Intelligence dalam Pembelajaran Bahasa Indonesia. DIKBASTRA: Jurnal Pendidikan Bahasa dan Sastra, 7(1), 15-21.
Aslamiyah, S., & Setiawati, S. H. (2023). Penggunaan Program Grammarly dan Kegiatan Noticing untuk Mengevaluasi Keterampilan Menulis Tulisan Akademik Mahasiswa. Jurnal Pendidikan, 11(1), 33-50.
Badri, D. (2025). AI di Dunia Kampus: Tantangan, Peluang, dan Peran Dosen di Era Digital. FDK UIN Suska Riau News.
Fatmadiwi, A., Suryani, S., Hartoyo, A., & Erlina, E. (2025). Kebijakan Artificial Intelligence (AI) dalam Pembelajaran di Perguruan Tinggi. Jurnal Alwatzikhoebillah: Kajian Islam, Pendidikan, Ekonomi, Humaniora, 11(1), 284-290.
Hasnatan, H., Nensilianti, N., & Sultan, S. (2025). Pengaruh Penggunaan Artificial Intelligence (AI) terhadap Keterampilan Berbicara Kritis dan Menulis Kritis. Ideguru: Jurnal Karya Ilmiah Guru, 10(2), 1460-1465.
Hindra Kurniawan, Adiguna Sasama W.U, & Tambunan, R. W. (2024). Potensi AI dalam Meningkatkan Kreativitas dan Literasi dalam Pembelajaran Bahasa Indonesia. JAMI: Jurnal Ahli Muda Indonesia, 5(1), 8-15.
Li, J., & Zou, Y. (2022). Grammarly's Effectiveness in Improving EFL Students' Grammatical Accuracy and Writing Quality. (Dikutip dari: Rizky, A., et al. (2023). Efektivitas Penggunaan AI Writing Tools (Grammarly & ChatGPT) dalam Pembelajaran Menulis Bahasa Inggris bagi Mahasiswa Produksi Media. Jurnal Cendekia: Jurnal Pendidikan dan Pembelajaran, 7(1), 103-112).
Miles, M. B., & Huberman, A. M. (1994). Qualitative Data Analysis: An Expanded Sourcebook (2nd ed.). SAGE Publications.
Nugraha, R. E., Permana, S. P., & Purnamasari, D. (2025). Tinjauan Kritis Terhadap Efektivitas AI (Artificial Intelligence) dalam Pengembangan Keterampilan Menulis Akademik Mahasiswa. EDUCATIONAL : Jurnal Inovasi Pendidikan & Pengajaran, 2(2), 1-11.
Onwuegbuzie, A. J., & Frels, R. (2016). 7 Steps to a Comprehensive Literature Review: A Multimodal & Cultural Approach (First edition). SAGE Publications.
Reva, R., & Haliq, A. (2025). Integrasi AI Dalam Penulisan Karya Ilmiah dan Dampaknya terhadap Kemampuan Berpikir Kritis. Pendas: Jurnal Ilmiah Pendidikan Dasar, 10(02), 368-380.
Setyawan, A. E., Anyan, A., & Anggera, L. (2024). Upaya Meningkatkan Keterampilan Mahasiswa Dalam Menulis Karya Ilmiah Berbantuan Ai (Artificial Intelligence). Jurnal Pengabdian Masyarakat Khatulistiwa, 7(1), 24-43.
Shofiah, S., Putera, D. P., & Syarief, R. (2023). Ada risiko bahwa siswa mungkin menjadi terlalu bergantung pada alat bantu AI. (Dikutip dalam: Mutia, A., et al. (2024). Readiness Dosen dalam Mengintegrasikan Kecerdasan Buatan untuk Pengajaran Menulis Teks Akademik di Perguruan Tinggi. Jurnal Metalingua, 13(1)).
Tjahyanti, L. P. A. S., Saputra, P. S., & Gitakarma, M. S. (2022). Peran Artificial Intelligence (Ai) Untuk Mendukung Pembelajaran Di Masa Pandemi Covid-19. Jurnal Komputer Dan Teknologi Sains (KOMTEKS), 1(1), 15-21.
Tristianto, M. R., Nugraha, A. S., Ramdani, A., & Nababan, A. S. (2024). Pengaruh artificial intelligence (AI) dalam evaluasi pembelajaran Bahasa Indonesia pada kalangan mahasiswa. Nakula: Jurnal Ilmu Pendidikan, Bahasa dan Ilmu Sosial, 3(3), 50-61.
Veddayana, D., Handoyo, S., & Puspitasari, H. (2023). AI menawarkan pengalaman belajar yang disesuaikan dengan kebutuhan individu. (Dikutip dalam: Raheem dkk., 2023. Dampak Kecerdasan Buatan terhadap Kemampuan Menulis Mahasiswa Bahasa Inggris: Tinjauan Literature yang Sistematis. Jurnal Pendekar: UMMAT).
