Evaluasi pembelajaran merupakan bagian penting dalam proses pendidikan untuk mengukur pemahaman siswa terhadap materi. Namun, pembuatan soal kuis secara manual kerap memerlukan waktu, tenaga, dan keterampilan pedagogis yang tidak sedikit. Penelitian ini mengusulkan dan mengembangkan sebuah sistem yang mampu menghasilkan soal kuis secara otomatis dari materi pembelajaran berbasis teks menggunakan teknologi Large Language Model. Sistem ini dirancang dengan pendekatan Retrieval-Augmented Generation untuk mengatasi keterbatasan konteks pada model generatif serta dilengkapi metode chunking untuk pemrosesan materi yang panjang. Tiga jenis soal yang didukung oleh sistem ini meliputi Pilihan Ganda, Jawaban Singkat, dan Benar/Salah, masing-masing dengan prompt template yang disusun berdasarkan kaidah resmi dari Pusat Penilaian Pendidikan Kementerian Pendidikan dan Kebudayaan. Hasil pengujian terhadap 60 soal menunjukkan bahwa sistem mampu menghasilkan pertanyaan dengan tingkat kepatuhan tinggi terhadap kaidah penulisan soal, dengan rata-rata persentase kepatuhan di atas 90% untuk setiap jenis soal. Temuan ini menunjukkan bahwa integrasi LLM dalam sistem pembelajaran dapat meningkatkan efisiensi dan kualitas proses evaluasi, serta menjadi solusi potensial untuk pengembangan fitur dinamis dalam Learning Management System seperti ETHOL di lingkungan Politeknik Elektronika Negeri Surabaya