Penelitian ini bertujuan mengungkap sejauh mana kualitas buitr soal tengah semester mata Pelajaran PAI-2 di SMA Muhammadiyah Wonosobo yang dilihat dari tingkat Validitas, Reliabilitas, Tingkat Kesukaran, Daya Pembeda, dan Fungsi Pengecoh. Penelitian ini menggunakan pendekatan Kuantitatif, dengan sampel secara random sampling. Data dikumpulkan dengan studi dokumenter dan wawancara. Data dianalisis dengan menggunkan software Anates versi 4.0.9. Hasilnya menunjukan kualitas butir soal PAI-2 rata-rata menunjukan kualitas yang baik. Dilihat dari Validitas pada butir pilihan ganda (60%) dinyatakan signifikan, sedangkan pada butir soal essay (80%) dinyatakan signifikan, Kualitas soal dilihat dari reliabilitas dinyatakan 0.72 untuk butir soal pilihan ganda dan 0.72 untuk butir soal essay, Kualitas soal dilihat dari tingkat kesukaran menunjukan (33%) dinyatakan “mudah”, (49%) dinyatakan “sedang” dan (18%) dinyatakan “sukar”, Kualitas soal dilihat dari tingkat daya pembeda dan fungsi pengecoh menunjukan (11%) dinyatakan “baik sekali”, 1 (22%) dinyatakan “baik”, (36%) dinyatakan “sedang”, (24%) dinyatakan “jelek” dan (7%) dinyatakan “jelek sekali”.