Learning Management System (LMS) merupakan perangkat lunak yang penting dalam mendukung pembelajaran berbasis teknologi di SMK Telkom Purwokerto. Berdasarkan hasil wawancara pengguna mengalami masalah seperti kinerja sistem yang melambat sehingga menggangu proses pembelajaran, proses reset password tidak efisien, dan belum dilakukan evaluasi kualitas yang berfokus pada aspek product operation. Berdasarkan permasalahan tersebut, maka penelitian ini bertujuan untuk melakukan evaluasi kualitas LMS SMK Telkom Purwokerto menggunakan metode McCall yang berfokus product operation serta memberikan rekomendasi perbaikan yang konkret untuk meningkatkan kualitas berdasarkan hasil evaluasi dan penelitian terdahulu. Metode McCall merupakan metode best practice dengan tingkat ketelitian yang baik dalam mengukur kualitas perangkat lunak, product operation meliputi faktor correctness, usability, reliability, integrity, dan efficiency. Data diperoleh melalui penyebaran kuesioner menggunkan skala likert, sampel penelitian di tentukan menggunkan teknik cluster sampling dengan jumlah 99 responden yang terdiri dari pengguna LMS yaitu siswa, guru, dan tim IT. Penelitian ini menghasilkan faktor kualitas correctness sebesar 80%, reability sebesar 78%, usability sebesar 79%, integrity sebesar 61%, dan efficiency sebesar 68%, perhitungan total kualitas keseluruhan sebesar 72%. Hasil ini menunjukan bahwa LMS termasuk dalam kategori “Baik” dengan menghasilkan 10 rekomendasi yang disetujui oleh Koordinator tim IT untuk di implementasikan dan dilakukan perbaikan.
Kata Kunci: Evaluasi, LMS, McCall, product operation, rekomendasi.