Mengenali ekspresi wajah seseorang merupakan suatu hal yang mudah dilakukan oleh manusia, namun tidak demikian bagi sebuah sistem komputer yang belum dilengkapi sistem cerdas. Selanjutnya sistem yang dapat mengenali ekspresi wajah dapat diimplementasikan untuk berbagai keperluan, salah satunya dalam bidang robotika. Untuk mengenali keadaan emosi seseorang dapat digunakan sistem teknologi biometrika dengan karakteristik ekspresi wajah. Pendekatan jaringan syaraf tiruan yang dapat digunakan untuk pengenalan ekspresi wajah salah satunya adalah Backpropagation. Penelitian ini bertujuan untuk membangun aplikasi menggunakan kamera Kinect yang dapat mengenali dan memberi keputusan ekspresi wajah seseorang yang direpresentasikan dalam bentuk teks. Prosesnya adalah dengan menentukan lokasi wajah yang akan dikenali, mengambil nilai fitur – fitur wajah diantaranya alis, mata dan mulut, memodelkan Neural Network untuk menentukan ekspresi wajah pengguna, pengambilan keputusan ekspresi wajah pengguna dengan permodelan Neural Network yang telah dibuat dan menampilkan output berupa teks yang merupakan hasil deteksi ekspresi wajah yang dikenali sistem. Berdasarkan penelitian yang telah dilakukan, tingkat keberhasilan dapat terdeteksinya masing-masing ekspresi diantaranya ekspresi normal sebesar 83%, senang sebesar 90%, sedih sebesar 70%, marah sebesar 80% dan terkejut sebesar 100%. Sedangkan untuk tingkat keberhasilan rata-rata dari sistem ini yaitu sebesar 84,6%.