Bilgisayar Laboratuvarlarında Soket İletişim İle Görüntü İşlemeye Dayalı Yoklama Sistemi Tasarımı

Bilgi ve iletişim teknolojisindeki büyük gelişmelerin bilgisayar kullanımını ve uygulamalı eğitimi zorunlu kıldığı bir zamanda yaşamaktayız. Bu çalışmada, bilgisayar laboratuvarı sınıflarında rutin yoklama işleminin görüntü işleme tekniklerinden yüz tanıma ile yeni bir sistem tasarımı amaçlanmıştır. Bu sistem tasarımı ile öğrenci yoklama işlemi sırasında öğrenme faaliyeti bölünmemiş olunacak ve zamandan verim sağlanmış olunacaktır. Sistem, öğrencilerin bilgisayar laboratuvarlarında sabit oturum planı üzerinden tasarlanmıştır. Ana bilgisayar (öğretim görevlisi) ve öğrenci bilgisayarları arasındaki haberleşme yöntemi, kullanılan bilgisayarların donanımsal özellikleri düşük olma ihtimali göz önünde bulundurularak veri tabanı kullanılmamış bunun yerine TCP protokolü üzerinden soket iletişim “server-client” ilişkisi kurulmuştur. Öğrenci ve öğretici bilgisayarları için iki ayrı yazılım tasarımı yapılmıştır. Sistem tasarımında, öğrenci bilgisayarlarında bulunan görüntü işleme temelli yazılım aktif olduğunda web kameradan gelen görüntüler ile önceden oluşturulmuş örnek yüz kümesi karşılaştırılır. Yüz tanıma işlemi sonucunda öğrencinin onayı ile yüz ifadesini içeren görüntü ana bilgisayara soket programlama ile dosya gönderme yöntemiyle iletilir. Ana bilgisayarı için tasarlanan yazılım, gelen öğrenci bilgi ve görüntülerini yoklama tutanağı halinde görüntüleyebilmektedir. Soket iletişim alt yapısı ile tasarlanan yazılımda öğrenciler mesaj kutusunu kullanabilecek ve bu sayede varsa sorularını sorabileceklerdir. Öğrenci taraflı tasarlanan yazılımda, öğrenciler çalışmalarını yaparken arka planda öğrencinin ders esnasında “mutlu”, “üzgün”, “doğal” gibi duygu psikolojisini analiz ederek öğretim görevlisine, hem öğrenci hem de sınıfın genel duygu hali hakkında rapor olanağı verebilecektir. Çalışmada, literatürde yapılan yüz tanıma ile duygu analizi çalışmaları incelenmiş ve kullanılan bazı yöntemler bir araya getirilerek sistem tasarımı yapılmıştır.

We live in a time when major advances in information and communication technology requires computer use and practical education as a requisite. In this study, it is aimed to design a new system with face detection, which is one of the image processing techniques of the routine polling process, in computer lab classes. With this system design, the learning activity will not be interrupted during the student polling process and time efficiency will be ensured. The system is designed based on a fixed seating plan of the students in the computer laboratories. As for the communication method between the host computer (lecturer) and the student computers; the database has not been used considering the possibility that the hardware characteristics of computers that are used may be low. Instead, the socket communication "server-client" relationship has been established through the TCP protocol. Two separate software have been designed for student and instructor computers. In the system design, the images on webcams are compared with the pre-created sample face set when the image processing based software in the student computers is active. As a result of facial detection, with the approval of the student, the image of the face expression is transmitted by the file transfer method to the host computer with socket programming. Software designed for the host computer can display the incoming student information and images as polling record. In software, designed with socket communication infrastructure, students will be able to use the inbox and they will be able to ask their questions, if there is any. The studentoriented software design will allow the lecturer to have the chance to get a report on the general emotional state of both the student and the class by analyzing students' psychology of the emotion, such as "happy", "sad", "natural" in the background during the course while they are carrying out their works. In this study, facial detection and emotion analysis studies in the literature have been examined and some of the methods used have been put together to design the system.