因为之前学习过tkinter库,所以在学习了人脸识别模块的编写后,
打算绘制一个简单的GUI来应用人脸识别功能。
主界面如下所示:
签到打开在点开后直接进行人脸识别,如果成功则自动关闭视频窗口。
录入新的人脸界面:
输入姓名后打开摄像头,开始拍摄镜头前的人的照片,然后生成训练文件。
并且可以查询历史签到记录。
这里需要另外添加的模块是关于数据库的,这里选用了sqlite,所需的功能也很简单,
只需要两个表,一个用来存放用户姓名,一个用来存放签到记录。
这里是数据库模块的代码
db.py:
import sqlite3
from datetime import * class record:
def __init__(self):
# 创建或打开一个数据库
# check_same_thread 属性用来规避多线程操作数据库的问题
self.conn = sqlite3.connect("recordinfo.db", check_same_thread=False)
# 创建游标
self.cursor = self.conn.cursor()
# 建表
self.conn.execute('create table if not exists record_table('
'id integer primary key autoincrement,'
'name varchar(30) ,'
'record_time timestamp)') self.conn.execute('create table if not exists name_table('
'id integer primary key autoincrement,'
'name varchar(30))') # 插入数据
def insert_record(self, name):
self.conn.execute('insert into record_table values (null, ?, ?)', (name, datetime.now()))
self.conn.commit() def insert_name(self, name):
self.conn.execute('insert into name_table values (null, ?)', [name])
self.conn.commit() # 搜索用户名
def query_name(self):
self.cursor.execute("select name from name_table")
results = self.cursor.fetchall()
name_list = []
for i in results:
i = list(i)
name_list += i return name_list def query_record(self):
self.cursor.execute('select * from record_table')
results = self.cursor.fetchall() return results def close(self):
self.cursor.close()
self.conn.close()
然后是把之前的拍照模块,训练模块整合在一起,绑定到录入新的人脸的 确定按钮上
add_face.py:
import os
import cv2
from PIL import Image, ImageTk
import numpy as np
import db def makeDir():
if not os.path.exists("face_trainer"):
os.mkdir("face_trainer")
if not os.path.exists("FaceData"):
os.mkdir("FaceData") def getFace(name):
cap = cv2.VideoCapture(0)
face_detector = cv2.CascadeClassifier('haarcascade_frontalface_default.xml')
count = 0
while True:
sucess, img = cap.read() # 从摄像头读取图片
gray = cv2.cvtColor(img, cv2.COLOR_BGR2GRAY)
faces = face_detector.detectMultiScale(gray, 1.3, 5)
for (x, y, w, h) in faces:
cv2.rectangle(img, (x, y), (x+w, y+h), (255, 0, 0))
count += 1
cv2.imwrite("FaceData/User." + name.get() + '.' + str(count) + '.jpg', gray[y: y + h, x: x + w])
cv2.imshow('image', img)
# 保持画面的持续。
k = cv2.waitKey(1)
if k == 27: # 通过esc键退出摄像
break
elif count >= 20: # 得到1000个样本后退出摄像
break
cap.release()
cv2.destroyAllWindows() def getImagesAndLabels(path,detector, usernames):
imagePaths = [os.path.join(path, f) for f in os.listdir(path)]
faceSamples = []
ids = []
for imagePath in imagePaths:
PIL_img = Image.open(imagePath).convert('L')
img_numpy = np.array(PIL_img, 'uint8')
username = os.path.split(imagePath)[-1].split(".")[1]
id = 1
for x in usernames:
if username == x:
break
else:
id += 1 faces = detector.detectMultiScale(img_numpy)
for (x, y, w, h) in faces:
faceSamples.append(img_numpy[y:y + h, x: x + w])
ids.append(id)
return faceSamples, ids def trainFace(names):
# 人脸数据路径
path = 'FaceData'
recognizer = cv2.face.LBPHFaceRecognizer_create()
detector = cv2.CascadeClassifier("haarcascade_frontalface_default.xml")
faces, ids = getImagesAndLabels(path, detector, names)
recognizer.train(faces, np.array(ids))
recognizer.write(r'face_trainer\trainer.yml') def add_face(name, names):
makeDir()
getFace(name)
trainFace(names)
user = db.record()
user.insert_name(name.get())
然后把识别人脸的模块绑定给主界面的签到按钮
detect.py:
import cv2
import time
import db
def check( names):
cam = cv2.VideoCapture(0)
recognizer = cv2.face.LBPHFaceRecognizer_create()
recognizer.read('face_trainer/trainer.yml')
cascadePath = "haarcascade_frontalface_default.xml"
faceCascade = cv2.CascadeClassifier(cascadePath)
font = cv2.FONT_HERSHEY_SIMPLEX
minW = 0.1 * cam.get(3)
minH = 0.1 * cam.get(4)
while True:
ret, img = cam.read()
gray = cv2.cvtColor(img, cv2.COLOR_BGR2GRAY)
faces = faceCascade.detectMultiScale(
gray,
scaleFactor=1.2,
minNeighbors=5,
minSize=(int(minW), int(minH))
)
for (x, y, w, h) in faces:
cv2.rectangle(img, (x, y), (x + w, y + h), (0, 255, 0), 2)
idnum, confidence = recognizer.predict(gray[y:y + h, x:x + w]) if confidence < 100:
username = names[idnum-1]
confidence = "{0}%".format(round(100 - confidence)) cv2.putText(img, str(username), (x + 5, y - 5), font, 1, (0, 0, 255), 1)
cv2.putText(img, str(confidence), (x + 5, y + h - 5), font, 1, (0, 0, 0), 1)
cv2.imshow('camera', img)
time.sleep(2) db.record().insert_record(username) # 签到信息插入数据库
cam.release()
cv2.destroyAllWindows()
return
else:
idnum = "unknown"
confidence = "{0}%".format(round(100 - confidence))
cv2.putText(img, str(idnum), (x + 5, y - 5), font, 1, (0, 0, 255), 1)
cv2.putText(img, str(confidence), (x + 5, y + h - 5), font, 1, (0, 0, 0), 1) cv2.imshow('camera', img)
k = cv2.waitKey(10)
if k == 27:
break
cam.release()
cv2.destroyAllWindows()
把上述模块整合到GUI界面中
from tkinter import *
from tkinter import ttk
import add_face
import db
import detect class APP:
def __init__(self): self.root = Tk()
self.root.title('FACE')
self.root.geometry('%dx%d' % (400, 300)) # 数据库实例创建
self.mydb = db.record() self.createFirstPage() # 新录入的人的姓名
self.name = StringVar() mainloop() def createFirstPage(self):
self.page1 = Frame(self.root)
self.page1.grid()
Label(self.page1, height=4, text='人脸识别系统', font=('粗体', 20)).grid(columnspan=2)
#self.usernames 是 用户名字组成的列表
self.usernames = []
self.usernames = self.mydb.query_name() self.button11 = Button(self.page1, width=18, height=2, text="签到打卡", bg='red', font=("宋", 12),
relief='raise', command = lambda :detect.check( self.usernames))
self.button11.grid(row=1, column=0, padx=25, pady=10)
self.button12 = Button(self.page1, width=18, height=2, text="录入新的人脸", bg='green', font=("宋", 12),
relief='raise', command = self.createSecondPage)
self.button12.grid(row=1, column=1, padx=25, pady=10)
self.button13 = Button(self.page1, width=18, height=2, text="查询签到信息", bg='white', font=("宋", 12),
relief='raise',command = self.checkDataView)
self.button13.grid( row=2, column=0,padx=25, pady=10)
self.button14 = Button(self.page1, width=18, height=2, text="退出系统", bg='gray', font=("宋", 12),
relief='raise',command = self.quitMain)
self.button14.grid(row=2, column=1,padx=25, pady=10) def createSecondPage(self):
# self.camera = cv2.VideoCapture(0)
self.page1.grid_forget()
self.page2 = Frame(self.root)
self.page2.pack()
Label(self.page2, text='欢迎使用人脸识别系统', font=('粗体', 20)).pack() # 输入姓名的文本框
font1 = ('宋',18)
# self.name = StringVar()
self.text = Entry(self.page2, textvariable=self.name, width=20, font=font1).pack(side=LEFT)
self.name.set('请输入姓名') # 确认名字的按钮
self.button21 = Button(self.page2, text='确认', bg='white', font=("宋", 12),
relief='raise', command=lambda :add_face.add_face( self.name, self.usernames))
self.button21.pack(side=LEFT, padx=5, pady=10) # 返回按钮
self.button22 = Button(self.page2, text="返回", bg='white', font=("宋", 12),
relief='raise',command = self.backFirst)
self.button22.pack(side=LEFT, padx=10, pady=10) def checkDataView(self):
self.page3 = Frame(self.root)
self.page1.grid_forget()
self.root.geometry('700x360')
self.page3.pack()
Label(self.page3, text='今日签到信息', bg='white', fg='red', font=('宋体', 25)).pack(side=TOP, fill='x')
# 签到信息查看视图
self.checkDate = ttk.Treeview(self.page3, show='headings', column=('sid', 'name', 'check_time'))
self.checkDate.column('sid', width=100, anchor="center")
self.checkDate.column('name', width=200, anchor="center")
self.checkDate.column('check_time', width=300, anchor="center") self.checkDate.heading('sid', text='签到序号')
self.checkDate.heading('name', text='名字')
self.checkDate.heading('check_time', text='签到时间') # 插入数据
self.records = self.mydb.query_record()
for i in self.records:
self.checkDate.insert('', 'end', values=i) # y滚动条
yscrollbar = Scrollbar(self.page3, orient=VERTICAL, command=self.checkDate.yview)
self.checkDate.configure(yscrollcommand=yscrollbar.set)
yscrollbar.pack(side=RIGHT, fill=Y) self.checkDate.pack(expand=1, fill=BOTH) # 返回按钮
Button(self.page3, width=20, height=2, text="返回", bg='gray', font=("宋", 12),
relief='raise',command =self.backMain).pack(padx = 20, pady = 20) def backFirst(self):
self.page2.pack_forget()
self.root.geometry('400x300')
self.page1.grid() def backMain(self):
self.root.geometry('400x300')
self.page3.pack_forget()
self.page1.grid() def quitMain(self):
sys.exit(0) if __name__ == '__main__':
demo = APP()
整合的代码逻辑还可以更清楚一点,以后有时间改进,
然后列出了部分学习过程中遇到的新知识和问题,以作参考
QA:
1.Python: cv2.waitKey([delay]) → retval
waitKey()函数的功能是不断刷新图像,频率时间为delay,单位为ms。
返回值为当前键盘按键值。
用cv2.waitKey(n) == 27 break
即为 按下esc键时退出当前画面
2.os.path.join()函数:
连接两个或更多的路径名组件
os.listdir() 方法
用于返回指定的文件夹包含的文件或文件夹的名字的列表。这个列表以字母顺序
3.Image.open(imagePath).convert('L')
L代表转换到灰度图
4.os.path.split 把路径分割成 dirname 和 basename,返回一个元组
5.ret,frame = cap.read()
cap.read()按帧读取视频,ret,frame是获cap.read()方法的两个返回值。其中ret是布尔值,如果读取帧是正确的则返回True,如果文件读取到结尾,它的返回值就为False。frame就是每一帧的图像,是个三维矩阵。
6.把StringVar类型变量传入函数中时,用StringVar.get()方法可以得到字符串类型,并进行字符串连接等操作
7.tkinter库中的组件,在使用command参数时,在函数名前加 lambda: 就可以在函数名后加函数的参数,否则会报错。 例如 Button(root, command= lambda: FUNC(a,b)).pack()
8.遇到一个问题,在进行一次新的人脸录入后,就无法进行签到,必须退出系统重新进入,才能进行签到,报的错误是 error: (-215:Assertion failed) !_src.empty() in function 'cvtColor'
经过检查, 我在写GUI的类时,一开始写的是 self.camera = cv2.VideoCapture(0), 然后将self.camera 调入绑定的动作函数,而在多个动作函数中,都有cv2.VideoCapture(0).release的操作。问题就在于只获取了一次摄像头资源,但释放了多次。
解决方案:把GUI类中的self.camera删去,在执行的动作函数中,分别定义局部变量来获取摄像头资源,然后函数结束时释放资源。
9. 报错:sqlite3.ProgrammingError: Incorrect number of bindings supplied. The current statement uses 1, and there are 3 supplied
在写数据库里的插入函数时,遇到这个问题,例如conn.execute(‘inssert into xxtable values(?)’, a) 假设我插入a时输的是‘abc’,就会提示我 there are 3 supplied。也就是这时候传入的是字符串的长度。
而从下图可以看出,把a 设为元组,那么传的就是长度为一的元组中的元素
因此改为: conn.execute(‘inssert into xxtable values(?)’, (a, ))
10.数据库中设置了两个表,一个记录用户姓名,一个记录用户签到记录,删除表中原有记录,但是由于两个表的主键id都设置为autoincrement, 在记录删除后,id并没有置零。其实在数据库中,有一个表sqlite_sequence,这个表中会记录自增量的值。
因此在删除记录后,需要将自增量也清零
UPDATE sqlite_sequence SET seq = 0 WHERE name = ‘TableName’
11.对于treeview控件的使用,特别是其中的insert函数, 这里要插入的每条记录都是由三个元素组成的,因此需要一个元组组成的列表。而正好数据库中游标的fetchall(),正好符合要求。
12.数据库中 建表时候, 要用到当前时间,可以用 create xxtable (cur_time timestamp ) ,插入数据时则用 datetime.now来获取当前本地时间
13. 报错:IndexError:List index out of range
username = names[idnum-1]