Đồ án tốt nghiệp - Ứng dụng xử lý ảnh và yolo trong hệ thống máy thanh toán tự động

BỘ GIÁO DỤC VÀ ĐÀO TẠO
TRƯỜNG ĐẠI HỌC SƯ PHẠM KỸ THUẬT THÀNH PHỐ HỒ CHÍ MINH
KHOA ĐIỆN - ĐIỆN TỬ
-

ĐỒ ÁN TỐT NGHIỆP
ỨNG DỤNG XỬ LÝ ẢNH VÀ YOLO TRONG HỆ THỐNG
MÁY THANH TOÁN TỰ ĐỘNG

SVTH

KHÓA

: TRƯƠNG QUỐC TÍN

MSSV: 20161045

DOÃN ĐỨC MINH

MSSV: 20161231

: 2020

NGÀNH : CNKT Điện tử -Viễn thông
GVHD

: Ths. Nguyễn Ngô Lâm

Tp. Thủ Đức, tháng 07 năm 2024

BỘ GIÁO DỤC VÀ ĐÀO TẠO
TRƯỜNG ĐẠI HỌC SƯ PHẠM KỸ THUẬT THÀNH PHỐ HỒ CHÍ MINH
KHOA ĐIỆN - ĐIỆN TỬ
-

ĐỒ ÁN TỐT NGHIỆP
ỨNG DỤNG XỬ LÝ ẢNH VÀ YOLO TRONG HỆ THỐNG
MÁY THANH TOÁN TỰ ĐỘNG

SVTH

KHÓA

:

TRƯƠNG QUỐC TÍN

MSSV: 20161045

DOÃN ĐỨC MINH

MSSV: 20161231

: 2020

NGÀNH : CNKT Điện tử -Viễn thông
GVHD

:

Ths. Nguyễn Ngô Lâm

Tp. Thủ Đức, tháng 07 năm 2024

CỘNG HÒA XÃ HỘI CHỦ NGHĨA VIỆT NAM
Độc lập - Tự do - Hạnh phúc
***
Tp. Thủ Đức, ngày tháng 07 năm 2024
NHIỆM VỤ ĐỒ ÁN TỐT NGHIỆP
Họ và tên sinh viên: Trương Quốc Tín MSSV: 20161045
Doãn Đức Minh

MSSV: 20161231

Ngành: Công Nghệ Kỹ Thuật Điện Tử - Viễn Thông

Lớp: 20161CLVT1A,B

Giảng viên hướng dẫn: Ths. Nguyễn Ngô Lâm
Ngày nhận đề tài: 28/02/2024

Ngày nộp đề tài: 21/06/2024

1. Tên đề tài: Ứng dụng xử lý ảnh và Yolo trong hệ thống máy thanh toán tự động
2. Các số liệu, tài liệu ban đầu:
 Kiến thức về các môn: Vi xử lý, Xử lý ảnh, Mạch điện, Hệ thống nhúng, IoTs
 Các tài liệu liên quan về lập trình Esp32, Raspberry, Python và
Django Framework.
 Các kiến thức về ngôn ngữ lập trình C, Linux.
 Kết hợp với sáng tạo, vận dụng kiến thức từ các đồ án môn học trước
3. Nội dung thực hiện đề tài:
 Tính toán, lựa chọn linh kiện và thiết kế mô hình hệ thống
 Vẽ sơ đồ khối, sơ đồ nguyên lý thông qua phần mềm Proteus
 Lập trình cho hệ thống thông qua các phần mềm
 Triển khai mô hình hoàn chỉnh
 Viết báo cáo
 Bảo vệ đồ án tốt nghiệp
4. Sản phẩm: Mô hình hệ thống ứng dụng xử lý ảnh và Yolo trong hệ thống máy
thanh toán tự động.
TRƯỞNG NGÀNH

GIẢNG VIÊN HƯỚNG DẪN

CỘNG HÒA XÃ HỘI CHỦ NGHĨA VIỆT NAM
Độc lập - Tự do - Hạnh phúc
***

PHIẾU NHẬN XÉT CỦA GIÁO VIÊN HƯỚNG DẪN
Họ và tên sinh viên: Trương Quốc Tín

MSSV: 20161045

Doãn Đức Minh

MSSV: 20161231

Ngành: Công Nghệ Kỹ Thuật Điện Tử - Viễn Thông

Lớp: 20161CLVT1A,B

5. Tên đề tài: Ứng dụng xử lý ảnh và Yolo trong hệ thống máy thanh toán tự động
Họ và tên Giáo viên hướng dẫn: Ths. Nguyễn Ngô Lâm
NHẬN XÉT:
1. Về nội dung đề tài &amp khối lượng thực hiện:.................................................................

..............
...

...
[12] Datasheet I2C: https://s.net.vn/XFWZ
[13] Datasheet Button: https://s.net.vn/uAYN
[14] Loadcell: https://hshop.vn/products/cam-bien-loadcell-5kg
[15] HCSR04: https://hshop.vn/products/cam-bien-sieu-am-srf04
[16] Led: https://icdayroi.com/led-sieu-sang-mau-xanh-duong-10mm
[17] Buzzer: https://icdayroi.com/buzzer-12095-5v
Bài viết tham khảo:

[18] Phạm Thị Thanh Thảo – Phan Trần Hoài Vũ, Đồ án tốt nghiệp “Nghiên cứu,
thiết kế và thi công mô hình đếm và phân loại sản phẩm theo cân nặng, màu sắc”,
93

TPHCM, 6/2019: https://s.net.vn/LDzV

[19] Encord, YOLO Object Detection Guide, Encord Blog, 2023. [Online].
Available: https://encord.com/blog/yolo-object-detection-guide/

[20] HackMD,

Viewperm,

HackMD,

2024.

[Online].

Available:

https://hackmd.io/@58ZC49ZfS86wYXLRGGOg/Viewperm

[21] Wikipedia,

OpenCV,

Wikipedia,

2024.

[Online].

Available:

2024.

[Online].

Available:

https://en.wikipedia.org/wiki/OpenCV.

[22] Wikipedia,

Pyzbar,

Wikipedia,

https://en.wikipedia.org/wiki/Pyzbar.

[23] Nguyễn Hiền Minh – Phan Thanh Phong, Đồ án tốt nghiệp “Ứng dụng xử lý ảnh
trong hệ thống phân loại sản phẩm”, TPHCM, 6/2019: https://s.net.vn/q1d3
[23] SPI vs. I2C vs. UART: Differences Between These Communication Interfaces:
https://www.nextpcb.com/blog/spi-i2c-uart

94

PHỤ LỤC 1
Hướng dẫn sử dụng toàn hệ thống:
- Bước 1: Đặt sản phẩm lên giữa bàn cân.
- Bước 2: Nhấn nút chọn chế độ:
 Nhấn nút 1 để nhận diện trái cây.
 Nhấn nút 2 để nhận diện mã vạch.
- Bước 3: Khi đèn nút 1 tắt. Nhấn nút 3 để gửi. Nếu hệ thống kêu lên 1 tiếng “Bíp” thì là hệ
thống đã gửi thành công. Còn đối với mã vạch thì không cần nhấn nút gửi sau khi nhận diện
thành công hệ thống sẽ tự gửi và cũng sẽ kêu lên tương tự như nhận diện trái cây.
- Bước 4: Lấy sản phẩm đã nhận diện ra khỏi vị trí bàn cân và tiếp tục thực hiện bước 1, 2
và 3 cho các loại sản phẩm còn lại.
- Bước 5: Nhấn nút “PAY” ngay trên màn hình bên dưới thông tin sản phẩm để tiến hành
thanh toán.
- Bước 6: Quét mã QR để thanh toán.
Chú Ý: Sau khi quét mã và thanh toán thành công thì giao diện sẽ hiển thị là đã thanh toán
thành công và trở về lại về giỏ hàng trống ban đầu.

95

PHỤ LỤC 2
Video vận hành hệ thống:
h ps://drive.google.com/drive/folders/1uptKhCPKP_fQeu1FcUO402RKuV3TiQUI?usp=sh
aring
Code WEB:
https://drive.google.com/drive/folders/1UTFXhoKJKaKshAYi7nX1Yd3EU_ACWujp?us
p=sharing
Code VXL:
https://drive.google.com/drive/folders/1zaUdH4gupbAfd3_NhWUEaTz8n24v9W2S?usp
=sharing

96