Đồ án tốt nghiệp - Thiết kế ứng dụng hỗ trợ nhận biết tổn thương da sử dụng Deep learning

BỘ GIÁO DỤC &amp ĐÀO TẠO
TRƯỜNG ĐẠI HỌC SƯ PHẠM KỸ THUẬT TP. HỒ CHÍ MINH
KHOA ĐIỆN – ĐIỆN TỬ
BỘ MÔN ĐIỆN TỬ CÔNG NGHIỆP – Y SINH
-

ĐỒ ÁN TỐT NGHIỆP
NGÀNH KỸ THUẬT Y SINH
ĐỀ TÀI:

THIẾT KẾ ỨNG DỤNG HỖ TRỢ NHẬN
BIẾT TỔN THƯƠNG DA SỬ DỤNG
DEEP LEARNING
GVHD: TS. Nguyễn Mạnh Hùng
SVTH: Khuất Thu Uyên
MSSV: 1929065
SVTH: Lê Đặng Đăng Khoa
MSSV: 19129006

Tp. Hồ Chí Minh - 07/2023

TRƯỜNG ĐH SPKT TP. HỒ CHÍ MINH

CỘNG HÒA XÃ HỘI CHỦ NGHĨA VIỆT NAM

KHOA ĐIỆN-ĐIỆN TỬ

ĐỘC LẬP - TỰ DO - HẠNH PHÚC

BỘ MÔN ĐIỆN TỬ CÔNG NGHIỆP – Y SINH

o0o-TP. HCM, ngày 03 tháng 07 năm 2023

NHIỆM VỤ ĐỒ ÁN TỐT NGHIỆP
Họ tên sinh viên 1: Khuất Thu Uyên

MSSV:

19129065

Họ tên sinh viên 2: Lê Đặng Đăng Khoa

MSSV:

19129006

Chuyên ngành:

Kỹ thuật Y sinh

Mã ngành:

7520212

Hệ đào tạo:

Đại học chính quy

Mã hệ:

1

Khóa:

2019

Lớp:

191290

TÊN ĐỀ TÀI: THIẾT KẾ ỨNG DỤNG NHẬN BIẾT TỔN THƯƠNG DA

I.

SỬ DỤNG DEEP LEARNING.
II. NHIỆM VỤ:
1. Các số liệu ban đầu:
-

Ngôn ngữ sử dụng: Python.

-

Bộ dữ liệu tổn thương da được lấy từ ISIC 2018.

-

Mô hình mạng MFSNet để phân đoạn vùng da bị tổn thương.

-

Mô hình pre-train Efficient_v2, swin_v2 để phân loại 7 loại tổn thương da.

-

Thiết kế giao diện người dùng với thư viện Tkinter

2. Nội dung thực hiện:
-

Nội dung 1: Khảo sát bộ dữ liệu.

-

Nội dung 2: Thiết kế và thi công thiết bị mô phỏng.

-

Nội dung 3: Xử lý ảnh nhằm loại bỏ nhiễu lông, tóc.

-

Nội dung 4: Xây dựng mô hình phân đoạn được vùng tổn thương da.

-

Nội dung 5: Tính toán diện tích tổn thương sau khi phân đoạn.

-

Nội dung 6: Xậy dựng mô hình phân loại 7 tổn thương da.

-

Nội dung 7: Lập trình ứng dụng hỗ trợ nhận biết tổn thương da, đóng gói ứng
dụng thành tệp thực thi có thể chạy trên các máy tính hệ điều hành Windows.

i

-

Nội dung 8: Viết báo cáo.

III. NGÀY GIAO NHIỆM VỤ:

20/02/2023

IV. NGÀY HOÀN THÀNH NHIỆM VỤ:

03/07/2023

V. HỌ VÀ TÊN CÁN BỘ HƯỚNG DẪN:

TS. Nguyễn Mạnh Hùng

CÁN BỘ HƯỚNG DẪN

BM. ĐIỆN TỬ CÔNG NGHIỆP – Y SINH

ii

TRƯỜNG ĐH SPKT TP. HỒ CHÍ MINH

CỘNG HÒA XÃ HỘI CHỦ NGHĨA VIỆT NAM

KHOA ĐIỆN-ĐIỆN TỬ

ĐỘC LẬP - TỰ DO - HẠNH PHÚC

BỘ MÔN ĐIỆN TỬ CÔNG NGHIỆP – Y SINH

o0o-TP. HCM, ngày 03 tháng 07 năm 2023

LỊCH TRÌNH THỰC HIỆN ĐỒ ÁN TỐT NGHIỆP
Họ tên sinh viên 1: Khuất Thu Uyên
Lớp:

191290C

MSSV:

19129065

MSSV:

19129006

Họ tên sinh viên 2: Lê Đặng Đăng Khoa
Lớp:

191290B

Tên đề tài: THIẾT KẾ ỨNG DỤNG HỖ TRỢ NHẬN BIẾT TỔN THƯƠNG
DA SỬ DỤNG DEEP LEARNING.

Tuần/ng
...

...
ó sẵn trong máy tính, ta sử dụng nút nhấn . Khi
nhấp chọn , ứng dụng sẽ hiển thị cửa sổ đưa tới các mục lưu trữ trong máy
tính, ta chọn hình cần dự đoán và nhấp chọn Open như hình 5.17.

Hình PL.9 Lựa chọn hình ảnh từ máy tính
Sau khi đã tải được hình ảnh cần dự đoán vào ứng dụng, bác sĩ có thể sử dụng các
nút nhấn chức năng ở khung bên phải màn hình làm việc như hình 5.18. Các nút
nhấn chức năng bao gồm Remove Hair, Segment, Predict và S-Cal.

Hình PL.10 Hình ảnh kết quả phân loại tổn thương và diện tích của tổn thương.

BỘ MÔN ĐIỆN TỬ CÔNG NGHIỆP - Y SINH

62

PHỤ LỤC
Nút nhấn Remove Hair sẽ xử lý loại bỏ lông, tóc trên ảnh được chọn và hiển thị kết
quả ở khung (c). Nút nhấn Segment sẽ xử lý phân đoạn hình ảnh, tách vùng tổn
thương ra khỏi vùng nền trên ảnh được chọn và hiển thị kết quả ở khung (d). Nút
nhấn Predict sẽ xử lý phân loại tổn thương da và trả về tên của loại tổn thương da
được dự đoán ở ô (1). Nút nhấn S-Cal sẽ tính toán diện tích vùng tổn thương sau khi
đã được xử lý phân đoạn, kết quả trả về được hiển thị ở ô (2).
Khi hoàn tất các bước trên, bác sĩ có thể nhập các mô tả, vị trí vùng tổn thương và
kết luận ở khung Kết quả khám bệnh như hình 5.19

Hình PL.11 Nhập kết quả khám bệnh
Khi đã xem xét kĩ lưỡng về kết luận chẩn đoán, bác sĩ có thể lưu trữ hình ảnh khám
bệnh bằng nút nhấn Export. Khi nhấp chọn Export, ứng dụng sẽ hiện cửa sổ các thư
mục máy tính, bác sĩ lựa chọn thư mục muốn lưu trữ hình ảnh và chọn
Folder. Ứng dụng sẽ xuất ra hai tệp hình ảnh được chọn và ảnh phân đoạn tương
ứng với tên original_image và segment_image như hình 5.20

BỘ MÔN ĐIỆN TỬ CÔNG NGHIỆP - Y SINH

63

PHỤ LỤC

Hình PL.12 Xuất và lưu trữ hình ảnh
Bác sĩ còn có thể xuất và lưu kết quả khám bệnh thành tệp PDF. Khi nhấp chọn
Save pdf, sẽ xuất hiện một cửa sổ, bác sĩ sẽ lựa chọn thư mục muốn lưu trữ và đặt
tên cho tệp PDF, cuối cùng nhấp chọn Save như minh họa trong hình 5.21. Mẫu kết
quả khám bệnh được minh họa trong hình 5.22.

Hình PL.13 Xuất và lưu trữ kết quả khám bệnh thành tệp PDF

BỘ MÔN ĐIỆN TỬ CÔNG NGHIỆP - Y SINH

64

PHỤ LỤC

Hình PL.14 Mẫu phiếu kết quả khám bệnh
Ứng dụng còn có trang Help chứa thông tin hướng dẫn chức năng của các nút nhấn
và vùng làm việc và trang About chứa thông tin về ứng dụng như hình 5.23.

BỘ MÔN ĐIỆN TỬ CÔNG NGHIỆP - Y SINH

65

PHỤ LỤC

a. Giao diện trang Help

b. Giao diện trang About
Hinh PL.15 Giao diện hai trang phụ của ứng dụng SkinAI

BỘ MÔN ĐIỆN TỬ CÔNG NGHIỆP - Y SINH

66