UAV·AI Trật tự đô thị

Dự án tham gia Data for Life · Đại học Bách khoa Hà Nội

Ứng dụng UAV và AI trong quản lý trật tự đô thị

Hệ thống khép kín 5 lớp: drone cất cánh từ trạm dock theo lịch tự động, AI phát hiện công trình trái phép, cây đổ, ngập úng và gửi cảnh báo đến đúng cơ quan có thẩm quyền — ngay trong ngày, không cần con người tuần tra hay phân tích ảnh.

150 m
độ cao bay giám sát diện rộng
50 m
bay xác minh chi tiết, dựng 3D
3–5 cm/pixel
độ phân giải mặt đất ở 150 m
<24 giờ
từ chuyến bay đến phiếu cảnh báo
~0 đ
chi phí biên mỗi chuyến bay bổ sung

01 · Đặt vấn đề

Hà Nội đã dùng UAV — nhưng vẫn điều khiển bằng tay

Điều khiển bằng tay rất phức tạp: người điều khiển phải có bằng lái, và bay thủ công nên có thể bỏ lọt nhiều vi phạm. Dùng UAV với trạm dock tự động giúp đơn giản hóa quá trình bay — việc thu dữ liệu hầu như không cần người điều khiển bằng tay.

1

Phát hiện muộn

Vi phạm xây dựng thường chỉ lộ ra qua phản ánh của dân hoặc đợt kiểm tra định kỳ — khi công trình đã lên tầng, việc cưỡng chế tốn kém và phức tạp hơn nhiều lần.

2

Phụ thuộc vào con người

Cây đổ, ngập úng được ghi nhận nhờ tuần tra, đường dây nóng, mạng xã hội. Trong và ngay sau mưa bão — lúc cần thông tin nhất — lực lượng tại chỗ khó bao quát toàn địa bàn.

3

Phạm vi phủ không đồng đều

Nguồn lực có hạn nên tuyến phố nhỏ, vùng ven và khu vực giáp ranh ít được rà soát thường xuyên.

4

Thông tin chuyển giao chậm, rời rạc

Từ lúc phát hiện đến khi đến tay đúng cơ quan phải qua nhiều khâu trung gian — thiếu vị trí chính xác, hình ảnh và đánh giá mức độ để ra quyết định nhanh.

Đề tài tự động hóa toàn bộ chuỗi: bay giám sát → dựng bản đồ → phát hiện → xác minh → cảnh báo đúng cơ quan. Con người chỉ tham gia ở khâu cuối — ra quyết định xử lý. Sau khi thiết lập, chi phí biên mỗi lần rà soát bổ sung gần như bằng không — tăng tần suất bay là tăng khả năng phát hiện sớm.

02 · Giải pháp

Kiến trúc 5 lớp — chu trình khép kín

Hai lớp bay (1 và 4) dùng chung một đội drone đặt tại các trạm cất hạ cánh tự động: lớp 1 bay cao sàng lọc diện rộng, lớp 4 bay thấp xác minh có mục tiêu. Kết quả xử lý thực tế phản hồi ngược về lớp đầu để mô hình học tiếp và điều chỉnh lịch bay.

1 Bay giám sát tầm cao Drone tự hành bay 150 m theo lịch tự động hạ cánh về trạm, tự tải ảnh lên 2 Dựng ảnh trực giao & bản đồ số Ảnh ortho + mô hình số bề mặt, lưu đa thời điểm DỮ LIỆU NỀN Quy hoạch, giấy phép XD Bản đồ đường, cây xanh Mạng lưới thoát nước 3 AI phát hiện bất thường Công trình trái phép · Cây đổ · Ngập lụt Lõi kỹ thuật — so sánh đa thời điểm + dữ liệu nền khi có bất thường vượt ngưỡng tin cậy 4 Bay xác minh tầm thấp Đội UAV bay 50 m, chụp đa góc, dựng 3D loại bỏ báo động giả, thu bằng chứng 5 Đề xuất xử lý & gửi cảnh báo Định tuyến tự động đến đúng cơ quan Phản hồi: dữ liệu huấn luyện · điều chỉnh lịch bay · bay kiểm tra lại CÔNG TRÌNH TRÁI PHÉP Chủ tịch UBND phường/xã Trật tự xây dựng · Sở Xây dựng Thanh tra xây dựng CÂY XANH GÃY ĐỔ Đơn vị quản lý cây xanh UBND phường/xã · CSGT Điện lực · Cứu nạn cứu hộ NGẬP ÚNG ĐƯỜNG PHỐ Đơn vị thoát nước đô thị Phòng chống thiên tai UBND phường/xã · CSGT Phiếu cảnh báo: vị trí bản đồ · ảnh trước/sau · ảnh chi tiết 50 m · số liệu đo · mức ưu tiên · hướng xử lý Gửi song song: ứng dụng di động · tin nhắn · thư điện tử · API liên thông — quá hạn tự nhắc lại và chuyển cấp trên CƠ CHẾ BAY HAI TẦNG — MỘT ĐỘI DRONE DÙNG CHUNG 150 m — sàng lọc diện rộng phủ lưới toàn địa bàn, 3–5 cm/pixel, chồng phủ 80/70% 50 m — xác minh mục tiêu bay vòng đa góc, 1–1,5 cm/pixel, dựng mô hình 3D

← vuốt ngang để xem toàn bộ sơ đồ →

Lịch bay lập tự động theo 3 chế độ

Định kỳ theo chu kỳ cơ sở; theo rủi ro (bay dày nơi nhiều công trình thi công, điểm ngập, cây lâu năm); theo thời tiết — mưa bão vừa dứt là tự kích hoạt chuyến bay rà soát.

Trạm dock — không cần phi công

Drone thường trực tại trạm cất hạ cánh tự động: tự sạc pin, được che chắn thời tiết, tự truyền dữ liệu về máy chủ sau mỗi chuyến bay.

Điều phối đội UAV

Nhiều bất thường cùng lúc → nhiều drone được điều động song song, phân công theo khoảng cách, dung lượng pin và thứ tự ưu tiên.

Thiết bị bay trinh sát

Drone DJI Dock 3

Trạm DJI Dock 3 đi cùng drone Matrice 4D/4TD: drone tự cất cánh, bay tuần tra theo lộ trình, tự về trạm sạc pin và gửi dữ liệu — không cần phi công tại hiện trường.

54 phút
bay tối đa mỗi chuyến
10 km
bán kính tác nghiệp
27 phút
sạc pin 15 → 95 %
12 m/s
chịu gió khi bay, cất hạ cánh
Drone DJI Matrice 4D bay trên khu dân cư

Chức năng chính

Drone bay tuần tra trên khu dân cư

Tự bay tuần tra theo lịch

Tự cất cánh, bay theo lộ trình lập sẵn và tự hạ cánh về dock. Dock tự sạc pin 27 phút để sẵn sàng chuyến tiếp theo.

Cụm camera của drone Matrice 4TD

Camera 48 MP, zoom 112×

Camera góc rộng và tele 48 MP, zoom lai tới 112×; bản 4TD có thêm camera nhiệt 640×512. Đo xa laser 1.800 m để gắn tọa độ điểm vi phạm.

Cảm biến tránh vật cản trên drone Matrice 4D

Tránh vật cản mọi hướng

Cảm biến quanh thân giúp drone tự giảm tốc, dừng hoặc vòng tránh khi gặp nhà cao tầng, cây, dây điện. Định vị RTK ±0,1 m.

Drone bật đèn bay ban đêm

Bay ban đêm

Drone có đèn chiếu sáng; bản 4TD dùng camera nhiệt để quan sát khi trời tối, phát hiện điểm nóng hoặc người trong vùng ngập.

Dock 3 và cảm biến gió dưới mưa

Dock chịu mọi thời tiết

Dock đạt chuẩn IP56, hoạt động từ −30 đến 50 °C, có trạm đo gió và mưa để tự hoãn chuyến bay khi thời tiết xấu.

Màn hình điều khiển bay từ xa, hình ảnh trực tiếp từ drone

Điều khiển và xem trực tiếp từ xa

Trung tâm xem video trực tiếp tới 1080p, độ trễ khoảng 100 ms; máy chủ của hệ thống ra lệnh bay qua DJI Cloud API.

Ảnh và thông số: DJI Enterprise. Cấu tạo chi tiết ở mục Drone tự hành.

03 · Lõi kỹ thuật

Ba khối AI phát hiện chuyên biệt

Ảnh trực giao mới được đưa đồng thời qua ba khối, mỗi khối một nhóm vấn đề — cùng chạy trên một hạ tầng bay và dữ liệu dùng chung.

Công trình trái phép

Siamese change detection + DSM

Mạng Siamese (ChangeFormer, BIT, SNUNet) so cặp ảnh giữa hai lần bay để tìm vùng biến động; chênh lệch mô hình số bề mặt loại bỏ biến động giả do bóng đổ, cây cối.

  • Phân loại: san lấp, đào móng, tập kết vật liệu, xây mới, cơi nới, lấn chiếm
  • Chồng lớp quy hoạch + ranh thửa + CSDL giấy phép xây dựng
  • Chỉ cảnh báo khi không có phép hoặc vượt phạm vi được cấp

Cây xanh gãy đổ

YOLO / Mask R-CNN + biến động độ cao tán

Phát hiện thân cây, cành lớn nằm trên mặt đường, vỉa hè hoặc đè lên công trình, phương tiện; đối chiếu lớp dữ liệu cây xanh và các lần bay trước.

  • Tán cây biến mất / độ cao tán giảm đột ngột trên DSM → củng cố nhận định
  • Giao với bản đồ mạng lưới đường → tuyến bị ảnh hưởng, mức cản trở
  • Xác minh 50 m: cây có đè dây điện, cáp viễn thông, người, xe?

Ngập úng đường phố

Phân đoạn ngữ nghĩa U-Net / SegFormer

Tách vùng mặt nước trên ảnh trực giao, giao với mặt nạ mạng lưới đường, so với ảnh nền khô ráo để loại trừ ao hồ, sông và mặt nước thường trực.

  • Đầu ra: danh sách đoạn đường ngập kèm chiều dài, diện tích
  • Xác minh 50 m: ước tính độ sâu từ DSM + vật tham chiếu (bó vỉa, bánh xe)
  • Phát hiện phương tiện chết máy, người mắc kẹt trong vùng ngập

Ranh giới trách nhiệm rõ ràng: mô hình học sâu chỉ kết luận "có công trình mới xuất hiện"; nhận định trái phép là kết quả của phép đối chiếu giữa dữ liệu ảnh và dữ liệu hành chính (giấy phép, quy hoạch). Mọi phát hiện vượt ngưỡng tin cậy đều qua bước bay xác minh 50 m trước khi cảnh báo được gửi đi.

04 · Điều phối

Không chỉ "có gì bất thường" — mà "gửi cho ai, cần làm gì"

Mỗi loại vấn đề gắn với nhóm người nhận và bộ hướng xử lý đề xuất; hệ thống xác định đơn vị hành chính tại vị trí sự việc để gửi đúng cơ quan phụ trách địa bàn. Ma trận cấu hình được theo phân cấp của từng địa phương.

Loại vấn đề Tiếp nhận chính Đồng gửi · phối hợp Hướng xử lý đề xuất
Công trình không phép, sai phép, cơi nới vượt phép
  • Chủ tịch UBND phường/xã
  • Bộ phận trật tự xây dựng phường/xã
  • Cơ quan cấp giấy phép xây dựng
  • Sở Xây dựng (theo dõi, tổng hợp)
  • Thanh tra, kiểm tra xây dựng theo phân cấp
  • Kiểm tra hiện trường, lập biên bản
  • Yêu cầu tạm dừng thi công
  • Đối chiếu hồ sơ pháp lý — ảnh và số liệu 3D làm căn cứ
Cây xanh gãy đổ
  • Đơn vị quản lý, duy trì cây xanh đô thị
  • UBND phường/xã
  • CSGT, công an phường/xã khi cây chắn đường
  • Điện lực, viễn thông khi cây chạm đường dây
  • Cứu nạn cứu hộ khi có người, xe bị đè
  • Rào chắn, phân luồng giao thông
  • Điều xe cẩu, thiết bị cưa cắt phù hợp
  • Cắt điện cục bộ nếu chạm dây; kiểm tra cây lân cận
Ngập úng đường phố
  • Đơn vị quản lý thoát nước đô thị
  • UBND phường/xã
  • Chỉ huy phòng thủ dân sự, phòng chống thiên tai
  • Cảnh sát giao thông
  • Cứu hộ khi có người, xe mắc kẹt
  • Cảnh báo tuyến ngập, đề xuất lộ trình thay thế
  • Điều xe, máy bơm; khơi thông cửa thu nước
  • Bay lặp lại theo dõi đến khi nước rút

Khẩn cấp

15 phút

Nguy cơ đến tính mạng: cây đè người hoặc xe, cây chạm dây điện, ngập sâu có người mắc kẹt. Gửi đồng thời mọi kênh.

Cao

1 giờ

Cây chắn tuyến chính; ngập tuyến giao thông trọng điểm; công trình trái phép đang thi công quy mô lớn.

Thông thường

Trong ngày

Công trình trái phép giai đoạn đầu; cây đổ không cản trở giao thông; ngập cục bộ trên đường nhỏ.

Cơ chế chống bỏ sót: mỗi cảnh báo có thời hạn xác nhận tiếp nhận theo mức ưu tiên — quá hạn chưa xác nhận, hệ thống tự nhắc lại và chuyển lên cấp quản lý cao hơn. Kết quả xử lý được ghi nhận ngược về hệ thống để cải thiện mô hình và tự lập chuyến bay kiểm tra lại.

05 · Tính mới

So với các phương án hiện có

Tiêu chí Tuần tra & phản ánh Ảnh vệ tinh Lái drone bằng người điều khiển Drone hai tầng (đề xuất)
Độ phân giải Theo mắt người, không đo đạc được 0,3–1 m/pixel — không thấy vi phạm nhỏ, cây đổ Cao, nhưng thay đổi theo độ cao và góc bay của từng phi công 3–5 cm/pixel (150 m) · ~1 cm/pixel (50 m)
Chủ động thời điểm Theo ca trực, giờ hành chính Phụ thuộc quỹ đạo; mây che đúng lúc mưa bão Phải chờ phi công có chứng chỉ ra hiện trường Bay ngay khi thời tiết cho phép, kể cả sau bão
Độ phủ địa bàn Không đều — phố nhỏ, vùng ven bị bỏ sót Rộng nhưng thưa về thời gian Theo điểm được giao, giới hạn trong tầm nhìn phi công Quét lưới đều toàn địa bàn theo lịch
Thời gian phát hiện Ngày → tuần, chờ người báo Theo lịch chụp, thường nhiều ngày Vài ngày — người xem lại video, tự nhận diện Trong ngày bay — phát hiện, xác minh, cảnh báo
Chi phí mỗi lần rà soát Nhân lực tăng tuyến tính theo tần suất Mua ảnh theo cảnh, đắt ở độ phân giải cao Mỗi chuyến bay tốn một phi công + thời gian di chuyển Chi phí biên gần bằng 0 sau khi thiết lập

So với các hệ thống UAV hiện có: phần lớn mới dừng ở dựng bản đồ để con người tự quan sát, phục vụ một bài toán riêng lẻ. Đóng góp của đề tài là tự động hóa khép kín từ lập lịch bay đến gửi cảnh báo, cơ chế bay hai tầng 150 m / 50 m cân bằng độ phủ và độ chi tiết, và một hạ tầng dùng chung cho nhiều loại vấn đề đô thị.

06 · Mở rộng

Một hạ tầng — nhiều bài toán đô thị

Mọi vi phạm để lại dấu hiệu nhìn thấy được từ trên cao đều đưa vào được. Đội drone, trạm dock, pipeline ảnh, cơ chế xác minh và điều phối dùng lại toàn bộ — mỗi vấn đề mới chỉ cần bổ sung ba thành phần:

+1

Mô hình AI phát hiện

Huấn luyện trên dữ liệu ảnh gán nhãn của loại vấn đề tương ứng.

+2

Lớp dữ liệu nền

Xác định hiện trạng là đúng hay sai quy định — như vai trò của giấy phép với công trình.

+3

Cấu hình điều phối

Bổ sung người nhận, hướng xử lý, mức ưu tiên vào ma trận cảnh báo.

Rác thải, phế thải xây dựng đổ trộm

Đống rác, phế thải mới xuất hiện trên vỉa hè, bãi trống, bờ sông — nhận biết qua màu sắc, kết cấu và độ cao trên DSM; đối chiếu điểm tập kết được phép và lịch thu gom.

→ UBND phường/xã · đơn vị thu gom · công an khi đổ trộm

Đỗ xe trái phép

Ô tô đỗ trên vỉa hè, lòng đường cấm, sát nút giao; bay lặp lại sau một khoảng thời gian để phân biệt dừng tạm với đỗ kéo dài; đối chiếu bản đồ cấm đỗ và điểm trông giữ được phép.

→ CSGT · công an phường/xã · UBND phường/xã

Lấn chiếm vỉa hè, lòng đường

Mái che, bàn ghế, hàng hóa bày ra vỉa hè — diện tích chiếm dụng đo được trực tiếp trên ảnh trực giao; đối chiếu ranh giới vỉa hè và phạm vi được phép sử dụng tạm thời.

→ UBND phường/xã · trật tự đô thị · công an phường/xã

Cùng nguyên lý còn áp dụng được cho: biển quảng cáo sai quy định trên mái nhà, xây dựng trên đất nông nghiệp hoặc hành lang sông kênh, đốt rác ngoài trời, vật liệu xây dựng chiếm lòng đường, hư hỏng mặt đường, mất nắp hố ga. Lộ trình: vỉa hè và phế thải xây dựng trước (đối tượng lớn, tồn tại đủ lâu); đỗ xe trái phép sau — cần giải quyết thêm căn cứ pháp lý và quyền riêng tư.

07 · Drone tự hành

Triển khai trên DJI Dock 3

Dùng thiết bị thương mại sẵn có thay vì tự chế tạo: trạm DJI Dock 3 đi cùng drone DJI Matrice 4D. Dock che mưa gió, tự sạc pin và đo thời tiết tại chỗ; drone tự cất cánh, bay tuần tra và về dock. Dock nối mạng dây vào đường truyền internet của trụ sở; máy chủ AI của dự án điều khiển qua DJI Cloud API.

1,85 kgdrone Matrice 4D
54 phútthời gian bay tối đa
10 kmbán kính tác nghiệp quanh dock
IP56dock chịu mưa gió, −30 đến 50 °C
27 phútsạc pin 15 → 95 %
Drone DJI Matrice 4D đang bay
DJI Matrice 4D: drone đi kèm Dock 3, gập gọn trong dock và tự bung khi cất cánh. Ảnh: DJI.

1.1 · DJI Matrice 4D

Tự cất cánh, tự tránh vật cản, tự về dock

Bay theo đường bay lập sẵn, không cần người cầm tay điều khiển. Nặng 1,85 kg, bay tối đa 54 phút, chịu gió 12 m/s, kín nước bụi IP55. Ba camera — góc rộng 20 MP, tele trung và tele 48 MP — đủ nét nhận diện vi phạm ở 50–150 m.

  • Tránh vật cản mọi hướng — camera thị giác kép quanh thân + cảm biến hồng ngoại 3D phía dưới; gặp vật cản thì giảm tốc, dừng treo, vòng tránh hoặc báo về trung tâm
  • Đo xa laser 1.800 m, RTK ±0,1 m — gắn tọa độ chính xác cho điểm vi phạm nhìn thấy từ xa; luôn giữ 15 % pin dự phòng để quay về dock
Dock · mạng dây Gần dock · sóng mạnh Tới 10 km · sóng O4
Vùng tác nghiệp tính từ dock: drone liên lạc với dock qua sóng O4 Enterprise, dock gửi dữ liệu về máy chủ bằng mạng dây.

1.2 · Truyền dẫn

Sóng O4 về dock, mạng dây về máy chủ

Drone nói chuyện với dock qua sóng O4 Enterprise. Dock cắm cáp mạng (Ethernet 1 Gbps) vào đường truyền internet của trụ sở do VNPT kéo. Máy chủ của dự án điều khiển dock qua DJI Cloud API, dữ liệu nằm trên máy chủ trong nước.

Chụp ảnh→gắn vị trí + thời gian→sóng O4 về dock→mạng dây→máy chủ AI→bản đồ điều hành
  • Gần dock — video trực tiếp và ảnh gốc, độ trễ thấp
  • Xa, sóng yếu — gửi ảnh nén + vị trí trước, ảnh gốc tải bù khi drone về dock
  • Mất sóng — bay tiếp theo lộ trình đã nạp hoặc tự về dock
DJI Dock 3 đặt trên nóc nhà giữa đô thị, drone Matrice 4D vừa cất cánh
DJI Dock 3 trên nóc nhà giữa phố: nắp đôi mở, drone vừa cất cánh. Ảnh: DJI.

2 · DJI Dock 3

Bãi đỗ thông minh, hoạt động mọi thời tiết

Đặt trên nóc trụ sở công an phường; drone tự hạ cánh, sạc pin và gửi dữ liệu mà không cần người ra tận nơi. Dock nặng 55 kg, khi đóng chỉ 64 × 75 × 77 cm, mỗi trạm chứa 1 drone.

  • Kín nước bụi IP56, −30 đến 50 °C — nắp đôi tự đóng khi mưa, điều hòa nhiệt cho pin; hạ cánh được trong gió tới 12 m/s
  • Hạ cánh + sạc tự động — RTK dẫn về đúng tâm bãi, sạc 15→95 % khoảng 27 phút; pin dự phòng trên 4 giờ khi mất điện
  • Trạm quan trắc + mạng dây — có sẵn đo gió, mưa, nhiệt độ, ngập nước; dự án gắn thêm cảm biến chất lượng không khí. Mưa > 2 mm/giờ hoặc gió > 10 m/s thì không cất cánh

Xem số đo trực tiếp của các dock trong demo sản phẩm →

Thông số chính thức

DJI Dock 3 + Matrice 4D

DJI Dock 3 · trạm cất hạ cánh, sạc tự động
Kích thước · khối lượng640 × 745 × 770 mm (đóng) · 55 kg
Chống nước bụi · nhiệt độIP56 · −30 đến 50 °C
Sạc pin15 → 95 % trong 27 phút
Gió tối đa khi hạ cánh12 m/s
Trạm thời tiếtGió, mưa, nhiệt độ, ngập nước
Nguồn · dự phòng100–240 V, tối đa 800 W · pin > 4 giờ
MạngMạng dây Ethernet 1 Gbps
Tích hợpDJI Cloud API · FlightHub 2 nội bộ
DJI Matrice 4D · drone đi kèm Dock 3
Khối lượng1.850 g (cất cánh tối đa 2.090 g)
Thời gian bay54 phút (treo 47 phút)
Bán kính tác nghiệp10 km quanh dock
Chịu gió · chống nước12 m/s · IP55
CameraGóc rộng 20 MP · tele trung, tele 48 MP
Đo xa laser1.800 m
Định vịRTK ±0,1 m
Tránh vật cảnThị giác đa hướng + hồng ngoại 3D

Ảnh và thông số: DJI (enterprise.dji.com).

3 · Khả năng triển khai

Phối hợp ba bên: Bộ Công an — ĐH Bách khoa Hà Nội — VNPT

Phần cứng dùng DJI Dock 3 bán sẵn nên triển khai được ngay, không phải chờ chế tạo. Công sức dồn vào phần mềm: VNPT lo mạng, máy chủ và nền tảng AI; Bách khoa giải các bài toán nhận dạng và tích hợp; Bộ Công an cấp phép và đồng hành cùng sản phẩm.

Cơ quan đồng hành

Bộ Công an

  • Giấy phép bayCấp phép bay cho đội drone trong đô thị
  • Nguồn vốnHỗ trợ kinh phí mua dock, drone và triển khai
  • Nhân lựcCử cán bộ phường vận hành và giám sát chuyến bay

Nghiên cứu · tích hợp

ĐH Bách khoa Hà Nội

  • SiglabCùng VNPT Media giải các bài toán AI, nhận dạng
  • Khoa Công nghệ thông tinLập đường bay, điều khiển dock qua DJI Cloud API
  • Điện – Điện tửLắp đặt, bảo trì dock và gắn thêm cảm biến chất lượng không khí

Hạ tầng · nền tảng

VNPT

  • VNPT ITHạ tầng mạng và máy chủ
  • VNPTCung cấp, lắp đặt Dock 3, Matrice 4D; kéo đường truyền mạng dây cho từng trạm
  • VNPT MediaNền tảng UAV và các mô hình AI tích hợp vào hệ thống

Hết chuyến bay — drone về dock sạc