Nhóm đã sử dụng công cụ học sâu (deep learning) cũng như bộ framework COCO của Microsoft để huấn luyện một hệ thống cách phân tích, nhận biết một số đặc tính của con người (được gọi là sinh trắc học mềm).

Bạn có thể cung cấp cho hệ thống chi tiết một người mà bạn muốn tìm kiếm và nó sẽ trả về tất cả các video phù hợp với yêu cầu của bạn. Ví dụ, bạn muốn yêu cầu tìm kiếm “người phụ nữ mặc áo sơ mi màu đỏ, cao 155 cm”, kết quả sẽ hiển thị các video bao gồm những khung hình có người đáp ứng tiêu chí đó của bạn.

Theo nhóm thì hiện tại công cụ chỉ có thể tìm kiếm dựa trên chiều cao, màu sắc quần áo và giới tính. Nó hoạt động khá tốt nhưng trong nhiều trường hợp với một “tập dữ liệu video” phức tạp. Công nghệ này rất có giá trị trong việc tìm kiếm những người mất tích hay nghi phạm.

Hãy tưởng tượng một tình huống mà một người bị mất tích sau hai ngày. Người ta có thể sử dụng công cụ dựa trên trí thông minh nhân tạo này để yêu cầu cảnh quay từ máy ảnh tại các địa điểm mà cá nhân này có thể đã có mặt (một trạm xăng, ký túc xá, hay một địa điểm người đó có thể có mặt). Công việc này đối với con người là rất khó khăn và mất thời gian nhưng AI thì hoàn toàn có thể giải quyết nhanh chóng.

Trường hợp này cũng có thể được dùng để tìm kiếm các nghi phạm trong một vụ việc nào đó. Lúc này, các nhân chứng chỉ có thể cung cấp những thông tin như đối tượng là nam, cao khoảng bao nhiêu, mặc quần áo gì. Và AI gần như là một cứu cánh cho đội điều tra.

Tuy nhiên, dù gì đây vẫn là những công cụ giám sát. Nó vẫn vấp phải sự phản đối của nhiều người khi mà vấn đề riêng tư bị xâm hại nghiêm trọng.