Bạn sẽ xây dựng Công cụ Tìm kiếm Hình ảnh của Google như thế nào

Chúng ta có thể coi vấn đề này là vấn đề xếp hạng. Chúng ta cần một mô hình lấy hai hình ảnh làm đầu vào và trả về điểm tương tự. Bằng cách sử dụng mô hình đó, Chúng ta có thể xếp hạng các hình ảnh dựa trên điểm tương đồng đó. Một cách tiếp cận mô hình hóa điển hình là sử dụng các mô hình có thể học cách biểu diễn vectơ (nhúng) của hình ảnh và tính toán số liệu tương tự trên các vectơ đó. Chúng ta cần một mô hình có thể trích xuất các đặc điểm của hình ảnh để tìm hiểu cách biểu diễn vectơ của hình ảnh và Chúng ta cần một mô hình có thể trích xuất các đặc điểm văn bản để tìm hiểu cách biểu diễn vectơ của các đầu vào văn bản. Chúng ta cần đồng huấn luyện các mô hình hình ảnh và văn bản để các biểu diễn vectơ được căn chỉnh về mặt ngữ nghĩa.

Để đảm bảo việc truy xuất nhanh, chúng ta cần một cách để lưu trữ những hình ảnh hiện có và nhanh chóng tìm kiếm những hình ảnh tương tự. Vì chúng ta đang mã hóa hình ảnh thành dạng biểu diễn vectơ của chúng nên việc lập chỉ mục các hình ảnh vào cơ sở dữ liệu vectơ có vẻ hợp lý. Đường dẫn lập chỉ mục chuyển đổi các hình ảnh gốc thành biểu diễn vectơ của chúng và lập chỉ mục chúng thành cơ sở dữ liệu vectơ.

Khi người dùng nhập truy vấn văn bản hoặc hình ảnh, chúng ta cần trả về danh sách hình ảnh. Dịch vụ tạo nhúng tạo ra mã hóa nhúng cho truy vấn đầu vào. Truy vấn nhúng được gửi đến cơ sở dữ liệu vectơ trả về các lân cận gần nhất của truy vấn. Dịch vụ sắp xếp lại chủ yếu được sử dụng để sắp xếp lại những điểm gần nhất bằng cách sử dụng mô hình tốt hơn mô hình tạo nhúng. Nó có thể được sử dụng để cá nhân hóa thứ hạng cho người dùng cụ thể bằng cách sử dụng dữ liệu dành riêng cho người dùng. Danh sách kết quả là danh sách ID hình ảnh, sau đó nó được gửi đến kho hình ảnh để lấy hình ảnh thực tế trả về cho người dùng.

TÁC GIẢ

Về ABN Asia: Ai Base Network (ABN), ABN Asia được thành lập từ năm 2012, là một công ty xuất phát từ học thuật, do những giảng viên, cựu du học sinh Hungary, Hà Lan, Nga, Đức, và Nhật Bản sáng lập. Chúng ta chia sẻ đam mê chung và tầm nhìn vững chắc về công nghệ, mang đến sự đổi mới và chất lượng đỉnh cao cho khách hàng.