HÌNH ẢNH VỀ TỰ ĐỘNG GOOGLE chú thích và Video

Làm thế nào hiệu quả có thể là một công cụ tìm kiếm tự động tạo ra các chú thích cho hình ảnh và video , để họ có thể phản ứng tốt để tìm kiếm các truy vấn ? Bao nhiêu có thể được thực hiện mà không can thiệp của con người và xem xét?

Một ứng dụng bằng sáng chế của Google vừa được công bố khám phá các chủ đề, và đi kèm với một phương pháp chú thích bằng cách so sánh với hình ảnh tương tự được tìm thấy trên các trang web, và các văn bản xung quanh những hình ảnh tương tự.

Phương pháp và thiết bị tự động chú thích hình ảnh
Được phát minh bởi Jay N. Yagnik
Ứng dụng bằng sáng chế Mỹ 20080021928
Công bố ngày 24 tháng 1 năm 2008
Nộp ngày 24 Tháng 7 2006

trừu tượng
Một phương án của sáng chế hiện nay cung cấp một hệ thống tự động chú thích một hình ảnh. Trong khi hoạt động , hệ thống nhận được hình ảnh. Tiếp theo, hệ thống chiết xuất các tính năng hình ảnh từ các hình ảnh.

Hệ thống sau đó xác định hình ảnh khác có tính năng tương tự như hình ảnh . Hệ thống tiếp theo có được văn bản liên quan đến hình ảnh khác, và xác định từ khóa giao nhau trong văn bản thu được . Cuối cùng , hệ thống chú giải hình ảnh với các từ khóa giao nhau.

Vấn đề với hình ảnh chú thích

Kết nối với các trang web đã trở nên nhanh hơn và nhanh hơn, với nhiều tùy chọn băng thông cao hơn cho người dân. Điều này dẫn đến một sự gia tăng lớn trong việc sử dụng hình ảnh và video trên các trang web .

Nhiều người trong số những hình ảnh không có kèm theo thông tin dựa trên văn bản , chẳng hạn như nhãn , ghi chú, hoặc tiêu đề , mà có thể hữu ích trong việc mô tả nội dung của hình ảnh.

Tìm kiếm chủ yếu là dựa trên văn bản , với từ khóa tìm kiếm là cách phổ biến cho một người nào đó để tìm một cái gì đó – ngay cả hình ảnh . Nó có thể được khó khăn để tìm kiếm hình ảnh thông qua một công cụ tìm kiếm . Việc tạo ra các chú thích cho hình ảnh như một tập hợp các từ khóa hoặc một chú thích có thể làm cho những người tìm kiếm dễ dàng hơn cho người dân.

Phương pháp truyền thống của hình ảnh chú thích có xu hướng dẫn sử dụng, đắt tiền, và nhiều lao động.

Đã có một số phương pháp tiếp cận khác để chú thích tự động của hình ảnh, như được mô tả trong Xây dựng Semantic Hình ảnh chú thích là một vấn đề học tập được giám sát (pdf) . Trong khi đó loại phương pháp có thể làm cho nó dễ dàng hơn để loại bỏ những nỗ lực dẫn trong chú thích, họ vẫn yêu cầu một số con người tương tác và xem xét.

Một cách tiếp cận để tự động chú thích của hình ảnh

Hệ thống chú thích một cách ngắn gọn sẽ đi như sau:

Một hình ảnh nhận được
Tính năng hình ảnh được trích
Hình ảnh khác có tính năng tương tự được xác định
Văn bản liên quan đến hình ảnh khác thu được
Từ khóa từ văn bản được xác định
Hình ảnh được chú thích với các từ khóa
Một chú thích quá trình Google Image

Một cách tiếp cận kỹ thuật có thể gọi cho :

Tạo ra biểu đồ màu
Tạo ra biểu đồ định hướng
Sử dụng một cosin trực tiếp chuyển đổi (DCT) kỹ thuật
Sử dụng phân tích thành phần chính (PCA) , kỹ thuật; hoặc ,
Sử dụng một kỹ thuật wavelet Gabor .
Một số biến thể khác bao gồm: công ty seo

Xác định các tính năng hình ảnh về : hình dạng , màu sắc và kết cấu
Xác định các hình ảnh khác bằng cách tìm kiếm thông qua hình ảnh trên Internet
Việc tìm kiếm hình ảnh khác với các tính năng hình ảnh tương tự bằng cách sử dụng mô hình xác suất
Mở rộng các từ khóa trong văn bản thu được bằng cách thêm từ đồng nghĩa cho các từ khóa
Sử dụng hình ảnh từ video
Quy trình sử dụng này với Video công ty seo website

Video mà không cần tiêu đề hoặc mô tả có thể được hưởng lợi từ việc sử dụng các phương pháp tương tự .

Chúng có thể được phân chia thành một ” bộ khung đại diện “, và mỗi người có thể được xử lý như hình ảnh, bằng cách sử dụng quá trình mô tả ở trên . Sau khi những hình ảnh được chú thích với từ khoá, họ có thể được phân tích để tạo ra một tập các chú thích chung cho toàn bộ video.