Wyszukiwarka wizualna - Visual search engine
Wizualny wyszukiwarką jest wyszukiwarka zaprojektowany, aby szukać informacji na temat World Wide Web poprzez wejście obrazu lub wyszukiwarki z wizualizacją wyników wyszukiwania. Informacje mogą obejmować strony internetowe , lokalizacje, inne obrazy i inne rodzaje dokumentów. Ten typ wyszukiwarek jest najczęściej używany do wyszukiwania w mobilnym Internecie za pomocą obrazu nieznanego obiektu (nieznane zapytanie wyszukiwania). Przykładami są budynki w obcym mieście. Wyszukiwarki te często wykorzystują techniki wyszukiwania obrazów na podstawie zawartości .
Wizualna wyszukiwarka przeszukuje obrazy, wzorce w oparciu o algorytm, który może rozpoznać i podaje względne informacje na podstawie selektywnej lub stosowanej techniki dopasowania wzorca.
Klasyfikacja
W zależności od charakteru wyszukiwarki istnieją dwie główne grupy, te, które mają na celu znalezienie informacji wizualnych oraz te z wizualnym wyświetlaniem wyników.
Wyszukiwarki informacji wizualnych
Wyszukiwanie obrazka
Wyszukiwarka obraz jest wyszukiwarką, która ma na celu znalezienie obrazu. Wyszukiwanie może opierać się na słowach kluczowych, obrazie lub łączu internetowym do obrazu. Wyniki zależą od kryterium wyszukiwania, takiego jak metadane , rozmieszczenie koloru, kształtu itp. oraz techniki wyszukiwania używanej przez przeglądarkę.
Techniki wyszukiwania obrazów
Dwie techniki stosowane obecnie w wyszukiwaniu obrazów:
Wyszukiwanie według metadanych: Wyszukiwanie obrazów opiera się na porównaniu metadanych związanych z obrazem, takich jak słowa kluczowe, tekst itp., i uzyskuje się zestaw obrazów posortowanych według trafności. Metadane związane z każdym obrazem mogą odnosić się do tytułu obrazu, formatu, koloru itp. i mogą być generowane ręcznie lub automatycznie. Ten proces generowania metadanych nazywa się indeksowaniem audiowizualnym.
Wyszukiwanie na przykładzie: w tej technice, zwanej także odwrotnym wyszukiwaniem obrazów , wyniki wyszukiwania są uzyskiwane poprzez porównanie obrazów przy użyciu technik komputerowego wyszukiwania obrazów opartych na treści . Podczas wyszukiwania badana jest zawartość obrazu, taka jak kolor, kształt, tekstura lub wszelkie informacje wizualne, które można wydobyć z obrazu. Ten system wymaga większej złożoności obliczeniowej , ale jest bardziej wydajny i niezawodny niż wyszukiwanie według metadanych.
Istnieją wyszukiwarki obrazów, które łączą obie techniki wyszukiwania, ponieważ pierwsze wyszukiwanie odbywa się poprzez wpisanie tekstu, a następnie na podstawie uzyskanych obrazów mogą zawęzić wyszukiwanie, używając jako parametrów wyszukiwania obrazów, które pojawiają się jako wynik.
Wyszukiwarka video
Wyszukiwarka wideo jest wyszukiwarka zaprojektowany do wyszukiwania wideo w sieci. Niektóre wyszukiwarki wideo przetwarzają wyszukiwanie bezpośrednio w Internecie, podczas gdy inne ukrywają filmy, z których przeprowadza się wyszukiwanie. Niektóre wyszukiwarki umożliwiają również użycie jako parametrów wyszukiwania formatu lub długości wideo. Zwykle wyniki zawierają miniaturowe przechwytywanie wideo.
Techniki wyszukiwania wideo
Obecnie prawie wszystkie wyszukiwarki wideo opierają się na słowach kluczowych (wyszukiwanie według metadanych) w celu przeprowadzenia wyszukiwania. Te słowa kluczowe można znaleźć w tytule filmu, tekście towarzyszącym filmowi lub mogą być zdefiniowane przez autora. Przykładem tego typu wyszukiwania jest YouTube .
Niektóre wyszukiwarki generują słowa kluczowe ręcznie, podczas gdy inne używają algorytmów do analizy treści audiowizualnej filmu i generowania etykiet. Połączenie tych dwóch procesów poprawia wiarygodność wyszukiwania.
Wyszukiwarka modeli 3D
Wyszukiwarka modeli 3D ma na celu znalezienie pliku obiektu modelowania 3D z bazy danych lub sieci. Na pierwszy rzut oka wdrożenie tego typu wyszukiwarek może wydawać się niepotrzebne, ale ze względu na ciągłą inflację dokumentów w Internecie, z każdym dniem indeksowanie informacji staje się coraz bardziej potrzebne.
Techniki wyszukiwania modeli 3D
Były one używane z tradycyjnymi wyszukiwarkami tekstowymi (słowa kluczowe / tagi), w których autorzy indeksowanego materiału lub internauci wnieśli te tagi lub słowa kluczowe. Ponieważ nie zawsze jest to skuteczne, zostało ostatnio zbadane we wdrażaniu wyszukiwarek, które łączą wyszukiwanie tekstowe z wyszukiwaniem w porównaniu z rysunkami 2D, rysunkami 3D i modelami 3D.
Uniwersytet Princeton opracował wyszukiwarkę, która łączy wszystkie te parametry w celu przeprowadzenia wyszukiwania, zwiększając w ten sposób skuteczność wyszukiwania. Ponadto portal 3DfindIT.com udostępnia wyszukiwarkę modeli 3D opartą na szkicu, rysunkach, tekście itp. https://www.3dfindit.com/
Mobilne wyszukiwanie wizualne
Mobilna wyszukiwarka grafiki to rodzaj wyszukiwarki przeznaczonej wyłącznie na telefony komórkowe, dzięki której można znaleźć dowolne informacje w Internecie , poprzez zdjęcie wykonane własnym telefonem komórkowym lub przy użyciu określonych słów ( słów kluczowych ). Rozwiązania Mobile Visual Search umożliwiają zintegrowanie funkcji oprogramowania do rozpoznawania obrazów z własnymi markowymi aplikacjami mobilnymi. Mobile Visual Search (MVS) wypełnia lukę między mediami online i offline , umożliwiając łączenie klientów z treściami cyfrowymi .
Wprowadzenie
Telefony komórkowe ewoluowały w zaawansowane urządzenia do przetwarzania obrazu i wideo wyposażone w kamery o wysokiej rozdzielczości, kolorowe wyświetlacze i grafikę z akceleracją sprzętową. Są również coraz częściej wyposażone w globalny system pozycjonowania i podłączone do szerokopasmowych sieci bezprzewodowych. Wszystko to umożliwia nowej klasie aplikacji, które wykorzystują telefon z aparatem do inicjowania zapytań o obiekty znajdujące się w wizualnej bliskości użytkownika (rysunek 1). Takie aplikacje mogą być wykorzystywane np. do identyfikacji produktów, porównywania cen, wyszukiwania informacji o filmach, płytach kompaktowych (CD), nieruchomościach, mediach drukowanych lub dziełach sztuki.
Proces
Zazwyczaj tego typu wyszukiwarka wykorzystuje techniki zapytania po przykładzie lub Zapytanie obrazu po przykładzie , które wykorzystują treść, kształt, teksturę i kolor obrazu do porównania ich w bazie danych, a następnie dostarcza przybliżone wyniki zapytania.
Proces wykorzystywany w tych wyszukiwaniach w telefonach komórkowych jest następujący:
Najpierw obraz jest przesyłany do aplikacji serwera. Już na serwerze obraz będzie analizowany przez różne zespoły analityczne, ponieważ każdy z nich specjalizuje się w innych dziedzinach składających się na obraz. Następnie każdy zespół zdecyduje, czy przesłany obraz zawiera dziedziny jego specjalizacji, czy nie.
Po zakończeniu tej całej procedury centralny komputer przeanalizuje dane i utworzy stronę z wynikami posortowanymi według wydajności każdego zespołu, aby ostatecznie przesłać je na telefon komórkowy .
