Agregacja danych — Data aggregation
Agregacja danych to kompilacja informacji z baz danych z zamiarem przygotowania połączonych zbiorów danych do przetwarzania danych .
Opis
The United States Geological Survey wyjaśnia, że „kiedy dane są dobrze udokumentowane, wiesz, jak i gdzie szukać informacji, a zwrócone wyniki będą takie, jakich oczekujesz”. Informacje źródłowe do agregacji danych mogą pochodzić z rejestrów publicznych i kryminalnych baz danych. Informacje są pakowane w zbiorcze raporty, a następnie sprzedawane firmom , a także agencjom lokalnym , stanowym i rządowym. Informacje te mogą być również przydatne do celów marketingowych . W Stanach Zjednoczonych wiele działań brokerów danych podlega ustawie o uczciwej sprawozdawczości kredytowej (FCRA), która reguluje agencje sprawozdawczości konsumenckiej. Agencje następnie zbierają i pakują dane osobowe do raportów konsumenckich , które są sprzedawane wierzycielom , pracodawcom , ubezpieczycielom i innym firmom. Finicity, firma Mastercard, jest jednym z głównych agregatorów, którzy przestrzegają FCRA, podczas gdy większość innych agregatorów danych zdecydowała się nie przestrzegać tego prawa ochrony konsumentów.
Agregatory baz danych dostarczają różne raporty z informacjami. Osoby fizyczne mogą zażądać własnych raportów konsumenckich zawierających podstawowe informacje biograficzne, takie jak imię i nazwisko, data urodzenia, aktualny adres i numer telefonu. Uprawnione i wykwalifikowane osoby trzecie mogą zażądać raportów sprawdzających przeszłość pracowników , które zawierają bardzo szczegółowe informacje, takie jak przeszłe adresy i długość pobytu, licencje zawodowe i historia kryminalna . Dane te mogą być nie tylko wykorzystywane do sprawdzania przeszłości pracowników, ale mogą być również wykorzystywane do podejmowania decyzji dotyczących zakresu ubezpieczenia, cen i egzekwowania prawa. Aktywiści zajmujący się ochroną prywatności twierdzą, że agregatory baz danych mogą dostarczać błędne informacje.
Rola Internetu
Potencjał Internetu do konsolidowania i manipulowania informacjami ma nowe zastosowanie w agregacji danych, zwanej również screen scrapingiem . Internet daje użytkownikom możliwość skonsolidowania swoich nazw użytkowników i haseł , czyli kodów PIN. Taka konsolidacja umożliwia konsumentom dostęp do szerokiej gamy stron internetowych chronionych kodem PIN zawierających dane osobowe za pomocą jednego głównego kodu PIN na jednej stronie internetowej. Do dostawców kont online należą instytucje finansowe , maklerzy giełdowi , linie lotnicze i programy lojalnościowe oraz inne programy premiowe, a także konta e-mail . Agregatorzy danych mogą gromadzić informacje o koncie lub inne informacje z wyznaczonych stron internetowych, korzystając z kodów PIN posiadaczy kont, a następnie udostępniać im informacje o kontach użytkowników na jednej stronie internetowej obsługiwanej przez agregatora na żądanie posiadacza konta. Usługi agregacji mogą być oferowane samodzielnie lub w połączeniu z innymi usługami finansowymi, takimi jak śledzenie portfela i opłacanie rachunków, świadczone przez wyspecjalizowaną witrynę internetową lub jako usługa dodatkowa zwiększająca obecność online przedsiębiorstwa z siedzibą poza światem wirtualnym. Wiele firm o ugruntowanej pozycji, działających w Internecie, zdaje się dostrzegać wartość oferowania usługi agregacji w celu ulepszenia innych usług internetowych i przyciągnięcia odwiedzających. Oferowanie usługi agregacji danych na stronie internetowej może być atrakcyjne ze względu na możliwość częstego przyciągania użytkowników usługi z witryny hostingowej.
Agregacja lokalnych danych biznesowych
Jeśli chodzi o kompilowanie informacji o lokalizacji lokalnych firm, istnieje kilka głównych agregatorów danych, które zbierają informacje, takie jak nazwa firmy, adres, numer telefonu, strona internetowa, opis i godziny pracy. Następnie weryfikują te informacje przy użyciu różnych metod walidacji. Gdy informacje o firmie zostaną zweryfikowane pod kątem dokładności, agregatory danych udostępniają je wydawcom, takim jak Google i Yelp .
Na przykład, gdy Yelp aktualizuje swoje wykazy Yelp, pobiera dane z tych lokalnych agregatorów danych. Wydawcy pobierają lokalne dane biznesowe z różnych źródeł i porównują je z tym, co aktualnie mają w swojej bazie danych. Następnie aktualizują swoją bazę danych o informacje, które uważają za dokładne.
Cztery główne agregatory danych do wyszukiwania lokalnych firm to Acxiom, Infogroup, Localeze i Faktyczne. Od stycznia 2020 r. Acxiom nie będzie już działać jako agregator danych. Foursquare zastępuje Acxiom w czterech głównych agregatorach danych. Finity, firma Mastercard, jest największym graczem na powierzchni pożyczkowej.
Konsekwencje prawne
Instytucje finansowe obawiają się możliwości odpowiedzialności wynikającej z działań związanych z agregacją danych, potencjalnych problemów z bezpieczeństwem , naruszenia praw własności intelektualnej oraz możliwości zmniejszenia ruchu na stronie internetowej instytucji. Agregator i instytucja finansowa mogą uzgodnić układ data feed aktywowany na życzenie klienta, wykorzystując standard Open Financial Exchange (OFX) do żądania i dostarczania informacji do strony wybranej przez klienta jako miejsca, z którego będą przeglądać dane swojego konta . Umowy dają instytucjom możliwość prowadzenia negocjacji w celu ochrony interesów swoich klientów i oferują agregatorom możliwość świadczenia solidnych usług. Agregatorzy, którzy zgadzają się z dostawcami informacji na wydobywanie danych bez korzystania ze standardu OFX, mogą osiągnąć niższy poziom konsensusu; w związku z tym „screen scraping” może zostać wykorzystany do uzyskania danych o koncie, ale z powodów biznesowych lub innych agregator może zdecydować się na uzyskanie uprzedniej zgody i negocjować warunki udostępniania danych klienta. „Screen scraping” bez zgody dostawcy treści ma tę zaletę, że umożliwia subskrybentom przeglądanie prawie wszystkich kont, które otworzyli w dowolnym miejscu w Internecie za pośrednictwem jednej witryny.
Perspektywy
Z biegiem czasu transfer dużych ilości danych dotyczących konta od dostawcy konta do serwera agregatora może przekształcić się w obszerny profil użytkownika, wyszczególniający jego transakcje bankowe i kartą kredytową , salda, transakcje i portfele papierów wartościowych, a także historię podróży i preferencje. Wraz ze wzrostem wrażliwości na kwestie ochrony danych, prawdopodobnie będzie się koncentrować na zakresie, w jakim agregatory danych mogą dążyć do wykorzystania tych danych na własny użytek lub do udostępnienia ich stronom trzecim i operatorom strona internetowa, na której oferowana jest usługa.
Bibliografia
-
^
Stanley, Jay; Steinhardt, Barry (styczeń 2003). „Większy potwór, słabsze łańcuchy: wzrost amerykańskiego Towarzystwa Nadzoru” . Amerykańska Unia Swobód Obywatelskich. Cytowanie dziennika wymaga
|journal=( pomoc ) - ^ „Dlaczego dane muszą być zarządzane?” . Parasyń . 2019-07-21 . Źródło 2019-07-24 .
- ^ https://www.fincity.com/federal-fair-credit-reporting-act/
- ^ Pierce, Debora; Ackerman, Linda (2005-05-19). „Agregatorzy danych: badanie jakości danych i responsywności” . Privacyactivism.org. Zarchiwizowane od oryginału w dniu 2007-03-19 . Pobrano 2007-04-02 .
- ^ Juzdepski, Zachary. „Popraw ranking wyszukiwania lokalnego dzięki agregatorom danych” . Vendasta .
- ^ Chessall, Erica. „Dystrybucja aukcji: Foursquare jako nowy agregator danych” .
- ^ https://www.fincity.com/
- ^ Ledig, Robert H.; Wartanian, Thomas P. (11.09.2002). „Scrape It, Scrub It and Show It: Bitwa o agregację danych” . Smażony Frank . Pobrano 2007-04-02 .