Jakie są różne metody eksploracji danych?
Istnieje wiele różnych metod eksploracji danych wykorzystywanych zarówno w opcjach oprogramowania, jak i pojęciach teoretycznych. Umożliwiają one użytkownikom wydobycie informacji z danych gromadzonych przez osoby fizyczne i firmy korzystające z różnych narzędzi. Duże ilości danych można wykorzystać do określenia różnych czynników u jednego podmiotu lub różnych podmiotów. Te metody eksploracji danych są najczęściej wykorzystywane w dziedzinie ochrony przed oszustwami, marketingu i nadzoru.
Przez setki lat wykorzystywano metody eksploracji danych w celu wydobywania informacji od podmiotów. Nowoczesne techniki wykorzystują jednak zautomatyzowane koncepcje do dostarczania znacznych danych za pośrednictwem zasobów komputerowych. Wraz z pojawieniem się informatyki w XX wieku opracowano koncepcję metod eksploracji danych w celu przezwyciężenia ukrytych wzorców w dużych obszarach gromadzonych danych. Dobrym przykładem jest sytuacja, gdy firma reklamowa analizuje wzorce zakupowe klienta internetowego. Ta firma może następnie sprzedawać niektóre produkty, które dana osoba może być zainteresowana zakupem.
Jedna z technik eksploracji danych powszechnie stosowana w branży nosi nazwę Knowledge Discovery in Databases (KDD). Opracowany w 1989 roku przez Gregory'ego Piatetsky-Shapiro, KDD pozwala użytkownikom przetwarzać surowe dane, analizować informacje pod kątem niezbędnych danych i interpretować wyniki. Ta metoda pozwala użytkownikom znaleźć wzorce w algorytmach, jednak dane ogólne nie zawsze są dokładne i można je łączyć w kompromisowy sposób. Jest to znane jako nadmierne dopasowanie .
Podstawowe metody eksploracji danych obejmują cztery szczególne typy zadań: klasyfikację, grupowanie, regresję i asocjację. Klasyfikacja bierze obecne informacje i łączy je w określone grupy. Klastrowanie usuwa zdefiniowane zgrupowania i umożliwia klasyfikację danych według podobnych pozycji. Regresja koncentruje się na funkcji informacji, modelując dane na koncepcji. Ostateczna metoda eksploracji danych, powiązanie , próbuje znaleźć relacje między różnymi źródłami danych.
Podczas korzystania z różnych metod eksploracji danych stosowane są określone standardy w celu ustalenia, które parametry można zastosować w procesie. Grupa Specjalnych Interesów Stowarzyszenia Maszyn Komputerowych ds. Odkrywania Wiedzy i Eksploracji Danych (SIGKDD) organizuje doroczne spotkanie w celu ustalenia, które procesy są odpowiednie. Czynniki etyczne są ważone wraz z praktycznymi zastosowaniami, aby znaleźć najlepsze informacje na temat osób i firm. Informacje te są publikowane w czasopiśmie branżowym o nazwie SIGKDD Explorations.