Jaká jsou velká data?

Velká data jsou měření dat, která rostla tak velká, že normální databáze nejsou schopny obsahovat a pracovat s obrovským množstvím informací. Data přicházejí ve třech velikostech: malé, střední a velké; Žádná z těchto měření není přísná; Místo toho každý závisí více na snadném použití a na tom, jaký typ stroje dokáže zpracovat informace. Pro velká data jsou zapotřebí speciální stroje, mnohem větší a složité než ty, které se používají pro běžné databáze. Tyto typy údajů se obvykle vyskytují ve vládních a vědeckých agenturách, ale některé velmi velké webové stránky také obsahují toto velké množství informací. Malá data se mohou přizpůsobit jedinému počítači nebo stroji, jako je notebook. Střední data jsou schopna zapadnout do pole disku a nejlépe jsou spravována databází. Databáze, bez ohledu na to, jak velké, nejsou schopny pracovat s velkými daty a místo toho se hodně používají speciální systémy. I když neexistuje přísné pokyny pro to, co jsou velká data, obvykle tozačíná kolem úrovně terabajtů (TB) a jde nahoru na úroveň petabyte (PB).

Pokus o práci s velkými údaji na databázi, která není specializována pro toto množství dat, způsobí několik podstatných problémů. Databáze není schopna zvládnout množství informací, takže některá data musí být vymazána. Je to jako pokusit se namontovat 100 gigabajtů (GB) na počítač s pouhým 50 GB místa na pevném disku; nelze to udělat. Zbývající data budou pro ovládání i správa neoprávněná, protože jakákoli funkce by dokončila dlouho a databáze musí být uzavřena pro nová podání.

I když je možné ponechat nákup strojů a přidávat do databází nová data, vytváří to těžký problém. Důvodem je to, že databázový software je vyráběn pouze pro práci se středními daty. Větší datové sady vedou k chybám a administrativním problémům, protože software se prostě nemůže pohybovat nebo pracovatH Velká data bez setkání s problémy.

Většina organizací nebo webových stránek se nesetkala s velkými údaji. Obranné a vojenské agentury používají toto množství informací k vytváření modelů a výsledků testů v obchodech a mnoho velkých vědeckých agentur potřebuje tyto specializované stroje z podobných důvodů. Některé velmi velké webové stránky potřebují velké datové stroje, ale webové stránky nejsou tak běžné jako agentury na tomto trhu. Tyto organizace musí udržovat všechna svá data, protože pomáhá lépe analyzovat budoucí data a vytvářet předpovědi.