Velike organizacije se vsak dan posodabljajo s tehnologijami, ki olajšajo in ustrezajo vsakemu podjetju, spopadajo pa se z velikimi izzivi, ki jim omogočajo odkrivanje in analizo onkraj orodij, ki se uporabljajo vsak dan, prav zanje je bilo ustvarjeno kar je znano kot veliki podatki ali v španskem masivni podatki, ki so obsežni sistemi za shranjevanje podatkov.
Ta pojav shranjevanja je oblikovan v novih informacijskih in komunikacijskih tehnologijah. Veliki podatki so tisto, kar zajema vse dejavnosti, povezane s sistemi, ki shranjujejo velik nabor podatkov. Ena glavnih značilnosti je, da manipulira z veliko količino informacij, jih zbira, razvršča in nato shranjuje. Namen te zbirke je ustvariti statistična poročila, ki jih lahko uporabljajo organizacije, med drugim kot analiza poslovnih načrtov, oglaševanja in vohunjenja.
Stopnja shranjevanja se je z leti povečala, od leta 2008 je bila raven shranjevanja izmerjena v petabajtih do zetabajtih podatkov. Strokovnjaki redno iščejo nove ukrepe za shranjevanje, ker obstajajo določena področja, kjer je treba hraniti velike količine podatkov in obstoječi programi niso zelo optimalni.
Obstaja na tisoče orodij za izvajanje in upravljanje velikih podatkov, vendar niso vsi enaki, obstajajo tri vrste podatkov, in sicer:
- Strukturirani podatki: so tisti, pri katerih imajo podatki zelo posebno strukturo, kot so datumi, številke, med drugim. Primer tega so preglednice.
- Nestrukturirani podatki: ponavadi gre za podatke, ki imajo določeno obliko in jih ni mogoče shraniti v preglednico, še manj pa manipulirati z informacijami, primer dokumentov PDF.
- Polstrukturirani podatki: ta vrsta podatkov nima določene oblike, saj ima svoje polstrukturirane metapodatke, primer tega so kode HTML.
