Pretraživanje

Zašto Big Data?

|
Autor: Administrator

Zašto Big Data?

Zašto Big Data? : Zašto Big Data?

Nakon 22 godine rada s bazama podataka i preko 80 korisnika novonastali zahtjevi i problemi:

  • generiranje velike količine podataka, spore obrade postojećih (DWH)
  • pojava nestrukturiranih podataka (senzori), prikupljanje u realnom vremenu
  • obrade velike količine podataka dugo traju i zahtjevaju skupi HW
  • potreba za jednostavnim i jeftinim proširenjem kapaciteta za obradu i pohranu podataka, fault tolerant
  • vizualizacija, predviđanje scenarija, frekventne izmjene i novi zahtjevi, jednostanost korištenja, cijena (...)

 

Procjenjuje se da jedno izdanje novina New York Times sadrži više podataka nego je prosječna osoba mogla skupiti za života u 18. stoljeću.

Za početak digitalnog doba uzima se 2002. godina kad se procijenjuje da je prvi put količina digitalno pohranjenih informacija nadmašila onu na analognim medijima.

90% svjetskih podataka nastalo je u posljednje 2 godine.

|
Autor: Administrator

Generirano do 295 x 10 18 byte do 2007. godine

IBM; „Every day, we create 2.5 quintillion bytes of data — so much that 90% of the data in the world today has been created in the last two years alone.” (2,5 pb)

Zašto Big Data? : Generirano do 295 x 10 18 byte do 2007. godine
|
Autor: Administrator

Nužna promjena paradigme!

SCALE-UP (ORACLE) vs SCALE-OUT (Hadoop, SPARK, MongoDB)

Zašto Big Data? : Nužna promjena paradigme!
|
Autor: Administrator

Expanding on 3 fronts at an increasing rate

+ Veracity (istinitost, točnost podataka uslijed nekonzistenstnosti, višeznačja, kašnjenja, greške pri prikupljanju...)

Zašto Big Data? : Expanding on 3 fronts at an increasing rate