Termenul de big data începe deja de ceva vreme să capete un statut propriu

și o importanță greu de egalat.

Cantitatea de informații creată la orice milisecundă este aproape de
neconceput și nu dă semne să se încetinească, ba din contră. Asta înseamnă un
potențial enorm în descoperirea informațiilor cheie din afaceri, dar nu numai.
Cu toate acestea un mic procent din aceste date sunt analizate. Cum am
putea să folosim aceste informații neprocesate care ne înconjoară zi de zi?
Conceptul își începe istoria încă din 2000 când Doug Laney descria big data
ca fiind o alăturare de trei componente:
 Volum: organizațiile colectează date din diverse surse, inclusiv din tranzacții
bancare, social media sau senzori și date transmise între mașinării. Noile
tehnologii permit stocarea acestui masiv de date.
 Viteză: Împărtășirea informațiilor se face cu o viteză nemaiîntâlnită și într-un
timp din ce în ce mai scurt.
 Varietate: Datele vin în toate formatele – de la structurate, la numerice și
documente nestructurate, e-mail-uri, video, audio sau tranzacții financiare.
Importanța big data nu pornește din cantitate, ci din folosința sa. Poți folosi aceste
informații provenite din orice sursă și să le analizezi astfel încât să obții răspunsuri în
ceea ce privește reducerea costurilor, reducerea timpului necesar procesării,
dezvoltarea de noi produse sau luarea unor decizii inteligente. Poți determina, printre
altele:
 cauzele eșecurilor, problemelor sau defecțiunilor, în timp real.
 dezvoltare internațională: cercetările privind utilizarea tehnologiilor informațiilor
și comunicațiilor pentru dezvoltare (ICT4D) sugerează că big data poate
aduce contribuții importante în ceea ce privește oportunități pentru reducerea
costurilor sau pentru luarea deciziilor critice în domenii atât de diverse precum
sistemul medical, economic sau securității.
 producție: big data oferă o infrastructură pentru asigurarea transparenței la
nivelul industriei, precum și instrumente predictive.
 modele cyber-fizice: un astfel de model este un geamăn digital al unei mașini
reale care operează în cloud și simulează condiții normale cu informații
integrate atât din algoritmi analitici specifici analizelor datelor precum și
informații despre sistemul fizic. Poate fi descris ca o integrare de simț,
memorie, sincronizare, sinteză și servicii.
 jurnalism: big data oferă informații despre întreaga lume. Industria media va
putea astfel să transmită mesaje sau conținut în sincron cu atitudinile și ideile
consumatorului de informație (data mining).
 Internet of Things (IoT) – acest concept, împreună cu big data, lucrează în
aceeași direcție. IoT, cu ajutorul a ceea ce oferă big data, duce către o nouă
eră de dezvoltare.
 tehnologie: eBay folosește două depozite de 7.5 pentabytes pentru a cerceta
recomandările și preferințele consumatorilor. Walmart procesează mai mult de
1 milion de tranzacții la fiecare oră, importate mai apoi în baze de date ce
conțin peste 2.5 pentabytes, de 167 ori mai multă informație decât se află în
toate cărțile din Librăria Congresului American.
 știință: acceleratorul de particule de la Geneva (LHC) conține peste 150 de
milioane de senzori care procesează informații de 40 de milioane de ori pe
secundă. Raza pe kilometru pătrat (Square Kilometre Array) este un telescop
radio cu mii de antene care va aduna peste 14 exabytes zilnic și va memora
câte un pentabyte pe zi. El va fi operațional până în 2024.
 Acestea sunt doar câteva dintre domeniile afectate de big data. Orice sistem
funcțional, fizic sau digital, funcționează și va funcționa pe principiile big data.

Big data a crescut cererea de informații atât de mult în ultimii ani încât
specialiștii unor companii precum IBM, Oracle, Dell sau SAP au cheltuit peste 15
miliarde $ pe companii de software specializate în managementul informațiilor.
Această industrie crește cu aproape 10% pe an: de două ori mai repede decât
toată industria software.
Care ar fi beneficiile big data mai exact?
 economisește timp.
 permite accesul la informații de pretutindeni.
 este universal valabilă: poate fi aplicată în orice domeniu, de la analize
web, mobile, sociale, CRM sau sisteme de e-mail marketing.
 este de încredere.
 este relevantă: nenumăratele instrumente pe care le oferă pentru analiză
pot oferi o nouă priveliște asupra deciziilor pe care urmează să le faci.
 este sigură: infrastructura sigură construită în jurul big data poate ajuta la
reducerea costurilor cu sistemele de siguranță cu până la 1.6% pe an.
 permite luarea unor acțiuni: decizii bazate pe informații învechite pot costa
miliarde; big data oferă informații actuale în timp real.

Un element important și esențial pentru big data este posibilitatea obținerii și

procesării informațiilor în timp real. Câteva instrumente open source de analiză big
data în timp real sunt:

1. Storm – deținut de Twitter, este un sistem de distribuție în timp real. Funcționează

în același mod ca Hadoop, despre care vom vorbi și în acest articol, și permite
procesarea en gros bazată pe un set de primitive generale pentru analize în timp
real. Este ușor de utilizat și funcționează cu orice limbaj de programare.
2. Cloudera – oferă instrumente de consultare big data memorată în HBase sau
HDFS.
3. Gridgrain – realizat pentru Java, instrumentul acesta este compatibil cu Hadoop
DFS și oferă un substitut pentru MapReduce-ul Hadoop. Oferă un ansamblu de
date distribuit în timp real și legat de surse de date și aplicații diverse.
4. SpaceCurve – poate descoperi tiparele din cadrul datelor de localizare
multidimensionale. Oferă o platformă big data care procesează cereri complexe cu
peste 10 gigabytes pe secundă.

În prezent, big data se bazează pe o serie de tehnologii care se dezvoltă pe zi

ce trece. Cele mai importante și actuale sunt:

1. Analize big data în cloud – Hadoop este un framework și un set de instrumente

pentru a procesa cantități mari de date, realizat inițial pentru a funcționa pentru
grupe de mașini fizice. Acest lucru s-a schimbat. În prezent există o serie de
tehnologii disponibile pentru procesarea datelor în cloud, cum ar fi: serviciul de
analiză BigQuery de la Google, platforma cloud Bluemix de la IBM sau serviciul de
procesare Kinesis de la Amazon. Hadoop însă oferă și o serie de framework-uri
pentru analiză distribuită precum MapReduce, ceea ce îl transformă într-un sistem
folosit general.
2. “Lacurile” big data – spre deosebire de ceea ce ne învăța teoria bazelor de date
 tradiționale, care îți dicta că trebuie să îți structurezi baza de date înainte să
introduci informațiile, aceste “lacuri” presupun că toate sursele de informații vor fi
aruncate pur și simplu într-un depozit Hadoop fără a mai concepe o structură a
priori. Ele îți oferă instrumente de procesare și definiții ale datelor existente pe
măsură ce le încarci.
3. Analize predictive – în trecut analizele statistice se realizau pe un ansamblu de
date. Acum vei putea analiza o serie de informații și caracteristici pe o singură
dată, gradual, ceea ce crește nivelul predictibilității.
4. SQL-ul pe Hadoop – mai rapid, mai eficient. Acum poți introduce datele și realiza
analize direct pe absolut orice din Hadoop, iar asta se poate face în orice limbaj de
programare cunoscut. Instrumente care se bazează pe SQL îți vor permite să aplici
tehnici similare pe datele din cadrul Hadoop, dacă ești familiarizat deja cu el.
5. NoSQL mai bun – alternativa pentru bazele de date bazate pe SQL, numită
NoSQL (Not Only SQL) este din ce în ce mai populară. Permite analiza mai rapidă
și directă a unei rețele de relații între componente.
6. Deep learning – un set de tehnici bazate pe rețele neuronale care permit
recunoașterea unor tipare ce prezintă interes în cadrul unei mari cantități de date
binare și nestructurate, fără a necesita instrucțiuni de programare.

Cu atâtea trend-uri noi privind big data, organizațiile IT trebuie să creeze

condițiile necesare ca analiștii lor să poată experimenta cu acest concept. Big data
oferă atât de multe încât ceea ce v-am prezentat reprezintă o parte infimă din ceea
ce ar trebui să știți despre acest subiect.

Big data este un termen care descrie volumul mare de date - atât structurate,
cât și nestructurate - care inundă o afacere în fiecare zi. Dar nu cantitatea de date
este importantă. Contează ceea ce fac organizațiile cu datele. Datele mari pot fi
analizate pentru informații care conduc la decizii mai bune și la mișcări strategice
de afaceri.
Utilizarea Big Data devine obișnuită în aceste zile de către companii pentru a-și
depăși performanțele. În majoritatea industriilor, concurenții existenți și noii intrați
vor folosi strategiile rezultate din datele analizate pentru a concura, a inova și a
capta valoare.
Big Data ajută organizațiile să creeze noi oportunități de creștere și categorii
complet noi de companii care pot combina și analiza datele din industrie. Aceste
companii au suficiente informații despre produse și servicii, cumpărători și furnizori,
preferințele consumatorilor care pot fi capturate și analizate.

Avantajele procesării Big Data

Abilitatea de a procesa „Big Data” aduce beneficii multiple, cum ar fi

• Întreprinderile pot utiliza informații externe în timp ce iau decizii

Serviciu clienți îmbunătățit
Identificarea timpurie a riscului pentru produs / servicii, dacă există
• Eficiență operațională mai bună
 CUPRINS
Ce este big data?
Tehnologii
Dimensiunile Big Data
Caracteristici
Vizualizarea datelor
Avantajele procesarii big data
De ce este big data importanta?
Cele mai bune exemple de Big Data
Big Data în industria educației
Big Data în industria asigurărilor
Big data în industria guvernamentală
Big Data în sectorul bancar

Importanța datelor mari nu se învârte în jurul numărului de date pe care le are o

companie, ci în modul în care o companie utilizează datele colectate. Fiecare
companie folosește datele în felul său; cu cât o companie își folosește mai eficient
datele, cu atât are mai mult potențial de a crește. Compania poate prelua date din
orice sursă și le poate analiza pentru a găsi răspunsuri care să permită:

 Economii de cost: Unele instrumente ale Big Data, cum ar fi Hadoop și

Analytics bazat pe cloud, pot aduce avantaje din punct de vedere al
costurilor pentru afaceri atunci când trebuie stocate cantități mari de date,
iar aceste instrumente ajută, de asemenea, la identificarea unor
modalități mai eficiente de a face afaceri.
 Reducerea timpului: viteza mare a instrumentelor precum Hadoop și
analiza în memorie pot identifica cu ușurință noi surse de date, care ajută
companiile să analizeze datele imediat și să ia decizii rapide pe baza
învățărilor.
 Înțelegeți condițiile pieței: analizând datele mari puteți obține o mai bună
înțelegere a condițiilor actuale ale pieței. De exemplu, analizând
comportamentele de cumpărare ale clienților, o companie poate afla
produsele care se vând cel mai mult și produc produse în funcție de
această tendință. Prin aceasta, poate să depășească concurenții săi.
 Controlați reputația online: instrumentele de date mari pot face analize de
sentiment. Prin urmare, puteți obține feedback despre cine spune despre
compania dvs. Dacă doriți să monitorizați și să îmbunătățiți prezența
online a afacerii dvs., atunci instrumentele de date mari vă pot ajuta în
toate acestea.
 Utilizarea analizei Big Data pentru a spori achiziția și păstrarea clienților
 Clientul este cel mai important activ de care depinde orice afacere. Nu
există o singură afacere care să poată avea succes fără să fie nevoie să
stabilească mai întâi o bază solidă de clienți. Cu toate acestea, chiar și
cu o bază de clienți, o afacere nu își poate permite să nu ia în
considerare concurența ridicată cu care se confruntă. Dacă o afacere
încearcă să învețe ce caută clienții, atunci este foarte ușor să începeți să
oferiți produse de calitate slabă. În cele din urmă, va rezulta pierderea
clientelei și acest lucru creează un efect general negativ asupra
succesului afacerii. Utilizarea datelor mari permite companiilor să
 observe diferite modele și tendințe legate de clienți. Respectarea
comportamentului clienților este importantă pentru a declanșa loialitatea.
 Utilizarea analizei Big Data pentru a rezolva problema agenților de
publicitate și a oferi informații de marketing
 Analiza Big Data poate ajuta la schimbarea tuturor operațiunilor
comerciale. Aceasta include capacitatea de a corespunde așteptărilor
clienților, schimbarea liniei de produse a companiei și, desigur,
asigurarea faptului că campaniile de marketing sunt puternice.
 Analiza Big Data ca factor de inovație și dezvoltare de produse
 Un alt avantaj imens al datelor mari este capacitatea de a ajuta
companiile să inoveze și să își dezvolte din nou produsele.

Cele mai bune exemple de Big Data

Cele mai bune exemple de date mari pot fi găsite atât în sectorul public,
cât și în cel privat. De la publicitate direcționată, educație și industriile
masive deja menționate (asistență medicală, asigurări, producție sau
servicii bancare), până la scenarii din viața reală, în servicii pentru clienți
sau divertisment. până în 2020, 1,7 megaocteți de date vor fi generate în
fiecare secundă pentru fiecare persoană de pe planetă, potențialul de
creștere organizațională bazată pe date în sectorul ospitalității este
enorm.
Datele mari pot servi pentru a oferi beneficii în unele domenii
surprinzătoare.

Big Data în industria educației

Următoarele sunt câteva dintre domeniile din industria educației care au fost
transformate de schimbările motivate de Big Data
Programe de învățare personalizate și dinamice:
Reîncadrarea materialului cursului:
Sisteme de clasificare:
Predicția carierei:

Big Data în industria asigurărilor

Industria asigurărilor are importanță nu numai pentru persoanele fizice, ci și
pentru companiile de afaceri. Motivul pentru care asigurarea ocupă un loc
semnificativ este că susține oamenii în perioadele de adversități și incertitudini.
Datele colectate din aceste surse au diferite formate și se schimbă la viteze
extraordinare.

1.Colectarea informațiilor
Deoarece datele mari se referă la colectarea datelor din surse disparate, această
caracteristică creează un caz de utilizare crucial pentru industria de asigurări. De
exemplu: atunci când un client intenționează să cumpere o asigurare auto kenya,
companiile pot obține informații din care pot calcula nivelurile de siguranță pentru
conducerea în vecinătatea cumpărătorului și înregistrările sale anterioare de
conducere. Pe baza acestora, ei pot calcula în mod eficient costul asigurării auto.
2.Obținerea de informații despre clienți
Determinarea experienței clienților și transformarea clienților în centrul atracției
unei companii este de o importanță primordială pentru organizații.
3.Detectarea fraudei
 Fraudele de asigurare sunt o incidență obișnuită. Cazul de utilizare a datelor mari
pentru reducerea fraudei este extrem de eficient.
4.Cartografierea amenințărilor
Atunci când o agenție de asigurări vinde o asigurare, vor să fie conștienți de toate
posibilitățile ca lucrurile să meargă nefavorabil cu clienții lor, făcându-i să depună o
cerere.

Big data în industria guvernamentală

Împreună cu multe alte domenii, datele mari din guvern pot avea un impact
enorm - local, național și global. Având atâtea probleme complexe pe masă astăzi,
guvernele își desfășoară activitatea încercând să dea sens tuturor informațiilor pe
care le primesc și să ia decizii vitale care afectează milioane de oameni. Guvernele,
fie că este vorba de orice țară, se confruntă față în față cu o cantitate foarte mare de
date aproape zilnic. Motivul fiind că trebuie să țină evidența diferitelor înregistrări și
baze de date privind cetățenii Studiul și analiza corespunzătoare a acestor date ajută
guvernele în moduri nesfârșite.
Puțini dintre ei sunt:
Scheme sociale:
Securitate cibernetică:
PDF - Aplicații de date mari în sectorul guvernamental: o analiză comparativă între
țările lider

Big Data în sectorul bancar

Cantitatea de date din sectoarele bancare crește în fiecare secundă. Conform
prognosticului GDC, se estimează că aceste date vor crește cu 700% până în 2020.
Studiul și analiza datelor mari pot ajuta la detectarea
 Utilizarea necorespunzătoare a cardurilor de credit
 Utilizarea greșită a cardurilor de debit
 Tratamentul riscului de risc de risc
 Claritatea afacerii
 Modificarea statisticilor clienților
 Spălare de bani
 Atenuarea riscurilor