general

# tendințe | Date mari

„Cel care deține informațiile, deține lumea”. Se pare că această frază nu a sunat niciodată la fel de adevărată ca în ziua de azi. În a doua decadă a secolului XXI, informațiile au devenit nu numai materii prime, unelte și arme, dar și cel mai important atu pentru care se luptă corporațiile și guvernele. Vom vorbi despre asta astăzi.

</ p>

În mediul de afaceri de astăzi, gestionarea dateloreste un indicator critic al succesului unei întreprinderi. Multe companii au început să recunoască importanța abilităților de informare. Astăzi, așa-numitele „date mari” este cea mai importantă tendință care se extinde în cele mai diverse domenii de afaceri și tehnologie.

Se folosește termenul „Date mari”.pentru a indica inițiativele și tehnologiile care includ active diverse și în creștere rapidă din aceste diverse categorii. Diversitatea acestor informații complică procesarea acestora, iar cei care reușesc să facă acest lucru în beneficiul afacerii lor au astăzi succes.

Big Data presupune crearea unor volume maridate complexe, stocarea, extragerea și analiza acestora. Disciplina „date mari” se bazează pe principiul a trei V - volum (volum), viteză (viteză) și varietate (varietate).

Volum. Acum douăzeci de ani, un computer obișnuit avea un hardunitate cu o capacitate medie de 10 gigabyte. Astăzi, platformele sociale precum Facebook prelucrează zilnic mai mult de jumătate de miliard de terabyți de date. Aeronavele Boeing generează sute de terabyte de date de zbor pentru un singur zbor. Utilizarea pe scară largă a smartphone-urilor și tabletelor asigură producerea a miliarde de terabyți de informații actualizate constant, care este la fel de variat și divers ca lumea noastră.

Viteză. Sisteme de urmărire a clicurilor pe Internet în fiecare secundăanalizați milioane de utilizatori web. Modificările statului de tranzacționare la burse sunt actualizate pe microsecunde. Serverele de jocuri pot susține conexiunea unică a milioane de utilizatori care efectuează multe acțiuni în fiecare secundă. Acestea sunt doar câteva exemple care arată modul în care sunt generate frenetic noi date.

Diversitate. Conceptul de „date mari” nu se aplicănumai litere și numere: include audio, video, text împrăștiat, date din rețelele sociale și multe altele. Și acolo unde unii văd o groapă de informații inutile, alții văd un atu neprețuit care poate schimba lumea.

Termenul Big Data a fost introdus pentru prima dată de capitol.O’Reilly de Roger Mugalus în 2005. Cu toate acestea, problema procesului de date disponibile a început să fie pusă cu foarte mult timp în urmă. De fapt, primele înregistrări ale încercărilor de utilizare a datelor pentru gestionarea activităților întreprinderilor au o vechime de peste 7.000 de ani.

În acel moment Mesopotamia a început să conducăcontabilizarea recoltei și creșterea animalelor. Principiile contabile au continuat să evolueze și să se îmbunătățească, iar în 1663, demograful John Graunt a început să înregistreze și să analizeze ratele mortalității la Londra. El a făcut acest lucru, astfel încât publicul a apreciat extinderea răspândirii ciumei bubonice în acele zile.

În cartea sa Natural și politicobservații ale listelor morților. ”Grant a oferit lumii prima analiză statistică a datelor. Cartea a aruncat lumină asupra principalelor cauze ale morții în Anglia secolului al XVII-lea. Datorită acestei lucrări, Graunt a devenit celebru ca pionier în statistici.

De atunci, principiile contabile au continuatpentru a îmbunătăți, dar nimic extraordinar în această direcție a apărut până la sfârșitul secolului XIX a anunțat intrarea în era informațională. O nouă eră a început în 1889, când Herman Hollerith a inventat un sistem informatic pentru sortarea datelor de recensământ.

Următorul salt notabil a avut loc în 1937,când președintele Statelor Unite era Franklin Roosevelt. După adoptarea Legii privind securitatea de stat în Congres, guvernul a fost obligat să țină evidența a milioane de americani. Drept urmare, guvernul a cerut IBM să dezvolte un sistem de citire a cardurilor de pumn, care a fost conceput pentru a stoca cantități uriașe de date.

Cu toate acestea, prima mașină de prelucrare a datelorsistemul Colossus, care a fost dezvoltat de britanici în 1943 pentru a descifra codurile naziste în timpul celui de-al doilea război mondial, este considerat a fi. Aparatul a căutat orice tipare care apărea regulat în mesajele interceptate. Sistemul a funcționat cu o viteză record și a fost capabil să proceseze 5000 de caractere pe secundă, ceea ce a permis timp de câteva ore să facă munca care a durat anterior săptămâni întregi.

Primul centru de date a fost înființat de americanguvernamental în 1965 și avea scopul de a stoca milioane de amprente și înregistrări fiscale. Înregistrările au fost înregistrate pe benzi magnetice, care au fost sistematizate și depozitate într-o încăpere specială. Se crede că acesta a fost primul depozit electronic de informații.

În 1989, specialist britanic în informaticăTim Berners-Lee a inventat rețeaua mondială de calculatoare cu scopul de a asigura schimbul de informații printr-un sistem de hipertext. Atunci nici nu-și putea imagina ce impact va avea invenția sa asupra lumii, care ulterior a devenit cunoscută sub numele de Internet. După începutul anilor 90, tot mai multe dispozitive au început să se conecteze la rețeaua globală, ceea ce înseamnă că rata de generare a datelor a început să crească și mai activ.

În 1995, a fost creat primul supercomputer. Această mașină a reușit să facă treaba în câteva secunde, pe care o persoană simplă ar dura mii de ani. Și apoi a venit secolul XXI.

Aici ne întoarcem din nou la 2005, cândRoger Mugalus a inventat termenul „big data”. În același an, Yahoo a creat platforma Hadoop acum deschisă, al cărei obiectiv era indexarea întregului Internet. Astăzi, Hadoop este folosit de milioane de întreprinderi pentru a primi și prelucra cantități enorme de date.

În ultimii 10 ani, rețelele sociale au fost rapiddezvoltat, iar cantitatea de informații create de utilizatori a crescut zilnic. Una după alta, companiile și guvernele au început să implementeze proiecte Big Data. De exemplu, în 2009, Guvernul Indiei a creat cea mai mare bază de date cu date biometrice, care stochează amprentele și scanările irisilor ochilor tuturor cetățenilor țării.

În 2010, CEO-ul Google, Eric Schmidt, a vorbit laConferința Californie Techonomy, care spune că în ultimii șapte ani, compania a acumulat 5 exabytes de date. Era puțin probabil să își poată imagina că până în 2017 o cantitate similară de informații va fi generată zilnic. În același timp, ritmurile de creștere nu cred să încetinească.

O privire asupra trecutului ne-a permis să facem o aproximareo idee despre ce tendințe ne așteaptă în viitor. Dacă acum două decenii întreprinderile care dețineau informații au avut cel mai mare succes, astăzi cei care sunt capabili să interpreteze și să utilizeze cel mai bine informațiile disponibile au succes. Este logic să ne așteptăm ca succesul viitor să depindă de capacitatea de a obține date mari pentru a ajuta la luarea deciziilor strategice corecte.

Cu siguranță cei mai mulți dintre noi la mențiuneconceptul de „date mari” în cap există o cameră imensă, aglomerată cu multe servere cu lumini intermitente. Dar pentru a înțelege că acesta este un fenomen cu adevărat important care a schimbat regulile jocului, este suficient să apelăm la câteva exemple.

Alegerile prezidențiale recente din SUA au arătatcât de eficientă poate fi utilizarea ultimelor tehnologii informaționale. În timp ce Hillary Clinton a recurs la metode tradiționale și a atras celebritățile la sediul ei, echipa lui Donald Trump a decis să se concentreze pe studierea preferințelor și comportamentul consumatorului a milioane de americani. După ce a primit date exacte despre ce dorește electoratul, sediul candidatului republican a putut răspunde mai eficient la solicitările utilizatorilor de internet activi. Drept urmare, victoria lui Trump nu pare atât de neașteptată dacă țineți cont de cât de multă și de productivă s-a făcut.

Sau luați, de exemplu, serviciul de streaming Netflix,care în ultimii ani a devenit unul dintre cei mai populari producători de conținut. Prin livrarea de materiale video către audiență, compania a reușit să acumuleze o cantitate gigantică de date statistice, studiind amănunțit preferințele utilizatorilor: ce povești le plac, care sunt actorii care le plac, care scene sunt revizuite de mai multe ori și care sunt omise. Drept urmare, fiecare nouă serie Netflix ajunge la acest punct și obține cele mai mari evaluări pe IMDB. Dacă totuși crezi că cheia succesului constă în talentul alergătorilor de spectacole, atunci cel mai probabil ești prea naiv.

La scară microscopică, datele mari potpuse în slujba îmbunătățirii tale de sine. De exemplu, brățara de fitness sau smartwatch-ul dvs. poate colecta informații despre calorii consumate, distanța parcursă, ritmul cardiac și statistici ale somnului. Colectarea și analiza acestor informații vă vor permite să vă ajustați obiceiurile, care cu o răbdare adecvată va avea un impact pozitiv asupra sănătății și longevității.

Apropo, și la scară globală, date mariajuta activ medicina. Deja acum, prelucrarea datelor statistice acumulate permite nu numai în câteva minute să diagnostice diferite boli cu o precizie ridicată, ci și să prezice eficient apariția acestora. Acest lucru va trebui să protejeze oamenii de amenințarea ascunsă și să salveze milioane de vieți.

Un exemplu viu este platformaResearchKit, lansat de Apple în 2016. Prin utilizarea aplicațiilor mobile, profesioniștii medicali colectează date privind sănătatea utilizatorilor. Acest lucru permite nu numai să extindă îngrijirea pacienților în afara clinicii și să asigure recuperarea rapidă a acestora, dar și să acumuleze datele necesare pentru a crește eficacitatea interacțiunii cu viitorii pacienți.

Desigur, datele mari sunt utilizate în mod activ șiagenții de aplicare a legii De exemplu, Agenția Națională de Securitate a SUA utilizează datele disponibile pentru a detecta și preveni activitatea teroristă. Corporațiile folosesc de mult timp soluții în acest domeniu pentru a preveni atacurile cibernetice și penetrările neautorizate în sisteme. De asemenea, poliția experimentează Big Data, încercând să determine potențialul pericol pentru statul de drept al unui cetățean pe baza informațiilor din profilurile publice.

Va fi util să reamintim indicativulistoria anului 2014, când poliția din Chicago, folosind un sistem informatic, a întocmit o listă de 400 de locuitori ai orașului care au toate condițiile necesare pentru a încălca legea. Poliția a vizitat acești cetățeni și a purtat conversații preventive cu aceștia, dar povestea a făcut mult zgomot, în primul rând din cauza invaziei nerememorate a vieții personale. Deși proiectul cu scandalul a fost închis, nu există dovezi că analiza computerizată a potențialelor înclinații criminale ale cetățenilor a fost întreruptă.

Deși era a datelor mari este încă în continuareetapa inițială, realizările acestei discipline sunt deja utilizate în mod activ atât de corporațiile private, cât și de guverne. Principalul lucru este însă că acest bun valoros nu trebuie să fie la dispoziția celor care l-ar putea folosi în detrimentul umanității.

# tendințe | Retele neuronale