De ce „Face Hay în timp ce soarele strălucește” este valabil pentru datele web

"Bate fierul cât e cald."

"Cine se scoală de dimineață departe ajunge."

Mulți dintre voi s-ar putea să fie obișnuiți să audă cuvinte ca acestea destul de des de la mulți vorbitori motivaționali și de la alții, care preferă să ofere sfaturi gratuite oamenilor din jurul lor. Dar aceste cuvinte sunt valabile pentru extragerea datelor web. În zilele noastre, oamenii iau datele de la sine înțeles. Ori de câte ori se discută despre un articol sau produs, verificăm imediat online prețurile și detaliile. În acest fel, luăm datele de la sine înțeles. Ceea ce uităm este că oricine poate schimba informațiile prezente pe un site web pe care îl controlează. Prețurile, produsele, conținutul și multe alte câmpuri de date pot fi modificate. Nu știi niciodată ce ai putea rata până când datele nu sunt difuzate. Poate că deja colectați sau răzuiți date, direct legate de afacerea dvs. Vedeți, stocarea datelor este foarte ieftină. S-a redus aproape la bănuți. Deci, cu cât salvați și stocați mai multe date, cu atât mai bine. Oamenii rulează algoritmi pentru a construi modele predictive bazate pe date care au fost colectate din ultimele una sau două decenii. Poate într-o zi ar putea fi nevoie să faci același lucru, și whoa! Este posibil să nu aveți datele necesare pentru a face acest lucru.

De ce sunt datele atât de importante?

Lucrurile pe care o companie le poate face prin colectarea continuă de date variază de la urmărirea tendințelor în materie de prețuri și produse până la construirea de motoare de recomandare care ar ajuta la creșterea vânzărilor, prin gruparea produselor pentru a vinde mai bine accesoriile și piesele de schimb. Extragerea datelor din acest moment vă va ajuta să aveți date istorice, rezultate bazate pe cercetare de piață și financiară, precum și date colectate de organizații și organizații non-profit care s-ar putea închide în viitor.

Cum pot să dispară datele?

Guvernele din întreaga lume și-au dat seama că cuvintele sunt mai puternice decât săbiile în societatea actuală bazată pe date și iau în liniște imagini, videoclipuri, documente și multe altele care ar putea fi folosite ca dovezi incriminatorii pentru a-și dovedi faptele greșite sau pentru a declanșa o revoltă. . Recent, administrația președintelui Trump a scos datele despre știința climatică de pe site-ul web EPA. Au încercat să demonstreze un punct? Poate.

Deci, acesta este momentul să colectăm cât mai multe date posibil. Poate că într-o zi depozitul tău de date ar putea valora milioane, iar agențiile de marketing sau bazate pe date te-ar plăti pentru a pune mâna pe seturi de date, colectate de tine, care nu ar mai fi disponibile publicului, pe internet gratuit. Ar fi doar cu tine, stocat pe serverele tale private. Diverse grupuri de supraveghere din întreaga lume au început să dezlege site-ul web EPA, dar, din păcate, pentru datele despre știința climei, era prea târziu și datele nu mai erau accesibile, iar singurul mod în care cineva avea acele date este dacă cineva le-ar fi stocat offline.

Când ai avea nevoie de date?

Să nu mergem atât de departe. Să presupunem că dețineți o afacere B2C și că observați o scădere a vânzărilor dintr-o dată, că nu vă puteți conecta la scenariile obișnuite. Dacă aveți date pentru doar un an, este posibil să nu puteți înțelege foarte bine motivul real. Cu toate acestea, dacă ați fi colectat și salvat în mod proactiv date - chiar și date care ar fi putut părea excese și în acel timp (s-ar fi putut presupune că nu veți avea nevoie de atâtea date) și totuși le-ați stocat pentru viitor, atunci ați putea vă este mai ușor să faceți o predicție sau să creați un model care vă va ajuta să preziceți motivele din spatele scăderii vânzărilor.

Cum datele ajută companiile să se dezvolte

1. Google: Colaborează cu Centers for Disease Control din SUA și ajută la urmărirea, atunci când utilizatorii introduc termeni de căutare, legați de subiecte legate de gripă, pentru a ajuta la prezicerea regiunii care urmează să se confrunte cu focare.
2. General Electric (GE): Mașini, de la centrale electrice la locomotive și chiar echipamente spitalicești, acumulează date despre modul în care funcționează, cu ajutorul a mii de senzori montați în ele. Echipa de analiză a GE îl strânge, apoi demontează mașinile și le reunește pentru a le face mai eficiente. Îmbunătățirile minime dau rezultate mărețe, din cauza amplorii- După estimările GE, datele pot crește productivitatea în SUA cu un procent și jumătate, ceea ce, pe o perioadă de douăzeci de ani, ar putea economisi suficienți bani pentru a crește veniturile naționale medii cu până la treizeci de procente.
3. Netflix: Acesta este unul pe care îl știm cu toții și ne bucurăm de zi cu zi. Nu numai că atrag o mulțime uriașă cu ajutorul multor lor conținuturi originale, dar și motorul lor uimitor de recomandare este aproape ca și cum ai avea un cel mai bun prieten, care îți oferă sugestii grozave de filme bazate pe gusturile și antipatiile tale personale.
4. Uber: Uber folosește datele mari pentru a prezice, unde și când, oamenii vor încerca, în număr mare, să rezerve taxiuri, iar acolo, Uber promovează pool-ul Uber, ceea ce nu numai că îi ajută pe acești oameni să economisească bani, ci și să reducă amprenta de carbon până la o treime.
5. UPS: Știm cu toții cât de importantă a devenit logistica în aceste zile. Avem nevoie ca totul să fie livrat chiar la ușa noastră. UPS ajută la livrarea a 4 miliarde de articole pe an prin aproape o sută de mii de vehicule. Cu un volum atât de mare de trafic, posibilitățile de utilizare a datelor sunt nelimitate, iar UPS folosește Big Data, iar pentru optimizarea flotei, pentru a economisi bani și pentru a eficientiza afacerea de logistică. Compania a economisit peste treizeci și nouă de milioane de galoane de combustibil și a evitat să conducă trei sute șaizeci și patru de milioane de mile.

Cum se colectează date?

Înființarea unei echipe de crawling pe web pentru majoritatea companiilor ar putea să nu fie fezabilă, deoarece înseamnă că ar putea fi necesar să adăugați companiei dvs. un departament complet nou, de ultimă generație, pe care este posibil să nu aveți mijloacele să îl finanțați sau să îl înțelegeți. În schimb, ai putea să mergi la un furnizor de servicii, care te-ar ajuta să înțelegi ce fel de date ar fi cel mai bine pentru tine să accesezi cu crawlere, să colectezi, să salvați și să stocați, astfel încât să vă puteți asigura că afacerea dvs. nu are niciodată o lipsă de date. De asemenea, vă pot ajuta cu modelarea de predicții și motoare de recomandare, astfel încât nu numai să colectați date, ci și să continuați să le utilizați ca combustibil pentru afacerea dvs., în timp real.

„În Dumnezeu avem încredere. Toți ceilalți trebuie să aducă date.” – W. Edwards Deming, statistician