Web Scraping dezvăluie tendințele tehnologice de top și mențiunile media ale companiei în 2017
Publicat: 2017-12-19Extragerea datelor web sau web scraping pot fi un instrument de afaceri excelent pentru identificarea tendințelor prin monitorizarea media. În esență, instituțiile media de top pot fi urmărite pentru a dezvălui cuvintele la modă de top și numărul de mențiuni pe care companiile (inclusiv produsele lor) le obțin pe o anumită perioadă de timp. Am vrut să aplicăm această metodă pentru a înțelege peisajul tehnologic și acoperirea acestuia în 2017. Prin urmare, am implementat crawlerul web intern al PromptCloud pentru a extrage titlurile articolelor din două magazine populare (TechCrunch și VentureBeat) și am efectuat extragerea textului pe setul de date pentru a le descoperi cele mai bune cuvinte la modă, companii și produse.
Setul de date
Setul de date este foarte simplu și conține doar următoarele trei câmpuri:
- URL
- Titlul articolului
- Data
Ultimul articol a fost accesat cu crawlere pe 7 decembrie.
Goluri
Scopul analizelor poate fi împărțit în două secțiuni:
- Top companii/produse care au fost acoperite de mass-media pe parcursul anului
- Cele mai importante tendințe tehnologice de-a lungul anului
Să trecem acum la partea interesantă a studiului, adică rezultatul și contextul asociate constatărilor.
Companii și produse de top
Mai jos este prezentată reprezentarea tabelară a companiilor și produselor de top care au obținut un număr maxim de mențiuni:
| Numele companiei | Comentarii |
| Accentul din acest an s-a pus pe AI și Machine Learning, fie că este vorba despre Google Photos, Google Assistant, G Suite sau Google Home. De asemenea, au introdus Google Lens, care folosește o tehnologie de învățare automată pentru a identifica obiectele din întreaga lume. În mod clar, sunt pe drumul lor pentru a deveni o companie „în primul rând AI”. | |
| Măr | Apple a anunțat că difuzorul Homepod va prelua Amazon Echo și Google Home. A lansat noul ARKit pentru a permite dezvoltatorilor să creeze aplicații de realitate augmentată pentru iPhone. Anul acesta am văzut și lansarea iPhone 8 și iPhone X, în afară de alte produse Apple. Vestea este că integrează învățarea automată și realitatea augmentată cu iOS 11. |
| Compania a anunțat tone de noi proiecte și funcții în 2017. Platforma de realitate augmentată a camerei foto - suită de instrumente creative. De asemenea, a lansat Facebook spaces - o platformă de realitate virtuală socială care se bazează pe conectarea contului dvs. de Facebook cu echipamentul Oculus. | |
| Amazon | Principalele domenii de interes au fost securitatea, deoarece Amazon se străduiește să creeze un mediu pentru clienții lor. Au lansat o serie de caracteristici de securitate pentru AWS, în afară de alte servicii AWS centrate pe analize avansate, învățarea automată, AI, NLP și multe altele. Afacerea lor de vânzare cu amănuntul a crescut, de asemenea, cel mai important lucru fiind achiziția Whole Foods. |
| Uber | Anul acesta, Uber a achiziționat compania de camioane Otto, care a intrat în probleme legale cu Waymo de la Alphabet. De asemenea, au început anul cu o amendă de 20 de milioane de dolari din partea Comisiei Federale pentru Comerț (FTC). În afară de asta, au intrat în controverse legate de locul de muncă după ce fostul lor inginer Susan Fowler a evidențiat cultura adversă a companiei într-o postare pe blog. Alte puncte importante includ fuziunea lor cu rivalul chinez Didi Chuxing și anunțarea planurilor de mașini zburătoare pentru Dubai și Texas până în 2020. |
| Microsoft | Microsoft introduce inteligența artificială și serviciile de învățare automată (ML) în ecosistemul Microsoft, inclusiv Visual Studio Tools și Microsoft Azure. Acum este disponibil Azure IoT Edge Public Preview, permițând crearea și implementarea inteligenței artificiale (AI) și a analizelor avansate pe „Edge”. Azure Machine Learning este actualizat pentru a oferi integrare cu Azure IoT Edge pentru a implementa modele de Machine Learning pe dispozitivele „Edge”. |
| Stare de nervozitate | De la posibilitatea alarmantă ca Rusia să manipuleze opinia publică din SUA, până la hashtag-ul #MeToo care a acționat ca un catalizator pentru ca femeile să vorbească despre agresiunile sexuale, Twitter a fost în centrul memelor și mișcărilor care au dat zgomot societății în 2017. |
| Tesla | Proiectat și construit ca primul vehicul electric de masă din lume - Modelul 3, este un pas esențial în misiunea sa de a accelera tranziția lumii către energie durabilă. |
| iPhone | Acesta este produsul emblematic Apple care a reușit să rămână în top 10 în virtutea lansărilor de noi produse și a revizuirilor majore. |
| Android | Acest sistem de operare mobil dezvoltat de Google se menține pe poziția a zecea datorită adoptării sale masive de către principalii producători de dispozitive. Emblematicul producător de telefoane Nokia a venit și cu noi dispozitive Android. |
Celelalte companii și produse notabile care nu au putut ajunge în top 10 sunt Samsung, Alexa, Snapchat, YouTube, iOS și Netflix. Să vedem acum cum s-au schimbat mențiunile media despre primele cinci companii în cele patru trimestre.
În mod clar, Google este în fruntea pachetului cu cel mai mare număr de mențiuni, iar Apple s-a apropiat cel mai mult de Google în al treilea trimestru. Acest lucru poate fi atribuit în mare parte evenimentului Apple care a avut loc în septembrie. Uber a intrat în primele cinci, trecând peste Microsoft, mai ales din cauza controverselor demne de știre – de la mită și procese până la schimbarea conducerii și cultura ostilă la locul de muncă.
Tendințe tehnologice de top
Mai jos este reprezentarea tabelară a primelor 10 tendințe tehnologice din 2017:
| Tendință tehnologică | Comentarii |
| aplicația | În mod clar, creșterea exponențială a utilizării diferitelor tipuri de aplicații, începând de la web și mobil până la produse conectate și dispozitive AR/VR, s-a asigurat că aceasta este tendința tehnologică numero uno. |
| date | Datele au devenit deja un motor major de creștere pentru majoritatea companiilor. A existat o schimbare către aplicații cu state care folosesc date mari și încorporarea abordărilor de învățare automată care utilizează cantități mari de date istorice pentru a înțelege mai bine contextul datelor de streaming nou sosite. Încorporarea Internetului lucrurilor (IoT) și adoptarea pe scară largă a tehnicilor de inteligență artificială face ca datele să fie o tendință de top, care își va continua poziția și în 2018. |
| mobil | Serviciile bazate pe locație vor continua să evolueze și vor oferi utilizatorilor informații în timp real. Un număr mai mare de aplicații vor începe să folosească AR, făcând astfel aplicațiile mai eficiente și mai productive. Aplicațiile instantanee Android vor deveni o tendință comună. Companiile de sănătate, educație, securitate, casă inteligentă și multe altele au început să utilizeze tehnologii și aplicații mobile. |
| video | În 2017, lățimea de bandă dedicată traficului video a fost estimată a reprezenta 74% din utilizarea internetului. Prin urmare, streamingul live va suferi o creștere puternică. Mai mulți radiodifuzori trec în fluxul live al videoclipului Over The Top. Realitatea virtuală, în special streaming VR, devine din ce în ce mai răspândită. Videoclipul în realitate virtuală va fi probabil viitoarea platformă de alegere. Între timp, videoclipul 360° este o tehnologie bridge care își asumă puterea. |
| mașină/mașină cu conducere autonomă | Mașinile conectate au sosit deja, iar mașinile care se conduc singure nu sunt departe. Viitoarele mașini fără șofer vor avea nevoie de schimbări drastice ale peisajului nostru stradal, inclusiv strategii noi de gestionare a traficului și o revizuire a locurilor de parcare. |
| nor | 2017 a înregistrat o creștere a aplicațiilor de afaceri gestionate de cloud, care au acum o cotă de 70% pe piața pentru întreprinderi. Există, de asemenea, o trecere treptată către infrastructura cloud hiper-convergentă (HCI), care oferă ușurință în gestionarea tehnologiilor integrate folosind un set de instrumente comun. O altă tendință interesantă este adoptarea tot mai mare a containerelor cloud precum Linux în rândul companiilor de top precum Google, Facebook, Microsoft, precum și în organizațiile mai mici deopotrivă. |
| inteligent (dispozitive/acasă) | Dispozitivele inteligente precum Amazon Echo și Google Home au devenit populare în 2017, companiile făcând aceste dispozitive disponibile la nivel global, îmbunătățind funcțiile existente și adăugând altele noi. Camera cloud de la Amazon a fost unul dintre cele mai populare dispozitive inteligente pentru casă lansate anul acesta. Nu numai că a funcționat ca o cameră de securitate pentru acasă cu spațiu de stocare nelimitat, dar a venit și cu prevederea de a permite personalului Amazon să vă arunce expedierile în casa dvs., lucrând împreună cu încuietoarea inteligentă a Amazon. |
| social | Realitatea augmentată, videoclipurile live și poveștile au fost unele dintre tendințele de top în rândul utilizatorilor de rețele sociale în 2017. A existat o creștere a participării mărcii în aplicațiile de mesagerie precum Facebook Messenger, Whatsapp și altele asemenea. Marketingul de influență a câștigat mai multă acțiune în 2017 și este unul dintre cei mai populari medii de marketing. După ce nu a reușit să crească semnificativ în 2017, Twitter a crescut limita de caractere a tweet-urilor de la 140 la 280. |
| Securitate | În 2017, companiile au luat securitatea datelor mai în serios decât oricând. WannaCry a fost una dintre cele mai mari amenințări cibernetice pe care le-am văzut în 2017, care a făcut ca instalațiile critice precum spitalele, agențiile guvernamentale și computerele individuale să fie inutile, provocând daune pe scară largă. Securitatea a devenit într-adevăr o preocupare din ce în ce mai mare pentru întreprinderile care dețin cantități uriașe de date, iar eforturile de a rezolva acest lucru au început deja. |
| învățare automată | Spațiul de învățare automată a cunoscut inovații și dezvoltare inovatoare, concentrate în special pe domenii precum explorarea spațiului, asistența medicală, finanțele și conducerea autonomă. Conducerea autonomă câștigă rapid avânt, jucători de top precum Tesla, Uber și Google cheltuind o cantitate semnificativă de resurse pentru a atinge perfecțiunea în acest domeniu. |
Mai jos este prezentat graficul care arată mișcarea primelor zece tendințe tehnologice în cele patru trimestre.
Privind primele trei tendințe, și anume, aplicații, date și mobil, este evident că primul trimestru a dat vârf maxim pentru „aplicație” și „mobil”, datele rămânând consistente (deoarece trimestrul trecut are date până pe 7 decembrie).