Web Scraping 揭示了 2017 年的顶级技术趋势和公司的媒体提及
已发表: 2017-12-19 目录显示
数据集
目标
顶级公司和产品
顶级技术趋势
Web 数据提取或 Web 抓取可以成为通过媒体监控发现趋势的绝佳商业工具。 从本质上讲，可以跟踪领先的媒体机构以揭示最热门的流行语以及特定时间段内公司（包括他们的产品）获得的提及次数。 我们想应用这种方法来了解 2017 年的技术格局及其覆盖范围。因此，我们部署了 PromptCloud 的内部网络爬虫，从两个流行的渠道（TechCrunch 和 VentureBeat）提取文章标题，并对数据集进行文本挖掘以发现最热门的流行语、公司和产品。
数据集
数据集非常简单，只包含以下三个字段：
- 网址
- 文章标题
- 日期
上一篇文章是在 12 月 7 日抓取的。
目标
分析的目标可以分为两个部分：
- 全年被媒体报道的顶级公司/产品
- 一年来的主要技术趋势
现在让我们进入研究的有趣部分，即结果和与研究结果相关的背景。
顶级公司和产品
下面给出了获得最多提及次数的顶级公司和产品的表格表示：
| 公司名称 | 注释 |
| 谷歌 | 今年的重点是人工智能和机器学习，无论是 Google Photos、Google Assistant、G Suite 还是 Google Home。 他们还推出了 Google Lens，它使用机器学习技术来识别世界各地的物体。 显然，他们正在成为“人工智能优先”的公司。 |
| 苹果 | Apple 宣布 Homepod 扬声器将与 Amazon Echo 和 Google Home 竞争。 推出新的 ARKit，让开发人员可以为 iPhone 构建增强现实应用程序。 今年，除了其他 Apple 产品外，我们还看到了 iPhone 8 和 iPhone X 的发布。 消息是他们正在将机器学习和增强现实与 iOS 11 集成。 |
| 该公司在 2017 年宣布了大量新项目和新功能。Camera 的增强现实平台——创意工具套件。 还推出了 Facebook 空间——一个社交虚拟现实平台，依靠将你的 Facebook 帐户与 Oculus 设备连接起来。 | |
| 亚马逊 | 主要关注领域是安全性，因为亚马逊努力为他们的客户创造一个环境。 除了以高级分析、机器学习、AI、NLP 等为中心的各种其他 AWS 服务之外，他们还为 AWS 发布了一系列安全功能。 他们的零售业务也随着收购全食超市而飙升。 |
| 优步 | 今年 Uber 收购了自动驾驶卡车公司 Otto，该公司与 Alphabet 的 Waymo 陷入法律纠纷。 他们还在今年年初被联邦贸易委员会 (FTC) 罚款 2000 万美元。 除此之外，在他们的前工程师 Susan Fowler 在博客文章中强调了公司的不良文化之后，他们陷入了与工作场所相关的争议。 其他亮点包括他们与中国竞争对手滴滴出行的合并，以及宣布到 2020 年在迪拜和德克萨斯州的飞行汽车计划。 |
| 微软 | 微软正在微软生态系统中引入人工智能和机器学习 (ML) 服务，包括 Visual Studio Tools 和 Microsoft Azure。 现在 Azure IoT Edge Public Preview 可用，可以在“边缘”上构建和部署人工智能 (AI) 和高级分析。 Azure 机器学习正在更新，以提供与 Azure IoT Edge 的集成，以便在“边缘”设备上部署机器学习模型。 |
| 推特 | 从俄罗斯操纵美国公众舆论的令人担忧的可能性，到作为催化剂的#MeToo 话题标签，这些标签充当了女性就性侵犯发表言论的催化剂，Twitter 一直是 2017 年让社会震动的模因和运动的中心。 |
| 特斯拉 | 作为世界上第一款大众市场电动汽车 Model 3 设计和制造的，它是其加速世界向可持续能源过渡的使命的关键一步。 |
| 苹果手机 | 这是凭借新品发布和大修而成功保持在前 10 名的苹果旗舰产品。 |
| 安卓 | 由于主要设备制造商的大量采用，谷歌开发的这款移动操作系统保持在第十位。 标志性的手机制造商诺基亚也推出了新的安卓设备。 |
其他未能进入前 10 名的知名公司和产品包括三星、Alexa、Snapchat、YouTube、iOS 和 Netflix。 现在让我们看看媒体对前五名公司的提及在四个季度中的变化情况。
显然，谷歌以最高的提及次数领先，而苹果在第三季度最接近谷歌。 这主要归功于 9 月份举行的 Apple 活动。 优步超过微软进入前五名主要是因为有新闻价值的争议——从贿赂和诉讼到领导层更迭和敌对的工作场所文化。
顶级技术趋势
以下是 2017 年十大技术趋势的表格表示：
| 技术趋势 | 注释 |
| 应用程序 | 显然，从 Web 和移动设备到联网产品和 AR/VR 设备，各种类型的应用程序的使用呈指数级增长，这确保了这是非主流的技术趋势。 |
| 数据 | 数据已经成为大多数企业的主要增长动力。 转向利用大数据的有状态应用程序，并结合使用大量历史数据的机器学习方法，以更好地了解新到达的流数据的上下文。 物联网 (IoT) 和人工智能技术的广泛采用使数据成为热门趋势，并将在 2018 年继续保持其地位。 |
| 移动的 | 基于位置的服务将继续发展，并将为用户提供实时信息。 更多的应用程序将开始使用 AR，从而使应用程序更加有效和高效。 Android 即时应用将成为一种普遍趋势。 健康、教育、安全、智能家居公司等已经开始使用支持移动的技术和应用程序。 |
| 视频 | 2017 年，专用于视频流量的带宽估计占互联网使用量的 74%。 因此，直播将经历强劲增长。 越来越多的广播公司开始直播 Over The Top 视频。 虚拟现实，尤其是 VR 流媒体，正变得越来越普遍。 虚拟现实视频很可能是未来的首选平台。 与此同时，360° 视频是一种正在形成的桥梁技术。 |
| 汽车/自动驾驶汽车 | 联网汽车已经到来，自动驾驶汽车也不远了。 即将到来的无人驾驶汽车将需要对我们的街景进行重大改变，包括新的交通管理策略和对停车位的审查。 |
| 云 | 2017 年，云运行的商业应用程序出现增长，目前在企业市场中占有 70% 的份额。 还逐渐转向超融合云基础架构 (HCI)，它提供了使用通用工具集管理集成技术的便利。 另一个有趣的趋势是，在谷歌、Facebook、微软等顶级公司以及较小的组织中越来越多地采用像 Linux 这样的云容器。 |
| 智能（设备/家庭） | Amazon Echo 和 Google Home 等智能设备在 2017 年成为主流，这些公司在全球范围内提供这些设备，并改进其现有功能并添加新功能。 亚马逊的云摄像头是今年推出的最热门的智能家居设备之一。 它不仅可以用作具有无限存储空间的家庭安全摄像头，还可以通过与亚马逊自己的智能锁一起使用，让亚马逊人员将您的货物放在您家中。 |
| 社会的 | 增强现实、实时视频和故事是 2017 年社交媒体用户的一些热门趋势。Facebook Messenger、Whatsapp 等消息应用程序的品牌参与度有所上升。 影响者营销在 2017 年获得了更多关注，并且是营销人员的首选媒介之一。 在 2017 年未能取得任何显着增长后，Twitter 将推文的字符限制从 140 增加到 280。 |
| 安全 | 2017 年，企业比以往任何时候都更加重视数据安全。 WannaCry 是我们在 2017 年看到的最大网络威胁之一，它使医院、政府机构和个人计算机等关键设施无法使用，造成广泛的危害。 安全确实已成为拥有大量数据的企业日益关注的问题，并且解决此问题的努力已经开始。 |
| 机器学习 | 机器学习领域出现了突破性的创新和发展，尤其集中在太空探索、医疗保健、金融和自动驾驶等领域。 自动驾驶正在迅速发展，特斯拉、优步和谷歌等顶级公司花费大量资源在该领域实现完美。 |
下面的图表显示了四个季度内十大技术趋势的变化。
看看前三大趋势，即应用程序、数据和移动，很明显，第一季度“应用程序”和“移动”的峰值最大，数据保持一致（因为上一季度的数据截至 12 月 7 日）。