大数据时代

作者: 虎爪 | 来源:发表于2016-07-16 17:15 被阅读39次
大数据时代

       上次在工业4.0中写到关于数据分析方面的内容希望能进一步了解,所以本次选择了这本书。

        本书从大数据时代的思维变革、商业变革和管理变革三个方面讲述了大数据给我们的生活、工作和思维带来的改变。书中也例举了很多实例,特别是在数据分析方面给我带来一些启发。


         记得在做回波库管理时客户提出的困惑,面对海量的格式不一致的数据如何将有价值的数据提取并利用起来。在书中提到,只有百分之五的数据是结构化且能适用于传统数据库的,剩下的百分之九十五的结构化数据都无法被利用。那是不是说明我一开始的想法就是错误的,解决方法就是接受这些数据的混杂性,从“小数据”到“大数据”的转变(难点就是需要进行新的数据库的设计)之前我们总是绞尽脑汁想更好的算法机制,但是谷歌翻译的成功可以给我们一些启示(见书中谷歌翻译系统)-也许我们在通往一条错误的路上。

         怎样的方式我们可以尝试一下?

        书中提到的一种新的思维让我非常感兴趣——知道“是什么”就够了,没必要知道“为什么”。书中提到的一些成功的例子说明找出问题之间的关联性比找出问题的原因更具有价值(见书中“不是因果关系”而是“相关关系”),根据这一点可以确定数据分析的方向。

          “量化一切,数据化的核心”,书中提倡一切皆可量化,这可能就是在实际工作中需要花些时间思考的地方。在实际方案中进行数据量化的设计和论证,比如书中提到的谷歌数字图书馆。

            之前在工作中面对数据分析的问题会听到这样的声音“数据存在问题”、“技术不可实现”等,但是很少有人会注意到是思维出现问题,所以如果想把数据分析做好,数据、技术和思维(见书中大数据思维)缺一不可。


          这本书提供的是一些启发性的思路,在日后的工作中遇到数据处理和分析方面的问题可以参考,具体的实践还需要搜集更多的资料并论证。

相关文章

  • 大数据时代

    大数据时代,出现三大大数据公司,分别是 数据本身,技能,思维

  • 报告总统(下)

    一、大数据时代的数据收集、分析 大数据之所以为”大“,有两个层面:其一、数据量大,海量数据;其二、分析规模大:由于...

  • 大数据时代数据可视化的概念研究

    本文基于对DT时代下数据可视化概念进行解读与分析。在大数据时代大背景下,作为前端工程师,接触数据,使用数据,分析数...

  • 粉丝“刷刷刷”的时代还有多久结束

    互联网时代,自媒体时代啥东西最重要? 数据、数据、数据。重要的事情说三遍。 数据是关注度最好的体现,大到投资上亿,...

  • python爬虫基础

    大数据时代:数据如何产生? 1、大的公司打的企业:通过用户产生的数据2、大的数据平台:通过收集或者和其他的企业或者...

  • 爬虫基础

    大数据时代:数据如何产生? 1、大的公司打的企业:通过用户产生的数据2、大的数据平台:通过收集或者和其他的企业或者...

  • 快速兴起的小众数据库(一):为关系数据而生的Neo4j

    前言 随着大数据时代的发展,诞生了一大批大数据时代下的新数据库产品,如今MongoDB、Redis、HBase这些...

  • python爬虫入门

    大数库时代:数据如何产生? 1. 大的公司大的企业:通过用户产生的数据 2.大的数据平台:通过收集或者和其他企业或...

  • 爬虫one-Day总结

    1,大叔据时代数据产生: (1)大的公司大的企业:通过用户产生的数据 (2)大的数据平台:通过手机或者和其他企业或...

  • 2018-10-06

    2018年四大爬虫代理IP提供商对比 大数据时代,数据采...

网友评论

    本文标题:大数据时代

    本文链接:https://www.haomeiwen.com/subject/gijujttx.html