美文网首页大数据架构
大数据技术原理与应用:大数据概述

大数据技术原理与应用:大数据概述

作者: 行书以鉴 | 来源:发表于2018-01-09 12:42 被阅读14次

大数据概述

为什么说大数据是第三次信息化浪潮?

数据技术支撑

存储设备便宜 处理能力提升
网络带宽提升

数据产生方式变革

数据产生方式
大数据发展三个阶段

由于技术支撑以及数据产生方式变革,促成了大数据~

大数据定义

  • 数据量大


    大数据摩尔定律
  • 数据类型繁多:由结构化和非结构化数据组成


    类型多
  • 处理速度快:秒级决策


  • 价值密度低


    厦大校园
  • 故大数据4v特性

大数据关键技术

两大核心技术:分布式存储与处理

大数据计算模式

大数据计算模式区分
  • 流计算比如用户点击流、日志流等,秒级实时响应
  • 不同产品服务于不同业务问题

大数据与云计算、物联网的关系

云计算

云计算概念
  • 云计算通过网络以服务的方式为用户提供了非常廉价的资源。
  • 云计算解决了海量数据"分布式存储和分布式处理"以及"虚拟化、多租户"两大问题


    云计算三大名词
  • IaaS:基础设施即服务:ec2...
  • PaaS:平台即服务: app engine...
  • SaaS:软件即服务:google apps...

物联网

物联网概念
  • 从层次架构看,分为:感知层、网络层、处理层、应用层
物联网技术列举 大数据、云计算和物联网三者关系
云计算为大数据提供了技术基础,大数据为云计算提供了用武之地
大数据继承自云计算
物联网是大数据的重要来源
大数据技术为物联网数据分析提供技术支撑
云计算为物联网提供海量数据存储能力
物联网为云计算提供了广阔的应用空间

以上是厦门大学林子雨教授所传授的《大数据技术原理与应用》的PPT以及个人笔记,这里做下自己的记录。

相关文章

  • 大数据技术原理与应用:大数据概述

    大数据概述 为什么说大数据是第三次信息化浪潮? 数据技术支撑 数据产生方式变革 由于技术支撑以及数据产生方式变革,...

  • 大数据入门 | 一、大数据、云计算、物联网的联系与区别

    网易云课堂《大数据技术原理与应用》课程Chapter 1学习笔记 01 大数据是什么? 大数据,不仅仅是数据量大,...

  • 能源大数据在生活中的应用

    能源大数据理念是将电力、石油、燃气等能源领域数据进行综合采集、处理、分析与应用的相关技术与思想。能源大数据不仅是大...

  • 大数据(Hadoop)完全分布式集群安装(全)

    一、大数据概述 大数据概念 大数据(Big Data):指的是传统数据处理应用软件不足以处理(存储和计算)它们的大...

  • MVC5入门

    MVC概述 MVC基本原理 模型Model 用于封装与应用业务逻辑相关的数据以及用于控制访问和修改这些数据的业务规...

  • 大数据与Hadoop之间是什么关系?

    大数据目前分为四大块:大数据技术、大数据工程、大数据科学和大数据应用。其中云计算是属于大数据技术的范畴,是一种通过...

  • 大数据Hadoop

    Hadoop CAP理论 大数据技术原理与应用——概念、存储、处理、分析与应用 C (强一致性) :系统在执行过某...

  • 大数据简介

    Big data 概述 大数据指的是传统数据处理应用软件不足以处理它们的大或复杂的数据集的术语, 数据通常都是量大...

  • 想报考大数据、人工智能相关的专业?看这个

    与大数据、人工智能相关的专业目前有两个:数据科学与大数据技术、人工智能(或者叫智能科学与技术)。 1.数据科学与大...

  • React数据大屏的应用实践

    本文首发于 hzzly的博客原文链接:React数据大屏的应用实践 数据大屏与数据可视化 现如今大数据已无所不在,...

网友评论

    本文标题:大数据技术原理与应用:大数据概述

    本文链接:https://www.haomeiwen.com/subject/qzbinxtx.html