当前位置:首页 > 影视动漫 >

大数据计算体系的三个基本层次(大数据计算三个基础层次)

来源:原点资讯(www.yd166.com)时间:2023-10-26 05:43:53作者:YD166手机阅读>>

一、大数据的三个层次和核心解读

(一)三个层次和核心

我们将大数据分为三个层次。一是容量很大的数据,比如两个仓库都堆满了很多书,甲仓库的书全是大学二年级数学教材,乙仓库的为大学各类教材及其提升学生综合能力的各类图书,两仓库都满足了“大”的要求;二是大容量且有用的数据,比如对大学教学来说,肯定上述甲仓库的书几乎没用,而乙能满足这一要求;三是从中挖掘核心数据的强大能力,这个很考水平。所以,大数据不能简单地理解为数据多,其核心是数据挖掘。挖掘数据则要涉及到云计算。这种如云般运算的能力与强度,实际上就是考验科技与研发人员的“认知”水准。

——摘自《新未来简史》一书

大数据计算体系的三个基本层次,大数据计算三个基础层次(1)

(二)对核心的解读

所谓数据挖掘(与传统定义有点不同),就通过对海量数据的交换、选择、整合和分析,发现新的知识,创造新的价值,带来"大知识"、"大科技"、"大利润"和"大发展"。

也就是,将海量数据最大化的、集约型的、多头性地运用于企业、社会、生活等等的各个方面,以创造最大的价值。

二、大数据的范围与深度认识

(一)范围认知

如今通过物联网(或互联网)感知到的被人们称之为“大数据”的数据(主要指人类信息交换、信息存储、信息处理三方面能力大幅提升后,人与人、人与物之间所制造的数据),相对于万物在同一时刻所释放的所有数据来说,仅仅只是微不足道的“微数据”而已。(摘自《新未来简史》一书)

大数据计算体系的三个基本层次,大数据计算三个基础层次(2)

(二)深度认知

如今概念的“大数据”依然是很表面的数据,比如说“你挥挥手,几个简单的动作是‘表数据’,物联网能感知;而挥手动作之下,深入到分子、细胞与组织内,数以亿计的‘宏数据’不能被感知。‘表数据’构筑起如今的大数据概念,在此基础之上的物联网、算法与人工智能等,能量非常有限”。

上述文字摘自《新未来简史》一书,是该书提出的“未来12大定律或理论”之一,即“宏表数据理论”。

(三)与人工智能(AI)、物联网的关系

1、与AI的关系

比如AI中的“深度学习”(机器学习的内容之一),实际上是个老话题,如今很时髦的原因,主要是因为信息技术的发展让搜集“大数据”成为可能,机器训练有了足够多的样本。诸如阿尔法狗的棋步算法、洛天依的声音合成,以及无人驾驶、人脸识别、网页搜索等等高级应用中用到的神秘兮兮的“深度学习”“增强学习”,乃至最具潜力的“对抗学习”及其对应的“深度神经网络”“卷积神经网络”“对抗神经网络”等 都与大数据有关。(摘自《新未来简史》一书

大数据计算体系的三个基本层次,大数据计算三个基础层次(3)

2、与物联网的关系(进一步解读与AI的关系)

物联网主要通过各种设备(比如RFID,传感器,二维码等)的接口将现实世界的物体连接到互联网上,或者使它们互相连接,以实现信息的传递和处理。

而且,由于物联网可连接大量不同的设备及装置(家用、生活、监测等各类电器和设备),嵌入在各个产品中的传感器(sensor)便会不断地将新数据上传至云端。这些新的数据以后可以被人工智能处理和分析,以生成所需要的信息并继续积累知识。

大数据计算体系的三个基本层次,大数据计算三个基础层次(4)

综上:

1、正是得益于大数据和云计算的支持,互联网才正在向物联网扩展,并进一步升级至体验更佳、解放生产力的人工智能时代。

2、对于人工智能而言,物联网(IoT)其实肩负了一个至关重要的任务:资料收集和传递。

栏目热文

大数据计算模式4种的用处(大数据转换操作有哪些)

大数据计算模式4种的用处(大数据转换操作有哪些)

数据与人工智能:共同推动创新与发展数据和人工智能技术的结合,是一次彻底的创新。数据作为新的生产要素,与人工智能技术的生产...

2023-10-26 05:49:15查看全文 >>

大数据计算模式总结(大数据的计算框架有哪几类)

大数据计算模式总结(大数据的计算框架有哪几类)

大数据要实现业务落地的前提,是企业需要搭建起自身的大数据平台,去实现对数据价值的挖掘和应用。根据实际的业务场景需求,不同...

2023-10-26 05:38:30查看全文 >>

常见的大数据计算模式有哪些

常见的大数据计算模式有哪些

Excel中使用最多的函数应该是求和类函数了,本文给大家总结了excel中的6个求和函数,看看你都用过没有,喜欢的朋友开...

2023-10-26 06:21:05查看全文 >>

大数据计算的四种模型(大数据的五大模型)

大数据计算的四种模型(大数据的五大模型)

01离线批处理这里所说的批处理指的是大数据离线分布式批处理技术,专用于应对那些一次计算需要输入大量历史数据,并且对实时性...

2023-10-26 05:38:34查看全文 >>

大数据计算模式分两种(不属于大数据计算模式的类型)

大数据计算模式分两种(不属于大数据计算模式的类型)

Apache Spark 和 Apache Hive 都是大数据处理领域的重要工具。然而,它们之间存在着明显的差异,并且...

2023-10-26 06:02:49查看全文 >>

大数据的典型计算模式(大数据计算模式有哪些)

大数据的典型计算模式(大数据计算模式有哪些)

最早提出“大数据”时代到来的是全球知名咨询公司麦肯锡,麦肯锡称:“数据,已经渗透到当今每一个行业和业务职能领域,成为重要...

2023-10-26 05:58:54查看全文 >>

大数据模型定理(大数据计算的四种模型)

大数据模型定理(大数据计算的四种模型)

谈起大数据技术,很多人都觉得是高大上的一门技术,学起来应该是困难重重!其实对于大数据技术而言,难的不是大数据技术本身,...

2023-10-26 05:59:08查看全文 >>

大数据计算模式主要有几种(大数据计算模式有哪些)

大数据计算模式主要有几种(大数据计算模式有哪些)

大数据架构平台通常由多个组件构成,每个组件负责处理不同的任务和功能。以下是大数据架构平台的常见组件架构以及各组件的功能。...

2023-10-26 05:55:55查看全文 >>

什么叫大数据算法(大数据和算法有什么区别)

什么叫大数据算法(大数据和算法有什么区别)

大数据算法是指用于处理大规模数据集的算法。大数据算法通常包括分布式计算、并行计算和数据挖掘算法。一些典型的大数据算法包括...

2023-10-26 05:45:37查看全文 >>

大数据计算模式有哪些(大数据计算框架有哪些)

大数据计算模式有哪些(大数据计算框架有哪些)

本文节选自华高莱斯“技术要点”系列丛书《产业新赛道之生活性服务业》作者 | 焦星宇要想服务生活,先让数据向善1. 大数据...

2023-10-26 05:47:58查看全文 >>

文档排行