01大数据导论和计算机组成

2023-12-31 21:19:34

什么是大数据?
大数据(big data),是指无法在一定时间范围内用
常规软件工具进行捕捉、管理和处理的数据集合,
因此需要新处 ?理模式,该处理模式就是大数据
?

大数据处的数据量有多大?

目前的大数据应用,数据量主要集中在PB/EB级别

大数据能解决什么问题?

  • 海量数据存储:数据分析的前提是有数据,数据存储的目的是支撑数据分析。
  • 海量数据运算:当解决了海量数据的存储问题,接下来面临的海量数据的计算问题也是比较让人头疼,因为企业不仅追求可以计算,还会追求计算的速度、效率。

大数据的特点:用5个字来概括:大、多、值、快、信

大数据应用场景

行业领域

大数据的应用场景-金融行业,以借贷款为例
大数据的应用场景-大数据让广告营销更高效?
大数据的应用场景-大数据让新媒体更懂你
大数据分析的业务步骤

1.明确分析的目的思路:
把分析目的分解成若干个不同的分析要点,确保分析框架的体系化和逻辑性
2数据收集:
一般数据来源为数据库、第三方数据统计工具、专业的调研机构的统计年鉴或报告、市场调查等
3数据处理:
数据处理主要包括数据清洗、转化、提取、数据计算等,将原始数据加工成为分析需要的直观数据
4数据分析:
数据分析是指用适当的分析方法及工具,分析处理过的数据,提取有价值的信息的过程
5数据展现:
一般能用图说明问题的就不用表格,能用表格说明问题的就不要用文字
6撰写报告:
数据分析报告其实是对整个数据分析过程的一个总结与呈现。用于决策者参考做出决策

大数据职业规划:
大数据开发工程师
Hadoop开发工程师
Spark开发工程师
实时计算开发工程师
数据架构师
数据仓库工程师
ETL开发工程师
BI开发工程师
数据挖掘工程师

文章来源:https://blog.csdn.net/m0_60314315/article/details/135309813
本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。