01大数据导论和计算机组成

什么是大数据？
大数据（big data），是指无法在一定时间范围内用
常规软件工具进行捕捉、管理和处理的数据集合，
因此需要新处  理模式，该处理模式就是大数据
 

大数据处的数据量有多大?

目前的大数据应用，数据量主要集中在PB/EB级别

大数据能解决什么问题?

• 海量数据存储：数据分析的前提是有数据，数据存储的目的是支撑数据分析。
• 海量数据运算：当解决了海量数据的存储问题，接下来面临的海量数据的计算问题也是比较让人头疼，因为企业不仅追求可以计算，还会追求计算的速度、效率。

大数据的特点：用5个字来概括:大、多、值、快、信

大数据应用场景

行业领域

大数据的应用场景-金融行业，以借贷款为例
大数据的应用场景-大数据让广告营销更高效 
大数据的应用场景-大数据让新媒体更懂你
大数据分析的业务步骤

1.明确分析的目的思路:
把分析目的分解成若干个不同的分析要点,确保分析框架的体系化和逻辑性
2数据收集:
一般数据来源为数据库、第三方数据统计工具、专业的调研机构的统计年鉴或报告、市场调查等
3数据处理:
数据处理主要包括数据清洗、转化、提取、数据计算等,将原始数据加工成为分析需要的直观数据
4数据分析:
数据分析是指用适当的分析方法及工具，分析处理过的数据，提取有价值的信息的过程
5数据展现:
一般能用图说明问题的就不用表格，能用表格说明问题的就不要用文字
6撰写报告:
数据分析报告其实是对整个数据分析过程的一个总结与呈现。用于决策者参考做出决策

大数据职业规划：
大数据开发工程师
Hadoop开发工程师
Spark开发工程师
实时计算开发工程师
数据架构师
数据仓库工程师
ETL开发工程师
BI开发工程师
数据挖掘工程师