沈阳大数据课程
【所属机构：沈阳叩丁狼教育】
大数据（big data），指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产 大数据工程师是根据大数据来的一种职业。
为什么越来越多人学习大数据？
行业前景好
大数据相关人才的欠缺将会成为影响大数据市场发展的一个重要因素
人才需求大
《大数据人才报告》指出，未来3-5年内将会出现150万的大数据人才的缺口
就业薪水高
大数据方面职位列在本专科专业毕业生“高薪榜”前五且人才缺少
发展潜力大
中国的大数据市场规模已达到2485亿元， 并且市场规模每年都在持续上升
紧扣行业需求，传授专业知识
| 课程阶段 | 课程内容 |
| Hadoop离线计算 | 大数据概述和Hadoop环境安装 云计算和分布式、大数据应用场景、分布式文件系统设计原理、Hadoop集群环境的安装、HDFS的基本操作(命令行)、HDFS的配置文件的核心相关参数。 HDFS原理和应用HDFS原理分析、HDFS工作流程分析、访问HDFS、分布式日志采集案例。 MapReduce和YarnMapReducer原理分析、MapReducer的算法模型、MapReduce和Yarn集群的配置、Yarn模型的运行管理机制、MapReduce的本地运行模式。 MapReduce编程案例流量统计、汇总排序、订单分组topN、线段重叠统计、电影评分的topN、倒排索引、JOIN算法、MapReduce分布式启动运行流程、MapReduce数据处理流程、数据倾斜。 Hadoop架构和源码分析 |
| 数据仓库 | Hive Hive核心工作机制、Hive的安装和运行、Hive的DDL操作、SQL语法加强。 Hive加强 Hive数据类型、单行函数、聚合函数和表生成函数、Hive案例、窗口函数、Hive自定义函数等。 Hadoop生态圈组件Flume工作机制、Flume安装和配置、Flume拦截器、Flume高可用、日志采集分类汇总、Sqoop工作机制、Sqoop的安装部署、Sqoop的导入导出案例案例、Azkaban的工作流调度器介绍、Azkaban的安装部署和使用配置等。HBASE HBASE概述和核心特点、HBASE工作原理、HBASE的集群部署、shell客户端的基本操作、Java操作HBASE、HBASE读写操作和流程等。 |
| Storm实时计算 | Storm编程入门 Storm概述和原理、Storm的本地和集群模式、Storm的核心组件详解、Storm的并行运算和分组运算、Storm集群执行过程分析，Storm案例。 Storm架构和源码分析 Storm核心机制Ack机制概述、Storm通信机制、Storm数据分发机制。 消息中间件Kafka的使用 KafKa概述和原理、KafKa的集群环境部署、KafKa的生产者和消费者、KafKa分组策略、KafKa配置详解。 |
| Scala语言 | Scala语言基础、Scala函数和方法、Scala数据结构、Scala面向对象、隐式参数、隐式参数类型转换、泛型、视图界定、上下文界定、Akka的RPC通信框架等。 |
| Spark内存计算 | Spark入门 Spark原理、Spark架构分析、Spark集群安装、Spark-shell单机和集群、Spark任务执行流程、Spark程序调试。 Spark RDDRDD运行架构、Transformation操作API、RDD分区数据的读取、Action操作API、Spark编程案例、自定义排序、Stage切分、Spark整体执行流程。 Spark SQL Spark SQL原理、SparkSQL应用场景、Spark SQL性能分析、Spark SQL的案例、Spark SQL函数。 Spark Streaming Stream运行架构、SparkStream工作原理、SparkStream和KafKa整合、Spark Stream和Redis的整合等。 Spark架构和源码分析 |
| 大数据项目 | 大型日志采集系统、大数据综合项目 |
| Python、人工智能 | |
大数据的应用价值广阔
icon 借助于大数据技术，分析客户行为，进行商品针对性广告投放
icon 哪种题财的影视作品更具价值，明星流量关注群体等数据分析
icon 利用大数据优化物流的网络，提高物流的效率，降低物流资金
icon 利用大数据的技术分析用户用电模式，设计电力需求响应系统
icon 高频交易、社交情绪分析和信贷风险分析三大金融创新领域发挥重大作用。
icon 大数据技术构建起强大的安全体系，企业可以利用大数据抵御网络攻击。
icon 利用大数据实现餐饮O2O模式，改变传统餐饮经营方式。
icon 利用数据挖掘来了解客户的内在需求，消费群体消费能力等等。
叩丁狼为什么要联合Java+大数据授课?
- 开发经验
在企业中做大数据开发要求必须熟练掌握Java，必须拥有多年Java开发经验。
- 合理运用
大数据中很多技术都基于JVM，如果不懂Java，不能很好运用Java，是没法做好大数据开发。
- 熟练掌握
大数据中的Hadoop是采用Java语言开发的，不熟悉Java，如何深入研究Hadoop。
- Scala语言
大数据中的Spark采用Scala语言实现，和Java很像，同时也是基于JVM。
- 思维经验
没有基本的开发思维和项目经验，谈何大数据开发？连基础的小规模数据量项目都不能搞定。
- 项目经验
没有任何项目经验和开发思维，就开始学大数据，无法领悟什么是数据量和项目经验。
舒适环境、健康学习
- icon
校区路口
- icon
校区过道
- icon
校区走廊
- icon
上课环境
- icon
沈阳校区
- icon
校区走廊
