招生合作| 投诉/建议

400-666-4820

全国统一学习专线 8:30-21:00

石家庄大数据全栈工程师培训班 

上课时段: 详见内容

开班时间: 滚动开班

课程价格: 请咨询

咨询电话: 400-666-4820

预约试听 在线咨询

授课学校: 石家庄十指波课堂

教学点: 1个

已关注: 10人

QQ咨询: 691355715

课程介绍 发布日期:2026-11-19 14:57:53
  石家庄十指波课堂,大数据全栈工程师培训班,全栈大数据培训课程重磅上线,从Java基础到Flink实战,十二阶循序渐进,覆盖主流技术栈,帮你一站式进阶高薪大数据工程师。欢迎咨询了解!
课程详情

  一、课程介绍
  全栈工程师是指掌握多种技能,并能利用多种技能独立完成产品的人。也叫全端工程师(同时具备前端和后台能力),英文Full Stack engineer。

  二、适合对象
  本课程适合于有一定javaSE基础知识、对数据库和sql语句有一定了解,熟练使用linux系统的计算机理工科本科专业的学生。

  三、课程内容
  阶段一:Java核心奠基
  万丈高楼平地起,Java是大数据技术的根基。本阶段聚焦JavaSE核心内容,为后续学习打下坚实基础。
  主要内容:
  ●基本语法:开发环境搭建、数据类型、常量与变量、运算符、IDEA使用、流程控制、数组、算法、方法、递归、命名规范。
  ●面向对象:类与对象、封装、继承、多态、构造器、this/super/static/final关键字、抽象类、接口、内部类、匿名对象、代码块、方法重载与重写。
  ●常用类:字符串类(String/StringBuffer/StringBuilder)、包装类、日期类、BigDecimal、BigInteger、正则表达式、单例设计模式、工具类源码解读。
  ●异常处理:异常体系、异常处理机制、自定义异常、捕获与抛出、错误与异常的区别。
  ●集合框架:Collection接口、List/Set/Map实现类、泛型、Collections工具类、Iterator迭代器、Comparable与Comparator排序接口、Stack/Queue/Deque数据结构。
  ●IO流:输入输出流、File文件类、缓冲流、字符编码、转换流、对象流、Properties配置文件。
  ●多线程:进程与线程、并发与并行、线程实现方式、线程状态与生命周期、线程同步、锁机制(synchronized/ReentrantLock)、生产者消费者模式、死锁、线程池、线程通信、ThreadLocal。
  ●反射:类加载机制、反射API操作构造器/属性/方法、读取资源文件、反射在框架中的应用。
  ●注解与新特性:Annotation定义与使用、反射读取注解、自定义注解、Java 8/11新特性。
  ●网络编程:网络基础、TCP/UDP协议、IP与端口、URL/URI。
  ●JVM专题:JVM内存结构、垃圾回收算法与收集器、JVM调优参数、NIO/AIO、SPI机制。


  阶段二:Linux与Shell运维基础
  Linux是大数据集群的运行底座,本阶段带你掌握Linux系统操作与Shell脚本编程。
  主要内容:
  ●Linux入门:Linux简介、虚拟机安装与配置、系统目录结构。
  ●文件命令:目录切换与创建、文件管理、文本编辑(vi/vim)、文件归档与压缩(tar/gzip/zip)、环境变量配置。
  ●权限管理:文件9个属性(rwx)、chmod权限更改、chown属主更改、sudo用户权限提升。
  ●网络命令:SSH远程连接(密码/密钥)、scp文件传输、ftp操作。
  ●软件安装:yum包管理、rpm安装、源码编译安装。
  ●系统监控:磁盘挂载、df/du磁盘使用分析、top系统任务监控。
  ●Shell编程:Shell变量、位置变量与环境变量、字符串处理、基本/关系运算符、流程控制、函数定义、定时器crontab、输入输出重定向。


  阶段三:数据库与JDBC技术
  数据是大数据的原料,本阶段深入学习MySQL数据库与JDBC编程。
  主要内容:
  ●MySQL基础:安装配置、客户端连接、数据库引擎对比、启停服务、库与表操作。
  ●DDL数据定义:表操作、数据类型、字段约束(主键/外键/唯一/非空)、索引详解(聚簇索引/唯一索引/组合索引)。
  ●DML数据操作:增删改查、模糊查询、子查询、连接查询(内连接/外连接)、分组查询、排序、聚合函数、查询优化、执行计划分析、范式与反范式设计。
  ●事务机制:ACID特性、事务提交与回滚、事务隔离级别、锁机制(行锁/表锁/间隙锁)、死锁处理、日志(undo/redo)、MVCC多版本并发控制。
  ●MyCat中间件:读写分离配置、数据分片策略、多数据源整合。
  ●JDBC技术:数据库CRUD操作、连接管理、连接池(Druid/HikariCP)、批处理、预编译处理、SQL注入防护、事务控制。


  阶段四:Python数据处理基础
  Python是数据科学领域的首选语言,本阶段带你快速掌握Python基础与数据分析工具。
  主要内容:
  ●Python基础:Python简介、安装配置、开发环境搭建。
  ●Python语法:变量与常量、注释、数据类型、算术运算符、类型转换、控制结构、循环语句。
  ●数据结构:列表、元组、字典、集合的操作与应用。
  ●函数与模块:函数定义、参数传递、模块导入、面向对象(类/继承/多态)。
  ●文件与异常:文件读写、异常捕获与处理。
  ●数据分析三剑客:NumPy:数值计算库,数组操作、Pandas:数据处理与分析核心库,数据读取与清洗、Matplotlib/Seaborn:数据可视化。
  ●爬虫框架Scrapy:爬虫原理、数据解析(XPath/JSON)、数据存储。


  第五阶段:Hadoop大数据生态
  Hadoop是大数据领域的基石,本阶段深入学习HDFS、MapReduce、Yarn核心组件。
  主要内容:
  ●Hadoop入门:Hadoop简介与发展历程、大数据概念与场景。
  ●HDFS分布式文件系统:集群搭建(单机/伪分布式/完全分布式)、HDFS架构(NameNode/DataNode/SecondaryNameNode)、HDFS Shell命令实操、HDFS读写流程深度剖析、HDFS Java API编程、Trash回收站机制、HA高可用原理与搭建、Zookeeper集群配置。
  ●MapReduce计算框架:MapReduce核心原理、WordCount编程实战、Shuffle机制详解、Map Join与Reduce Join、Combiner与Partitioner、InputSplit与数据切片、MapReduce优化策略。
  ●Yarn资源调度:Yarn架构与组件(ResourceManager/NodeManager/Container/ApplicationMaster)、Yarn调度策略(FIFO/Capacity/Fair)、MapReduce在Yarn上的执行流程。


  阶段六:Hive数据仓库
  Hive是企业级数据仓库的主流选择,本阶段学习Hive理论与实战。
  主要内容:
  ●Hive基础:Hive简介、与传统数据库对比、集群搭建
  ●Hive操作:建表语句、内部表与外部表区别、数据加载方式、数据类型、分区表(静态分区/动态分区)、分桶表。
  ●Hive函数:常用函数、窗口函数(LAG/LEAD/FIRST_VALUE/LAST_VALUE)、行列转换、自定义UDF/UDAF/UDTF。
  ●Hive高级特性:连续登录问题求解、数据倾斜原因与解决方案、查询优化与参数调优、Hive Shell与Beeline操作。
  ●数仓建设实战:数仓架构设计、数仓建模理论(维度建模/星型模型/雪花模型)、数仓分层(ODS/DWD/DWS/ADS)、各层级数据处理与实现。


  阶段七:HBase列式数据库
  HBase是大数据场景下高性能的NoSQL数据库,本阶段深入学习HBase架构与实战。
  主要内容:
  ●HBase基础:HBase简介、适用场景、系统架构、集群搭建。
  ●HBase数据模型:RowKey设计原则、Column Family与Qualifier、TimeStamp版本控制。
  ●HBase存储机制:Memstore与StoreFile、Flush与Compact机制、Region分裂策略。
  ●HBase操作:HBase Shell命令、Java API实操、数据读写流程实现。
  ●HBase高级特性:过滤器(RowFilter/ColumnFilter/ValueFilter)、布隆过滤器优化、MapReduce与HBase交互(读取/写入)、协处理器(Coprocessor)。
  ●Phoenix二级索引:Phoenix简介、搭建部署、表映射、全局索引/本地索引/覆盖索引、JDBC操作。
  ●HBase调优:二级索引设计、预分区策略、RowKey设计规范、BulkLoading大批量导入、参数调优、高可用方案。


  阶段八:ETL数据采集
  数据采集是数仓的入口,本阶段学习离线和实时数据采集技术。
  离线采集工具:
  ●Sqoop:Sqoop简介、安装配置、MySQL/Hive/HDFS数据互导、增量导入。
  ●DataX:DataX简介、工作原理、Reader/Writer插件、JSON配置模板、企业实战。
  ●Kettle:Kettle(PDI)简介、安装配置、Spoon图形化操作、作业与转换、输入输出组件、数据清洗实战。
  实时采集工具:
  ●Flume:Flume架构(Agent/Source/Channel/Sink)、Source类型(Spooling/TailDir/Exec)、Sink类型(HDFS/Kafka)、Selector与Interceptors、Flume企业级部署。
  ●Canal:Canal原理(伪装MySQL从节点)、安装配置、Mode模式(TCP/Kafka/RocketMQ)、实时监听MySQL变更。
  ●OGG:OGG(Oracle GoldenGate)简介、安装配置、数据同步配置。


  阶段九:Spark大数据计算引擎
  Spark是目前最流行的大数据计算引擎,本阶段深入学习Scala语言与Spark核心。
  Scala函数式编程:Scala简介与优势、环境配置、基础语法、数据类型、函数定义、集合操作(List/Set/Map)、高阶函数、模式匹配、隐式转换与函数柯里化、Scala与Java互调。
  Spark Core:Spark架构与组件、集群搭建(Standalone/Yarn)、RDD核心概念与算子分类、WordCount多种实现方式、RDD分区策略与缓存机制、reduceByKey与groupByKey对比、Transformation与Action算子、YARN Client与YARN Cluster模式、资源调度与任务调度流程、累加器(Accumulator)与广播变量(Broadcast Variable)、PI计算实战。
  Spark SQL:Spark SQL架构与原理、DataFrame与DataSet API、Spark SQL查询语法、Spark与Hive整合(Hive Metastore)、外部数据源操作。
  Spark Streaming:批处理与流处理对比、DStream离散流编程、有状态与无状态算子、窗口函数与状态管理、Spark Streaming整合Kafka。
  Spark性能优化:代码层面优化(数据序列化/内存管理)、参数调优(资源分配/并行度)、数据倾斜解决方案。


  阶段十:Flink实时计算框架
  Flink是下一代流计算标杆,本阶段学习Flink核心与高级特性。
  主要内容:
  ●Flink基础:Flink简介、架构优势、集群搭建。
  ●Flink编程:WordCount实现、Source自定义(Kafka/自定义数据源)、Sink输出(HDFS/MySQL/Elasticsearch)、算子使用(map/filter/flatMap/keyBy/reduce)、并行度设置。
  ●Flink核心:时间语义(Event Time/Processing Time)、WaterMark机制、Process Function高级应用、Checkpoint检查点、状态后端(Memory/Fs/RocksDB)、Exactly-Once语义保障。
  ●Flink SQL:Flink SQL语法、动态表与持续查询、时间属性(Event Time/Processing Time)、窗口函数(滚动/滑动/会话窗口)、Flink SQL开窗函数、Flink整合Hive(离线数据关联)、Flink Format与Catalog、自定义函数(UDF/UDTF)。
  ●Flink高级特性:CEP复杂事件处理、流表关联(Stream-Stream/Stream-Table)、维度表Join(Temporal Join)、反压机制与处理、Canal监控MySQL实时同步。
  ●Flink优化:状态管理优化、网络Buffer调优、内存配置。


  阶段十一:开发工具与框架
  工程化能力是大数据工程师的必备技能。
  Git版本控制:Git安装与配置、创建版本库与基本操作、版本控制(版本回退/撤销修改/删除)、远程仓库(GitHub/Gitee/GitLab)、分支管理(创建/合并/冲突解决)、标签管理、团队协作与权限配置。
  Maven项目管理:Maven安装配置、IDEA集成Maven、核心概念(坐标/依赖/仓库/生命周期)、多模块项目管理、依赖传递与冲突解决。


  阶段十二:选修拓展
  根据兴趣和职业方向自由选学,拓宽技术视野。
  服务器与容器:Netty:高性能网络框架、NIO编程、Channel/Pipeline/Handler、Docker:容器原理、镜像操作、容器管理、Dockerfile编写。
  关系型数据库拓展:Oracle数据库操作、SQL Server使用、GaussDB国产数据库、ElasticSearch全文检索。
  消息中间件:RabbitMQ:AMQP协议、Exchange/Queue/Binding、消息确认机制、ActiveMQ:JMS规范、Topic/Queue模式。
  单元测试:JUnit:注解详解、测试用例编写、断言、批量运行。
  Java Web框架:Spring Boot:快速搭建、自动配置、Starter机制、日志配置、安全防护、应用监控、Spring MVC:MVC模式、RequestMapping、参数封装、拦截器、全局异常、RESTful API。
  缓存技术:Redis:安装配置、数据类型(String/Hash/List/Set/SortedSet)、持久化(RDB/AOF)、哨兵模式、分片集群、缓存穿透/雪崩/击穿解决方案。

更多培训课程,学习资讯,课程优惠,课程开班,学校地址等学校信息,请进入 石家庄十指波课堂 了解详情
咨询电话:400-666-4820 你也可以留下你的联系方式,让课程老师跟你详细解答: 在线咨询


上一篇:石家庄AI大模型Agent智能体开发培训班
课程导航
关于我们 | 联系我们 | 石家庄十指波课堂 地址:河北省石家庄市在线网课 咨询电话:400-666-4820

CopyRight © 2010-2026 订课宝 版权所有. 未经授权,不得转载本站内所有内容。

沪ICP备16037964号-2

招生合作 版权/投诉 注册

网站地图 更新时间:2026-11-20