烟台北大青鸟软件开发课程
秉承“教育改变生活”的教育理念
烟台北大青鸟软件开发课程秉承“教育改变生活”的教育理念快速咨询烟台软件培训机构针对零基础、无经验设计的软件工程师培训课程,改变传统枯燥的教学模式,以项目学习,动手操作为主,小组的形式接触真实企业开发的
动互联网的发展,产生了大量的数据,而传统的基于数据库、数据仓库的数据存储和处理技术已经很难在可接受的时间和空间下完成对这些数据的存储和处理,因此,大数据技术应运而生了,大数据技术基于分布式的架构,实现了近乎无限的存储和处理的能力,为海量数据的存储和处理提供了新的可能。而正是基于这样的能力,越来越多的基于大数据的精准、个性化的服务开始大量的出现。
数据预处理
数据预处理主要对日志文件进行初步的简单处理。目前采用Storm从Kafka接收数据,然后对数据进行实时统计。
Storm是一个分布式、容错的实时计算系统。它的编程模型非常简洁,主要包括三个组件:Topology、Spout和Bolt。Topology是一个由多个计算节点构成的拓扑图,Spout和Bolt是两种结算节点,它们一起构成了一个完整的数据流向图。
课程大纲 | 核心技能点 | 核心能力培养 |
第一阶段:Java基础 | Java基础语法、面向对象、异常处理、集合框架、常用类、I/O操作、多线程、网络编程、XML解析 深刻理解面向对象思想,掌握JavaEE核心技术并能灵活运用Java常用API解决实际问题,具备了程序员必备的逻辑思维能力及自学能力,为后续深入学习JavaWeb技术及框架技术打下牢固的基础。 |
熟练使用MyElipse开发Java程序 会使用Java编写常用的流程控制语句 理解并掌握面向对象思想及其三大特性 能够灵活运用Java常用类解决实际问题 会使用集合框架存储数据、I/O技术操作文件 能够实现多线程及网络编程 |
第二阶段:JavaWeb网站开发 | HTML5、CSS3、JavaScript/ES6、JQuery、JSP/Servlet、MySQL数据库、JDBC、Linux、SVN 能够完成B/S架构的中小型网站系统的开发,并在真实生产环境下进行项目发布 |
了解B/S架构运行原理 掌握网页的开发和设计技能 掌握JavaWeb核心开发技能 掌握Linux应用部署和监控技能 掌握基本的JavaEE应用设计和开发技能 锻炼学员团队协作能力 |
第三阶段:SSM/SSH框架 | MyBatis框架、Spring框架、Spring MVC框架、Struts2框架、Hibernate框架、Git、Maven 、Oracle数据库 能够胜任垂直架构下的Java开发工作,熟练使用流行的开发框架SSM、SSH进行传统企业级项目开发。 |
掌握SSM/SSH框架核心技能及应用开发技能 掌握Oracle数据库设计和应用技能 学会使用Git进行项目代码版本管理 学会使用Maven进行项目构建管理 |
第四阶段:基于分布式微服的互联网架构 | 分布式微服架构、Dubbox、Spring Cloud、Spring Boot、Docker环境快速搭建实现自动化部署、分布式下ID**性、Redis、分布式事务处理、分布式下三方接入、Active MQ消息队列等 能够胜任互联网公司的分布式项目的开发和架构设计工作 |
培养学员基于分布式项目的业务架构、应用架构、技术架构、安全架构、网络拓扑架构等的设计和代码开发能力,以及在部署策略等方面的综合能力 培养学员分布式项目下核心业务处理能力 培养学员在分布式项目下对于高并发、数据最终一致性、性能优化等问题的解决处理能力 |
第五阶段:Python爬虫+ELK+分析 | Linux Shell编程、Python编程、NumPy&Pandas、Scrapy、LXML、PySpider、数据采集、整理和清洗、Elasticsearch、Logstash、Kibana 能够胜任Python开发工程师、爬虫工程师、搜索引擎工程师。 |
掌握Python编程 具备Python的爬虫开发、 数据获取和整理等能力 能够使用ELK进行数据导入、 查询和集成 |
第六阶段:Hadoop生态圈 | HDFS、MapReduce、YARN、Hive、Sqoop、HBase 能够胜任:Hadoop工程师、ETL工程师、Hive工程师、数据仓库工程师。 |
掌握Hadoop集群配置与管理
掌握HDFS文件操作
掌握分布式计算原理
掌握基于Hive的数据ETL和数据查询
掌握HBase数据存储
掌握数据导入导出
|
第七阶段:Spark技术栈 | Scala编程、Spark RDD、Spark SQL、Spark GraphX、PySpark、Jupyter、Hadoop数据模型、Atlas&Ranger、NiFi、Kafka、Oozie、Cassandra&Hive、Redis&Hive、MongoDB、Tableau 能够胜任:Spark工程师、Hadoop工程师、ETL工程师 |
掌握Spark集群配置与管理,以及Spark离线计算
具备Scala和Python编写 Spark应用的能力
具备在企业数据湖中建立数据流程/通道、实施数据监管、规范数据管理和确保数据安全
具备数据采集、数据变换、数据建模、任务调度以及与企业应用的数据集成的能力
具备多种NoSQL数据存储的能力
掌握Hive/Spark实施数据变换、BI工具与 Hive、 NoSQL 的集成
掌握用户兴趣取向分析/航班飞行网图分析/电子商务消费行为分析/用户交易欺诈分析案例的具体实现
|
第八阶段:实时流处理平台 | Spark Streaming、Flink、Flume、Storm、d3.js、Echarts 能够胜任:大数据开发工程师、大数据架构师 |
掌握Apache NiFi/Kafka/Flume/Spark Streaming的集成使用 具备实时流数据存储、计算、查询的能力 具备多种流处理框架的运用能力 掌握多种常见可视化工具的使用 掌握股票流数据实时分析/舆情分析案例 |
第九阶段:机器学习 | Spark Mllib 能够胜任:大数据架构师、大数据初级分析师、大数据挖掘工程师 |
掌握Spark机器学习数据结构及流程
掌握分类,聚类和推荐模型
掌握垃圾邮件分类
|
学完大数据开发,能从事的研发类的岗位有,架构工程师、开发工程师、运维工程师可以选择。
当前医疗行业、能源行业、通信行业、零售业、金融行业、体育行业等各行业都可以从其数据的采集、传输、存储、分析等各个环节产生巨大的经济价值,而提供大数据基础设施的企业、大数据软件技术服务的企业、行业大数据内容咨询服务的企业都将从大数据的广泛应用而得到迅速发展。
统计数据显示,大数据人才需求旺盛的城市主要分布在经济发达及大数据行业发展优先的地区。但随着新技术时代的到来,众多行业面临转型升级,,选择一线城市就业固然是不错的选择,但二三线城市的发展潜力,将为大数据人才提供广阔的舞台。
据国人才报告显示,大数据人才的供给指数低,仅为0.05,缺口大。随着企业越来越重视大数据的利用,大数据人才缺口已超百万,但国内大数据从业人员只有约30万人,大数据在不断往各垂直领域延伸发展,人工智能等领域的人才需求不断加大。
学生学完大数据应用开发后,其就业领域是很宽广的,不管是传统领域,还是新兴领域,都需要大数据人才进行大数据的采集、分析、开发等,因此可以在电商、金融、医疗、交通、教育、电信、安防、传媒、能源、电力等各领域从事大数据相关工作。
1
北大青鸟自成立以来,一直专注于人才培训,老师力量雄厚,其涉及领域涵盖了数字媒体,建筑表现、动漫游戏、电子商务、3d 仿真等,累计为社会培养了数万名中高级设计人才。
2
多年的教研成果,紧跟企业招聘要求,融入资深行业设计培训经验,全镇施展训练模式,将课程大纲与国内前沿企业岗位诵求密切结合,上课如同上班,学习就是实习,我们只培养有创意感的设计。
3
北大青鸟的师资力均来设计行业的企业高级大咖,多年实战经验,设计技能、创意思想、项目经验传授,将课程体系与工作环境、工作流程模拟融合,培养职场实力派就业压力小!
4
北大青鸟成立以来,以学员就业为导向目标,已与1000多家企业单位成立了就业联盟,建立了培训、就业服务机制,为国内大中型企业输送各类设计人才达数万人,得到行业内高度认可。
:18654908535
:18654908535
:2399805529
想预约免费试听,可以点击右侧在线客服咨询