
一种规模大到在获取、储存、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合,具有海量的数据规模、快速的数据流转、多样的数据类型和价值密度低四大特征。大数据需要特殊的技术,以有效的处理大量的容忍经过时间内的数据。适用于大数据的技术,包括大规模并行处理(MPP)数据库数据挖掘电网、分布文件系统、分布式数据库、云计算平台、互联网和可扩展的存储系统。
- 电商
- 市政
- 旅游
- 企业文化
项目库名称 项目介绍 技术架构 主要业务 项目特色 市政 实现对在线课程网站用户访问行为的有效跟踪管控,为业务系统提供新的增长极。用户对课程的满意度是在线教育企业可持续发展基础,借助精细化运营手段,分析用户使用App的行为,推测用户的满意度,分析用户需求,向用户主动推送内容,提升用户活跃度,提高用户粘性。 Flume,Kafka,Hive,Spark,Streaming,Spark,SQL,Hbase,Oozie,MySQL,Grafana 通过Flume进行数据采集;通过Kafka进行数据接收;通过Hive进行数据清洗,整理;进行多维度数据分析(用户基本信息分析,地域信息分析,用户浏览深度分析,订单分析,事件分析);使用HBase和MySQL进行分析结果存储;进行可视化展示(Grafana展示数据/Tableau图表展示) 针对教育行业的大数据项目,全真的应用场景,多维度数据分析,深化项目开发经验,扎实大数据开大基础。
大咖团队
大咖团队项目库
项目库全真训练
全真训练认证证书
认证证书CC服务
CC服务
- 大咖团队为你提供前瞻技术
北美大数据大咖团队为你提供前瞻技术 北美大数据讲师大咖团队全部由具备十年以上开发或研发经验、常年坚持技术分享、教学经验丰富的的大数据学家组成。研发的大数据课程不仅包含国内企业热门技术,还与国际接轨,融实用性与前瞻性于一体。
- 超全项目库,市场享你所想
超全项目库,主流市场享你所想: 全真的大数据项目池,不断更新,让学员快速拥有真正开发的经验。
- 全真训练,打造真实云环境
全真训练,打造真实云环境: 采用企业真实大数据开发部署环境 让学员掌握真正的大数据开发部署真实云环境+丰富的实验项目+全生命周期数据开发+支持数据平台+全智能化体验=一站式大数据智能云研发平台。
- 阿里云认证证书
阿里云认证证书,就业level更上一层: 我们是阿里云大学授权培训合作伙伴,为学员提供阿里云大数据全套认证服务3000+家阿里系企业,让就业有更多选择的机会。
- CC服务(Career Care)
CC服务(Career Care) 持续服务学员的未来:面试应聘不是终点 核心技术才是目标。我们做的不仅仅是让学员入职,而是能够让学员顺利渡过试用期,并能够成为企业骨干。
通讯行业
金融行业
娱乐行业
零售行业
体育行业
餐饮行业
医疗行业
能源行业
人才战略培养:以上各行业都可以从其数据的采集,传输,存储,分析等各个环节产生巨大的经济价值,而提供大数据基础设施的企业,大数据软件技术服务的企业,行业大数据内容咨询服务的企业都将从大数据的广泛应用而得到快速发展。但是,目前市场上合格的大数据分析人才稀缺,所以大数据人才的薪资非常高,入行越早,随着实践经验的增加身价也越高。
- Java EEJava 基础、Java 特性
MYSQL、Java web
SSMLinux编程 - HadoopELK、HDFS
HBase、Sqoop
MapReduce、Hive - SparkSpark 机器学习
Spark SQL、Spark Core
Spark GraphX、Scala编程 - 阿里云大数据平台阿里云平台概述
实验环境搭建
阿里云项目训练 - PythonPython编程、Python数据爬取、Python数据采集/整理与清洗、Python机器学习、PySpark
- 项目实战用户兴趣取向预测、股票流数据实时分析、教育平台大数据分析、在线教育全文检索平台
- 集群管理提升系统的高可靠性、提升系统的安全性-认证、授权(Authorization)及审计(Auditing)、数据保护
- CC服务技术专题深入学习、面试与工作经验指导、试用期/转正期/跳槽期技术支持、实际工作问题解决方案、职业发展规划
Wayne icon
北京大学数学科学博士,北京大学计算机研究所研究员,主导国内主要研发工作。在北美IT行业拥有15年工作经验,参与过金融、保险、医疗、零售等行业的众多大型项目开发和企业数据集成,曾任软件架构师、咨询顾问、大数据方案架构师等,负责大数据应用的方案设计。
Will icon
大数据领域实践者、作家、培训师,专注企业大数据解决方案的咨询、设计和实施。拥有十年在企业大数据仓库、商业智能和大数据分析经验,为金融、媒体、电子商务、在线旅游、电信等领域公司的提供大数据咨询和实施。是早期通过Cloudera CDH4认证成员之一。
Raymond icon
澳大利亚新南威尔士大学硕士,于加拿大从事IT至今,为电讯,银行,省市政府等大机构提供技术服务,解决技术难题,建造以互联网为平台,数据处理为核心的企业级应用系统,始终活跃在技术前沿。投身教育事业十八年,以精湛的技艺,深厚的功底, 培养出众多IT工程师。
Chunlei He icon
图像处理与人工智能博士,数据科学家,数据挖掘与机器学习博士、博士后,中国科学院访问学者。在电信和金融行业带领团队从事数据挖掘、算法设计和数据建模等工作;现任加拿大保险公司的数据科学家,领导数据科学团队从事数据挖掘和数据建模等科学研究和应用研发工作。