发布活动
2019年4月19日 9:00 ~ 2019年4月21日 18:00
(上海徐汇)具体地址会前通知

大数据之高级篇--Flink、Spark之大数据新零售企业分析实战会议

timg  1.jpg        


各有关单位:

       在中国经济从高速增长迈向高质量发展的新时代,中国的互联网正从消费互联网转向产业互联网。2018年10月,腾讯公司公布其未来20年新战略称,将全力拥抱产业互联网。阿里巴巴首席战略官曾鸣也在2017年5月提出s2b2c将是未来5年最有可能领先的商业模型。这两家互联网巨头负责人的表态都在指向一个新事物——产业互联网。腾讯董事长马化腾声称:移动互联网的上半场已经接近尾声,下半场的序幕正在拉开。而互联网的主战场,正在从消费互联网向产业互联网转移,这一判断再度引发各界对于产业互联网发展进程的关注。  

     新零售是企业依托互联网,通过大数据、人工智能等技术手段,对商品的生产、流通与销售过程进行升级改造,将线上线下与物流结合在一起的模式,这将给零售及关联产业带来新的改变。随着大数据技术的发展越来越深入,各行各业因为大数据时代的到来,都在不断变化。得到大数据技术支持的新零售也因此快速发展起来!大数据时代的发展使得我们的商业行为发生了改变,新零售时代是大数据发展的必然结果,通过利用大数据,最终会推动整个人类社会的进步。近年来,数字经济炙手可热,大数据、云计算、区块链、人工智能等技术也正在从概念阶段、试点阶段,逐渐应用到政府、企业的日常运营层面。通过发掘新的应用场景,在线交易、精准营销、大数据征信、人工智能服务等方面获得突破,探寻面向未来新业态的产业转型创新之路。产业互联网或将成为未来发展方向大数据是核心战略资源。

     因此大数据产业培训基地决定开展“产业互联网下的大数据新零售企业分析实战”高级培训班。本次培训由数环云创(北京)科技有限公司具体承办,望相关单位收到通知后积极参加。


01.活动流程

培训大纲(3天课程)(内容可以根据学员的要求现场定制化和调整)

项目截图新零售.png

日程

课程主题

主要内容(内容可以根据学员的要求现场定制化和调整)

第一天

新零售简介

1、什么是新零售

2、大数据能干什么,怎么跟新零售做结合

3、小米之家-数据驱动运营


第一天

 

小米之家数据采集

1、flume安装、配置

2、flume taildir和spooldir采集数据

3、日志滚动解决日志文件过大

4、flume几种常见拦截器介绍以及正则过滤文件数据

5、flume采集数据同步hdfs

6、flume解析行为日志的日期把数据插入对应的hdfs分区

7、flume自定义拦截器

8、kafka介绍以及安装

9、实时点击数据kafka

10、kafka结合flume数据实时同步hdfs


第一天

小米之家数据实时处理

1、Spark产生背景,包括mapreduce缺陷,多计算框架并存等

2、Spark核心概念,包括RDD, transformation, action, cache

3、Spark在互联网公司中的地位与应用

4、介绍当前互联网公司的Spark应用案例

5、Spark集群搭建,包括测试集群搭建和生产环境中集群搭建方法,并亲手演示整个过程

6、Flink基本概念与部署和程序打包讲解

7DataStreamAPI介绍与实战

8flink任务讲解以及flink控制台查看日志讲解

9Flink应用案例介绍

10、利用spark streaming和flink分别做小米之家实时销售监控

 

第二天

小米之家离线数据处理

1、Hive安装

2、Hive的特性(UDFUDTFUDAF

3、Hive做离线数据仓库

3hivesparksql区别

4hivesparksql 常用函数介绍

5hivesparksql高阶函数

6hivesparksql调优(数据倾斜终极解决方法)

7hivesparksql处理埋点数据、解析数据入库

8hivesparksql调度脚本编写

9spark介绍、线上调优、线上常见问题处理

 

第二天

小米之家数据开发

1、小米之家各个门店LBS信息采集

2、小米之家各个门店数据交易金额、次数统计

3、小米之家各个门店各个省份,渠道、系统的留存,新增,活跃、流失、回流统计

4、Spark常见机器学习聚类、分类和推荐算法介绍

5、小米之家个人用户画像开发

第三天

小米之家后台开发

1、elasticsearch安装

2、小米之家各个门店数据导入elasticsearch

3、小米之家各个门店画像系统后台开发

4、小米之家各个门店零售前端开发

5、LBS定位显示数据

6、小米之家交易趋势

7、时刻热点图

8、消费用户行为分析

9、个人交易行为趋势追踪

10、新零售方案解析

11、商户预警

12、老用户挽回方案

13、地理选址

第三天

项目总结和面试技巧

1、项目综合演练、再讲解

2、Hadoop、hive、spark、Flink等常见面试问题

3、大数据在腾讯的产品中的应用(福利)


本提纲只是一个初始版本,为了课程需要,中间细节内容可能略微调整。授课时预留一些时间给学员答疑解惑,每天的课程会留出来一些时间给学员做总结和答疑阶段,为了学员能更好的学以致用,建议学员带着自己实际项目或者之前学习过程中的问题去听课,授课过程中积极与讲师互动,来解决之前的困惑。

 备注:课程根据客户的要求可以定制化设计,公司内训不限制参加人数3天至7天,增加的部分是案例和实操的深入程度)

   

02.活动嘉宾

               

周老师                

基地金牌讲师:腾讯大数据资深专家,7年以上大数据开发经验,熟悉hadoop 以及spark 生态系统,负责大数据平台及机器学习平台的研发及运营工作,对自然语言处理、机器学习、用户画像建模、个性化推荐等技术有深厚的积累。2011年在移动互联网公司做大数据开发,负责hadoop、spark的基础平台开发。2015年加入前3的手机厂商,负责hadoop、spark运维以及相关和个性化推荐的工作。实现spark 和hbase  从无到有的过程。2016至今在腾讯从事大数据开发工作,负责平台的大数据平台研发,主导了内部核心画像系统,以及自助分析平台。   


李老师                

             

一线技术大咖,阿里资深大数据专家,曾任职华为、腾讯大数据高级工程师,从事分布式sql技术研究和开发,具有6年以上大数据平台组件开发和调优经验,对Hadoop、Hive、Spark、Presto、Hbase、Kafka等开源系统有深度研究和开发。2010年毕业于北京航空航天大学,获信息系统专业硕士学位,随后加入华为,从事nosql技术研究,带领团队开发优化Nosql数据库内核,并从事行列混合存储的MPP系统研究和开发,并对spark内核进行优化,减少shuffle开销,随后主持华为终端数据平台部运营大数据平台建设。2016年加入腾讯数据平台部,从事基于HDFS的实时多维分析引擎开发。2018年加入阿里巴巴。


03.课程简述

本课程主要围绕企业大数据,提供新零售的解决方案,利用数据来做企业数据运营,提供可靠的数据监控,数据报表,数据画像。完善企业数据的运营,做到老客户挽留,新客户运营。监控企业的销售情况,进而发现相应问题。也可以学习到大数据hadoop、hive、spark和flink等技术在实际生产环境下的应用。


04.活动亮点

           三天实战+大牛授课+实战经验分享+工业和信息化部颁发的《spark大数据处理高级工程师》证书,该证书可作为专业技术人员职业能力考核的证明,以及专业技术人员岗位聘用、任职、定级和晋升职务的重要依据。

注:请学员带一寸彩照2张(背面注明姓名)、身份证复印件一张。


05.课程目的

1)掌握数据解决match新零售问题能力

2)利用大数据做企业数据分析,提供相应数据决策

3)能够应用建模技术、大数据技术构建数据仓库

4)能够学会大数据画像挖掘

5)掌握数据报表开发能力

6)学会spark开发并且做数据分析和挖掘

7)掌握flink实时数据的开发技巧


06.关于主办方


数环云创(北京)科技有限公司是一家致力于大数据行业一体化解决方案研究和行业应用平台开发的高科技公司,也是国内IT领域最具专业的信息化培训与项目咨询、解决方案服务提供商。数环云创旨在为各行业客户提供标准化、通用化的大数据解决方案。也是国内首家IT新技术领域的领航者。专注于云计算、大数据、物网、移动互联网的培训,也是国内第一家开展Hadoop、云计算的培训机构。


微信头像.jpg            


               

07.合作伙伴

 合作伙伴.png          


               

08.往期精彩活动

 

图片1.png

               图片2.png图片4.png

图片4.png

09.本次活动报名平台


               

           

10.联系方式

详情可咨询:刘先生  18515680078

合作请联系:刘先生  18515680078



活动票种

退款说明

委托「活动行」退款

1、本活动由主办方委托【活动行】代为处理退款事宜。
2、如需退款,请于活动开始前的24小时之前提交申请,活动开始前的24小时内不接受退款。
3、退款时,将收取票价的10%作为手续费。

票种名称 售票时间 票种说明 票价(元) 张数 报名/购票

主办方

大数据产业培训基地-数环云创

大数据产业培训基地--拥有一批来自一线互联网行业(包括阿里、百度、腾讯、IBM、微软、Teradata等)知名的技术专家和管理人员组成的培训讲师团队,分别在金融银行业、电信业、互联网行业、医疗、电商、公安交通等领域有丰富的实战经验。传授最新的、最专业的、最实战的大数据技术知识,培训课件都经过了具有丰富教学课程体系研发团队的精心设计。数环云创是您企业培训的最佳选择,数环云创将致力于打造企业技术培训的领航者。

最近参与

全部讨论

为营造良好网络环境,评价信息将在审核通过后显示,请规范用语。

全部讨论

还木有人评论,赶快抢个沙发!
)
二维码
意见反馈