大数据企业级真实案例系列视频专题

课程部分截图：01项目架构图介绍.avi02项目流程图.avi03项目流程图三.avi04公司业务的介绍流程.avi05网站分析实战.avi06在集群上面开启hadoop并且创建对应的表.avi07项目表字段对应的字段名.avi08hive业务数据的导入过程.avi09按天统计pv的sql语句.avi10每天每个省份每个小时统计和统计每天页面访问量.avi11统计总的访问人数，即访客.avi12统

本案例是国内的一家广电企业作为非洲国家的一个运营商，以用户收视行为数据作为基础数据，通过对频道和节目的分析，采用多维度统计分析的方法挖掘用户的收视行为特征。用以指导并辅助产品运营、用户增值消费导向、广告投放及节目和频道质量的把控，提升用户的粘度提供参考依据，针对卢旺达地区的收视行为做出了分析，并根据分析结果提出了一系列措施来吸引当地用户，提高收视率。通过此案例可以学习大数据整体开发流程，课程是围绕

01项目流量统计架构与基本环境的搭建02项目流量统计FlowBean的实现和序列化反序列化和比较排序03项目流量统计Mapper阶段的实现04项目流量统计reduce阶段的实现05项目流量统计排序的方案的考虑06项目流量统计主控制的写法07项目流量统计上传jar包和文件运行看效果08项目流量统计javabeen的tostring改写09项目流量统计排序的Map和reduce的写法10项目流量统计排

版本：presto-server-0.214.tar软件版本presto-cli-0.214-executableCentOS71、presto的起因hadoop ---hdfs----MR（java）-----hivehive底层原理用MR，速度比较慢，公司hadoop集群主要集中于晚上到凌晨，平日工作时间负载不是很高。但在工作时间内，公司业务人员有实时查询的需求，现在主要借助于hive提供业务

大数据发展史：flink和storm sparkstreaming对比实时框架如何选择1：需要关注流数据是否需要进行状态管理2：At-least-once或者Exectly-once消息投递模式是否有特殊要求3：对于小型独立的项目，并且需要低延迟的场景，建议使用storm4：如果你的项目已经使用了spark，并且秒级别的实时处理可以满足需求的话，建议使用sparkStreaming5：要求消息投递

本课程授课老师张长志老师大数据项目讲师, 10余年软件研发及企业培训经验，曾为多家大型企业提供企业内训。 丰富的企业应用软件开发经验、深厚的软件架构设计理论基础及实践能力。中石化，中国联通，中国移动等知名企业提供企业培训服务。课程介绍本项目基于爱奇艺用户行为项目进行讲解，快速提升Spark Streaming实时计算项目经验。本项目从项目需求分析到数据采集，然后通过Spark Streaming完