热门好课推荐
猜你喜欢
相关培训 相关博客
  • 课程名称:日志监控告警系统课程目标:1、 掌握Storm编程的应用场景及编程模型2、 掌握Storm开发生态圈各知识点3、 掌握短信和邮件告警功能课程大纲:1、 背景知识2、 需求分析3、 功能分析4、 架构设计5、 代码开发点击流日志信息行为轨迹1.2、如何进行点击流日志分析1) 用户访问http://yun.itheima.com/open/c-139.html是...
    2018-09-30 17:11:29
    阅读量:195
    评论:0
  • 目录1.需求分析:41.1问题描述:41.2问题要求:42.概要设计42.1抽象数据类型定义42.2设计思路42.2.1模块调用:43详细设计63.1存储结构设计63.1.1顺序查找的基本思想63.1.2二分法查找(折半查找)的基本思想73.1.3斐波那契查找的前提是待查找的查找表必须顺序存...
    2018-07-10 15:09:08
    阅读量:1485
    评论:0
  • 第一章初探大数据   1、什么是大数据?      大数据特征:4V         数据量(Volume) PB、EB、ZB         给予高度分析的新价值(Value)   巨额数据里面提取需要的高价值数据         速度(Velocity)   实时流处理,电商推荐系统,在你浏览或买过商品,按照先关信息给你推荐         ...
    2018-10-08 07:56:46
    阅读量:886
    评论:7
  • 本文以服务器日志分析为例,给大家展示真实场景中,怎么用pySpark去完成大数据的处理和分析的。总述这里的应用主要包括4部分:Part1:ApacheWeb服务器日志格式Part2:web服务器日志初步解析Part3:web服务器日志进一步解析和可视化Part4:对返回404的结果做分析part1ApacheWeb服务器日志格式这里用到的服务器日志格式是Ap
    2018-01-04 15:36:02
    阅读量:4103
    评论:0
  • 2.6spark实战案例:实时日志分析2.6.1交互流程图2.6.2客户端监听器(java)@SuppressWarnings("static-access") privatevoidhandleSocket(){ lock.lock(); Writerwriter=null; RandomAccessFile
    2019-02-13 14:13:24
    阅读量:297
    评论:0
  • 用户行为日志概述概念定义:用户每次访问网站时,所有的行为数据:访问,浏览,搜索,点击。。。用户行为轨迹,流量日志。。。比如:点课程,有记录,点htmlcss,时间,IP,pc端?对大数据感兴趣为什么1.可以通过日志分析得到网站访问量2.网站粘性3.相应推荐(搜索洗衣机,根据点击日志,能够分析出来最近对家用电器感兴趣,给你打标签,为了促进新的订单产生)生成渠道:nginx,ajax(鼠标悬停以及页...
    2018-05-21 16:23:02
    阅读量:2776
    评论:0
  • 今天起是大二下半学期的课程设计,我们小组做的课程是——超市管理系统。环境是eclipse下的java和mysql数据库。我们这个超市管理系统分为商品销售功能和后台管理功能。具体的模块已经和组员们分析讨论分工完成了,我负责的是仓库管理模块,功能是:商品入库,修改商品信息,商品出库(删除),修改商品信息。基本上就是增删改查四个功能。今天是第一天,因为这次的课程设计老师是让按着给的模版来的,要层
    2016-06-13 23:35:35
    阅读量:709
    评论:0
  • 来公司半年时间了,一开始研究sahara部署cdh,目的是将大数据服务云服务话。最近由于业务的迫切要求,最近在物理机上搭建了公司自己的大数据平台。    公司业务要求数据平台需要处理DB业务数据,ES日志数据和LOG日志数据,经过一个月的调研,公司的大数据环境基本搭建完成,且通过初步测试,并在平台上运行了PoC案例。    公司的大数据平台架构如下:
    2017-09-28 18:48:40
    阅读量:2381
    评论:0
  • 传智播客大数据课程体系-熊盼制作大数据技术基础大数据课程介绍Linux基础linux系统简介与安装linux常用命令–文件操作linux常用命令–用户管理与权限linux常用命令–系统管理linux常用命令–免密登陆配置与网络管理linux上常用软件安装linux本地yum源配置及yum软件安装linux防火墙配置linux高级文
    2016-09-28 12:23:41
    阅读量:3148
    评论:0
  • 数据结构分析主要是分析数据库表结构,其中包括Hive表以及Mysql表。课程实战中主要用了以下数据表:-user_visit_action(Hive表):用户访问行为表-user_info(Hive表):用户基本信息表-task(Mysql表):用户提交任务记录表。1、表结构详细说明:1.1、user_visit_actionuser_visit_action表,其实就是放网站或者
    2017-05-23 09:55:59
    阅读量:2365
    评论:0