热门好课推荐
猜你喜欢
相关培训 相关博客
  • 查看当前目录pwd切换到上一次和上一层目录cd -cd ../隐藏文件标识是什么,什么命令参数查看. 开头ll -a 查看which 这个命令是找哪个环境变量里的目录配置$PATH打印环境变量值 命令是什么echo $PATH全局环境变量文件在哪?怎样生效/etc/profile 配置source /etc/profile 生效个人环境变...
    2018-11-12 11:33:36
    阅读量:57
    评论:0
  • 1.MySQL的部署流程大概哪几步解压、修改权限、安装、启动2.重置root用户密码的SQL是什么?用到了 什么函数?update user set password=password(‘xxxxx’) where user=‘root’3.删除空账户的SQL是什么?delete from user where user=’’4.数据类型有哪些?char varchar int fl...
    2018-10-23 09:07:02
    阅读量:18
    评论:0
  • 大数据技术与应用学习内容问题解决启发大数据定义大数据需要特殊的技术,以有效地处理大量的容忍经过时间内的数据。适用于大数据的技术,包括大规模并行处理(MPP)数据库、数据挖掘、分布式文件系统、分布式数据库、云计算平台、互联网和可扩展的存储系统。最小的基本单位是bit,按顺序给出所有单位:bit、Byte、KB、MB、GB、TB、PB、EB、ZB、YB、BB、NB、DB。1 Byte...
    2019-03-04 17:33:35
    阅读量:125
    评论:0
  • 一、大数据简介在著名未来学家阿尔文·托夫勒《第三次浪潮》一书中,大数据被热情的称为“第三次浪潮的华彩乐章”。而第一次第二次浪潮指的分别是农业时代和工业时代。在百度百科中对大数据的词条有以下解释:  对于“大数据”(Big data)研究机构Gartner给出了这样的定义。“大数据”是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力来适应海量、高增长率和多样化的信息资产。 ...
    2019-03-04 20:57:58
    阅读量:100
    评论:1
  • 刚从公司离职-需要求职新公司 对做过的项目做一个记录(这个记录会有一个完整的流程实现,但是具体安全细节与各种组件的基础学习不进行介绍,所有ip均不是真实ip做点保密喽),这个记录主要是每一步的实战记录,不进行逻辑分析。经过了CDN公司日志分析实战日志日志分析系统:1.原始日志量: 每小时高的是否达到了 45303452条日志(四千五百多万条原始日志) ,某天日志量(这个随便选的)42211...
    2018-02-24 16:42:36
    阅读量:1984
    评论:0
  •   五四青年节,福利大奉送,10G大数据学习视频免费领取!   随着互联网时代的迅猛发展,大数据全面融入了现代社会的生产、生活中,并将大大改变全球的经济。大数据,它其实不仅仅是一种技术,更是战略资源。  大数据是互联网发展的方向,大数据人才是未来的高薪贵族。随着大数据人才的供不应求,大数据人才的薪资待遇也在不断提升。大数据时代的到来,给大数据开发人才带来了巨大的机遇和挑战,为了给有意从事大数据开发...
    2018-05-04 18:55:06
    阅读量:2996
    评论:57
  • 大数据采集01—概览02—相关延展系统日志数据的采集 Scribe是Facebook开源的日志收集系统,在Facebook内部已经得到大量的应用。它够从各种日志源上收集日志,存储到一个中央存储系统上,以便于进行集中的统计分析处理。Scribe为日志的“分布式收集,统一处理”提供了一个可扩展的、高容错的方案。(老师收学生信息表,需要班长代理收集的例子)。...
    2019-02-27 17:21:39
    阅读量:1449
    评论:0
  • master/slave主从结构: HDFS是一个 master/slave的架构。HDFS只有一个NameNode,即master。master负责管理文件系统命名空间和client对文件的访问。此外,HDFS有很多DataNode,通常一个机器节点一个DataNode,管理这个节点上的存储。HDFS对外提供一个文件系统名字空间允许用户把数据存为文件的格式。文件拆分成若干个block,这
    2017-07-20 08:37:30
    阅读量:128
    评论:0
  • 一、flume基本概念Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统;Flume支持在日志系统中定制各类数据发送方,用于收集数据;Flume提供对数据进行简单处理,并写到各种数据接受方(可定制)的能力。总结:flume是一个分布式的日志采集系统,能够高效从多种数据源收集日志,并可以聚拢,传输大量日志信息,存储到一个集中的数据存储中心...
    2018-11-18 11:26:05
    阅读量:112
    评论:0
  • Hive 1.x将与HBase 0.98.x及更低版本保持兼容,Hive 2.x将与HBase 1.x及更高版本兼容 ,其实直接使用cdh版本就好 如果说版本之间并不兼容,可以尝试编译hive或hbase--》会编译hive 将hbase的表数据映射到hive表中,在hive对数据进行分析、计算 数据还是存在hbase的 hive和...
    2019-04-04 16:32:00
    阅读量:1
    评论:0