热门好课推荐
猜你喜欢
相关培训 相关博客
  • 一、什么是大数据     一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合,具有海量的数据规模、快速的数据流转、多样的数据类型和价值密度低四大特征。大数据需要特殊的技术,以有效地处理大量的容忍经过时间内的数据。适用于大数据的技术,包括大规模并行处理(MPP)数据库、数据挖掘、分布式文件系统、分布式数据库、云计算平台、互联网和可扩展的存储系统。
    2017-08-07 21:06:45
    阅读量:10657
    评论:1
  • Hadoop:大数据系统HDFS:分布式文件系统MapReduce:分布式计算框架YARN:资源管理框架HBase:分布式列存储数据库Hive:数据仓库Mahout:数据分析与挖掘第二章.大数据关键技术2.1大数据采集与预处理技术FlumeScribeKafkaTimeTunnelChukwa2.2大数据存储与管理技术分布式文件系统LustreGFSPVFSHDFS分布式关系型数据库Gree...
    2018-04-07 16:11:28
    阅读量:784
    评论:0
  • 一、什么是大数据一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合,具有海量的数据规模、快速的数据流转、多样的数据类型和价值密度低四大特征。大数据需要特殊的技术,以有效地处理大量的容忍经过时间内的数据。适用于大数据的技术,包括大规模并行处理(MPP)数据库、数据挖掘、分布式文件系统、分布式数据库、云计算平台、互联网和可扩...
    2018-06-19 21:37:00
    阅读量:159
    评论:0
  • 平台:操作系统跨平台:java可以运行在任意的操作系统上一次编写到处运行原理:实现跨平台需要依赖虚拟机–java虚拟机什么是注释:用来解释说明程序java中的注释分类:格式://注释文字文档注释格式:/*注释文字/注释的作用?解释说明程序的功能提高可读性。帮助我们调试bug关键字:概念:被java语言赋予了特定含义特点:组成关键字的字母都是小写的...
    2019-05-06 22:55:06
    阅读量:55
    评论:1
  • Hive题:启动先电大数据平台的Hive数据仓库,启动Hvie客户端,通过Hive查看hadoop所有文件路径(相关数据库命令语言请全部使用小写格式)。[root@master~]#hivelog4j:WARNNosuchproperty[maxFileSize]inorg.apache.log4j.DailyRollingFileAppender....
    2019-06-26 20:55:57
    阅读量:71
    评论:0
  • Flume题:1.在master节点安装启动Flume组件,打开LinuxShell运行flume-ng的帮助命令,查看Flume-ng的用法信息。[root@master~]#flume-nghelpUsage:/usr/hdp/2.6.1.0-129/flume/bin/flume-ng.distro[options]…commands:help...
    2019-06-26 21:17:10
    阅读量:79
    评论:0
  • Mahout题:在master节点安装MahoutClient,打开LinuxShell运行mahout命令查看Mahout自带的案例程序。[root@master~]#mahoutMAHOUT_LOCALisnotset;addingHADOOP_CONF_DIRtoclasspath.Runningonhadoop,using/us...
    2019-06-26 21:12:33
    阅读量:36
    评论:0
  • Spark题:在先电大数据平台部署Spark服务组件,打开LinuxShell启动spark-shell终端,将启动的程序进程信息以文本形式提交到答题框中。[root@master~]#spark-shellSettingdefaultloglevelto“WARN”.Toadjustlogginglevelusesc.setLogLevel(ne...
    2019-06-26 21:23:04
    阅读量:124
    评论:0
  • HBase题:启动先电大数据平台的Hbase数据库,其中要求使用master节点的RegionServer。在LinuxShell中启动Hbaseshell,查看HBase的版本信息。(相关数据库命令语言请全部使用小写格式)[root@master~]#hbaseshellHBaseShell;enter‘help’forlistofsupp...
    2019-06-26 20:44:45
    阅读量:65
    评论:0
  • Pig题:在master节点安装PigClients,打开LinuxShell以MapReduce模式启动它的Grunt。[root@master~]#pig-xmapreduce19/05/1312:22:05INFOpig.ExecTypeProvider:TryingExecType:LOCAL19/05/1312:22:05IN...
    2019-06-26 21:06:54
    阅读量:45
    评论:0