热门好课推荐
猜你喜欢
相关培训 相关博客
  • Hadoop生态圈各常用组件介绍Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。具有可靠、高效、可伸缩的特点。Hadoop的核心是YARN,HDFS和MapReduce。Hdfs是分布式文件存储系统,用于存储海量数据;MapReduce是并行处理框架,实现任务分解和调度。Hado...
    2019-06-03 09:03:44
    阅读量:94
    评论:0
  • 离线计算组件1.1hive hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供简单的sql查询功能,可以将sql语句转换为MapReduce任务进行运行。其优点是学习成本低,可以通过类SQL语句快速实现简单的MapReduce统计,不必开发专门的MapReduce应用,十分适合数据仓库的统计分析。但是在转换为MapReduce的计算过程中,计算速...
    2018-09-13 10:48:56
    阅读量:366
    评论:0
  • 一、大数据基础1.常用linux命令名令效果cd…返回到上一级目录cd-回到上次的目录ls列表形式显示所有文件mkdir-p路径创建多级目录rm-rf目录名称强制递归删除文件cp源文件目标文件复制,重命名mv源文件目标文件剪切tar-czvf压缩包的的名字文件或文件夹打包tar...
    2019-07-12 17:35:30
    阅读量:56
    评论:0
  • 大数据的基本概念之4V特征大数据要解决的问题大数据涉及到的技术大数据在技术架构上带来的挑战其他挑战1.大数据的基本概念之4V特征VolumeVarietyVelocityValue2.大数据要解决的问题3.大数据涉及到的技术数据采集数据存储数据处理/分析/挖掘可视化4.大数据在技术架构上带来的挑战对现有数据库管理技术
    2018-01-05 21:14:54
    阅读量:3421
    评论:0
  • 方法##### 1.方法的概念:(函数/过程)- 封装了一段特定业务逻辑功能尽可能的独立,一个方法只让干一件事方法可以被反复地重复的调用减少代码的重复,有利于代码的维护,减少团队开发的成本,提高开发的效率#####  2.方法的语法规范:修饰词 返回值类型 方法名(参数类型 参数名1,参数类型 参数名2,…){​ 方法...
    2019-05-09 18:18:37
    阅读量:66
    评论:0
  • 修饰符访问控制符修饰成员时的访问权限如下表所示:修饰符本类同一包中的类子类其他类public可以访问可以访问可以访问可以访问protected可以访问可以访问可以访问不能访问默认可以访问可以访问不能访问不能访问private可以访问不能访问不能访问不能访问通过对象直接访问成员变量,这样操作,会引起数据安全问题考虑:能不能不让外界直接访问对象的成员变量?使用private解决private:是一个修...
    2019-05-11 15:50:21
    阅读量:90
    评论:0
  • 大数据基础
    2018-11-13 10:34:05
    阅读量:291
    评论:0
  • 数据类型1.结构化数据能够以二维表格表示的数据,如excel、简单文本2.非结构化数据不能够以二维表格表示的数据,如视频、音频、图片等3.半结构化数据具有一定结构化特征,但又不能全部按照结构化数据去表示,比如网页——文字、视频啥的都有大数据处理流程1.数据采集2.数据存储3.数据管理4.数据分析:分析出结果5.数据挖掘:关联性检测,...
    2018-08-27 22:06:00
    阅读量:154
    评论:0