热门好课推荐
猜你喜欢
相关培训 相关博客
  • 1.什么是大数据?有什么特点? 定义:“大数据”的经典定义是可以归纳为4个V:       海量的数据规模(volume)、       快速的数据流转和动态的数据体系(velocity)、      多样的数据类型(variety)、       巨大的数据价值(value)、      数据的准确性和可信赖度,即数据的质量(Veracity) 大
    2018-01-22 19:59:31
    阅读量:164
    评论:0
  • 第一课: Hadoop的背景起源一:GFS:GoogleFileSystem    一、什么是大数据,本质?   (1)数据的存储:分布式文件系统(分布式存储)----->HDFS:HadoopDistributedFileSystem(2)数据的计算:分布式计算 二、如何解决大数据的存储?---->分布式文件系统(HDFS,来源于GFS) 举
    2018-01-28 13:34:59
    阅读量:109
    评论:0
  • 1.大数据产生背景1.1.概念的产生1980年,托夫勒在《第三次浪潮》中提到“大数据”一词2011年,麦肯锡正式定义了大数据的概念2010年后,随着互联网及云计算的发展,大数据技术开始走向实现,并进入人们的生活1.2.大数据的特征Volume(规模):每天产生海量数据Velocity(速度):数据产生的速度越来越快Variety(多样):...
    2018-02-28 09:08:00
    阅读量:8
    评论:0
  • 引言:在如今的大数据时代,大数据的应用早已在我们的生活方方面面都有所体现。新闻内容个性化推荐、淘宝购物个性化推荐、一周之内的天气预报等等应用,都有着大数据的背影在其中。了解大数据是每一个人应该有的常识,学习大数据知识更是社会发展的趋势!为什么学习大数据?笔者认为:1、社会科技发展的趋势,就业前景十分可期待,就业很好;2、在如今的信息社会,不了解大数据是什么,就不会了解一些事件的本质情况;3...
    2019-03-26 12:42:23
    阅读量:101
    评论:0
  • 基于hive离线分析实现数据仓库的功能,主要包括数据的输入、处理、输出输入:数据库到HDFS可以考虑sqoop或者kettle做一些ETL操作,本地文件可以考虑使用hive本地加载,远程文件可以考虑flume写入。 处理:前期使用hive作为数据分析,mahout作为数据挖掘,特殊需求可以考虑基于hadoopAPI实现。输出:关系型数据库,数据量大可以考虑nosql
    2014-11-16 14:32:30
    阅读量:1233
    评论:1
  • 大数据入门基础之linux(学习笔记)学大数据之前,我们要先学会用linux,对于之前有工作经验的同学来说linux的简单命令肯定是会的,那么咱们这里就跳过,不常用的咱们平时可以通过百度查询的,不过我们可以来讲一个corntab,crontab是Unix和Linux用于设置周期性被执行的指令。可以在固定间隔时间执行指定的系统指令或sh...
    2018-09-03 15:58:18
    阅读量:28
    评论:0
  • 一、大数据的本质:   (1):数据的存储:分布式文件系统(多台机器进行分布式存储)   (2):数据的计算:分布式计算也指的就是hadoop中的hdfs来解决大数据的存储问题,hdfs的结构是由一个管理员NameNode名称节点和多个DataNode组成的一个hdfs,搭建这个集群最少需要三台机器,我是搭建了3台linux机器解决的问题:使用分布式文件系统能够解决的问题,能...
    2018-09-09 13:53:28
    阅读量:214
    评论:0
  • 1.CAP理论   一致性(C onsistency)、可用性(A vailability)、分区容忍性(P artitiontolerance)   CAP原理指的是,这三个要素最多只能同时实现两点,不可能三者兼顾。因此在进行分布 式架构设计时,必须做出取舍。而对于分布式数据系统,分区容忍性是基本要求 ,否则就 失去了价值。因此设计分布式数据系统,就是在一致性和可用性
    2018-01-23 19:08:26
    阅读量:90
    评论:0
  • 人与动物的最大不同在于,人会使用工具。天之道,损有余而补不足。读大学时期,学过线性代数,憋足劲,才把它学完,不过到就业后,基本上又还给老师。在大学时期,本人就已经知道线性代数对于软件开发有很大帮助,不过当时也只是一个很模糊感觉,工作期间,也看过其他相关视频,不过也没有认识到其背后真正的巨大作用。当我开始接触到大数据,也就是现在才算...
    2017-07-11 01:24:00
    阅读量:3
    评论:0
  • 我们想要学习大数据首先我们需要对大数据有什么要的了解,从小白到高级工程师,我们都要需要具备哪些条件和因素,通过赵强老师的大数据入门基础课程让你对大数据有一个全方位的了解,在大数据这条路上不在迷茫。
    2017-12-22 00:00:00
    阅读量:797
    评论:0