热门好课推荐
猜你喜欢
相关培训 相关博客
  • 什么是RPCRPC(RemoteProcedureCallProtocol)——远程过程调用协议,它是一种通过网络从远程计算机程序上请求服务,而不需要了解底层网络技术的协议。RPC协议假定某些传输协议的存在,如TCP或UDP,为通信程序之间携带信息数据。在OSI网络通信模型中,RPC跨越了传输层和应用层。RPC使得开发包括网络分布式多程序在内的应用程序更加容易。...
    2019-03-14 12:00:49
    阅读量:55
    评论:0
  • hdfs的工作机制(工作机制的学习主要是为加深对分布式系统的理解,以及增强遇到各种问题时的分析解决能力,形成一定的集群运维能力)注:很多不是真正理解hadoop技术体系的人会常常觉得HDFS可用于网盘类应用,但实际并非如此。要想将技术准确用在恰当的地方,必须对技术有深刻的理解概述HDFS集群分为两大角色:NameNode、DataNode NameNode负责管理整个文件...
    2019-03-09 15:49:40
    阅读量:26
    评论:0
  • 大数据基础第一节:什么是大数据,本质?(1)数据的存储:分布式文件系统(分布式存储)(2)数据的计算:分布式计算第二节:JAVA和大数据是什么关系?1、HADOOP:基于JAVA语言开发2、SPARK:基于SCALA语言,SCALA基于JAVA语言第三节:学习大数据需要的基础和路线1、学...
    2018-02-02 17:20:00
    阅读量:27
    评论:0
  • 一、大数据大数据:解决海量数据问题的技术。大数据由巨型数据集组成,把数据集合并进行分析可得出许多额外的信息和数据关系性。大数据是指无法在一定时间内用常规软件工具对其内容进行抓取、管理和处理的数据集合。大数据技术是指从各种各样类型的数据中,快速获得有价值信息的能力,适用于大数据的技术,包括大数据技术包括大规模并行处理数据库,数据挖掘电网,分布式文件系统,分布式数据库,云计算平台,互联网和可扩展的存储...
    2018-08-30 19:03:51
    阅读量:1
    评论:0
  • HadoopCAP理论大数据技术原理与应用——概念、存储、处理、分析与应用C(强一致性):系统在执行过某项操作后仍然处于一致的状态。在分布式系统中,更新操作执行成功后所有的用户都应该读取到最新的值,这样的系统被认为具有强一致性。A(可用性):每一个操作总是能够在一定的时间内返回结果,这里需要注意的是“一定时间内”和“返回结果”。P...
    2017-03-08 21:00:00
    阅读量:36
    评论:0
  • 面对当前的热点,大数据处理分析已经是互联网开发工程师必须要掌握的技能之一。今天开始学习hadoop,逐步记录自己每天的学习心得。。
    2014-06-01 16:47:51
    阅读量:63
    评论:0
  • 大数据的概念​ 听到大数据可以知道数据量一定很大,一般也是在PB级别的数据量。早期数据的产生速度慢,信息相对来说较少。​ 大数据:无法在一定时间内,用常规软件工具进行捕捉、管理和处理的数据集合,必须采用新的处理模式,才能更好的管理和分析。​ 大数据处理的问题:海量数据的存储问题和分析问题。​ 大数据的存储单位简单介绍:Bit、Byte、KB、MB、GB、TB、PB、EB、ZB、YB、BB、...
    2019-07-04 14:24:44
    阅读量:22
    评论:0
  • 大数据的由来•大数据–随着计算机技术的发展,互联网的普及,信息的积累已经到了一个非常庞大的地步,信息的增长也在不断的加快,随着互联网、物联网建设的加快,信息更是爆炸是增长,收集、检索、统计这些信息越发困难,必须使用新的技术来解决这些问题什么是大数据•大数据的定义–大数据指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,需要新处理模式才能具有更强的决策力...
    2019-06-23 14:42:12
    阅读量:48
    评论:0
  • HadoopCAP理论C(强一致性):系统在执行过某项操作后仍然处于一致的状态。在分布式系统中,更新操作执行成功后所有的用户都应该读取到最新的值,这样的系统被认为具有强一致性。A(可用性):每一个操作总是能够在一定的时间内返回结果,这里需要注意的是“一定时间内”和“返回结果”。P(分区容错性):分区容错性可以理解为系统在存在网络分区的情况下仍然可以接受请求(满足一致性和可用性)
    2017-03-08 21:03:37
    阅读量:198
    评论:0
  • 什么是大数据?萝卜和青菜各自有各自的看法,下面说说我所了解到的大数据,那,就从大数据特征说起:大数据,不仅仅具备大的特征,只有外行人才会天真的以为大数据,就是数据,量大!量大只是大数据其中的一个特征,除了这个特征之外,它还和另外三个特征和起来组成了大数据:Volume大量的海量的数据量Variety多种多样的数据的类型多种多样,比如数据源很有,对于企业...
    2018-08-26 08:59:47
    阅读量:526
    评论:0