热门好课推荐
猜你喜欢
相关培训 相关博客
  • 一、什么是大数据一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合,具有海量的数据规模、快速的数据流转、多样的数据类型和价值密度低四大特征。大数据需要特殊的技术,以有效地处理大量的容忍经过时间内的数据。适用于大数据的技术,包括大规模并行处理(MPP)数据库、数据挖掘、分布式文件系统、分布式数据库、云计算平台、互联网和可扩...
    2018-06-19 21:37:00
    阅读量:159
    评论:0
  • 平台:操作系统跨平台:java可以运行在任意的操作系统上一次编写到处运行原理:实现跨平台需要依赖虚拟机–java虚拟机什么是注释:用来解释说明程序java中的注释分类:格式://注释文字文档注释格式:/*注释文字/注释的作用?解释说明程序的功能提高可读性。帮助我们调试bug关键字:概念:被java语言赋予了特定含义特点:组成关键字的字母都是小写的...
    2019-05-06 22:55:06
    阅读量:55
    评论:1
  • 一、什么是大数据     一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合,具有海量的数据规模、快速的数据流转、多样的数据类型和价值密度低四大特征。大数据需要特殊的技术,以有效地处理大量的容忍经过时间内的数据。适用于大数据的技术,包括大规模并行处理(MPP)数据库、数据挖掘、分布式文件系统、分布式数据库、云计算平台、互联网和可扩展的存储系统。
    2017-08-07 21:06:45
    阅读量:10645
    评论:1
  • Hadoop:大数据系统HDFS:分布式文件系统MapReduce:分布式计算框架YARN:资源管理框架HBase:分布式列存储数据库Hive:数据仓库Mahout:数据分析与挖掘第二章.大数据关键技术2.1大数据采集与预处理技术FlumeScribeKafkaTimeTunnelChukwa2.2大数据存储与管理技术分布式文件系统LustreGFSPVFSHDFS分布式关系型数据库Gree...
    2018-04-07 16:11:28
    阅读量:782
    评论:0
  • 1.Hadoop基础1.1Hadoop介绍​ Hadoop是Apache旗下的一个用java语言实现开源软件框架,是一个开发和运行处理大规模数据的软件平台。允许使用简单的编程模型在大量计算机集群上对大型数据集进行分布式处理。狭义上:Hadoop是处理大数据的软件平台HDFS(分布式文件系统):解决海量数据存储YARN(作业调度和集群资源管理的框架):解决资源任...
    2018-11-19 00:00:28
    阅读量:45
    评论:0
  • 信息社会,数据无时无刻不与我们息息相关,在数据从数据源到数据仓库,再到商业智能系统对数据进行挖掘,提取出对客户有价值的数据,所有的过程中都设计到数据的一致,数据严格按照逻辑计入到商业智能系统等等,都离不开大数据测试。这里我分享一些我个人在大数据测试领域的一点经验。测试步骤及要点:根据STTM测试表名,列名,主键,外键等数据类型定义删除目标表运行数据Load程序,重新加载...
    2015-07-10 21:22:20
    阅读量:22
    评论:0
  • 今天老徐在小密圈提问,如何做大数据测试。我就自己以前做运维时,接触到的一些知识,做了简单的说明,这些也都是自己实践过,想要表达的东西。大数据运维,通俗来说就是对集群健康的监控;各种与集群相关组件的使用,如 hive,hbase,spark,zookeeper,redis,pig,solr,kafka,flume等,都属于运维的范畴;数据库的备份;服务器的...
    2017-04-25 22:43:00
    阅读量:195
    评论:0
  • 大数据的特点  具体来说,大数据具有4个基本特征:  一是数据体量巨大。百度资料表明,其新首页导航每天需要提供的数据超过1.5PB(1PB=1024TB),这些数据如果打印出来将超过5千亿张A4纸。有资料证实,到目前为止,人类生产的所有印刷材料的数据量仅为200PB。  二是数据类型多样。现在的数据类型不仅是文本形式,更多的是图片、视频、音频、地理位置信息等多类型的数据,个性化数据占绝...
    2019-05-10 18:24:51
    阅读量:85
    评论:0
  • http://www.raincent.com/content-10-10587-1.html 大数据是一个大的数据集合,通过传统的计算技术无法进行处理。这些数据集的测试需要使用各种工具、技术和框架进行处理。大数据涉及数据创建、存储、检索、分析,而且它在数量、多样性、速度方法都很出色。什么是大数据?大数据是一个大的数据集合,通过传统的计算技术无法进行处理。这些数据集的测试需要使用各...
    2018-08-20 13:49:29
    阅读量:329
    评论:0
  • 什么是大数据?        大数据是一个大的数据集合,通过传统的计算技术无法进行处理。这些数据集的测试需要使用各种工具、技术和框架进行处理。大数据涉及数据创建、存储、检索、分析,而且它在数量、多样性、速度方法都很出色。大数据测试类型        测试大数据应用程序更多的是验证其数据处理,而不是测试软件产品的个别功能。当涉及到大数据测试时,性能和功能测试是关键。       
    2017-02-07 16:09:13
    阅读量:12032
    评论:0