大数据开发技巧

8483人关注

    大数据 开发技巧

  • 使用mapreduce向hbase1.1.2插入大量数据 摘要:1、集群环境hadoop2.5+hbase1.1.2集群现在有37台slave节点,一个master节点。2、数据源每一天的数据压缩成了一个tar.gz包,大概4G,其中大概有6000个zip包,每个zip包中有几个txt文件。现在采用shell脚本将每天的数据合并成一...
    来源:博客 标签: 该信息由 GYQJN贡献
  • Storm集群的安装 摘要:到Storm的官方网站Document下的Setup and deploying栏目下的Setting up a Storm Cluster安装Storm分为如下5个步骤:1、安装zookeeper集群2、在Nimbus和Supervisor机器上安装JAVA SDK 6和python2.6.63、安装Storm包,解压到Nimbus和Supervisor机器4、配置...
    来源:博客 标签:storm大数据storm安装 该信息由 wb81074贡献
  • 大数据数据仓库-场景 摘要: 大数据仓库-场景  2015-10-24 朱洁 hadoop技术学习 传统OLTP/OLAP之分 数据仓库里面有OLTP/OLAP之分,OLTP是传统关系型数据库的主要应用,其主要面向基本的、日常的事务处理,例如银行交易。OLAP是数据仓库系统...
    来源:ITeye 标签:大数据数据仓库adsolap 该信息由 jiezhu2007贡献

Copyright © 2013, CSDN.NET, All Rights Reserved