热门好课推荐
猜你喜欢
相关培训 相关博客
  • Spark大数据学习笔记_第2篇_CDH集群环境搭建Spark大数据学习笔记_第2篇_CDH集群环境搭建1. 安装hadoop包2. 修改core-site.xml3. 修改hdfs-site.xml4. 修改mapred-site.xml5. 修改yarn-site.xml6. 修改slaves文件7. 在另外两台机器上搭建hadoop8. 启动hdfs集群9. 启...
    2018-09-06 17:11:19
    阅读量:82
    评论:0
  • Spark大数据学习笔记_第3篇_Hive的安装Spark大数据学习笔记_第3篇_Hive的安装1. 安装hive包2. 安装mysql3. 配置hive-site.xml4. 配置hive-env.sh和hive-config.sh5. 验证hive是否安装成功1. 安装hive包1、将课程提供的hive-0.13.1-cdh5.3.6.t...
    2018-09-06 17:42:47
    阅读量:171
    评论:0
  • Spark大数据学习笔记_第4篇_zookeeper集群环境搭建Spark大数据学习笔记_第4篇_zookeeper集群环境搭建1. 安装ZooKeeper包2. 配置zoo.cfg3. 设置zk节点标识4. 搭建zk集群5. 启动ZooKeeper集群1. 安装ZooKeeper包1、将课程提供的zookeeper-3.4.5-cdh5.3.6...
    2018-09-07 11:05:52
    阅读量:53
    评论:0
  • Spark大数据学习笔记_第6篇_flume安装Spark大数据学习笔记_第6篇_flume安装1.安装flume2.修改flume配置文件3. 创建需要的文件夹4.启动flume-agent5.测试flume1.安装flume1、将flume-ng-1.5.0-cdh5.3.6.tar.gz使用WinSCP拷贝到sparkproject1的/u...
    2018-09-14 09:40:20
    阅读量:265
    评论:0
  • Spark大数据学习笔记_第5篇_kafka集群环境搭建Spark大数据学习笔记_第5篇_kafka集群环境搭建1. 安装Kafka包2. 搭建kafka集群3. 启动kafka集群4. 测试kafka集群1. 安装Kafka包1、将kafka_2.9.2-0.8.1.tgz使用WinSCP拷贝到sparkproject1的/usr/local...
    2018-09-10 17:45:58
    阅读量:420
    评论:0
  • Spark大数据学习笔记_第1篇_CentOS集群环境搭建1. CentOS安装1、下载镜像CentOS镜像。 2、创建虚拟机:打开Virtual Box,点击“新建”按钮;输入虚拟机名称为sparkproject1,选择操作系统为Linux,选择版本为Red Hat;分配1024MB内存;后面所有选项全部用默认的设置;注意,在Virtual disk file location a...
    2018-09-06 16:45:48
    阅读量:86
    评论:0
  • 转自:http://blog.csdn.net/gaoyanjie55/article/details/31745111Spark  resource1官方资料Spark官网及文档AMPLab官网Databricks博客2Spark生态系统资源分享2.1SparkSpark hans on 教程2.2Spark SQL a
    2016-08-24 15:22:58
    阅读量:1380
    评论:0
  • Spark是什么 a) 是一种通用的大数据计算框架b) Spark Core 离线计算        Spark SQL 交互式查询 Spark Streaming 实时流式计算 Spark MLlib 机器学习 Spark GraphX 图计算c) 特点:i. 一站式:一个技术堆栈解决大数据领域的计算问题ii. 基于内存d) Spark2009年诞生于
    2017-10-15 16:57:19
    阅读量:4399
    评论:0
  • 作者:翁松秀文章目录Spark快速大数据分析一、Spark数据分析导论二、Spark下载与入门三、RDD编程四、键值对操作五、数据读取与保存六、Spark编程进阶七、在集群上运行Spark八、Spark调优与调试九、Spark SQL十、Spark Streaming十一、基于MLlib的机器学习Spark快速大数据分析一、Spark数据分析导论二、Spark下载与入门三、RDD编程...
    2019-03-01 11:28:39
    阅读量:502
    评论:0