热门好课推荐
猜你喜欢
相关培训 相关博客
  • 分布式集群数据库部署方案最近到新部门轮岗,疯狂的汲取分布式知识,以补充短板。之前一直好奇支付宝的数据库部署方案究竟是什么样子。这次有了个概念性的认识方案一 PXC集群为了保证数据的高度一致性及分区容错,首先将一个数据库进行水平切分,分为PXC分片一和二两部分。在PXC集群一中持有的是数据表的一部分水平切分数据,此PXC集群挂载有三个节点DB1,2,3,这三个库内容一致。PXC就是将三...
    2019-10-24 15:26:56
    阅读量:118
    评论:0
  • 刚接触大数据的时候,首先是想办法搭集群,而是在服务器配置上,总会出现很多问题,今天我将我将我在科多大数据配置服务器的经验分享给大家,希望对你们有帮助1、准备四台主机ip地址 主机名192.168.200.151   kd012G192.168.200.152   kd022G192.168.200.153   kd031G192.168.200.154   kd041GZK:kd...
    2018-05-26 16:05:41
    阅读量:5045
    评论:0
  • 分布式集群准备工作安装手册一、VMare Workstation的安装二、Ubuntu的安装(必须所有系统的用户名相同,主机名不同)三、联网四、设置HOST:Sudo vi/etc/hosts #for hadoop10.28.23.116    ubuntu010.28.23.117    ubuntu110.28.23.111    ubuntu310.28.23.113    ubuntu4...
    2018-04-25 22:06:43
    阅读量:337
    评论:0
  • 一,简介大数据平台安全体系的四个层次说起:外围安全、数据安全、访问安全以及访问行为监控。外围安全技术多指传统意义上提到的网络安全技术,如防火墙,登陆认证等;数据安全从狭义上说包括对用户数据的加解密,又可细分为存储加密和传输加密;还包括用户数据的脱敏,脱敏可以看做“轻量级”的数据加密。如某人的生日为“2014-12-12”,脱敏后的数据为“2014-x-x”。数据的轮廓依然存在,但已...
    2018-10-26 14:02:00
    阅读量:75
    评论:0
  • 了解MySQL集群之前,先看看单节点数据库的弊病:大型互联网程序用户群体庞大,所以架构需要特殊设计。单节点数据库无法满足大并发时性能上的要求。单节点的数据库没有冗余设计,无法满足高可用。单节点MySQL无法承载巨大的业务量,数据库负载巨大。一、常见MySQL集群方案Repliaction集群方案PXC集群方案(PerconaXtraDBCluste...
    2018-06-30 11:15:37
    阅读量:15831
    评论:0
  • 简述Istio 是一个服务Mesh,其基本属性是监控和管理多个服务。服务Mesh的本质就是将一组单独的微服务组合成单个可控的复合应用程序。对于特定大小的应用,组成应用程序的所有的微服务都可以在单个编排平台上运行(例如 Kubernetes 集群)。然而,由于诸如规模、冗余等许多原因,大多数应用程序最终将需要分布式设计并使其中的一些服务能够运行在任何地方。Istio 支持将一个应用程序的服务...
    2019-05-05 15:36:10
    阅读量:247
    评论:0
  • centos7环境下部署cloudera大数据。节点名称 IP 配置 说明 Manager-node 192.168.42.100 4C/8G/100G 管理节点 Agent1-node 192.168.42.101 8C/32G/1T 数据节点 Agent2-node 192.168.42.102 8C/32G/1...
    2018-08-17 14:50:48
    阅读量:704
    评论:1
  • 大数据架构总览需要的安装包地址系统前期准备系统选用修改hostname,添加ip映射ssh免密码登录检查集群主机的时间是否一致设置后续要使用的命令的快捷命令(别名)设置环境变量配置java或者访问我的个人博客站点,链接大数据架构总览这个系列指南使用真实集群搭建环境,不是伪集群,用了三台腾讯云服务器需要的安装包地址Hadoop: ...
    2018-08-15 10:42:49
    阅读量:1325
    评论:0
  • 导读:        随着大数据时代的到来,传统的GIS分析工具越来越难以满足对超大体量空间数据的分析需求。SuperMap iServer 9D(本文简称iServer)实现了地理信息服务的分布式集群架构,它可以利用集群及Spark分布式计算方式,对超大体量的空间数据进行空间分析,亦可接入分布式存储。功能如此强大,您是不是迫不及待想使用?那么,如何快速搭...
    2018-08-16 14:18:22
    阅读量:1035
    评论:2
  • 1、Exception in thread "main" org.apache.hadoop.ipc.RemoteException(java.io.IOException): File /user/root/.sparkStaging/application_1561599084053_0003/__spark_libs__1535509378331375892.zip could only b...
    2019-06-28 17:01:38
    阅读量:150
    评论:0