热门好课推荐
猜你喜欢
相关培训 相关博客
  • 1. ElasticSearch1.1 ElasticSearch的优点:高并发。实测es单机分配10g内存单实例,写入能力1200qps,60g内存、12核CPU起3个实例预计可达到6000qps。同机房单条数据写入平均3ms(比mysql慢,mg不清楚)容错能力比mg强。比如1主多从,主片挂了从片会自动顶上满足大数据下实时读写需求,无需分库(不存在库的概念)。易扩展。实例间做下配置即可
    2016-12-06 19:00:09
    阅读量:1484
    评论:5
  • eBay已经开源了一种实时大数据分析的平台—— Pulsar,它利用了分布式处理和Complex Event Processing技术,实现了一个低延迟,高可靠的分布式实时分析平台。
    2015-03-02 13:23:51
    阅读量:5117
    评论:0
  • 12 大数据平台基础架构和常用处理工具更多干货分布式实战(干货)spring cloud 实战(干货)mybatis 实战(干货)spring boot 实战(干货)React 入门实战(干货)构建中小型互联网企业架构(干货)python 学习持续更新ElasticSearch 笔记kafka storm 实战 (干货)一、概述数据在线分析处理和常用工具大数据离线处理和常用工具OLAP 和 OLT...
    2018-05-01 21:33:53
    阅读量:2935
    评论:0
  • 文件系统数据存储内存技术数据搜集消息系统数据处理查询引擎分析和报告工具调度与管理服务机器学习开发平台文件系统      HDFSHadoopDistributedFileSystem,简称HDFS,是一个分布式文件系统。HDFS是一个高度容错性的系统,适合部署在廉价的机器上。HDFS能提供高吞吐量的数据访问,非常适合大规模数据集上的应用。      GlusterFS
    2017-04-13 13:50:38
    阅读量:6623
    评论:0
  • 数据仓库系列:1.hive2.spark sql3.Cloudera Impala4.kylin离线处理系列:1.hadoop2.spark 3.tez实时处理系列:1.storm2.spark streamingNOSQL系列:1.hbase2.redis3.mongo db序列化系列:1.avro2.protocol buffer3.swift监控系统系列:1.zabbix2.nagios
    2016-02-04 14:55:49
    阅读量:10998
    评论:0
  • 第1章 卜算子·大数据简介“卜算子·大数据”,是一个开源、成体系的大数据学习教程。从基础数据采集到顶层架构设计。最新梳理出大数据知识体系共计12个部分,42个章节。每周日更新,金九银十际,助你上青天!本章主要内容:特点“卜算子·大数据”架构项目更新写作目的原创声明1.1 特点* 关于 * ——“卜算子·大数据”,其中“卜算子”是中国诗词中唯一包含计算、占卜、...
    2018-06-29 11:50:52
    阅读量:1010
    评论:0
  • 大数据的应用开发过于偏向底层,具有学习难度大,涉及技术面广的问题,这制约了大数据的普及。现在需要一种技术,把大数据开发中一些通用的,重复使用的基础代码、算法封装为类库,降低大数据的学习门槛,降低开发难度,提高大数据项目的开发效率。大数据在工作中的应用有三种:与业务相关,比如用户画像、风险控制等;与决策相关,数据科学的领域,了解统计学、算法,这是数据科学家的范畴;与工程相关,如何实施、如何实现、解决...
    2018-03-16 14:07:19
    阅读量:9834
    评论:0
  •  Google是大数据时代的奠基者,其大数据技术架构一直是互联网公司争相学习和 研究的重点,也是行业大数据技术架构的标杆和示范。1、谷歌的数据中心  谷歌已经建立了世界上最快、最强大、最高质量的数据中心,它的8个主要数据中心都远离其位于加州山景城的总部,分别位于美国南卡罗来纳州的伯克利郡,爱荷华州的康瑟尔布拉夫斯,乔治亚州的道格拉斯郡,俄克拉荷马州的梅斯郡,北卡罗来纳州的勒努瓦,俄勒冈州的达尔斯;...
    2018-04-13 13:25:31
    阅读量:2584
    评论:0
  • 码云上找了个最近比较火的开源架构 PIG搭建了一天,终于大功告成,可以慢慢研究学习,再发上微博。下面介绍一下PIG基于Spring Cloud、OAuth2.0、Vue的前后端分离的系统。 通用RBAC权限设计及其数据权限和分库分表 支持服务限流、动态路由、灰度发布、 支持常见登录方式, 多系统SSO登录完善登录:账号密码模式、短信验证码模式、社交账号模式均整合Spring s...
    2018-11-11 18:51:48
    阅读量:311
    评论:0
  • 分布式架构系统可用的开源中间件分析在分析上面分布式架构之前,我们来扯一个话外题,知道分布式架构,都是从单机架构学习进行过来的,当然对单机架构都比较熟悉了,这时从知识面,应该可以看出,一般在没有一定用户量,和服务器最初开始架构,不会采取分布式,而采取单机架构模式,这样可以节省成本也可以后期迭代,在单机架构模式下的知识点,有两个重点,也是面试经常问到,监考的问题:1.数据库索引(B+...
    2019-04-02 02:37:16
    阅读量:66
    评论:0