精华内容
下载资源
问答
  • 本文主要是分享了5个常用的Java分布式缓存框架,这些缓存框架支持多台服务器的缓存读写功能,可以让你的缓存系统更容易扩展。1、Ehcache– Java分布式缓存框架Ehcache是一个Java实现的开源分布式缓存框架...

    在开发中大型Java软件项目时,很多Java架构师都会遇到数据库读写瓶颈,如果你在系统架构时并没有将缓存策略考虑进去,或者并没有选择更优的缓存策略,那么到时候重构起来将会是一个噩梦。本文主要是分享了5个常用的Java分布式缓存框架,这些缓存框架支持多台服务器的缓存读写功能,可以让你的缓存系统更容易扩展。

    1、Ehcache– Java分布式缓存框架

    Ehcache是一个Java实现的开源分布式缓存框架,EhCache 可以有效地减轻数据库的负载,可以让数据保存在不同服务器的内存中,在需要数据的时候可以快速存取。同时EhCache 扩展非常简单,官方提供的Cache配置方式有好几种。你可以通过声明配置、在xml中配置、在程序里配置或者调用构造方法时传入不同的参数。

    73c533071c1a485004bd9cc770084e67.png

    官方网站:http://ehcache.org/

    使用教程:http://www.codeceo.com/article/java-ehcache.html

    2、Cacheonix– 高性能Java分布式缓存系统

    Cacheonix同样也是一个基于Java的分布式集群缓存系统,它同样可以帮助你实现分布式缓存的部署。

    ce98a635de7116074f5257d897f505bb.png

    官方网站:http://www.cacheonix.com/

    使用教程:http://www.codeceo.com/article/java-cacheonix.html

    3、ASimpleCache– 轻量级Android缓存框架

    ASimpleCache是一款基于Android的轻量级缓存框架,它只有一个Java文件,ASimpleCache基本可以缓存常用的Android对象,包括普通字符串、JSON对象、经过序列化的Java对象、字节数组等。

    cd4c36f659ae5ea22c5b262896e01b35.png

    官方网站:https://github.com/yangfuhai/ASimpleCache

    使用教程:http://www.codeceo.com/article/asimplecache-android-cache.html

    4、JBoss Cache– 基于事物的Java缓存框架

    JBoss Cache是一款基于Java的事务处理缓存系统,它的目标是构建一个以Java框架为基础的集群解决方案,可以是服务器应用,也可以是Java SE应用。

    efa28fc2047ab24dd86aecdfa54aaf7d.png

    官方网站:http://jbosscache.jboss.org/

    使用教程:http://www.codeceo.com/article/jboss-cache-java.html

    5、Voldemort– 基于键-值(key-value)的缓存框架

    Voldemort是一款基于Java开发的分布式键-值缓存系统,像JBoss Cache一样,Voldemort同样支持多台服务器之间的缓存同步,以增强系统的可靠性和读取性能。

    2caa43b63b2a27ec7ff577e7049fb3b1.png

    官方网站:http://www.project-voldemort.com/voldemort/

    使用教程:http://www.codeceo.com/article/voldemort-java-key-value-catch.html

    展开全文
  • java分布式(分布式架构)

    千次阅读 2020-01-30 06:46:50
    开头的话,架构多半和业务关联在一起,如果只是简单的图书管理系统、选课系统或者什么简单的财务系统,用不着分布式。只有大型公司、高并发的业务才需要分布式的帮助。当然,架构本身要和业务模型紧密配合才能发挥...

    开头的话,架构多半和业务关联在一起,如果只是简单的图书管理系统、选课系统或者什么简单的财务系统,用不着分布式。只有大型公司、高并发的业务才需要分布式的帮助。当然,架构本身要和业务模型紧密配合才能发挥作用。

     

         很长一段时间,java都是最流行的编程语言。我想,一方面是由于java可以用来开发网站后端程序,另外一方面java可以用来开发android这样的客户端程序。当然,很多人会说,java天生具有网络属性,具有很好的分布式基因。这应该是一种认知错误。所谓的分布式都是基于tcp/ip网络,它发展的原因是因为稳定性、性能和业务扩展的需要,单台服务器已经远不能满足业务的需要。这方面,其他语言也可以做到这一点,比如说python、go、erlang等等。只是,对于企业来说,一个不可忽略的现实是,市场上合格的java工程师很多,但是可以独当一面的python、go、erlang工程师太少,这也使得一些企业即使在创立初期的时候用了其他编程语言,后期也会慢慢转到java上面。不是技术不允许,实在是人才不允许。脚本语言太自由,坑太多,稍不小心就有可能埋雷,而java语言规范、第三方库多,即使有错误,也会很快暴露出来,这也算java很好的一个优势吧。

     

        说到网站后端开发,很多人都会选择java + Spring + myBatis的开发模式。这无可厚非。只是随着业务的快速发展,整体的网站架构也在快速迭代当中,不妨利用这段时间简单梳理一下发展流程。

     

    1、单台服务器模式

        所谓的单台服务器,就是http服务器软件、静态文件(主要是以图片为主,还有html、css、js文件)、mysql软件安装在一台服务器上。很多大学里面的课程作业都是这么设计的。

     

    2、多台服务器模式

        当文件越来越多的时候,单台服务器远远不能支撑业务的发展。这个时候会将http服务器软件、文件服务器、数据库软件安装在不同的服务器上面,彼此之间用tcp/ip进行连接,企业内部的宽带要比外面买的宽带速度高很多。

     

    3、添加缓存服务器

        随着业务的发展,用户对数据的速度要求越来越高,要是每次访问的时候都直接访问数据库,这个效率其实是很低的。在现实场景中,大家会发现读数据的请求比改数据的请求要多的多,所以这个时候添加一些nosql缓存服务器,可以有效地提高用户体验。

     

    4、反向代理服务器

        单台http服务器的性能总是有限的,所以实际业务场景下一般会使用nginx作为代理服务器。通过代理软件,用户的数据请求会被均衡分配到不同的http服务器上面。当然此时nginx就成了系统的瓶颈点,所以为了保护nginx,一般也会安装多台nginx服务器,使用keepalive软件来保证nginx宕机的时候自动进行切换。

     

    5、CDN服务器

        大家如果安装过不同电信运营商的宽带就知道,一个电信运营商下的pc如果访问另外一个电信运营商的服务器,速度是很慢的。所以一个比较务实的方法,就是讲常用的文件、特别是静态文件安装在离用户最近的那台运营商服务器上面,这就是CDN服务器设计的初衷。

     

    6、分布式文件服务器

        如果网站后台文件过多,那么单台服务器远不能满足用户的要求,这个时候分布式文件服务器应运而生。

     

    7、分布式数据库服务器

        同样的,当数据累积到一定程度的时候,单台服务器其实远远不能满足要求。而且,单台服务器还比较危险,一旦服务器宕机之后,后果其实是不堪设想的。这个时候一般会有两种方案,一种是分库分表,即将数据库分布在不同的服务器上面,或者将同一张表的内容分布在不同的服务器上面,插件可以帮助我们做到这一点,比如MySql Proxy;另外一种方法就是真正的分布式数据,比如TiDB,这个时候用户不需要关心数据是怎么分配的,因为底层软件就可以将数据灵活的存储在不同的服务器上面。每种方法都有自己的自己的优缺点,大家可以灵活应对。

     

    8、微服务部署

        从前的代码部署都是安装在http服务器上面,但是一旦某一个小功能失败,那么有可能会导致整台http服务器失败。所以,针对这种情况,现在提出了一种微服务器的模式。它的基本思想类似于rpc,http服务器从nginx接收到用户的请求之后,不是直接运行,而是通过rpc向微服务器提出请求,并且等待微服务的结果。微服务中的服务,其实就是一个一个小的业务。单个微服务未必是一台服务器,也有可能是基于zookeeper的多台服务器,因为数据量或大或小,不一定。

     

    9、消息服务器

        不同的服务器之间是需要进行数据沟通的。为了性能,很多时候,服务器之间的通信都是异步的,所以消息服务器就充当了缓冲和信息处理的功能。消息服务一般是周期处理、或者满足一定业务条件就会触发处理。微服务之间的通信,就需要消息服务器的帮助。

     

    10、监控服务器

        服务器运行过程中会出现各种各样的情况。服务器cpu多少、ram还剩多少、存储怎么样、宽带用了多少、当前跑了哪些业务,这些信息都需要有一个监控服务器来完成。

     

    11、运维服务器

        当产品开发好,这个时候一般会在小范围内进行部署,也就是小范围的发布。等到没有大的问题之后,就会进行大范围的推送,这是一种常用的方法。运维的同学不仅需要上线产品、还需要下线产品、灰度发布,还需要24h检测服务器的运行。在业务扩展的时候,需要及时部署、添加新的服务器。当出现问题时,他们需要将当前服务器上的业务transfer到其他机器上面,用户一般是不会感受到这种变化的。

     

    12、爬行、搜索服务器

        像一些短视频公司,除了自己生产内容之外,另外一个很重要的工作就是对全网进行爬行工作。等到内容获取之后,就会用数据库固化下来,这个时候就需要搜索服务器的帮助了。关于搜索这方面,现在有一些开源的软件可以供使用,比如solr。

     

    13、推荐服务器

        除了用户自己想搜索的内容外,系统一般也会推荐一些相关的内容。很多同学都会使用头条或者抖音,那么里面推荐服务器就要承担很重要的一部分工作。推荐服务器可以做得很简单、也可以做得很复杂,这个时候就看它是不是公司的主营业务了。当然不光是头条这些公司很在意推荐,像一些电子商务网站也是很在意推荐服务,因为它会增加公司的销售额,在很大程度上提升企业的效益。

     

    14、待机服务器

        服务器也不是一直都能稳定工作的,这个时候准备一些待机服务器还是很有必要的。

     

        上面谈了这么多,大家会发现,现在企业级的网站后端其实已经很复杂了。业务量的激增、用户的需求,导致整个软件的架构一直在改变。好的软件架构不光可以满足当前的业务需要,而且为未来的扩展打下基础。至于jvm、jdk、mysql、mysql proxy、tomcat、Spring、TiDB、nginx、Keepalive、zookeeper、solr、fastDFS、docker、hadoop等软件,这些都是为架构服务的,等到真正用的时候学习一些就可以了。当然,使用的时候,可以用java、也可以不用java,这个可以根据自己的情况灵活安排。

     

        另外,关于jvm & jdk可以多说一些,它就是一门编程语言而已,不要神化也不要贬低。和其他很多编程语言一样,比如lua,它也有lua & luac,其中lua负责运行虚拟机、垃圾回收等动作,而luac负责整个编程语言的编译。处理好java & javac,如果能多看看jdk源码,用javap调试一下反汇编代码,这样就更好了,对个人发展也大有裨益。

     

        用java学习分布式,一方面是这方面项目使用的最多、经验最为丰富,另外一方面也是因为java语言本身使用的最为广泛、工具最多。大家可以根据自己的情况,一步一步去学习就可以了。从软件架构来说,java和分布式这个主题,可以给大家带来很多积极和有益的思考。

     

        说到架构,或者软件框架,这个和os没有关系,和编译器、编程语言没有多大关系。只是有的时候,为了部署方便,选用一个平台、一个语言而已。分布式架构里面有成功、失败、超时三个情况,而超时就是最大的问题。所以,如何处理这个超时问题才是重中之重。当然,很多朋友都听过cap理论,也就是高可用性、性能、一致性,一般只能三者取其二。现实的情况是高可用性 > 性能 > 一致性,一个简单的例子就是很多时候我们在前台提交了数据,需要很久后台能才刷新出来。

     

        当然,分布式调试也是一个问题。

     

    参考文献:

        1、分布式系统的事务处理,https://coolshell.cn/articles/10910.html

        2、学习分布式系统需要怎样的知识?,https://www.zhihu.com/question/23645117

    展开全文
  • 分布式服务框架:https://github.com/dangdangdotcom/dubbox 微服务,spring cloud:http://projects.spring.io/spring-cloud/ swagger,RESTFUL接口的文档在线自动生成+功能测试功能软件:https://swagger.io/ 3...

    1.Mycat

    Mysql读写分离:http://www.mycat.io/

    2.dubbo,dubbox,spring cloud,swagger

    分布式服务框架:https://github.com/dangdangdotcom/dubbox

    微服务,spring cloud:http://projects.spring.io/spring-cloud/

    swagger,RESTFUL接口的文档在线自动生成+功能测试功能软件:https://swagger.io/

    3.Nginx+NFS

    Nginx实现集群转发,如果没有网络存储,则考虑NFS共享存储

    展开全文
  • JAVA集群分布式框架几个主要技术

    万次阅读 2017-08-04 09:43:37
    1.Mycat Mysql读写分离:http://www.mycat.io/ 2.dubbo,dubbox 分布式服务框架:https://github.com/dangdangdotcom/dubbox 3.Nginx+NFS Nginx实现集群转发,如果没有网络存储,则考虑NFS共享存储

    1.Mycat

    Mysql读写分离:http://www.mycat.io/

    2.dubbo,dubbox,spring cloud,swagger

    分布式服务框架:https://github.com/dangdangdotcom/dubbox

    微服务,spring cloud:http://projects.spring.io/spring-cloud/

    swagger,RESTFUL接口的文档在线自动生成+功能测试功能软件:https://swagger.io/

    3.Nginx+NFS

    Nginx实现集群转发,如果没有网络存储,则考虑NFS共享存储

    展开全文
  • Diffusive 是一个真正的分布式、基于扩散的分布式计算框架。 Diffusive 是一个基于 Java框架,它提供了通过用 @Diffusive 标记来分发任何 Java 方法的执行的能力。 该方法被分发到计算资源网络。 负责执行或...
  • java8 源码 TCC分布式事务框架 基于服务层补偿的Tcc分布式事务解决...内置经典的分布式事务场景demo工程,并swagger-ui可视化界面。 内置本地事务状态机,实现confirm和cancel操作不会被多次执行,放宽了幂等性要求。
  • springcloud 分布式框架搭建(含实例组件)供新手学习。
  • Java分布式应用技术架构介绍

    千次阅读 2019-05-09 16:54:00
    Java分布式应用技术基础 分布式服务下的关键技术:消息队列架构 消息对列通过消息对象分解系统耦合性,不同子系统处理同一个消息 分布式服务下的关键技术:消息队列原理 分布式服务下的关键...
  • mglory mglory是一个java分布式框架。具备以下功能:分布式计算、分布式内存存储(支持持久化)、分布式消息队列
  • 分布式计算就是通过计算机网络将计算工作分布到多台主机上,多个主机一起协同完成工作。 我试着列一下相关知识吧。 网络通讯,网络是分布式的基础,对分布式的理解建立在对网络的理解上,包括: OSI模型的7层 ...
  • Java分布式事务,及解决方案

    千次阅读 2021-02-12 11:21:30
    1、什么是分布式事务分布式事务就是指事务的参与者、支持事务的服务器、资源服务器以及事务管理器分别位于不同的分布式系统的不同节点之上。以上是百度百科的解释,简单的说,就是一次大的操作由不同的小操作组成,...
  • Java笔试面试-Java 分布式框架面试总结

    万次阅读 多人点赞 2019-09-26 15:24:23
    1.什么是 ZooKeeper? 答:ZooKeeper 是一个开源的分布式应用程序协调服务,是一个典型...2.ZooKeeper 提供了哪些功能? 答:ZooKeeper 主要提供以下功能: 分布式服务注册与订阅:在分布式环境中,为了保证高可用...
  • JAVA 分布式事务框架Atomikos爬坑日记

    千次阅读 2018-09-14 16:41:03
    由于一天,脑子蛋疼想了下用了分布式,事务该怎么办??(真的是为了自己一个蛋疼的想法而研究学习的) 于是勤学苦问(真的是勤学苦问啊,百度了不下500页吧,终于找到好的解决方案,并且测试成功,花了我24个...
  • 做了十多年的Java开发,和大家介绍一下我最近一两年用的比较多的Java框架(包括软件、中间件)。 Spring:从刚开始工作的时候就在用;是一个J2EE框架,提供了对IOC的良好支持,也提供了对AOP技术非常好的封装; ...
  • 分布式计算就是通过计算机网络将计算工作分布到多台主机上,多个主机一起协同完成工作。我试着列一下相关知识吧。网络通讯,网络是...包括:Socket多线程非阻塞IO网络框架NettyMinaZeroMQ操作系统的网络部分RPC...
  • 接下来,就分享一些常用的Java分布式缓存框架,这些缓存框架支持多台服务器的缓存读写功能,可以让你的缓存系统更容易扩展。 1、Ehcache – Java分布式缓存框架 Ehcache是一个Java实现的开源分布式...
  • Fourinone框架是将分布式协同的技术性和故障处理的可行性,把Hadoop、Zookeeper、MQ和分布式缓存的功能合并成一个框架。Fourinone采用的是domain/node两层结构,不仅保持了Zookeeper最本质的稳定性,而且还简化Watch...
  • java分布式锁实现代码

    2019-11-24 19:50:19
    通过redisson实现分布式锁 通过curator框架实现共享锁,读写锁 项目下载下载,启动本地redis和zookeeper即可; 代码供大家参考,如不对的地方希望大家指出来。
  • JAVA 分布式任务调度框架Mars-Job

    千次阅读 2019-03-16 04:21:26
    开源的分布式调度框架基本上分为两种: 一种为中心化调度,如xxl,将调度任务单独提炼出来,达到解耦的目的。 另一种是去中心化调度,如elastic-job。本文介绍的项目是后者类型。 使用背景 一个web项目多机部署,web...
  • 简单的说,dubbo就是个服务框架,如果没有分布式的需求,其实是不需要用的,只有在分布式的时候,才dubbo这样的分布式服务框架的需求,并且本质上是个服务调用的东东,说白了就是个远程服务调用的分布式框架(告别...
  • JAVA 分布式 - 分布式介绍

    万次阅读 多人点赞 2018-11-22 22:44:26
    2.这些连通的节点上部署了我们的节点,并且相互的操作会协同。 分布式系统对于用户而言,他们面对的就是一个服务器,提供用户需要的服务而已,而实际上这些服务是通过背后的众多服务器组成的一个分布式系统,因此...
  • RMI:Java中的分布式计算框架

    千次阅读 2018-05-15 18:22:33
    欢迎大家扫码关注微信公众号「图灵的猫」,除了更多AI、算法、Python相关文章分享,还有免费的SSR节点和外网学习资料。其他平台(微信/知乎/B站)也是同名「图灵的猫」,不要迷路哦~ ...
  • DSF分布式框架demo

    2017-04-25 15:37:32
    华为DSF分布式框架做了一个小demo,供大家参考学习
  • 这里我们为大家分享上海创行科技技术总监严澜的博文——Java线程池管理及分布式Hadoop调度框架搭建。平时的开发中线程是个少不了的东西,比如tomcat里的servlet就是线程,没有线程我们如何提供多用户访问呢?不过很...
  • 1. TBSchedule ...不过看自己项目需求把 TBSchedule和uncode-schedule基于zookeeper 不用数据库 总之每个框架有各自的优缺点,需求自己略做验证。 附件中项目的下载地址 可以随时跟新到最新版本和资料。
  • 什么是Java分布式

    千次阅读 2020-06-02 18:29:34
    对于初学者来说,学习Java的根本动力就是分布式开发,特别是apache下面的hadoop、hdfs、hbase,这些基本是分布式开发的标配。那么这篇文章就来和大家一起聊聊分布式吧! 一、什么是分布式系统? 要理解分布式系统...
  • tinympi4j 是一款微型的 java 分布式离线计算框架, 实现原理如图: 特性 简单直观, 没有任何学习难度 slave支持多个任务并发/并行执行 使用HTTP协议通信 场景:
  • 7种实用的分布式框架

    2019-01-15 14:28:19
    分布式系统是由一组通过网络进行通信、为了完成共同的任务而协调工作的计算机节点组成的系统...项目简介:Jeesuite 是一个 Java 后台分布式架构开发套件。涵盖缓存、消息队列、db 操作(读写分离、分库路由、自动cru...

空空如也

空空如也

1 2 3 4 5 ... 20
收藏数 259,565
精华内容 103,826
关键字:

java的分布式框架有哪些

java 订阅