精华内容
下载资源
问答
  • 用于监控录像存储,计算视频监控存储容量工具。
  • 服务器容量问题

    千次阅读 2020-09-10 16:33:05
    服务器容量问题 线程数量 单台的4核8G的web容器的线程调度数最好在800-1000,一但超过1000会导致cpu花费大量的时间在线程调度上。 等待队列长度 队列做缓冲池用,但也不能无限长,消耗内存,出队入队也消耗CPU。 ...

    服务器容量问题

    线程数量

    单台的4核8G的web容器的线程调度数最好在800-1000,一但超过1000会导致cpu花费大量的时间在线程调度上。

    等待队列长度

    队列做缓冲池用,但也不能无限长,消耗内存,出队入队也消耗CPU。

    Mysql的QPS容量问题

    • 主键查询 :千万级数据 = 1-10毫秒
    • 唯一索引查询:千万级数据 = 10-100毫秒
    • 非唯一索引查询 : 千万级数据 = 100-1000毫秒
    • 无索引 : 百万条数据 = 1000 毫秒 +

    Mysql的TPS容量问题

    非插入,更新删除操作:同查询
    插入操作 1w – 10w tps

    展开全文
  • 服务器的认识

    千次阅读 多人点赞 2019-07-31 17:51:43
    我们要根据服务器的用途,来决定服务器的性能、容量和可靠性需求。 这里我们按照最典型的基础架构:Web服务器、数据服务器、应用程序服务器来展开讨论。 1.Web服务器 Web服务器对硬件要求不高,甚至一般的硬件...

    服务器要运行什么应用?

    我们要根据服务器的用途,来决定服务器的性能、容量和可靠性需求。

    这里我们按照最典型的基础架构:Web服务器、数据服务器、应用程序服务器来展开讨论。

    1.Web服务器

    Web服务器对硬件要求不高,甚至一般的硬件配置(2颗4核、8G内存、1T硬盘)即可满足需求,如果后期Web服务访问量上升,只需要新增同等配置的服务器加入负载均衡集群即可实现Web服务的性能扩展。

    2.数据服务器

    数据服务器对硬件要求最高,主要特征是CPU要足够快、内存足够大,磁盘IO足够快和稳定。比如:MySQL、Oracle服务器要求CPU配置一定要好,最好是双路志强金牌Gold,磁盘最好使用SSD系列。

    而Redis服务器主要是内存型应用,所以要求内存一定要足够大,并且可扩展,而对磁盘和CPU要求就没那么高。

    3.应用程序服务器

    应用服务器的典型特征是承担了计算和功能实现。对CPU的配置,至少是双路志强银牌Silver系列。对于可靠性问题,如果你只有一台服务器的话,那么这台服务器必须足够可靠,磁盘做成RAID1阵列是必不可少的。

    4.其他公共服务器

    还有一些公用的服务器,例如:邮件服务器、DNS服务器、域控服务器。对稳定性要求较高,因此一般会推荐有至少两台进行主、备部署。对硬件来说,没有特殊的需求,所以一般的硬件即可。

    业务系统要支持多少用户?

    硬件服务器是为了提供某种服务,而使用这些服务的用户有多少,也是我们需要考虑的因素,有几个具体的问题需要我们做出评估:

    • 预估有多少用户会同时在线?
    • 预估每天同时在线访问最高峰值是多少?
    • 预估数据量会有多大?
    • 预估网络宽带会占用多少?

    要用多大空间来存储数据?

    我们需要从两个角度来考虑这个问题。一个角度是有哪些类别的数据,另一个角度是数据的增长速度,例如:每天大概会新增多少数据,根据这个增速,就可以规划出未来1-3年内数据量大小。

    最后我们才能得到一个更具体的数字,还需要为计算出来的数字结果乘1.5左右的系数。

    业务重要性有多高?

    服务器可以为不同业务系统提供各种应用服务,这个重要性直接影响到我们对服务器的选型配置。

    1.门户网站

    一台服务器,铜牌Bronze 单路cpu、4G内存、500GB足够了,并且也不需要备机,就算服务器出现了一点硬件故障,导致几个小时甚至一两天不能提供访问,工作也会照常继续,天也不会塌下来。对公司也影响不大。

    2.测试平台

    如果仅仅做功能测试,那么对硬件配置基本没要求,虚拟机也可以满足要求,而如果是做性能测试,那么就根据性能测试的方向,选择某方面比较强劲的硬件即可。

    3.电商平台

    CPU要足够好,内存也要足够大,磁盘一定要做RAID10。同时,还要部署主、备架构,数据要做实时备份、异地远程备份,因为重要的业务系统,一旦发生故障,直接导致的损失就是金钱。

    怎么选择CPU?

    CPU的主频越高,其性能也更高;两个CPU要比一个CPU来得更爽;说到品牌,也就是Intel和AMD,Intel服务器市场份额更高一些。常见情况:

    1.公司业务刚起步

    量不大的情况下,此时预算可能也不是很充足,那么建议选择一个英特尔至强铜牌单路CPU即可,但是记得要留扩展接口。

    2.跑多个服务

    比如apache+php+tomcat+mysql架构,都运行在一台机器上,那么,推荐英特尔至强银牌双路CPU,这将是一个不错的选择。

    3.运行MySQL/Oracle

    那么至少应该选择一个英特尔至强金牌双路10核CPU,并且预留CPU扩展接口,当负载越来越大的时候,可以选择增加CPU到四路。

    需要多大的内存?

    相比于CPU,内存(RAM)其实是影响性能的最关键因素,很多业务系统CPU利用率一般都在10%~50%之间,甚至更低。

    1.Web前端服务器

    例如apache、nginx。不需要太大的内存,因为这些Web服务器主要是处理静态请求,一天几十万的访问量,4GB内存已经足够了。

    2.java重型应用服务器

    比如Tomcat、Resin、WebLogic、Websphere、jboss等此类。配置的内存在16GB-32GB之间即可,大于32GB的内存配置基本是浪费了。

    3.内存型业务系统

    例如:redis、Squid、Varnish、Memcached等,我们需要为服务器配置尽可能高的内存容量,因为这类应用主要消耗的就是内存。

    需要怎样的硬盘存储?

    硬盘存储系统的选择和配置是整个服务器系统里最为复杂的一部分,我们需要考虑硬盘的数量、容量、接口类型、转速、缓存大小,以及是否需要Raid卡,Raid卡的型号和Raid级别等问题。

    1.磁盘类型

    目前有SATA、SAS和SSD三种类型,SATA、SAS属于机械硬盘,转速低,读写速度慢,但是价格便宜,磁盘容量大。SSD硬盘属于固态硬盘,优点是读写速度快,缺点是价格昂贵。

    2.RAID

    主要分为软RAID、硬RAID二种。软RAID所有功能均有操作系统和CPU来完成,没有独立的RAID控制器处理芯片和I/O处理芯片,效率最低。硬RAID配备了专门的RAID控制器处理芯片和I/O处理芯片以及阵列缓冲,不占用CPU资源。

    网卡如何选择?

    网卡和服务器的网络带宽互相影响,这里我们从网卡的速率和网卡的冗余两个方面来进行分析。

    1.网卡的速率

    到底是选用千兆网卡呢,还是选择万兆网卡呢,这主要取决于我们对带宽流量的评估。大多数情况下,千兆网卡足够用来对外网提供服务,而内部数据交换如果非常频繁,例如hadoop业务,建议使用万兆网卡。

    2.网卡的稳定性

    对网络稳定性要求高,推荐双网卡做冗余,两个网卡连接到不同的交换机上,这样,任意一个网卡故障都不影响业务的正常运行。

    展开全文
  • 应用服务器配置测算及计算公式

    万次阅读 2019-01-15 10:06:27
    应用服务器配置测算及计算公式 1 术语和定义 1.1 信息系统 由计算机、通信设备、处理设备、控制设备及其相关的配套设施构成,按照一定的应用目的和规则,对信息进行采集、加工、存储、传输、检索等处理的人机系统。...

    原文:https://blog.csdn.net/duheaven/article/details/17252401 

    觉得文章写得很详细,值得仔细学习看下!

    应用服务器配置测算及计算公式

    1 术语和定义
    1.1 信息系统
    由计算机、通信设备、处理设备、控制设备及其相关的配套设施构成,按照一定的应用目的和规则,对信息进行采集、加工、存储、传输、检索等处理的人机系统。
    1.2 软硬件平台
    指信息系统运行的环境,主要包括硬件(服务器、存储)和软件(操作系统、数据库和中间件)部分。
    1.3 非安全区
    即Internet,此区域允许外网用户随意访问。
    1.4 安全区
    内网,此区域通常不对外提供服务。
    1.5 DMZ区(Demilitarized Zone)
    又称非军事区,介于非安全区与安全区之间,此区域按需对外网用户提供部分服务。
    1.6 FC SAN(Fiber ChannelStorage Area Network)
    指采用光纤通道的存储区域网络,是一种将存储设备、连接设备和服务器集成在一个高速网络中的技术,SAN作为存储网络,与LAN网络隔离,主要承担数据存储任务。
    1.7 FC Switch(Fibre Channel Switch)
    指光纤通道交换机,是一种高速的网络传输中继设备,以光纤作为传输介质,是组成FC SAN光纤存储网络的光纤交换机。
    1.8 HBA(Host Bus Adapter)
    指主机总线适配器,是一个使计算机和存储设备间提供输入/输出处理和物理连接的电路板和/或集成电路适配器。
    1.9 磁盘阵列(Redundant Arrays of Inexpensive Disks,简称Raid)
    由多个容量较小、速度较慢的磁盘组合成一个磁盘组,以提升整体性能和存储空间。
    1.10 虚拟机
    指使用系统虚拟化技术,运行在一个隔离环境中、具有完整硬件功能的逻辑计算机系统。
    1.11 负载均衡
    分为硬件和软件负载均衡,软件负载均衡指通过将负载均衡软件安装在一台或多台服务器相应的操作系统上来实现负载均衡,硬件负载均衡是直接将负载均衡设备部署在服务器和外部网络之间,专门完成负载均衡任务。
    1.12 关键应用系统
    指对业务开展起核心的支撑作用的,对可靠性(Reliability)、可用性(Availability)和可服务性(Serviceability)等具有非常高要求的应用系统,如资产管理系统、营销管理系统、财务管理系统、人力资源系统、协同办公系统和综合管理系统。
    1.13 非关键应用系统
    指除关键应用系统外的应用系统。
    1.14 TPC-C测试
    指模拟一个批发商的订单管理系统进行数据库事务处理测试,主要衡量服务器及数据库软件处理在线查询交易处理(OLTP)的性能表现,正规 TPC-C 测试结果发布必须提供 tpmC值, 即每分钟完成多少笔 TPC-C  (TPC-C Transaction Per Minute)数据库交易。
    1.15 SPECweb2005
    SPEC Web2005延续了SPEC传统测试的原理,通过多台客户机向服务器发出Http Get请求,请求调用Web服务器上的网页文件,这些文件从数千字节到数兆字节不等。在相同的时间里,服务器回答的请求越多,就表明服务器对客户端的处理能力越强,系统的Web性能就越好。
    1.16 业务交易
    在TPC-C估算法中,业务交易指的是用户的业务请求,用户每次查询、修改和删除操作均各算一次业务交易。
    1.17 数据分级存储
    数据分级存储是指将数据存放在不同级别的存储设备(磁盘、磁盘阵列、光盘库、磁带库)中,通过数据分级存储管理软件实现数据在存储设备之间的自动迁移。
    2 基本原则
    架构一致性原则。
    安全性原则。
    可靠性原则。
    可扩展性原则。
    绿色低碳原则。
    3 软硬件平台架构
    网络从安全角度上分,一般分为DMZ区和安全区(内网),根据应用的用途、架构、功能,选择适合的网络环境。
    DMZ区和安全区(内网)内各信息系统应按照相关信息安全等级保护的要求,依据分区、分级、分域的的原则,进行安全域的划分,实现各安全域差异化的信息安全防护。
    软件架构方面,对维护简单、不需要更新客户端的应用系统,建议采用Browser/Server(B/S)架构,对响应时间要求快、客户端操作界面复杂和有较多个性化要求的应用系统,可采用Client/Server(C/S)架构。
    对性能要求不高的B/S架构应用系统,可采用Web客户端/应用服务器/数据库服务器三层架构;对性能要求高的B/S架构应用系统,应采用Web客户端/Web服务器/应用服务器/数据库服务器四层架构,Web服务器用于专门处理HTTP请求(request),应用服务器通过多种协议为应用系统提供处理商业逻辑(business logic)。
    4 存储设备
    存储设备包括本地物理服务器(或者虚拟机)的存储设备和共享存储设备。对于共享存储设备,结构化数据建议采用支持FC SAN 或高带宽、低延迟的InfiniBand 网络的磁盘阵列,非结构化数据可以采用高性价比的NAS 作为存储设备。
    存储网络交换机可选择FC SAN 交换机或InfiniBand 交换机,交换机应实现2N方式的冗余;存储网络交换机应支持Trunk级联,以便实现多套存储设备的共享。
    存储设备的选择主要考虑性能、管理复杂程度与可扩展性,应支持存储虚拟化技术,以提高存储资源的利用率,降低管理复杂度和成本,支持开放结构,可方便的被其他厂商的系统管理软件使用,支持动态可扩展,无须终止应用程序即可扩展存储空间。
    建议在DMZ区和安全区(内网)各配置一套共享存储设备,以满足不同信息系统对存储设备的需求。
    对可用性要求高、数据读取速度快、存储空间需求大、在线可扩展等应用系统,原则上应使用共享存储设备;数据库服务器及虚拟化的物理服务器应通过存储网络和共享存储设备相连。
    对于关键应用系统,建议采用数据分级存储,根据数据的访问频率、保留时间、容量、性能要求等因素设置数据迁移规则,将访问频率较低的数据存储在磁带库等成本较低、速度较慢的存储设备中,将访问频率较高的数据存储在磁盘或者磁盘阵列等成本较高、速度较快的存储设备中。
    5 数据库服务器
    关键应用系统的Oracle数据库集群建议采用多台小型机,可通过合理密度的虚拟化分区技术将一台小型机分为不同分区,建议将不同关键应用系统集群数据库的节点应安装在物理服务器的不同分区上,同一应用系统集群数据库的不同节点应安装在不同物理服务器分区上,节点的分布要结合系统的特点进行错峰安排。
    Oracle数据库集群建议采用Real Application Cluster(RAC)的方式构建,可以充分利用RAC提供的负载均衡和实时灾难恢复的功能。RAC方式搭建Oracle数据库集群对应用系统架构有一定要求,应当注意:
    1)通过程序控制各个RAC节点承担系统中相对独立的业务逻辑的后台数据处理,应尽量避免在多个不同节点上存放相同表的数据,以减少各个节点间内存数据通讯。
    2)应用程序访问后台数据源的链接配置设置为Service方式,将多个数据源指向的数据库节点配置为不同的优先顺序,例如:3台数据库服务器机器为A、B、C,配置3个数据源,其中数据源1指向的数据库优先顺序为ABC,数据源2指向的数据库优先顺序为BCA,数据源3指向的数据库优先顺序为CAB。
    为满足某些高负载、大用户量、数据库读写访问非常频繁的应用系统需求,可以考虑通过主从复制、垂直分区、水平分区等技术将数据库进行结构分解。
    1)主从复制:进行读写分离,写操作作用在主数据库节点上,通过数据库复制软件,结合业务数据更新周期利用业务低谷期进行数据同步。
    2)垂直分区:将不同类型的数据存储在不同的数据库节点中,方便上层业务模块在部署上的分离。
    3)水平分区:将同一个表的数据通过某种算法分布到不同的数据库节点上。
    6 应用服务器/Web服务器
    建议采用微机服务器或刀片服务器作为应用服务器/Web服务器的物理服务器,通过服务器虚拟化技术,在物理服务器 上创建虚拟机,将不同应用系统的应用服务器/Web服务器安装在同一台物理服务器的不同虚拟机上;在部署多节点应用系统时,不同节点应尽量均衡分布在不同物理服务器上,以保证应用的高可用性。
    针对服务器硬件配置要求较低、无特殊硬件(图像显示卡、音频卡、加密卡等)要求和I/O需求不高(IO吞吐率不超过50MB/s)的信息系统建议运行在虚拟机上,以提高资源利用率。
    运行虚拟机的服务器应提供主要配件(如电源、硬盘、风扇、内存、网卡)的热插拔技术。
    虚拟机数据应存放在共享存储设备上,以提高整体系统的可用性和性能。
    关键应用系统的应用服务器/Web服务器前端应部署硬件负载均衡设备,根据预设的负载均衡策略,将用户访问导向负载压力较小的虚拟机/物理服务器。
    使用Weblogic应用服务器组建集群时,应用系统软件设计中不能包含文件共享的文件服务和时间服务,可以在集群中的单个节点使用此类服务,但是不能提供平衡负载或故障转移功能。
    针对Java应用服务器软件,应当根据应用系统实际情况和硬件服务器配置,调整Java的运行参数,最大程度优化系统的性能,如Java虚拟机堆的大小缺省是256M,建议根据虚拟机/物理服务器的内存大小将Java虚拟机堆进行调整,范围从512M(当内存大于2GB时)至1024M(内存大于4GB时)之间。
    Java应用服务器 Weblogic和Websphere 集群必须满足以下条件:集群中的主机必须使用永久的静态IP地址,动态IP地址不能用于集群环境;集群中的所有服务器必须位于同一个局域网,并且必须是IP广播可到达的;集群中的所有服务器必须使用相同的版本,其中Websphere要求所有服务器都采用WSA ND版本;对于使用了JDBC连接的EJB,所有部署了某EJB的服务器必须具有相同的部署与持久化配置,即所有服务器均应有相同的JDBC配置;所有部署了servlet的主机必须维护一组具有相同ACL的servlet。
    对于使用Weblogic的应用服务器系统,应避免将管理服务器(admin server)设置在集群的服务器中。
    对web服务器,可采用各种缓存技术提升性能:将访问频率高的页面放到缓存服务器中进行缓存。
    7 负载均衡
    负载均衡设备主要应用于应用服务器和WEB服务器,关键应用系统因对性能要求较高,建议以共享的方式使用硬件负载均衡设备。
    使用硬件负载均衡有两种部署方式:直联和旁路方式,建议采用旁路方式,将多台负载均衡设备分别连接到多台核心交换机,多台负载均衡设备间互为备份,不同应用系统的应用服务器/Web服务器集群共用多台负载均衡设备。
    判断负载均衡是否采用主要和物理服务器/虚拟机的性能、应用系统所执行事务的复杂性等有关。Weblogic建议每个服务器并发线程数为(25-50)*CPU核数最优,如果应用系统所需最多的并发数超过(25-50)*CPU核数,建议配置多个服务器组成集群,使用负载均衡技术,将负载分布在不同的服务器上
    建议将Weblogic或者Websphere的server部署在不同的物理服务器的虚拟机上,组成集群,以提高系统的可用性、稳定性。
    8 资源分配方法
    对存储资源采用分解法估计,对数据库服务器资源采用TPC-C值估算法,对Web服务器资源采用SPECweb2005估算法,对应用服务器采用SPECjbb2005估算法。
    资源分配的基本方法是首先了解信息系统的非功能性需求,初步估计各类型服务器(数据库服务器、应用服务器、Web服务器、接口服务器和其他服务器)总体资源需求,再根据需求冗余、安全等方面要求,确定各类型服务器所需物理服务器数量,基本原则如下:
    1)单台服务器能提供足够处理能力的不再分解为多台物理服务器。
    2)数据库服务器采用双节点冗余(如Oracle RAC)时,处理容量一般按增长50%计算。
    3)应用服务器采用多个逻辑(物理)节点组成集群时,4个节点以下(含4个)的集群,总体处理能力一般按各节点处理能力总和的60%计算,4个节点以上的集群,总体处理能力一般按各节点处理能力总和的50%计算。
    4)web服务器采用多个逻辑(物理)节点组成集群时, 4个节点以下(含4个)的集群,总体处理能力一般按各节点处理能力总和的70%计算,4个节点以上的集群,总体处理能力一般按各节点处理能力总和的60%计算。
    4.3 本指导意见的资源主要介绍存储设备、数据库服务器、应用服务器、Web服务器的资源估算方法,其他类型服务器的资源可参考进行估算。
    4.4 在进行实际分配资源时,可根据资源需求的估算进行一定程度上的调整。
    9 服务器资源估算方法
    9.1.1 方法一:数据库服务器TPC-C估算法
    适用范围:适用于对数据库服务器(应用服务器、Web服务器可参考)所需服务器的CPU能力进行估算。根据估算出的TPC-C值选择合适的服务器和服务器配置。
    原理介绍:该估算法是通过计算应用系统峰值每分钟需要处理的业务交易数,再综合考虑业务交易的复杂程度、未来业务交易数量的增长和CPU处理余量等因素,通过公式计算得出一个估算值,以此来评估需要服务器必须达到的TPC-C值。
    计算公式:TPC-C值 = ((TASK x 80%) /T) x S x F/C
    参数解释:
    TASK:典型工作日平均业务交易总量,指的是应用系统需要处理的用户业务请求的总和。
    TASK x 80%:假设典型工作日80%的业务交易集中在高峰时段。
    TASK x 80% / T: 即应用系统峰值每分钟处理的业务交易数。
    T:应用系统典型工作日业务交易峰值(完成80%交易)持续时间,以分钟为单位。
    S:实际业务交易操作相对于标准TPC-C测试基准环境交易的复杂程度比例。
    F:系统未来的业务交易量发展冗余预留,需要根据应用系统情况估算。
    C:服务器CPU利用率估算值。实际应用经验表明,服务器的CPU利用率高于80%则表明CPU的利用率过高会产生系统瓶颈,而利用率处于75%时,是处于利用率最佳状态。此值一般设定为C=75%。
    计算步骤:
    步骤一:估计应用系统平均典型工作日处理的业务交易总量
    可以通过以下方法估算:
    1、估算典型工作日平均登录系统的用户数。
    2、估算平均典型工作日每个用户执行的业务交易数。例如,如果平均每个用户执行五次查询、五次修改和五次保存操作,那么平均每个用户执行的事务数为15次。
    3、根据1和2估算出应用系统平均每典型工作日处理的业务交易总量。
    步骤二:估算应用系统每日峰值持续时间(单位为分钟)
    估算应用系统典型工作日峰值持续的时间,指的是应用系统典型工作日每天繁忙的时间。例如,股票交易系统每天的繁忙时间为上午9:30至 11:30和下午13:00至15:00,那么它的峰值持续时间为3+2 = 5 小时=300分钟。
    步骤三:估算应用系统峰值每分钟需要处理业务交易数
    计算应用系统峰值每分钟需要处理业务交易数时,需要估算典型工作日高峰时间处理的业务交易数占每天平均处理的业务交易总数的比例。通常按照20-80的原则进行估算,即80%的业务交易在高峰时间进行,20%的在非高峰时间进行。
    根据上述步骤,可以算出应用系统峰值每分钟需要处理业务交易数。
    步骤四:估算应用系统事务复杂度
    由于实际业务交易的复杂程度与TPC-C标准测试中的业务交易存在较大的差异,应设定一个合理的对应值,根据经验,简单事务的S值为2-5,一般复杂事务为6-12,较复杂事务为13-16,高度复杂事务为17-20。针对数据库服务器,S值建议设置为15。
    步骤五:估算应用系统未来一段时间后预留量。
    如果预计未来用户数翻番,预留量即为200%。
    步骤六:将以上各参数值代入公式,计算出TPC-C值。
    步骤七:根据计算出TPC-C值,选择等于或者大于TPC-C值的目标服务器。


    9.1.2 方法二:未公布服务器TPC-C值估算法
    适用范围:本方法适用于通过厂商已公布型号服务器的TPC-C值估算未公布服务器的TPC-C值。
    原理介绍:厂家通常会在www.tpc.org上公布满配置的某一型号服务器的TPC-C值,对于非满配置的服务器需要进行估算,而TPC-C性能指标反映的是服务器的整体性能指标,包括:系统结构、处理器、缓存、内存、I/O等,因此不能简单从TPC-C值推算出CPU、内存的数值,需要综合考察设备的整体性能。为了简化计算,假设服务器的TPC-C值和CPU数和频率呈线性关系,因此可以根据满配置的服务器大概估算出非满配置的相同型号或同档次服务器的TPC-C值。
    计算公式:
    目标配置服务器的TPC-C值 ≈(同型号服务器满配置的服务器的TPC-C值÷CPU个数÷CPU主频频率)* 估算服务器的CPU个数*CPU主频频率
    计算步骤:
    步骤一:获取满配置同类型服务器的TPC-C值,可以在www.tpc.org查到最新的某些类型的服务器TPC-C值或者通过厂商获取该值。
    步骤二:将满配置服务器型号的CPU个数和主频、目标配置的服务器的CPU个数和主频等代入公式。
    步骤三:通过公式计算目标配置的服务器的TPC-C值。


    9.1.3 方法三:Web服务器SPECweb2005估算法
    适用范围:适用于为支持满足特定吞吐量和客户请求响应速率要求的WEB服务器的性能进行估算。
    原理介绍:Web服务器通常需要衡量它可以支持满足特定吞吐量和客户请求响应速率要求的WEB服务器的最大并发连接数量,而SPECweb2005是由标准性能评估组织(SPEC)专门开发的的Web服务器基准测试。服务器厂商通常会提供每种型号服务器的SPECweb2005值。使用本方法估算不考虑网络因素,假设客户端和服务器位于同一局域网中,网络传输时间可以忽略。
    计算公式:SPEC Web2005值= (总用户数 * 在线率 * 在线用户平均发起http请求数)/ (1 — 冗余率)
    参数解释:
    总用户数:应用系统总的用户数。
    在线率:应用系统使用高峰时用户的在线率。
    在线用户平均发起http请求数:平均每个在线用户发起的http请求数量。
    冗余率:需要预留的冗余率。
    计算步骤:
    步骤一:估算系统总的用户数。
    步骤二:估算应用系统使用高峰时用户的在线率。
    步骤三:估算平均每个用户发起的http请求数量。
    步骤四:设置预留的冗余率。
    步骤五:将步骤一、二、三、四的估算值代入公式,计算出SPECweb2005值。
    步骤六:根据计算出SPECweb2005值,选择等于或者大于SPECweb2005值的目标服务器。


    9.1.4 方法四:应用服务器SPECjbb2005估算法
    使用范围:适用于估算Java类应用服务器所需达到的服务器性能。
    原理解释:SPECjbb2005是评估服务器端Java性能的SPEC测试工具。SPECjbb2005通过模拟三层C/S系统(主要是中间层)来评估服务器端Java的性能。该测试软件运行JVM(Java虚拟机)、JIT (Just-In-Time)编译器、碎片收集、线程以及操作系统的其他任务,它同时也测量CPU、Cache、内存和 SMP的性能。
    服务器上运行基于J2EE的中间应用软件平台,可以将其应用处理能力量化为Java处理能力性能值SPECjbb2005,同时充分考虑系统的冗余处理能力以及系统资源分配情况,即可估算出服务器的处理能力性能值。
    公式:SPECjbb2005 =A×B/(1-C-D)
    参数解释: 
    A:每秒最多需要同时处理的业务交易量。
    B:每笔业务交易需消耗的SPECjbb2005峰值,根据经验,每笔业务交易消耗一般为200个bops,或根据该笔业务交易的java语句数量进行计算,B=该笔业务交易的java语句数/5。
    C:系统的冗余处理能力。
    D:非Java应用所占用的系统资源百分比。
    例如某系统业务交易峰值为1000笔/秒,系统冗余处理能力预留30% ,非Java应用所占用的系统资源百分比为20%,根据计算公式,服务器SPECjbb2005性能值为:1000*200/(1-30%-20%)=400,000。


    9.1.5 方法五:数据库服务器内存估算法
    适用范围:适用于估算数据库服务器(应用服务器、Web服务器可参考)所需的内存。
    原理介绍:数据库服务器相对其他服务器来说,因为涉及大量的数据处理,需要把数据载入内存,以加快处理速度,所以需要更多的内存。对于内存的估算一般有下述两种方法,建议采用下述两种方法分别估算出所需的内存,取其中最大的数值。
    计算方法:
    方法一:
    根据标准化设计,将数据库内存容量(单位为G)和CPU的核心的数量的比例按照4:1配置,一个CPU的核心对应4G内存。例如服务器配置两个4核CPU则建议配置32G内存。
    方法二:
    原理介绍:数据库服务器的内存主要包括:操作系统占用内存、数据库系统占用内存、数据库并发网络连接占用内存等。按照经验,Windows平台内存占用率不超过55%、Unix(或Linux)平台内存占用率不超过80%时,不会影响系统的性能。
    计算公式:
    数据库服务器(Windows平台)内存 = (操作系统占用内存+数据库占用内存+数据库并发网络连接占用内存+其他软件占用内存)/ 55%
    数据库服务器(Unix或Linux平台)内存 = (操作系统占用内存+数据库占用内存+数据库并发网络连接占用内存+其他软件占用内存)/ 60%(前置条件:操作系统占用内存+数据库占用内存+数据库并发网络连接占用内存+其他软件占用内存≤4G)
    数据库服务器(Unix或Linux平台)内存 = (操作系统占用内存+数据库占用内存+数据库并发网络连接占用内存+其他软件占用内存)/ 80%(前置条件:操作系统占用内存+数据库占用内存+数据库并发网络连接占用内存+其他软件占用内存>4G)
    参数解释:
    操作系统占用内存:操作系统运行需要占用的内存。
    数据库占用内存:数据库服务器运行需要占用的内存。
    数据库并发网络连接占用内存:数据库客户端和数据库服务器之间连接时,数据库服务器需要花费的内存。
    其他软件占用内存:数据库服务器中其他软件运行需要占用的内存。
    计算步骤:
    步骤一:估算操作系统所占用内存
    操作系统所占用内存具体和操作系统类型和版本相关,一般为600M内存。
    步骤二:估算数据库系统占用内存
    数据库系统占用内存主要包括:数据库服务器软件占用的内存和数据库缓存。其中数据库缓存和数据库大小相关,根据经验,数据库服务器在缓存容量达到数据库经常访问数据总量(注:数据库总量不包括系统数据)的5%时性能较好。数据库总量可以根据5.2 节中数据库数据估算的方法计算。因此,数据库系统缓存=数据库经常访问数据总量*5%。
    数据库服务器软件占用内存和所用的数据库管理软件及版本相关,按照经验,一般为200M内存。
    步骤三:估算数据库并发网络连接占用内存
    数据库并发网络连接数每个占用5M。假设有200个连接,即并发连接占用内存为200 * 5M = 1000M。
    步骤四:估算其他软件占用内存
        先估算需要安装的软件,再估算每种软件占用内存的总和。为了简化计算,可以先估计每种软件占用内存大小Mi,再估计安装的软件数Ni,即其他软件占用内存= 。  
    步骤五:估算所需内存
    根据上述公式,估算所需内存。
    10 存储资源估算方法
    申请存储资源时应根据下述方法估算所需存储资源的需求,存储需求主要包括数据库存储需求、普通文件存储需求和系统运行存储需求三类。
    项目 数据库存储估算 普通文件存储估算 系统运行存储估算
    所需参数 1、系统需存储的实体表数据清单(用E表示)
    2、实体数据的索引表数据清单(用I表示)
    3、评估每个实体表每条记录存储数据容量需求(用S表示) 1、日志文件(用L表示)
    2、其他文件(用E表示) 1、操作系统(用OS表示)
    2、应用软件(如Weblogic)(用App表示)
    3、其他软件需求(超过100M以上)(用E表示)
    初始估算 1、应用系统实体表数据容量估算:
    E1:实体E1本期记录M1个,每个容量S1 MB,该视图表的索引每个容量I1MB。
    2、其他类推。 1、日志文件大小估算L
    2、其他文件大小估算
    E 1、操作系统大小估算OS
    2、应用软件大小估算 App
    3、其他软件大小估算 E
    初始容量需求汇总 容量= (S1+I1) * M1 +…+(Si+Ii) * Mi 容量=L + E 容量= OS + App +E
    容量冗余比率
    (建议按照未来2年的存储需求估算) 容量* (1+容量冗余比率)
    =((S1+I1) * M1 +…+(Si+Ii) * Mi 
    )*(1+冗余比率) 容量*(1+容量冗余比率)=(L + E)*(1+冗余比率) 容量*(1+容量冗余比率)=(OS + App +E)*(1+冗余比率)
    磁盘Raid冗余比率
    (Raid1:增加100%
    Raid10:增加100%
    Raid5:增加50%) 容量*(1+容量冗余比率)*(1+磁盘Raid冗余比率)
    =((S1+I1) * M1 +…+(Si+Ii) * Mi 
    )*(1+容量冗余比率)*(1+磁盘Raid冗余比率) 容量*(1+容量冗余比率)*(1+磁盘Raid冗余比率)=
    (L + E)*(1+容量冗余比率)*(1+磁盘Raid冗余比率) 容量*(1+容量冗余比率)*(1+磁盘Raid冗余比率)=
    (OS + App +E)*(1+容量冗余比率)*(1+磁盘Raid冗余比率)
    汇总 ((S1+I1) * M1 +…+(Si+Ii) * Mi 
    )*(1+容量冗余比率)*(1+磁盘Raid冗余比率) (L + E)*(1+容量冗余比率)*(1+磁盘Raid冗余比率) (OS + App +E)*(1+容量冗余比率)*(1+磁盘Raid冗余比率)
    1、TPC-C估算法实例
    1)情景描述:
    a. 某应用系统平均每天20,000个用户次登录系统;
    b. 平均每个用户执行五个查询事务和五个更新事务;
    c. 每天最忙时间从上午9:15到上午10:15时间段;
    d. 未来一年,用户数估计要增加一倍。
    2)计算步骤:
    步骤一:估算应用系统峰值每分钟需要处理事务数
    高峰时间段每分钟需要处理事务数 = 20,000 x (5+5)x 80% / 60 = 2666.67
    步骤二:估算应用系统事务复杂度:本实例事务复杂度为15。
    步骤三:估算应用系统未来一段时间后预留量:预留量为200%。
    步骤四:将以上各参数值代入公式,计算出TPC-C值。
    TPC-C值=2666.67* 15 * 200% / 75% = 106,666


    2、未公布服务器TPC-C估算法实例
    1)情景描述:
    TPC组织的网站上发布了最新的IBM的p5-595的TPC-C值测试结果,如下表所示:
    型号          处理器类型          处理器主频     处理器数量   TPC-C值
    p5-595        POWER5+处理器       2.3GHz        64路        4,033,378 tpmC
    假设需要估算32路CPU的TPC-C值。
    2)计算步骤:
    步骤一:获取满配置的同类型服务器的TPC-C值:4,033,378。
    步骤二:将满配置服务器型号的CPU个数和主频、目标配置的服务器的CPU个数和主频等代入公式。
    步骤三:通过公式计算目标配置的服务器的TPC-C值。
    估算服务器的TPC-C值=(4033378 ÷2.3÷64)*2.3 * 32 = 2,016,689。


    3、Web服务器SPECweb2005估算法实例
    1)情景描述:
    a. 某个应用系统的总用户数:100,000。
    b. 用户在典型工作日的在线率为:25%。
    c. 在线用户平均发起http请求数为:4。
    d. 系统的预留冗余率为:20%。


    2)计算步骤:
    SPECweb2005值=(100,000 * 25% * 4 )/(1 - 20%)= 125,000。


    4、存储资源估算实例
    1)数据库存储
    情景假设:
    a. 某个应用系统,主要包括客户、产品、订购关系等三个实体表,建立了3个索引;
    b. 预计一年内客户数为10000个,每个客户数据3MB;
    c. 产品数为200个,每个产品数据5MB;
    d. 订购关系数为50000个,每个数据1MB;
    e. 三种索引,每个索引的大小为1MB;
    f. 假设考虑30%的容量冗余比率;
    g. 磁盘采用Raid10冗余。
    计算步骤:
    a. 分别估算每个实体表的数量和大小
    客户数据大小: 10000 * 3MB
    产品数据大小: 200 * 5MB
    订购关系数据大小: 50000 * 1MB
    索引数据大小: 10000 * 1MB + 200 * 1MB + 50000 * 1MB
    b. 初步容量需求汇总
    初步容量需求汇总= 10000 * (3MB + 1MB) + 200 * (5MB + 1MB) + 50000 * (1MB + 1MB)
    = 40000MB + 1200MB + 100000MB = 141,200MB
    c. 考虑容量冗余的容量需求
    考虑容量冗余的容量需求= 141,200MB ÷ (1-30%) = 141,200MB ÷0.7 = 201,714MB
    d. 考虑磁盘raid冗余的容量需求
    考虑磁盘raid冗余的容量需求=201,714MB * 200% = 403,428MB


    2)普通文件存储
    情景假设:
    a. 某个应用系统存在三种容量较大的文件:日志文件、交易数据记录、收费文件;
    b. 预计一定时期内,日志文件的大小可能达到3G, 交易数据记录文件的大小可能达到2.5G,收费文件的大小可能达到2G;
    c. 假设考虑30%的容量冗余比率;
    d. 磁盘采用Raid10冗余。
    计算步骤:
    a. 初步容量需求汇总
    初步容量需求汇总= 3G + 2.5G + 2G = 7.5G
    e. 考虑容量冗余的容量需求
    考虑容量冗余的容量需求 = 7.5G ÷ (1- 30%) = 10.7G
    b. 考虑磁盘raid冗余的容量需求
    考虑磁盘raid冗余的容量需求= 10.7G * 200% = 21.4G
    3)系统运行存储
    情景假设:
    a. 服务器上安装windows 2003server操作系统、WebLogic8.0中间件和防病毒软件。
    b. 假设考虑30%的容量冗余比率;
    c. 磁盘采用Raid10冗余。
    估算步骤:
    d. 估算操作系统需要的存储容量大小
    Windows 2003 server操作系统需占用4.5G空间。
    e. 估算应用软件需要的存储容量大小
    WebLogic 8.0软件需占用1.5G空间。
    f. 估算其他软件需要的存储容量大小
    安装一套防病毒软件需占用1G空间。
    g. 初步容量需求汇总
    初步容量需求汇总 = 4.5G + 1.5G + 1G = 7G
    h. 考虑容量冗余的容量需求:
    考虑容量冗余的容量需求= 7G÷ (1 –30%) = 10G
    i. 考虑磁盘raid冗余的容量需求:


     

    展开全文
  • 如何计算大数据平台系统需要的服务器数量,集群节点数及存储容量等硬件设备参数
    展开全文
  • 阿里云GPU云服务器是基于GPU应用的计算服务,多适用于AI深度学习,视频处理,科学计算,图形可视化,等应用场景,型号有AMD S7150, Nvidia M40, Nvidia P100,Nvidia P4,Nvidia V100,阿里云成为中国首家与NGC GPU...
  • 简易应用服务器配置要求计算公式

    千次阅读 2018-11-22 16:32:00
    业务模型参数如下: 业务模型数据 每月使用业务数:用户数×个人用户月使用次数=...用户应用服务器要求的TPCC=单位用户数忙时每分钟登录次数×每用户每次登录操作数/60(分钟/小时)×平均每用户每操作消耗5个TP...
  • 一、根据计算资源计算 集群名称 VCPU总数 系统占用VCPU数 可分发桌面VCPU数 应发放桌面数量(台) 服务器平均虚拟机数(台) ManagerCLuster 2073 162 1911 637 53 VCPU总数=主机数...
  • 关于服务器并发量的简单计算

    万次阅读 2018-12-30 17:01:22
    最简单的计算方式就是根据服务器带宽与页面的大小 1.假设机房带宽为10Mbs,页面的大小为20KB(包含所有的js、css、图片)  同时并发量的理论值: 10*1024/(8*20) = 64个请求/秒  理论上1秒钟同时可以有64个...
  • 如何选购服务器

    千次阅读 2015-01-07 14:19:41
    在大数据,云计算,软件定义数据中心的时代。一台好的服务器,可以给我们的服务和业务...前端服务器:对于做一般的Web前端服务器要求不是很大,例如静态Web服务器、动态Web服务器、图片服务器等等,因为在现有的技术框
  • 阿里云服务器共享计算型 n4 实例是阿里云针对普通应用推出的云服务器类型,主要特点是在服务器上共享资源,最大限度的利用了服务器资源性能,性价比很高。看到网友被这么优惠的价格所吸引,又对这款共享计算型 n4 ...
  • 服务器TPMC值计算

    万次阅读 2013-03-15 10:38:11
    根据TPC-C的标准,tpmC值是根据标准模型中New-Order事务的处理数目来计算的,一个New-Order事务由平均4-5个SQL语句处理完成,整个测试的执行过程中,New-Order处理占45%。 估算条件: 运行商2003年将达到250万用户...
  • 记录下服务器电源的功率计算

    千次阅读 2014-03-26 16:08:44
    经常做服务器的上架安装,安装之前都会去计算服务器的总电源功率,浪潮服务器的双电源以50%+50%同时工作的方式,两个电源同时工作,平常一台的服务器的功耗达到60-70%,这个服务器的满载符负荷是550W,所以总功率就...
  • RAID 容量计算器

    千次阅读 2019-09-28 01:04:11
    RAID等级最少硬盘最大容错可用容量读取性能写入性能安全性目的应用产业单一硬盘(参考)0111无JBOD10n11无(同RAID 0)增加容量个人(暂时)存储备份020nnn一个硬盘异常,全部硬盘都会异常追求最大容量、速度视频剪接...
  • 思杰VDI方案服务器容量速算表,快速计算服务器所需容量
  • 桌面云需要的服务器数量与虚拟机负载密切相关。在用户数比较少的情况下,管理节点可以与其他用户虚机合用物理服务器。用户数较多时,管理节点与用户虚机分开部署,可独占两台服务器。一般每个资源池至少配置一台冗余...
  • 入门学习Linux常用必会60个命令实例详解doc/txt

    千次下载 热门讨论 2011-06-09 00:08:45
    文件为doc版,可自行转成txt,在手机上看挺好的。 本资源来自网络,如有纰漏还请告知,如觉得还不错,请留言告知后来人,谢谢!!!!! ...入门学习Linux常用必会60个命令实例详解 ...Linux提供了大量的命令,利用它...
  • 如何估算一个分布式系统的容量

    千次阅读 2016-12-07 19:39:22
    另外一个计算理想使用率的方法是:理想使用率= 3 * 标准差,这里的标准差可采用最近一段时间(最近一周、一个月、三个月、6个月等等)的生产环境的服务器性能容量的标准差; (5)系统预留空间的估算,系统预留...
  • 如何选择最合适的服务器服务器配置方案 在如今大数据流量剧增的网络应用...因此,不能一味的为了省钱而选择一台很容易称为计算瓶颈,或者没有充分考虑数据冗余的服务器,都是会影响正常的业务运行。 大家需要从...
  • 华为服务器RH2288H V3,做raid1的存储容量为总可用空间*(总盘数-1)/总盘数,RAID0的容量为可用空间的1/2。 实际容量(G) 个数 RAID前(G) RAID0(T) RAID1(G) 837.259 8 6698.072 3....
  • 英特尔 IT 部门测量实际服务器功耗和利用率来分析设计计算环境的计算能效的方法并作出定义。通过使用这些方法来了解改善数据中心能效的趋势和机会,并实施了一个试点项目来提高数据中心的计算容量
  • 《思科数据中心系列:思科UCS服务器统一计算》下载
  • 非功能特性的测试:性能测试、负载测试、压力测试、疲劳测试、安全测试、恢复测试、兼容性测试、可靠性测试、强度测试、容量测试、配置测试。 功能测试 功能测试(Functional Test)是在规定的一段时间内...
  • 柯洁和AlphaGo的故事已经结束,输赢显得并不重要,这个天才少年曾落泪哽咽:它太完美我看不到希望。搭载谷歌无人驾驶技术的车辆已经完成200万...那么用于深度学习的工作站/服务器也和矿机一样到处可见,然而事实并...
  • windows服务器C盘容量空间爆满

    千次阅读 2018-08-16 09:43:12
    如何处理windows temp下很多cab_xxx_x文件这两天重装的系统C盘可用空间从11G到2G多,消耗特别快。于是查了下问题,发现C:/Windows/Temp下很多cab_xxx_x文件,统计了下将近10G多,我的神啊,怎么回事?...
  • 关于备份组网、架构和备份软件我们前面已经讨论了,今天我们重点讨论备份存储容量和性能计算。从备份组网图中我们可以看出,生产存储和备份介质存储的容量、性能都是要在方案设计时计算,当然大部分客户会分步先建设...
  • linux计算磁盘总空间

    千次阅读 2019-11-07 12:30:16
    一共有两块盘,通过awk来计算所有盘相加的总空间 lsblk |egrep '^(v|s)d[a-z]' |awk '{print $4}'|sed 's/[a-Z]//'|awk '{disk[$1]++} END {for(i in disk){print i}}' |awk '{sum +=$1};END{print sum}' ...
  • 服务器的性能

    千次阅读 2018-02-26 10:52:08
    1.运算处理能力 在选择服务器时,运算处理能力时一个重要的参考指标,但是影响服务器的运算处理能力的因素是多方面的。以Intel的CPU结构为例,实际构成CPU的部件有:CPU内核(Processor Core)、一级缓存(L1 Cache...
  • RAID容量在线计算器

    千次阅读 2021-01-28 15:36:51
    RAID容量计算器在线工具,可以简单快速地获取各RAID需要的硬盘,可用容量。 以下地址任意打开一个即可快速获取RAID硬盘、容量【好用的工具就是要给大家一起分享^_^】 ...

空空如也

空空如也

1 2 3 4 5 ... 20
收藏数 142,362
精华内容 56,944
关键字:

服务器容量计算