今年是中华人民共和国成立70周年，也是中国接入国际互联网的25年，在这25年中，有无数的互联网公司的崛起，打开了中国互联网的市场，从PC互联网到移动互联网的发展更是颠覆了人们对于互联网的一个认识，人们对于互联网这一新生词汇从陌生到熟悉，互联网现在已经成为了百姓们生活中的一个不可或缺的一个工具，可以说人们的所有，衣、食、住、行几乎全部都通过互联网来完成。在将来互联网将会继续给大家带来更多的便利。

第一次互联网大浪潮1994年—2000年

从四大门户到搜索

1994年正式接入国际互联网.

1997年6月，丁磊创立网易公司;

1998年张朝阳正式成立搜狐网;

1998年 邮箱普及&第一单网上支付完成

1998年11月腾讯成立 ，由马化腾、张志东等五位创始人创立。

1998年12月，由王志东先生创立新浪

1999年 聊天软件QQ出现,当时叫 OICQ，后改名腾讯QQ风靡全国。

1999年9月9日马云带领下的18位创始人在杭州正式成立了阿里巴巴集团

2000年1月1日李彦宏在中关村创建了百度公司



第二次互联网大浪潮（2001年—2008年）

从搜索到社交化网络

(博客、sns、论坛、微博)

2001年中国互联网协会成立

2002年，博客网成立

2002年，个人门户兴起，互联网门户进入2.0时代。

2003年 淘宝网上线,后来成为全球最大C2C电商平台；下半年，阿里巴巴推出支付宝。

2004年 网游市场风起云涌

2005年博客元年

2006年熊猫烧香病毒泛滥,名为“熊猫烧香”的计算机蠕虫病毒感染数百万台计算机

2007年 电商服务业确定为国家重要新兴产业

2008年 中国网民首次超过美国



第三次互联网大浪潮（2009年—2014年）

PC互联网到移动互联网

(入口从搜索到各种各样app分流)

2009年 SNS社交网站活跃,人人网（校内网）、开心网、QQ、等SNS平台为代表

2010年团购网站兴起,数量超过1700家，团购成为城市一族最潮的消费和生活方式。

2011年微博迅猛发展对社会生活的渗透日益深入，政务微博、企业微博等出现井喷式发展。

2012年手机网民规模首次超过台式&微信朋友圈上线

2012年3月今日头条上线

2012年双11阿里天猫与淘宝的总销售额达到191亿

被业内称为双十一的爆发点，这一年淘宝商城正式更名为天猫。2012年双十一当日，天猫与淘宝的总销售额达到191亿，其中天猫达到132亿淘宝也有59亿。

2013年余额宝上线

2013年淘宝双十一销售额：350亿元

2014年 打车软件烧钱发红包,滴滴快的巨资红包抢用户，“互联网+交通”出行.

2014年阿里上市之后的第一个双十一：571亿元

2015年 首次提出“互联网+”;

2015年阿里巴巴集团宣布当日双十一销售额达到：912亿元

2016年，互联网直播、网红等热词“风靡全国”, 短视频造就第一网红papi酱！

2017年自媒体百家争鸣,互联网BAT第一梯队,第二梯队等纷纷砸金压自媒体平台,(百家号,搜狐号,网易号,大yu号、京东号、迅雷号等)

2016年天猫双十一狂欢节成交额 1207亿元 人民币

2016年12月3日知识付费掘起,

2016年12月3日，喜马拉雅FM中国第一个知识内容狂欢节，称为“123知识狂欢节”,消费超过5000万.

2017年微信推出看一看,搜一搜.

架构的发展历程总结
前言
一、单体架构
所有的资源都在一个服务上，mvc架构
二、垂直架构
不同的模块在不同的服务上，每个服务上都有三层架构
三、分布式架构
将核心业务抽取出来，作为独立的服务（业务层放在了不同的服务上，通过RPC实现数据共享）
四、SOA架构（流动计算架构Service Oriented Architecture）
相对于分布式架构多了一个注册中心


前言
随着互联网的发展，网站应用的规模不断扩大，常规的垂直应用架构已无法应对，分布式服务架构以及流动计算架构势在必行，亟需一个治理系统确保架构有条不紊的演进。
大概的发展历程大致可以用下面的这张图来概括：



一、单体架构
所有的资源都在一个服务上，mvc架构
优点：当网站流量很小时，只需一个应用，将所有功能都部署在一起，以减少部署节点和成本。

缺点：1、某些模块的访问量增大影响整个项目性能。2、新增模块需要重新部署项目，可能导致其他模块也无法使用
二、垂直架构
不同的模块在不同的服务上，每个服务上都有三层架构
优点：当访问量逐渐增大，单一应用增加机器带来的加速度越来越小，提升效率的方法之一是将应用拆成互不相干的几个应用，以提升效率。在某种程度上解决了单体架构的问题。

缺点：通用的服务无法共享，相同服务每个war都实现一遍。造成资源的浪费
三、分布式架构
将核心业务抽取出来，作为独立的服务（业务层放在了不同的服务上，通过RPC实现数据共享）
优点：实现了数据共享，解决了垂直架构的问题

缺点：服务多起来，存在依赖，服务监控和维护的问题
例如：突然有一台服务出现问题，将可能导致与之相关联的一系列操作都无法进行。增加了一个服务也要修改代码。

下订单需要结合商品和会员，但是会员的一台服务出现了问题，负载了该服务的操作都将出错。
四、SOA架构（流动计算架构Service Oriented Architecture）
相对于分布式架构多了一个注册中心
优点：增加一个调度中心，将服务的地址注册到服务中心，基于访问压力实时管理集群容量，提高集群利用率。解决了分布式架构的问题。

以之前看的一本书淘宝这十年来，一起回顾下电商系统的发展历程，其实也折射了目前很多系统的技术的发展变革。源码中有本书，【淘宝技术这十年】，从单机版到目前淘宝的技术状态。


目录

（一）目的

（二）一个电商系统到底包含什么

（三）系统的历史

（四）分布式时代

 



（一）目的

一起了解学习的分布式专题技术可以串起来。

	2.了解电商系统相关的技术知识。

	3.面试，工作可以应用到。
（二）一个电商系统到底包含什么


图有点长，网上找的但是如果要做这个系统老费劲了。体力活。美国，苏宁，京东电商大型网站都是上万人研发。可见系统的庞大。





（三）系统的历史

淘宝第一版--个人网站

LAPM 【linux+apche+php+mysql】






1.java早期的电商网站

多个模块在一个系统中，通过jdbc的访问同一个数据库。





存在的问题，随着流量越来越大，数据库查询速度慢，系统反应慢等等，单机的性能瓶颈。


2.java电商网站，引入集群

加机器的方式解决，集群的方式来解决。





存在的问题，访问的那台机器是不知道的。


3.java电商网站，引入负载

增加负载的方式，分为硬负载f5，软负载nginx。





存在的问题，第一次访问的机器是A机器，第二次因为负载了访问了B机器。


4.java电商网站，负载后，请求的4种解决方案。

（1）hash的方式，通过请求IP的hash值绑定要请求的服务器。





存在的问题，abc每次请求都发A机器，这个就是受单点的问题，如果A机器挂了，abc的请求得不到转向，一直请求A机器，用户一直访问不了，一直报错。



（2）session的复制，通过A和B机器进行相互的session复制





存在的问题，tomcat广播的形式，造成资源的浪费，100万用户在线，等于每个tomcat里面都有100万的用户session的信息，对系统的浪费承诺很大。适用于小型网站。



（3）基于cookie的方式，cookie包含session的数据

解决了上面session复制，资源的浪费，服务端的压力的问题。





存在的问题，数据不安全的问题，用户数据的都在客户端，存在破解的可能。手机一般都使用这种cookie的方式，手机都是单独自己使用的，不存在公共部分。



（3）session集中存储的方式，加入redis或者其他中间件





存在的问题，相比前集中增加了redis中间件，增加了运维和开发的成本。如果用户量非常大，用中间件的方式也是可用性非常高的。


5.java电商网站，数据库原来一个应用一个数据库，需要集群数据库用同一个。


5.java电商网站，数据库分读写，解决高并发读写的问题，master和slave流量的问题。




存在的问题：下单之后到主库，然后立马查询到从库。这个时候主库信息还没同步到从库中，系统可能就报错了。这种问题解决方案只有一个TDDL，sharding-jdbc。


6.java电商网站，读写分离，分库分表。



proxy：应用程序在访问数据库的时候，中间拦了一层，通过拦截可以知道是select 还是insert，update判断是走主库还是从库。proxy需要维护，维护高可用，协议要拦截性能要下降。



应用层：shardingJDBC基于jdbc底层的请求原理，请求的时候改成sql的方式。访问读库还是从库。开发人员需要了解shardingJDBC的业务，增加了开发成本和学习的成本。数据库管理需要。


7.java电商系统，增加搜索引擎和redis集群



search cluster 全量同步，和定时增量同步都是通过读mysql的binlog完成的。解决数据库压力。

redis cluster 通过缓存到redis中，直接从redis中获取，减少数据库的读写。

CDN 通过将静态文件放到指定的服务器，通过CDN下载静态资源。


（四）分布式时代


引文：商品模块和会员模块两个不同的人开发，他们是互相调用的关系，商品模块的人开发完毕了，但是会员模块的老铁说，今天不上了，这是不是很尴尬，商品模块的需要回滚到满足会员模块的，两个人就开始掐架了，我好心写了你让我回滚，会员模块的说其实我也不想，这个产品经理不让上。随着系统越来越大，各个模块变成了系统，每个系统是由不同小组来完成的，为了满足互相之前不受影响，就开始服务化。


说说淘宝的HSF 和 dubbo

提供对Dubbo和HSF两个RPC框架的支持。阿里巴巴第一代RPC框架Dubbo是国内第一款成熟的商用级RPC框架，已于2011年正式对外开源，目前已发展成为国内开源价值最高、用户使用规模最大的开源软件之一。最新一代RPC框架HSF，全称High Speed Framework，也叫"好舒服"，"很舒服"框架，是阿里内部对这一款高性能服务框架的昵称，是一款面向企业级互联网架构量身定制的分布式服务框架。HSF以高性能网络通信框架为基础，提供了诸如服务发布与注册，服务调用，服务路由，服务鉴权，服务限流，服务降级和服务调用链路跟踪等一系列久经考验的功能特性。





他们之前的互相调用很复杂。至少功能进行了解耦，会员和商品之前的依赖关系，会员上线失败只会局部的影响。但是会产生一个问题互相的调用，占用更多的网络资源。


分库分表的方式继续优化

每个应用一个数据库不在整个使用一个数据库了，每个应用一个库，对于比较复杂的利于订单，产品通过sharding-jdbc来进行分表。用的最多的hash取模的方式，hash比较均匀，避免数据热点的问题。但是hash的方式不容易进行扩展，之后会说如何针对hash进行扩展。




消息中间件

异步和解耦，双11下单的量很大，从Notify>metaq>rocketMq都是一样的。削峰填补。下个单需要查库存，告诉统计系统，还有风控系统。平常时候统计系统是不用的，而是双11的时候使用，总不能平常的时候把统计系统的代码注释吧？到双11在把代码放开，然后在上线。利用rocketMq的来解决。


图片服务
oss tfs的方式。上传一次，公用的都可以拿到。给每个图片识别一个号，第二次上传会读hash，如果这个hash已经存在就不在上传。时间换空间的一个问题。解决数据库的一个问题。
	
数据库存储图片名称和路径，图片的物理地址存储到硬盘里面。分布式肯定有问题！冗余AB服务器都存一份，或者搞个图片服务器。不可取。
	
流的方式储存到数据库里面。占用硬盘资源，需要转码对数据库的IO。
运营系统

日志系统，风控系统，报表系统，调用链系统。



PS：看到电商是如此复杂是不是有点头疼，越往后业务越来越细分，运维的工作量越来越大。两个程序员可怕【改需求，改别人的代码】。分布式基本就是2个点，应用和数据库。

云计算的兴起无疑是互联网发展史上最激动人心的事件之一。那么，云计算在互联网和信息社会的发展历程中究竟处于什么位置？
回顾互联网的发展历史，展望互联网的未来，我们可以划分为以下几个阶段：
1.    第一代互联网
1969年，为了能在爆发核战争时保障通信畅通，美国国防部启动了具有抗核打击能力的计算机网络ARPANET。ARPANET建立在分组交换技术之上，首批连接了美国四所大学。
从上世纪70年代末开始，PC兴起，各式各样的计算机网络应运而生，如MILNET、USENET、BITNET和CSNET等。由此产生了实现不同网络之间互联的需求，导致了TCP/IP协议的诞生。1982年，ARPANET开始使用IP协议。
1986年，美国国家科学基金会（NSF）资助建成了基于TCP/IP的主干网NSFNET，连接了主要的科研机构，第一代互联网由此诞生。
这个阶段只有极其少量的计算机实现了相互连通，能够进行数据通信，但能够支持的应用少得可怜，发挥的作用也不大。然而，第一代互联网的意义却不可小视，它使人类社会初现信息社会的雏形，我们姑且称之为“信息社会0.1”。
2.    第二代互联网
1989年，Tim Berners-Lee提出万维网（WWW）的设想。他发明了超文本，使用超级链接将不同服务器上的网页互相链接起来，从而使人们很容易访问相互关联的信息，并且将他的发明无偿给全世界免费使用。WWW的出现推动互联网用户数呈指数增长。从1995年到2002年，互联网用户数平均每半年翻一番。
2003年后，WWW从单纯通过浏览器浏览HTML网页的Web 1.0模式演化到方便大量用户共同参与互联网内容编织的Web 2.0阶段。新的应用应运而生，如博客(Blog)、社会关系网络（SNS）、维基百科（Wiki）、内容聚合（RSS）、混搭编程（Mashup）等。
在20年的时间里，WWW给全球信息交流和传播带来了革命性的变化，改变了商业运作模式，改变了人类生活方式，改变了知识的获取和形成模式，缔造了许多伟大的公司，如Google、eBay、Amazon、Facebook、腾讯、阿里巴巴等。这个阶段，我们姑且称之为“信息社会1.0”。
3.    第三代互联网
对于第三代互联网的呼声从上世纪90年代末就有了，当时以网格技术、Web Services、IPv6等为代表的新技术不断涌现，让人们看到了将网上所有信息资源融为一体的希望。然而，十多年的发展证明，当时人们过于乐观了。网络资源的融合，除了存在技术上的障碍外（如互操作技术标准体系、信息安全等问题），还有许多非技术因素（如政策因素、商业模式、利益冲突等问题）。
但是，信息系统高度一体化的这一天迟早会到来。云计算技术从2007年第3季度突然兴起，且迅速形成盈利模式，正式掀开了第三代互联网的面纱。看似突然，实际上是偶然中的必然——云计算只是众多下一代互联网技术中率先突围的一个。
我们认为，第三代互联网将实现信息节点之间的大协作，实现信息系统之间的互操作，实现信息平台一体化，从而构成紧密星球(Compact Planet)。第三代互联网的基础是无处不在的宽带网络，Internet 2和NGN将融为一体，Wifi、3G、LTE等普及将导致终端泛化、全民上网。笔记本、上网本、手机、PDA、摄像头、传感器、RFID、电视、冰箱、汽车等，都将与互联网相连，从而使得几乎每一个物体、每一个人都成为互联网的一部分。第三代互联网的信息将以富媒体(RichMedia)的形式存在。它是由各种方式产生的多种媒体的有机集成，支持非特定人员的动态参与和协作，并可自适应地呈现在各种终端上和各种应用系统中。人类的所有信息将朝着被有序管理的方向迈进。代表性的Google公司终极目标是管理全世界的所有信息。
在第一代互联网时期，网络无力与传统信息传播业竞争，传统行业（如电信、电视、新闻、出版、广告等）占主导地位。在第二代互联网时期，网络提高了传统行业效率，开始与传统信息传播业分庭抗礼。第一次数字出版超过了传统出版，《读者文摘》破产几乎所有人类行为都将与网络关联，90%以上的物理能力和行为都将在网络中体现，人们在网络上开展业务运营、视频监控、电子商务、金融服务、通信联络等。
前两代互联网技术革命都是由美国引领的，第三代互联网也诞生在美国。究其原因，其科技创新模式和风险资本运作模式是一个重要因素。然而，我们相信，第三代互联网最终将由中国来引领。主要原因是：中国有无与匹敌的市场规模，有无与伦比的决策和执行效率（如收放自如的市场调控能力等）。目前，中国的科技创新体系已经初步形成，自主研发能力提升迅速，正依次在信息化程度越来越高的行业取得优势：从制造业（钢铁、轮船、集装箱、重型机械等），到精密制造业(汽车、高速列车、飞机、电子产品等)，再到信息、服务业（电子商务、软件等）。根据世界知识产权组织(WIPO)公布的2008年国际专利申请状况，华为公司申请数名列榜首。根据世界著名的消费市场研究机构Euromonitor在2009年12月发布的调查结果，海尔冰箱在全球市场占有率已经位列第一。根据Dell’Oro在2009年5月公布的统计数据，华为、中兴通讯在全球移动通讯设备市场的排名已经分列全球第三和第五。我国的电子商务交易额每年以高于70%的速度持续增长，2010年将达到15万亿元，阿里巴巴已经在B2B领域保持国际领先。近期我们已经看到中国高速铁路技术已经开始引领世界，我们将看到中国将在更多高技术领域领先，包括移动宽带、云计算、IPv6、物联网、大飞机等领域。
第三代互联网的时代，我们称之为“信息社会2.0”。
4.    三代互联网的比较
在下表中，我们对三代互联网进行了横向对比。
 
表4：三代互联网的比较


 


第一代互联网


第二代互联网


第三代互联网


社会形态


信息社会0.1


信息社会1.0


信息社会2.0


历史时期


–       1970年代，主机时代
–       1980年代，PC时代


–       1990年代，Web 1.0时代
–       2000年代，Web 2.0时代


–       2010年代，云计算时代
–       2020年代，云格时代


具体时段


1969-1989（20年）
1969: ARPANET诞生


1989-2007（18年）
1989：WWW诞生


2007-2023（16年）
2007：云计算诞生


主要特征


实现计算机与计算机的通信连通 


实现网页与网页的连通


实现信息平台的一体化


典型技术


分组交换传输技术（TCP/IP）


WWW、宽带网、Web 2.0


云计算、IPv6、移动宽带网、Web Services、网格计算、物联网、云格（Gloud）


媒体类型


文本


多媒体(MultiMedia)


富媒体(RichMedia)


典型应用


电子邮件、FTP、资料检索系统


搜索引擎、新闻、电子商务、论坛、聊天、视频、文件共享


计算资源租用、在线CRM、在线Office、GIG、一体化服务


典型特征


手工操作


半自动操作


信息随手可得


网络的地位


网络无力与传统信息传播业竞争
传统行业（包括电信、电视、新闻、出版、广告等）占主导地位


网络提高了传统行业效率
与传统信息传播业分庭抗礼


网络占绝对统治地位。
2009年数字出版产值第一次超过了传统出版，美国标杆传统期刊《读者文摘》破产


潮流引领者


美国引领
–  军方需求推动


美国引领 
–  科技创新模式
–  风险资本运作模式


中国引领 
–  无与匹敌的市场规模优势
–  无与伦比的决策和执行效率 


 
 本文来源：中国云计算（http://www.chinacloud.cn）