如何构建大型网站架构
今天我们来谈谈一个网站一般是如何一步步来构建起系统架构的，虽然我们希望网站一开始就能有一个很好的架构，网站架构也是随着业务的扩大、用户的需求不断完善的。
架构演变第一步：物理分离WebServer和数据库 最开始，由于某些想法，于是在互联网上搭建了一个网站，这个时候甚至有可能主机都是租借的，但由于这篇文章我们只关注架构的演变历程，因此就假设这个时候已经是托管了一台主机，并且有一定的带宽了。这个时候由于网站具备了一定的特色，吸引了部分人访问，逐渐你发现系统的压力越来越高，响应速度越来越慢，而这个时候比较明显的是数据库和应用互相影响，应用出问题了，数据库也很容易出现问题，而数据库出问题的时候，应用也容易出问题。于是进入了第一步演变阶段：将应用和数据库从物理上分离，变成了两台机器，这个时候技术上没有什么新的要求，但你发现确实起到效果了，系统又恢复到以前的响应速度了，并且支撑住了更高的流量，并且不会因为数据库和应用形成互相的影响。
架构演变第二步：增加页面缓存 好景不长，随着访问的人越来越多，你发现响应速度又开始变慢了，查找原因，发现是访问数据库的操作太多，导致数据连接竞争激烈，所以响应变慢。但数据库连接又不能开太多，否则数据库机器压力会很高，因此考虑采用缓存机制来减少数据库连接资源的竞争和对数据库读的压力。这个时候首先也许会选择采用squid等类似的机制来将系统中相对静态的页面（例如一两天才会有更新的页面）进行缓存（当然，也可以采用将页面静态化的方案），这样程序上可以不做修改，就能够很好的减少对WebServer的压力以及减少数据库连接资源的竞争，OK，于是开始采用squid来做相对静态的页面的缓存。
架构演变第三步：增加页面片段缓存 增加了squid做缓存后，整体系统的速度确实是提升了，WebServer的压力也开始下降了，但随着访问量的增加，发现系统又开始变的有些慢了。在尝到了squid之类的动态缓存带来的好处后，开始想能不能让现在那些动态页面里相对静态的部分也缓存起来呢，因此考虑采用类似ESI之类的页面片段缓存策略，OK，于是开始采用ESI来做动态页面中相对静态的片段部分的缓存。
架构演变第四步：数据缓存 在采用ESI之类的技术再次提高了系统的缓存效果后，系统的压力确实进一步降低了，但同样，随着访问量的增加，系统还是开始变慢。经过查找，可能会发现系统中存在一些重复获取数据信息的地方，像获取用户信息等，这个时候开始考虑是不是可以将这些数据信息也缓存起来呢，于是将这些数据缓存到本地内存，改变完毕后，完全符合预期，系统的响应速度又恢复了，数据库的压力也再度降低了不少。
架构演变第五步： 增加WebServer 好景不长，发现随着系统访问量的再度增加，webserver机器的压力在高峰期会上升到比较高，这个时候开始考虑增加一台webserver，这也是为了同时解决可用性的问题，避免单台的webserver down机的话就没法使用了，在做了这些考虑后，决定增加一台webserver，增加一台webserver时，会碰到一些问题，典型的有： 1、如何让访问分配到这两台机器上，这个时候通常会考虑的方案是Apache自带的负载均衡方案，或LVS这类的软件负载均衡方案； 2、如何保持状态信息的同步，例如用户session等，这个时候会考虑的方案有写入数据库、写入存储、cookie或同步session信息等机制等； 3、如何保持数据缓存信息的同步，例如之前缓存的用户数据等，这个时候通常会考虑的机制有缓存同步或分布式缓存； 4、如何让上传文件这些类似的功能继续正常，这个时候通常会考虑的机制是使用共享文件系统或存储等；
架构演变第六步：分库 享受了一段时间的系统访问量高速增长的幸福后，发现系统又开始变慢了，这次又是什么状况呢，经过查找，发现数据库写入、更新的这些操作的部分数据库连接的资源竞争非常激烈，导致了系统变慢，这下怎么办呢？此时可选的方案有数据库集群和分库策略，集群方面像有些数据库支持的并不是很好，因此分库会成为比较普遍的策略，分库也就意味着要对原有程序进行修改，一通修改实现分库后，不错，目标达到了，系统恢复甚至速度比以前还快了。
架构演变第七步：分表、DAL和分布式缓存 随着系统的不断运行，数据量开始大幅度增长，这个时候发现分库后查询仍然会有些慢，于是按照分库的思想开始做分表的工作。当然，这不可避免的会需要对程序进行一些修改，也许在这个时候就会发现应用自己要关心分库分表的规则等，还是有些复杂的。于是萌生能否增加一个通用的框架来实现分库分表的数据访问，这个在ebay的架构中对应的就是DAL，这个演变的过程相对而言需要花费较长的时间。当然，也有可能这个通用的框架会等到分表做完后才开始做。同时，在这个阶段可能会发现之前的缓存同步方案出现问题，因为数据量太大，导致现在不太可能将缓存存在本地，然后同步的方式，需要采用分布式缓存方案了。于是，又是一通考察和折磨，终于是将大量的数据缓存转移到分布式缓存上了。
架构演变第八步：增加更多的WebServer 在做完分库分表这些工作后，数据库上的压力已经降到比较低了，又开始过着每天看着访问量暴增的幸福生活了。突然有一天，发现系统的访问又开始有变慢的趋势 了，这个时候首先查看数据库，压力一切正常，之后查看webserver，发现apache阻塞了很多的请求，而应用服务器对每个请求也是比较快的，看来是请求数太高导致需要排队等待，响应速度变慢。这还好办，一般来说，这个时候也会有些钱了，于是添加一些webserver服务器。
架构演变第九步：数据读写分离和廉价存储方案 突然有一天，发现这个完美的时代也要结束了，数据库的噩梦又一次出现在眼前了。由于添加的webserver太多了，导致数据库连接的资源还是不够用，而这个时候又已经分库分表了，开始分析数据库的压力状况，可能会发现数据库的读写比很高，这个时候通常会想到数据读写分离的方案。当然，这个方案要实现并不容易，另外，可能会发现一些数据存储在数据库上有些浪费，或者说过于占用数据库资源，因此在这个阶段可能会形成的架构演变是实现数据读写分离，同时编写一些更为廉价的存储方案。
架构演变第十步：进入大型分布式应用时代和廉价服务器群梦想时代 经过上面这个漫长而痛苦的过程，终于是再度迎来了完美的时代，不断的增加webserver就可以支撑越来越高的访问量了。对于大型网站而言，人气的重要毋庸置疑，随着人气的越来越高，各种各样的功能需求也开始爆发性的增长。这个时候突然发现，原来部署在webserver上的那个web应用已经非常庞大 了，当多个团队都开始对其进行改动时，可真是相当的不方便，复用性也相当糟糕，基本是每个团队都做了或多或少重复的事情，而且部署和维护也是相当的麻烦。因为庞大的应用包在N台机器上复制、启动都需要耗费不少的时间，出问题的时候也不是很好查，另外一个更糟糕的状况是很有可能会出现某个应用上的bug就导 致了全站都不可用，还有其他的像调优不好操作（因为机器上部署的应用什么都要做，根本就无法进行针对性的调优）等因素，根据这样的分析，开始痛下决心，将系统根据职责进行拆分，于是一个大型的分布式应用就诞生了，通常，这个步骤需要耗费相当长的时间，因为会碰到很多的挑战： 1、拆成分布式后需要提供一个高性能、稳定的通信框架，并且需要支持多种不同的通信和远程调用方式； 2、将一个庞大的应用拆分需要耗费很长的时间，需要进行业务的整理和系统依赖关系的控制等； 3、如何运维（依赖管理、运行状况管理、错误追踪、调优、监控和报警等）好这个庞大的分布式应用。
网络架构fc是什么意思啊
网络架构FC可用于构建企业级数据中心和大规模计算系统。随着技术的发展，网络架构FC也在不断演变。除了光纤通道，现在还有更高效的技术，如InfiniBand和iSCSI等，它们都可以用于构建高性能的企业级数据中心和云计算环境。无论是何种架构，都需要快速、可靠、高效地传输数据，以满足企业、组织和个人的需求。
深入探究Nym:下一代隐私基础架构
探索未来隐私守护者：Nym的革命性架构<\/ Nym，作为新一代隐私保护的创新基石，依托于NymMix net的智能设计，以区块链技术如Nyx和NYM代币为核心，为用户编织了一张无痕的隐私网。它通过去中心化的混合节点系统，巧妙地抹去通信中的元数据，让用户的在线活动免受任何形式的监控。NYM代币的三大关键应用——...
论企业架构的重要性
平台支持多端登录,即PC门户、移动门户,移动门户同样提供统一身份认证、单点登录、信息\/页面\/应用集成等功能,通过移动门户可以访问PC端系统大部分功能,用于满足出差在外流程审批、办公不受时间地点限制。 复用性 随着企业信息系统越来越多,在构建企业架构面前必将精减或新增一些信息化系统,过程中不可避免会替换甚至是除...
银行应用系统的持久层架构设计中有哪些数据访问模式
[编辑本段]设计模式和框架现在，可复用面向对象软件系统现在一般划分为三大类：应用程序工具箱和框架(Framework),我们平时开发的具体软件都是应用程序；Java的API属于工具箱;而框架是构成一类特定软件可复用设计的一组相互协作的类。EJB（EnterpriseJavaBeans）是Java应用于企业计算的框架.框架通常定义了应用...
前后端分离方案以及技术选型
· 大型应用架构模式正在向云化、微服务化发展。 我们主要通过前后端分离架构,为我们带来以下四个方面的提升: · 为优质产品打造精益团队 通过将开发团队前后端分离化,让前后端工程师只需要专注于前端或后端的开发工作,是的前后端工程师实现自治,培养其独特的技术特性,然后构建出一个全栈式的精益开发团队。 · 提...
什么是“JAVA”?
然而,这仅仅是完整图景中的一部分:Spring在使用IoC容器作为构建完关注所有架构层的完整解决方案方面是独一无二的。 Spring提供了唯一的数据访问抽象,包括简单和有效率的JDBC框架,极大的改进了效率并且减少了可能的错误。Spring的数据访问架构还集成了 Hibernate和其他O\/R mapping解决方案。Spring还提供了唯一的事务管理...
关于DevOps 的那些事
目前国内大部分企业慢慢地开始关注了DevOps,大型传统企业也开始逐渐地从各个角度做试点和尝试。试点的角度和方向各不相同,有的从底层基础架构的容器化开始,有的从交付部署流水线的自动化开始;总的来说还处于初级的尝试阶段,还没有大规模成体系的推广。 综上所述,目前国内DevOps发展的阶段还属于起步阶段。就像是ITIL...
事件驱动微服务体系架构
当然,事件驱动的架构也有缺点。通过分离紧密耦合时可能更简单的关注点,它们很容易过度设计;它们可能需要大量的前期投资;而且常常导致基础设施、服务契约或模式、多语言构建系统和依赖关系图的额外复杂性。 也许最大的缺点和挑战是数据和事务管理。由于事件驱动模型的异步性,它们必须小心处理服务之间不一致的数据、不兼容的...
什么叫大数据,与云计算有何关系
简化的基础架构 大数据分析是基础架构上一项艰巨的艰巨工作，因为数据量大，速度和传统基础架构通常无法跟上的类型。由于云计算提供了灵活的基础架构，我们可以根据当时的需求进行扩展，因此管理工作负载很容易。降低成本 大数据和云技术都通过减少所有权来为组织创造价值。云的按用户付费模型将CAPEX转换为OPEX。
Java用何种技术架构编写服务端,能让VB客户端访问?
可以考虑使用ACE框架来简化开发，linux下g 编译很方便，编译后直接运行，前提是ACE等相关工具和环境需要配置好 c.服务端构建一个J2EE的web应用，然后在linux下部署在tomcat下，启动部分与方法a一致 6、其实很简单，关键是了解聊天室的原理其实就是一个套接字通讯，与具体的技术或编程工具无关 ...
阎战创必： 一个大型的网站网站应该由如下6个子系统组成 负载均衡系统 反向代理系统 Web服务器系统 分布式存储系统 底层服务系统 数据库集群系统
化德县15793517818： 如何对门户网站进行架构?? - ？
阎战创必： 一个小型的网站,比如个人网站,可以使用最简单的html静态页面就实现了,配合一些图片达到美化效果,所有的页面均存放在一个目录下,这样的网站对系统架构、性能的要求都很简单,随着互联网业务的不断丰富,网站相关的技术经过这些...
化德县15793517818： 如何逐步去构建一个大型网站系统,面试必问 - ？
阎战创必： 其实这种网站访问量非常大,并发数也非常高,但是它却能用最为简单的Web技术来实现:我们只要保持网站的充分的静态化,多部署几台服务器,那么就算地球上所有人都用它,网站也能正常运行.大型网站是技术和业务的结合,一个满足某...
化德县15793517818： 如何建设完美的网站架构 - ？
阎战创必： 1.目前搜索引擎对动态的抓取不是很理想,死链接、拖沓的URL都会让网站制作对搜索引擎产生不友好的状态.所以我们第一步 要检查我们网在是否存在像:有无flash ,URL有没有静态掉.重复 页面,死链接是否提交了等等.2.网站的导航目的...
化德县15793517818： 大型网站用PHP怎么架构 - ？
阎战创必： 大型网站架构起来 ,首先要考虑硬件设置 ,譬如服务器配置,带宽要充足.程序方面 要保证代码简洁执行效率高,网站前台生成静态 ,如果是动态,考虑在服务器开启GZIP,并设置缓存加速 .数据库量大的话 用甲骨文oracle做数据库.
化德县15793517818： 网站建设的架构 - ？
阎战创必： 网站建设构架主要分文两个部分:1、前台结构布局的构架.这个主要是通过PS、AI、CDR等作图软件来制作一个完整的网页效果图,把每一个网页的效果图都做出来,企业网站一般包含:首页、产品列表页、产品最终页、新闻列表页、新闻最终页、单篇内容页面、留言页面这几个常见的页面效果.2、网站后台功能构架.这个需要使用你自己擅长的编程语言来实现,比如:asp/php/java/.net等编程语言来根据自己要实现的功能,然后对接数据库(access或SQL)
化德县15793517818： 网站的结构应该怎么进行布局设置 - ？
阎战创必： 网站结构布局是网站建设重要的一个环节,网站结构布局主要是由网站的策划人员将网站的布局草稿以及一些具体细节,提交给网页制作人员.网页制作人员就根据策划内容进行网站的建设,添加内容.在建设网站结构之前,我们一定要清楚一...
化德县15793517818： 如何构建网站结构？
阎战创必： 因为我们的网站每一页都是要来流量的,如果内页的title不可以独立设置,那么内页获得一些词的排名的可能性非常之小(网页“标题”包含关键词是来流量的核心).因为我们知道title对于页面的排名有着至关重要的作用.如果你想让内页来长尾关键字的流量,请一定让内页的title每页都可以独立设置吧!一般我们默认为文章的标题!
化德县15793517818： 如何架构一个好的商务网站？
阎战创必： 据产品涉及的整个客户服务环节来区分组织内容,这适用于你的网站以一种产品为主.还有一种是网站的产品种类非常丰富.以一种比如礼品网站,有三种分类导航,按礼品送的对象分,按礼品的价格分 ,还有就是按礼品本身的类别可能分为饰品工艺品保健
化德县15793517818： 怎样架设网站? - ？
阎战创必： 网站架设一般分两种情况:1、在windows系统下架设;在windows下架设,是用IIS架构进行的.IIS架设网站比较简单,建议你去查阅相关IIS架设网站的相关资料或书籍.IIS架设的网门可以支持ASP、ASP.NET、PERL、PHP,以支持前两者最...
