当前位置: 网站建设 > 网页设计 > 建站经验 >

大型高性能网站的十项规则

时间:2013-03-02 03:58来源:未知 作者:admin 点击:

标签:大型高性能网站的十项规则 会话(1)规则(15)使用(77)另外(8)管理(11)十项(3)大型(14)适合(7)站的(92)高性能(4)
1. 使用适合的会话管理 另外,在将所有备份文件从服务器上转移出来之前要进行紧缩和加密。另外还要确保拥有设计合理的MySQL配置。MySQL默认安装使用说明中只有5~10行关于配置的解释,这基本不适合开发使用。 而我们提供应客户的最佳实践文档足足有10页那么长。文档中大概有100种有用的关于安全、性能和稳定性问题的设定,包括预防数据败坏,其中很多设定都是异常重要的。 7. 使用读/写数据库分离 MySQL系统应该对所有数据使用INNODB存储引擎,因为INNODB与之前的MyISAM比拟,运行得更快、更稳
大型高性能网站的十项规则》文章地址:http://www.tfxk.com/wangyesheji/jianzhanjingyan/030233b62013.htm

  1. 使用适合的会话管理

  另外,在将所有备份文件从服务器上转移出来之前要进行紧缩和加密。另外还要确保拥有设计合理的MySQL配置。MySQL默认安装使用说明中只有5~10行关于配置的解释,这基本不适合开发使用。 而我们提供应客户的最佳实践文档足足有10页那么长。文档中大概有100种有用的关于安全、性能和稳定性问题的设定,包括预防数据败坏,其中很多设定都是异常重要的。

  7. 使用读/写数据库分离

  MySQL系统应该对所有数据使用INNODB存储引擎,因为INNODB与之前的MyISAM比拟,运行得更快、更稳定,并且管感性能和备份工作也更加容易和快捷。在主配置文件中,INNODB应该被设置为默认的数据库引擎,并且系统应该不断地进行检讨,看是否意外创建了MyISAM的表。

  最后,要对所有使用版本把持,包括测试和生 产环境的部署。很多开发者都使用SVN或者相似的方法,大型高性能Web站点十项规则。在幻想状况下,这些方法可以被用于所有代码、脚本、HTML、图片、配置、文档和测试。版本节制应该是代码转移到测试环境的必经之路,而不是简单地复制或者使用tar文件,因为这二者都是不可靠的。开发者应该将所有一切都签入,大型门户网站架构设计的可伸缩性,打上标签,然后将它们签出到测试系统。假如所有都没问题,那么它们会将该版本签出到生产环境。

  Steve Mushero,ChinaNetCloud 公司结合开创人、CEO兼CTO,占有寰球20多年的技巧管理教训。曾担负土豆网、Intermind和 Advanced Management Systems等多家企业CTO

  Web站点应该总是在指定的平台和 Linux宣布的标准路径下进行测试和部署 ,像 RedHat 或者CentOS下的/var/www/html路径。这有助于对系统进行有效的权限管 理、备份、配置、监控以及其他操作。

  此外,永远不要使用FTP来上传文件,特别是在公用的Wi-Fi环境中,因为在其中黑客很容易盗取用户名和密码。取而代之的是使用SFTP会更加安全。另外,每个雇员都应该拥有自己的用户ID和随秘密码。

  问题在于,在有两台Web服务器和多个 HTTP衔接的情况下,用户流量会在两台服务器之间调配和挪动,服务器很难知道用户是谁,并对所有数据进行跟踪,因为每个页面或者页面的组成局部都可能来自不同的服务器。在PHP中,通常是这样解决的,在第一次连接或登录的时候就创立一个会话ID并将其放在Cookie中,然后这个Cookie会和每个 HTTP恳求一起发送。

  8. 使用类似Memcached之类的数据库缓存

  当前的实际情况是,很多网站都是由开发人员快捷而便宜地创建,通常没有任何IT人员或者经理,只是由程序员来管理系统。造成的成果是,固然破费很低的本钱,网站就可以开始运行,但是当拥有大量用户、 需要扩展范围的时候,通常就会见临真正的问题。究竟,中国拥有三亿八千万的Internet用户,如果其中的0.01%访问这个站点,就很容易引发25 万~50万的页面访问量。这些问题在各个级别上都会产生,下面总结的规则是对最普通的问题进行概述,并且说明为什么这些规则如此重要,以及最好采取什么方 法来修改它们。遵守这些倡议的站点会提高它的可伸缩性、安全性以及操作上的稳定性。

  一个令人厌恶的部署问题是,开发者很少斟酌他们的软件会被安排到出产Web服务器的什么地位,以及如何部署。我们看到过很多大型的系统将它们的PHP代码部署在/home/xiaofeng或者/web/code路径下。事实上,这两个路径都是十分不标准的,并且会带来操作和平安性的问题。当这些系统从开发环境转移到测试环境再到生产环境中时, 因为每个安装配置都长短标准的,所以常常会涌现问题,这时就需要开发者调剂才干够畸形工作。

  尽管编写像避免SQL注入和登录安全之类的代码波及很多安全问题,但可怜的是,多少乎没有人考虑过安全性,而那些考虑到的人也没有对其进行很好地舆解。而本文要关注的是操作性的系统安全。对于这类安全,我们的焦点集中在三个安全范畴:防火墙、运行的用户以及文件拜访权限。

  大型系统时常会使用专门的工具如Local5来记录日志,并配置Syslog或者Syslog-ng来将其寄存在单独的文件中,这样会更容易使用。需要注意的是,Syslog工具和 Logger(以及任何Syslog调用)默认优先使用user.notice,如有必要,你可以对其进行调整。

Tag:高性能网站   高性能网站  

  Web服务器运行或者服务的文件 (像.php和.html文件)对于Web服务器的用户应当是不可写的。这象征着Apache或者Nginx用户不应该领有Web目录的写权限。有许多方法都能够做到这一点,而最简略的就是将这些文件为其余用户所有,而后让Apache/Nginx等用户归属于可能使用640权限读取文件的组中。这会防备简直所有的黑客和针对页面的攻打。

  在中国, 开源的LAMP栈是最流行的网络架构,它使用PHP开发,运行在Apache服务器上,以MySQL作为数据库,所有这些都运行在Linux上。它是个可靠的平台,运行良好,是当初全球最风行的Internet系统架构。然而,我们很难对其规模进行正确的扩展并坚持安全性,因为每个运用层都有其本身的问题、缺点和最佳实践。我们的工作就是赞助企业用最低的操作成原来创建并运行高性能的、可伸缩的、安全的系统,因此对于这类问题我们有很丰盛的经验。

  很多公司只有开发者的桌面系统和他们的生产 服务器。当系统变得越来越大、越来越复杂时,测试和管理代码就会导致严峻的问题。最佳的实践是拥有两个测试系统,一个用于开发者的代码和功能的整合测试, 另一个要与生产环境完整一致,从而更容易向生产环境平滑地过渡。荣幸的是,现在使用云盘算(或者私有云)可以轻松达到这一点。一个5~10台服务器的生产 环境,可以很容易地在办公室或者IDC中使用一台服务器来复制,从而用于测试,而这台服务器我们可以用于多个客户的名目。

  无论是在开发回是在经营过程中,创建可靠的高性能Web系统都有很多应该注意的事项。本文试图从可操作性和可靠性的角度探讨最重要的几点。当你构建和管理站点的时候,请不要忘了这些重要的问题。遵循这些规则会有助于确保系统久长、良好地运行。

  在前面所举的中国 Internet用户0.01%的例子中,可能很轻易在每秒内仅仅为了管理睬话就天生上百个查问。解决方法是始终使用位于Cookie中的会话ID,并且使用像Memcached之类的服务来缓存会话数据以取得高性能。

  第一个想到的扩大体系的方式就是增加更多硬件,大型门户网站实现的十四大技术小结。例如,应用两台服务器而不是一台。这听着公道,但会发生潜在问题:会话治理。这对Java程序来说是很重大的问题,在PHP中也会产生可延展性问题, 对数据库的负载尤其如斯。

  跟着系统变得越来越宏大,特殊是当它们拥有很差的SQL时,一台数据库服务器通常不足以处置负载。但是多个数据库意味着反复,除非你对数据进行了分离。更个别地,这意味着树立主/从副本系统,其中程序会对主库编写所有的Update、Insert和Delete变革语句,而所有Select的数据都读取自从数据库(或者多个从数据库)。

  只管概念上很简单,但是想要合理、准确地实现并不容易,这可能需要大批的代码工作。因而,即使在开端时使用统一台数据库服务器,也要尽早打算在PHP中使用分别的DB连接来进行读写操作。如果准确地完成该项工作,那么系统就可以扩展到2台、3台甚至12台服务器,并具备高可用性和稳固性。

  4. 总是使用日志

  一个好的系统会对程序进行配置,用来翻开或者封闭日志,并可以取舍在每模块或者功效的级别上利用不同级别的日志。这使得我们可以记载无比具体和强盛的日志,用来剖析和调试在生产操作中所发生的问 题。

  在我们公司ChinaNetCloud,见过多种不同类型的网站和系统,有好也有差。其中有些系统拥有良好的服务器/网络架构,并且进行了合理的调整和监控;然而正常的系统都会有安全和性能上的问题,不能良好运行,也无奈变得更流行。

  所有公用的服务,都应该运行在专门的用户下,如Apache。切记永远都不要使用Root用户运行,因为这会让任何闯入到Apache的用户接收整个服务器。如果Apache只是运行在Apache用户下或者运行在Nobody下,那么闯入Apache就不是一件容易的事件了。

  在Web系统中做多少日志都不为过。所有系统都应该将重要的数据写入到日志中,不论是它们本人的日志仍是系统的Syslog。Cron的Job以及其他Shell脚本或者C语言的程序,对日志都有相应标准以及简单的函数。在Shell脚本中,只须要使用Logger命令就可以实现日志的写入。在脚本启动/结束、主要的脚本履行以及实时数据产生的 情形下都要执行写入日志操作。这样呈现问题的时候,查看重要的系统日志就可以很容易地看到产生了什么。

  会话被定义为独自的终极用户登录或者连接一段时间,其中通常会包含多个TCP/IP的HTTP连接、几个Web页面,通常还包括几十个甚至上百个页面元素,如框架、菜单、Ajax更新等。所有这些 HTTP要求都需要知道用户是谁,能力满意安全的请求,并向用户传递适当的内容,因为这些都是会话的组成部门。通常每个会话都会包括彼此关系的会话数据, 如用户名、用户ID、历史、购物车、统计材料等等信息。

  不幸的是,这些问题一开始并不显著,直到系统增大、突然开始崩溃的时候才会浮现出来。在增大的过程中,数据库系统看起来运行得很快(因为数据都位于内存中,而且很少有并发的查询),并且对用户的响 应也很快,但实际上它的内部运行效力很低。这并不重要,我们关注的是在系统增大并碰到性能问题之前找到这些问题并加以解决。

  9. 构建测试和开发环境

  6. 总要拥有良好的DB配置和备份

  总结

  Web服务器的日志应该存放在/var/logs或者/var/logs/app_name下,而不应该位于主代码区域。这样做的起因不仅仅是因为这些标准的路径很重要,更应该关注的是,恰当地配置服务器会将/var配置为分离的文件系统。如果应用程序忽然写入了大量日志并占用所有磁盘空间,因为我们做了以上的配置就不会导致系统崩溃,或者其他严峻的问题。如果日志位于其他位置,就可能会产生问题。

  10. 使用版本掌握

  即便有了好的数据库设计、SQL和读写 离,大型的系统依然需要更快的性能,大型网站建站要考虑数据库压力和服务器负载,特别是对会话状态、挚友列表以及BBS文字之类的货色。为了到达这个目标,我们可以使用像MemCached之类的数据缓存,它是一个高性能的简单数据缓存,已经被所有最大型的站点使用。但是要警惕的是,不要100%依附于一台Memcache服务器来进步性能,因为如果那台服务器崩溃了,就会损坏全部系统的性能。在这种情况下,应该使用2~3台Memcache服务器构成簇集架构,并且有抉择地包含一个缓存筹备进程, 如果缓存服务重视启,需要从新载入数据,它可以疾速地载入缓存。

  除了配置专门的硬件防火墙(像Cisco的 ASA)之外,所有服务器都还应该运行像Iptables之类的防火墙,它会维护服务器免受其他威逼和袭击。这些要挟和攻击可能来自公共的Internet、其他服务器或本地服务器,也包含使用VPN或者SSH通道的开发和操作职员。我们仅对指定的IP开放确切需要的端口。Iptables可能会很庞杂,然而有很多不错的模板,我们通常可以使用它们来辅助客户创建Iptables。例如,默认的RedHat或者CentOS防火墙的配置阐明只有10行,显然并不适用。咱们最佳实际的Iptables配置大略有5页,这其中包括了Linux所能供给的最高等的保险防范。

  你应该老是使用标准的安装包和二进制文件来安装像Apache之类的服务器。不要从源代码编译或者安装Tarball,因为这会导致长期稳定性和管理上的问题,另外在服务器上安装多个不同的版本也会造成混杂。

--> [网站建设之]大型高机能网站的十项规矩

  2. 总是要考虑安全性

  良多公司都不良好的备份机制,也不晓得如何适当地实现这项工作。MySQL的Dump是不够的,由于最好的备份办法是使用LVM快照和INNODB对系统进行热备份,从而得到超快的速度跟超高的牢靠性。

  3. 使用尺度的门路和装置配置

  对于这个问题有很多不错的书和站点进行懂得 析,其中的要害工具包括慢查询日志、INNODB状态系统,以及描写当前性能的MySQL统计信息。我们见到过很多系统每秒会读取500,000条数据, 这是出现SQL问题的显明前兆,但公司往往对其一窍不通直到服务器开始崩溃。

  还要留神其中存在安全性的问题,因为黑客可以捏造另一个用户的会话ID,这是很容易找到或看到的,特别是在公用的Wi-Fi中。解决方法是对会话ID进行恰当的加密或者签名,并将其与时光区间、 IP地址以及其他症结信息像阅读器或者其他细节相绑定。在Internet上有很多不错的关于良好的会话管理的例子,你可以依据需要找到最合适的。

  作者简介:

  在任何系统中,多种浏览器兼容的CSS使用技巧,数据库通常是最大的性能瓶颈。而影响数据库性能的最大两个问题是数据库设计和SQL代码质量。很多系统都拥有良好的或者至少是可用的数据库设计,但因为没有经由恰当的性能测试,SQL代码品质通常都会很差。这样的SQL代码在开发环境中可能运行很快,因为其中只有小数据集和最小的负载。但是当成千上万的用户同时读取数据库中 上百万条记载的时候,它就很可能会瓦解。

  这样做带来一个问题,接下来每段PHP脚本都需要基于ID来查找会话数据。由于PHP无法在执行过程之间保持状态(这与Java不同),这个会话数据需要存储在某个处所,通常是在数据库中。但是, 如果复杂的页面需要在每个页面载入过程中对其进行十次查找(这是常常要做的),那就意味着每个页面都要执行10次SQL查询,这会导致数据库上很大的负载。

  5. 使用良好的数据库设计和SQL


(责任编辑:网站建设)
大型高性能网站的十项规则相关文章
上一篇:大型高性能Web站点十项规则 下一篇:大学生门户网站的六点运营经验
回到顶部