大容量网站系统技术概览
来源:互联网 发布:奇门兵器 知乎 编辑:程序博客网 时间:2024/06/07 22:34
web LAMP all in one 配置至强8核16G内存500G硬盘100M电信独享带宽
注册用户>在线用户>并发数
1200:1s平均打开网站的时间
1500: 2s
1800:10s性能,用户体验,请求响应--http事务,每秒钟处理事务的能力
扩展类型:
Scale up:向上,具有更强大处理能力的主机
Scale out: n多台主机,服务器之间如何良好的配合工作
HA:服务可用性
平均无故障时间/(平均无故障时间+平均修复时间)
95%,99%,99.9%,99.99%,99.999%
LB-->HA
LB:
tcp: lvs, haproxy
应用层:nginx,haproxy,ats
缓存:varnish, squid
HA:heartbeat, corosync, keepalived ,iscsi, gfs2,drbd
MogileFS (分布式图片存储技术)
NoSQL:MongoDB
集群类型:
LB: Load banlancing扩展容量,伸缩性
HA:High Availability高可用集群,服务可用性
HP: High Performace
向量机
并行处理集群
LB: lvs ,(Tcp层,转发能力很好,控制力不好,监控困难)
haproxy(TCP层,http层)
nginx(高性能缓存能力)
HA: heartbeat
corosync+pacemaker
cman+pacemaker
keepalived
ultramonkey
集群文件系统和分布式文件系统的联系和区别
HP:hadoop
调度器,分发器,负载均衡器LB
HA解决单点故障
保持用户会话信息:session (加入购物车中的商品信息)
源地址绑定,破坏均衡,服务器故障时的会话问题
共享session服务器上,
图片服务集群,分布式存储,分布式文件系统
搜索,把数据库中的所有数据抽取出来,遍历每一个页面,建立关键字索引,不断地更新索引
引入队列,做异步调用处理(店家发布产品)
云,调度和生产分离,不关心具体节点和实例
日志分析,千万PV,数亿日志,分布式存储,分布式处理,并行处理,hadoop,
工作在内存中的数据库,redis
Nosql,分布式存储问题,实时存储问题
现在缓存中返回,将缓存分布出去,各地机房里面都有我们的缓存服务器,每个用户请求时直接从本地返回,本地没有,到公司的缓存服务器中去取,公司的缓存服务器上没有,到真正的应用服务器上去取
- 大容量网站系统技术概览
- 大数据技术概览
- 大数据平台系统概览
- 大型机学习之具体技术-大机系统结构概览
- 大数据处理技术之hadoop概览
- 建一个大容量的webmail系统
- 技术概览:OSS之计费结算系统
- 关于Rails大容量网站部署的性能讨论
- 移动网站性能优化:网页加载技术概览
- 网站系统技术
- 大容量U盘制作USB多重系统启动盘初探
- [转]建立大容量基于Web的Email系统
- 各大技术团队网站
- 各大技术团队网站
- 大数据技术概览----读《大数据管理:概念、技术与挑战》(孟小峰 慈祥著)
- 大容量数据库服务器
- 处理大容量文件
- 大容量存储结构
- C# 接口,显示实现接口
- 欢迎使用CSDN-markdown编辑器
- 约瑟夫环
- kaggle -- House Prices实例:分数+思路+代码:sklearn + xgboost
- java--集合--Vector/Stack
- 大容量网站系统技术概览
- #define
- 新巴巴运动网项目:SSM框架介绍
- spark调优和JVM运行流程
- 【su问题】su: warning: cannot change directory to /home/oracle: Permission denied
- BZOJ3527: [Zjoi2014]力
- 互联网行业的那些缩写PM,RD,FE,UE,QA,OP,BRD,MRD,PRD,FSD
- android 判断时间是否已过期
- 静态方法与实例方法