神马文学网DBA notes - Fenng‘s Personal Portal. About: D...
来源：百度文库 编辑：神马文学网 时间：2024/04/29 00:47:44
eBay 的数据库分布扩展架构
在过去的 Blog 中, 我(插一嘴：这里的"我" 如果替换成 "Fenng" 似乎有些自恋, 也不是我喜欢的行文语气, 可发现转贴不留名的行为太多了,他大爷的)曾经介绍过《eBay 的应用服务器规模》 , 也介绍过《eBay 的数据量》，在这篇文章中提到过 "eBay 购买了 Quest Share Plex 全球 Licence 用于数据复制"，这个地方其实没有说开来。
对于 eBay 这样超大规模的站点来说，瓶颈往往最容易在数据库服务器上产生，必定有一部分数据(比如交易记录这样不容易水平分割的数据)容易带来大量的读操作，而不管用什么存储，能承担的 IO 能力是有限的。所以，如果有效的分散 IO 的承载能力就是一个很有意义的事情。
经过互联网考古学不断挖掘，路路续续又现了一些蛛丝马迹能够多少说明一些问题。客观事实加上主观想象，简单的描述一下。见下图：
通过 Quest 公司的 Share Plex 近乎实时的复制数据到其他数据库节点，F5 通过特定的模块检查数据库状态，并进行负载均衡，IO 成功的做到了分布，读写分离，而且极大的提高了可用性。F5 真是一家很有创新性的公司，虽然从这个案例来说，技术并无高深之处，但方法巧妙，整个方案浑然一体。
F5公司专门为Oracle 9i 数据库开发了专用的健康检查模块，通过调用F5专有的扩展应用校验(EAV)进程，F5能够随时得到Oracle 9i数据库的应用层服务能力而不是其他的负载均衡设备所采用的 ICMP/TCP 层进行健康检查。
这个图来自一篇《F5助力eBay数据库服务器负载均衡》的软文，真是一篇很好的软文，国外恐怕不会出现这样"含金量"极高的东西。
当然，这个技术架构可不算便宜。Quest 的 Share Plex License 很贵，而且，对于每个结点来说，都需要数据库 License 与硬件费用。但优点也很多：节省了维护成本; 数据库层面的访问也能做到 SOA; 高可用性。
国内的一些厂商比较喜欢给客户推存储级别的解决方案。通过存储底层复制来解决数据分布以及灾备问题。这个思路似乎太传统了，对于互联网企业来说多少有点过时。
BTW: 对 Amazon 的存储架构非常感兴趣，谁/哪里能提供点线索呢?
--EOF--
Add to del.icio.us •Subscribe to this feed •Email this •Technorati: 1 link to this item •Save to del.icio.us (6 saves, tagged: ebay tech) •Digg This!
Posted by Fenng at 6:25 PM |Permalink |Comments (6) |TrackBacks (0) |Database
我收藏的网络文章也很精彩，欢迎访问我的 del.icio.us
在过去的 Blog 中, 我(插一嘴：这里的"我" 如果替换成 "Fenng" 似乎有些自恋, 也不是我喜欢的行文语气, 可发现转贴不留名的行为太多了,他大爷的)曾经介绍过《eBay 的应用服务器规模》 , 也介绍过《eBay 的数据量》，在这篇文章中提到过 "eBay 购买了 Quest Share Plex 全球 Licence 用于数据复制"，这个地方其实没有说开来。
对于 eBay 这样超大规模的站点来说，瓶颈往往最容易在数据库服务器上产生，必定有一部分数据(比如交易记录这样不容易水平分割的数据)容易带来大量的读操作，而不管用什么存储，能承担的 IO 能力是有限的。所以，如果有效的分散 IO 的承载能力就是一个很有意义的事情。
经过互联网考古学不断挖掘，路路续续又现了一些蛛丝马迹能够多少说明一些问题。客观事实加上主观想象，简单的描述一下。见下图：
通过 Quest 公司的 Share Plex 近乎实时的复制数据到其他数据库节点，F5 通过特定的模块检查数据库状态，并进行负载均衡，IO 成功的做到了分布，读写分离，而且极大的提高了可用性。F5 真是一家很有创新性的公司，虽然从这个案例来说，技术并无高深之处，但方法巧妙，整个方案浑然一体。
F5公司专门为Oracle 9i 数据库开发了专用的健康检查模块，通过调用F5专有的扩展应用校验(EAV)进程，F5能够随时得到Oracle 9i数据库的应用层服务能力而不是其他的负载均衡设备所采用的 ICMP/TCP 层进行健康检查。
这个图来自一篇《F5助力eBay数据库服务器负载均衡》的软文，真是一篇很好的软文，国外恐怕不会出现这样"含金量"极高的东西。
当然，这个技术架构可不算便宜。Quest 的 Share Plex License 很贵，而且，对于每个结点来说，都需要数据库 License 与硬件费用。但优点也很多：节省了维护成本; 数据库层面的访问也能做到 SOA; 高可用性。
国内的一些厂商比较喜欢给客户推存储级别的解决方案。通过存储底层复制来解决数据分布以及灾备问题。这个思路似乎太传统了，对于互联网企业来说多少有点过时。
BTW: 对 Amazon 的存储架构非常感兴趣，谁/哪里能提供点线索呢?
--EOF--
Add to del.icio.us •Subscribe to this feed •Email this •Technorati: 1 link to this item •Save to del.icio.us (6 saves, tagged: ebay tech) •Digg This!
Posted by Fenng at 6:25 PM |Permalink |Comments (6) |TrackBacks (0) |Database
我收藏的网络文章也很精彩，欢迎访问我的 del.icio.us
DBA notes - Fenng‘s Personal Portal. About: D...
eBay 的数据量 - DBA notes
CintaNotes - A Free Personal Notes Manager
YouTube 的架构扩展 - DBA notes
优酷网(Youku.com)架构经验 - DBA Notes
eBay 的应用服务器规模 - DBA notes
Amazon 的 Dynamo 架构 - DBA Notes
创业者的取与舍 - DBA Notes
MAYA Design: PDG | Personal Information Portal
Personal Information Portal (PIP) | Oxford Brookes University
Myths and Misunderstandings about the Personal MBA
Notes about Visual Studio solution structure.
了解一下 Technorati 的后台数据库架构 - DBA notes
开源数据库 Sharding 技术 (Share Nothing) - DBA notes
网站运维之道 之自动化管理 - DBA notes
Ray‘s Personal Learning Environment
Ray‘s Personal Learning Environment
Facebook | Tran Tinh's Notes
Watznew: build your personal information portal on the Internet - Agentland
dba
学习 Flickr 的 基于 LAMP 的容量规划经验 - DBA notes
What‘s Online Education All About? (5)
About Brazen Careerist | Penelope Trunk's Bra...
Brazil's Lula calm about presidential runoff