當(dāng)前位置:首頁 >> 互聯(lián)網(wǎng) >> 2006年11月2日
"Times New Roman",
Times,
serif; align="center">eBay 數(shù)據(jù)量:每天PV超過10億,
每秒交易1700美元
[ 關(guān)鍵詞:ebay 數(shù)據(jù) 原文/來源鏈接 ]








推薦者:塵一 (積分 63162) | 原作者:
作 電子商務(wù)領(lǐng)頭羊 eBay 公司,
數(shù)據(jù)量究竟有多大? 很多朋友可能都會(huì)對(duì)這個(gè)很感興趣. 在這一篇Web 2.0: How High-Volume eBay Manages Its Storage(從+1 GB/1 min得到 線索) 報(bào)道中,
eBay 存儲(chǔ)主管 Paul Strong 對(duì)數(shù)據(jù)量做了一些介紹,
管中窺豹,
這些數(shù)據(jù) 給我們一個(gè)參考.
站點(diǎn)處理能力
平均每天 PV 超過 10 億 ;
每秒鐘交易大約 1700 美元 商品 ;
每分鐘賣出一輛車A ;
每秒鐘賣出一件汽車飾品或者配件 ;
每兩分鐘賣出一件鉆石首飾 ;
6 億商品,
2 億多注冊(cè)用戶; 超過 130 萬人把在 eBay 上做生意看作 生活 一部分.
在這樣高 壓力下,
可靠性達(dá)到了 99.94%,
就 說每年 5 個(gè)小時(shí)多一點(diǎn) 服務(wù)不可用. 從業(yè)界消息來看,
核心業(yè)務(wù) 可用性要比這個(gè)高.
數(shù)據(jù)存儲(chǔ)工程組控制著 eBay 2PB (1Petabyte=1000Terabytes) 可用空間. 這 一個(gè)什么概念,
對(duì)比一下 Google 存儲(chǔ)就知道了. 每周就要分配 10T 數(shù)據(jù)出去,
稍微算一下,
一分鐘大約使用 1G 數(shù)據(jù)空間.
計(jì)算能力
eBay 使用一套傳統(tǒng) 網(wǎng)格計(jì)算系統(tǒng). 該系統(tǒng) 一些特征數(shù)據(jù):
170 臺(tái) Win2000/Win2003 服務(wù)器;
170 臺(tái) Linux (RHES3) 服務(wù)器;
三個(gè) Solaris 服務(wù)器: QA 構(gòu)建與部署 eBay.com; 編譯優(yōu)化 Java / C++ 以及其他 Web 元素 ;
Build 整個(gè)站點(diǎn) 時(shí)間:過去 10 個(gè)小時(shí),
現(xiàn)在 30 分鐘;
在過去 2年半,
有 200 萬次 Build,
很可怕 數(shù)字.
存儲(chǔ)硬件
每個(gè)供貨商都必須通過嚴(yán)格 測(cè)試才有被選中 可能,
這些廠家或產(chǎn)品如下:
交換機(jī): Brocade
網(wǎng)管軟件:IBM Tivoli
NAS: Netapp (占總數(shù)據(jù)量 5%,
2P*0.05,
大約 100 T)
陣列存儲(chǔ):HDS (95%,
這一份投資可不小,
HDS 不便宜,
EMC 在 eBay 出局者) 負(fù)載均衡與 Failover: Resonate ;
搜索功能: Thunderstone indexing system ;
數(shù)據(jù)庫軟件:Oracle . 大多數(shù) DB 都有 4 份拷貝. 數(shù)據(jù)庫使用 服務(wù)器 Sun E10000. 另外據(jù)我所知,
eBay 購買了 Quest SharePlex 全球 Licence 用于數(shù)據(jù)復(fù)制.
應(yīng)用服務(wù)器
應(yīng)用服務(wù)器有哪些特點(diǎn)呢?
使用單一 兩層架構(gòu)(這一點(diǎn)有點(diǎn)疑問,
看來 自己寫 應(yīng)用服務(wù)器)
330 萬行 C++ ISAPI DLL (二進(jìn)制文件有 150M)
數(shù)百名工程師進(jìn)行開發(fā)
每個(gè)類 方法已經(jīng)接近編譯器 限制
架構(gòu)
高分布式
拍賣站點(diǎn) 基于 Java ,
搜索 架構(gòu) 用 C++ 寫
數(shù)百名工程師進(jìn)行開發(fā),
所有 工作都在同樣 代碼環(huán)境下進(jìn)行
可能 被采訪者看到 eWeek 這篇報(bào)道,
聯(lián)系了采訪者進(jìn)行了更正. 我還有點(diǎn)奇怪原來"兩層"架構(gòu) 說法.
其他信息








站點(diǎn)處理能力
平均每天 PV 超過 10 億 ;
每秒鐘交易大約 1700 美元 商品 ;
每分鐘賣出一輛車A ;
每秒鐘賣出一件汽車飾品或者配件 ;
每兩分鐘賣出一件鉆石首飾 ;
6 億商品,


在這樣高 壓力下,






數(shù)據(jù)存儲(chǔ)工程組控制著 eBay 2PB (1Petabyte=1000Terabytes) 可用空間. 這 一個(gè)什么概念,






計(jì)算能力
eBay 使用一套傳統(tǒng) 網(wǎng)格計(jì)算系統(tǒng). 該系統(tǒng) 一些特征數(shù)據(jù):
170 臺(tái) Win2000/Win2003 服務(wù)器;
170 臺(tái) Linux (RHES3) 服務(wù)器;
三個(gè) Solaris 服務(wù)器: QA 構(gòu)建與部署 eBay.com; 編譯優(yōu)化 Java / C++ 以及其他 Web 元素 ;
Build 整個(gè)站點(diǎn) 時(shí)間:過去 10 個(gè)小時(shí),


在過去 2年半,




存儲(chǔ)硬件
每個(gè)供貨商都必須通過嚴(yán)格 測(cè)試才有被選中 可能,


交換機(jī): Brocade
網(wǎng)管軟件:IBM Tivoli
NAS: Netapp (占總數(shù)據(jù)量 5%,




陣列存儲(chǔ):HDS (95%,






搜索功能: Thunderstone indexing system ;
數(shù)據(jù)庫軟件:Oracle . 大多數(shù) DB 都有 4 份拷貝. 數(shù)據(jù)庫使用 服務(wù)器 Sun E10000. 另外據(jù)我所知,


應(yīng)用服務(wù)器
應(yīng)用服務(wù)器有哪些特點(diǎn)呢?
使用單一 兩層架構(gòu)(這一點(diǎn)有點(diǎn)疑問,


330 萬行 C++ ISAPI DLL (二進(jìn)制文件有 150M)
數(shù)百名工程師進(jìn)行開發(fā)
每個(gè)類 方法已經(jīng)接近編譯器 限制
架構(gòu)
高分布式
拍賣站點(diǎn) 基于 Java ,


數(shù)百名工程師進(jìn)行開發(fā),


可能 被采訪者看到 eWeek 這篇報(bào)道,


其他信息
[ 關(guān)鍵詞:ebay 數(shù)據(jù) 原文/來源鏈接 ]

|
|
[收藏至站內(nèi)網(wǎng)摘] [![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() |
頂一個(gè)呀.9584619