国产一级一区二区_segui88久久综合9999_97久久夜色精品国产_欧美色网一区二区

掃一掃
關注微信公眾號

從集中到分布,解讀網絡視頻IT架構變遷(下)
2007-11-01   IT168

從集中到分布,化解存儲瓶頸
接上篇:從集中到分布,解讀網絡視頻IT架構變遷(下)。集中式存儲已經擁有了諸多優勢,那么為何這家視頻網站最終卻選擇了其他的存儲架構呢?該視頻網站究竟在運營過程中遭遇到了什么樣的阻礙呢?經過我們對整個網站存儲結構的分析,原來,NAS頭成為整個存儲環境的瓶頸……

""

NAS成為系統瓶頸

""

傳統集中式存儲的瓶頸

從以上兩幅圖中,我們可以看到傳統的集中存儲方案中,存在如下問題:

 I/O瓶頸
 容量擴展性差
 性能不可擴展
 專業高端NAS成本高昂
 單點故障

隨著數據量的增加,存儲壓力也變得越來越集中,NAS已不足以支撐現有的應用,無法更好的應對未來的挑戰。既而,該網站從集中式的存儲方式轉向了采用分布式的存儲方式。

""

分布式存儲系統架構

圖中,每臺服務器上都提供文件共享服務,由應用層來實現媒體資源數據在各個服務器集群之間的遷移,從而比較好的解決了集中存儲的IO瓶頸問題,但是問題也隨之而來。

分布式的存儲沒有負載均衡,例如:發生熱點的時候、部分流媒體服務器忙或部分閑置

分布式存儲利用相對較低率,重復數據大量存在,且份數多

無法實現集中的高Raid 級別保護

快照、備份、恢復、遠程容災比集中存儲實現成本高

需要在應用層對存儲層過多關注。管理復雜度程幾何級增長,整體系統維護工作越來越復雜、繁重。以管理Mount點為例:同樣的服務器數,需管理Mount點的數量為48 [M*(N+F)+W*N]個,即上圖中的48根紅線,遠大于集中存儲結構。這僅僅是Mount點一項,還不包括各個點存儲數據的維護,在實際應用中相關的工作量是相當驚人,管理員疲于奔命。

1

集中VS.分布?還是分布式的集中?

既然傳統的集中和分布都存在不同的問題,怎么樣去解決?在給出答案之前,我們重新歸納前面分析的視頻網站對存儲的需求:

1. 各種服務器集群之間有視頻傳遞的需求,需要上傳服務器、流媒體服務器、在線錄制服務器和轉換服務器之間的視頻文件是互相可見的,翻譯成存儲的語言則需要文件級共享的存儲。

2. 各種應用服務器可能使用著不同的操作系統平臺,都需要無差異的訪問到存儲空間,而翻譯成存儲的語言則需要跨平臺共享的存儲。

3. 多臺流媒體服務器之間的存儲容量需要共享,從而提高存儲空間的利用率。如采用傳統SAN上面劃分獨立的存儲空間,給每臺服務器的類似做法顯然是不可接受的,并且需要視頻內容合理的分布在各個存儲設備上,翻譯成存儲的語言則需要存儲容量的負載均衡。

4. 單臺存儲設備的存儲速度始終是有限的,需要多個存儲設備的聚合才能滿足視頻內容訪問量的爆炸式的增長,翻譯成存儲的語言則需要多臺存儲設備間的存儲速度的聚合,從而實現存儲速度的負載均衡。

5. 新增視頻內容的不斷添加會導致存儲容量的不斷擴大,在添加設備擴展容量的時,能夠不影響原有系統,且平滑擴展,能夠實現在線的擴展業務系統不停機,翻譯成存儲的語言則需要容量線性可擴展,能夠實現在線擴容。

6. 隨著用戶訪問量增長和視頻清晰度提高帶來的帶寬增長等諸多增長因素的影響,對存儲帶寬的增長需求,要求存儲系統實現帶寬隨容量呈線性增長。

7. 合理的成本控制是一個恒久的話題,需要存儲系統的總體擁有成本隨容量的擴展而合理的擴展,不能出現突變式的增長。

8. 穩定性自然不用說,需要存儲系統采用冗余結構以提高系統的穩定性。

為了滿足上述需求,當我們面對“集中VS.分布”這個艱難抉擇的時候,技術的不斷進步,涌現出:分布式的集中存儲結構——集群存儲技術,其核心技術是集群文件系統。

1

集群存儲系統滿足視頻行業服務需求
目前,廣為流行的集群文件系統的典型代表主要有:

 Google 的GFS (Google File System)
 國內中科院研發的BWFS(Blue Whale File System)
 Panasas 的PanFS (PanFS File System)
 IBM 的 GPFS (General Parallel File System)
 CFS 的 Lustre (Lustre File System)

這五種集群文件系統各有特點和優勢,一般而言,分布式集中存儲相對于傳統存儲系統來說擁有如下優點:采用統一的全局命名空間,支持文件級共享,且采用分布式存儲結構,能實現高聚合I/O帶寬,并且跨Linux平臺和Windows平臺的文件共享,還能夠線性擴展I/O帶寬,擁有良好的系統負載平穩性,并能夠動態擴展存儲容量,實現成本可控。

""

基于分布式結構的集中存儲

如上圖所示:該架構能較好的滿足網絡視頻對存儲系統的需求。

1. 文件共享、統一的全局命名空間——上傳服務器和流媒體服務器之間的文件可見性;多臺流媒體服務器間的存儲容量共享

2. 多臺存儲設備間的存儲速度的聚合——流媒體服務器可用的存儲速度負載均衡

3. 跨平臺共享(Windows/Linux)——支持不同平臺的流媒體服務器、上傳和其他服務器

4. 容量線性可擴展——使流媒體服務能應對不斷擴大的存儲容量需求

5. 帶寬隨著容量線性增長——使流媒體服務能應對不斷擴大的用戶訪問量; 可以按需擴大流媒體服務器的數量而不用擔心存儲

6. 成本需隨著容量的擴展而擴展——良好的成本控制

7. 全冗余結構——穩定的強壯的存儲系統

該視頻網站最終選擇基于BWFS集群文件系統的BWStor藍鯨集群存儲系統。BWFS是由我國中科院計算所工程中心自主研發的文件系統,并經由中科院中科儲天公司產品化。中科院中科儲天藍鯨集群存儲系統(BWStor)即采用BWFS文件系統為核心技術,是中國自主知識產權存儲產品的代表之一。

熱詞搜索:

上一篇:從集中到分布,解讀網絡視頻IT架構變遷(上)
下一篇:HDS與HP擴大OEM協議,強化軟件合作

分享到: 收藏
国产一级一区二区_segui88久久综合9999_97久久夜色精品国产_欧美色网一区二区
av不卡免费看| 国产日韩欧美精品一区| 99精品欧美| 久久国产精品久久精品国产| 国产精品亚洲片夜色在线| 亚洲影视中文字幕| 国产亚洲亚洲| 欧美ed2k| 一卡二卡3卡四卡高清精品视频| 欧美女主播在线| 亚洲免费伊人电影在线观看av| 国产精品日本欧美一区二区三区| 亚洲一区二区伦理| 亚洲精品欧美精品| 久久久免费精品视频| 亚洲欧洲日韩女同| 国产曰批免费观看久久久| 欧美激情综合在线| 久久九九99视频| 日韩午夜免费| 在线日韩中文| 国产一区二区在线免费观看| 欧美日韩你懂的| 久久久久综合| 午夜精品久久久久久久男人的天堂| 国产一区二区三区在线观看视频 | 欧美激情四色| 午夜精品久久久| 99视频一区| 亚洲国产精品精华液2区45| 国产精品vvv| 欧美国产日韩免费| 久久久综合网| 久久天天躁夜夜躁狠狠躁2022 | 欧美高清视频一区| 久久久久成人精品| 久久久久久久综合色一本| 欧美一级夜夜爽| 麻豆国产精品777777在线| 麻豆精品传媒视频| 男女精品视频| 美女爽到呻吟久久久久| 美女在线一区二区| 欧美福利影院| 欧美亚洲动漫精品| 国产亚洲亚洲| 国产综合色产在线精品| 永久91嫩草亚洲精品人人| 亚洲人成网站色ww在线| 一区二区三区高清不卡| 欧美一区=区| 欧美精品一区二区在线观看| 国产精品黄视频| 在线观看精品视频| 亚洲视频欧美视频| 免费成人网www| 国产女优一区| 亚洲人成网站777色婷婷| 99国产精品99久久久久久粉嫩 | 欧美日韩亚洲三区| 国产一区二区三区奇米久涩| 亚洲精品字幕| 开心色5月久久精品| 国产精品久久久久久久电影| 亚洲高清免费视频| 另类尿喷潮videofree| 国产亚洲午夜| 欧美一区二区三区视频| 国产欧美午夜| 久久久青草婷婷精品综合日韩| 可以看av的网站久久看| 国产偷国产偷精品高清尤物| 午夜影视日本亚洲欧洲精品| 欧美日韩综合不卡| 亚洲欧美精品| 国产精品一区二区男女羞羞无遮挡| 亚洲福利一区| 欧美片在线播放| 亚洲午夜小视频| 国产模特精品视频久久久久| 亚洲欧美视频| 精品成人一区| 欧美片第1页综合| 亚洲精品在线免费| 欧美三级网页| 羞羞漫画18久久大片| 狠狠v欧美v日韩v亚洲ⅴ| 欧美高清不卡在线| 午夜久久一区| 亚洲精品国精品久久99热| 欧美日韩国产在线看| 欧美在线不卡| 亚洲老司机av| 黄色日韩在线| 国产精品白丝av嫩草影院| 欧美伊人久久久久久午夜久久久久| 国产欧美日韩视频在线观看| 久久精品一区二区三区四区 | 国产亚洲成年网址在线观看| 欧美阿v一级看视频| 欧美一区二区日韩一区二区| 亚洲欧洲精品一区| 国产亚洲电影| 国产欧美日韩亚州综合| 欧美乱人伦中文字幕在线| 免费欧美在线视频| 久久婷婷国产综合尤物精品| 性色av一区二区三区在线观看| 狠狠色综合色综合网络| 国产精品国码视频| 欧美三区美女| 欧美日韩在线不卡一区| 欧美jizzhd精品欧美巨大免费| 久久视频在线看| 久久人人超碰| 裸体女人亚洲精品一区| 欧美国产精品人人做人人爱| 免费一级欧美片在线观看| 免费精品视频| 欧美精品免费播放| 国产精品乱码一区二三区小蝌蚪| 欧美天堂在线观看| 欧美日韩精品不卡| 欧美视频在线一区| 国产一区二区三区久久| 亚洲精一区二区三区| 亚洲欧美日韩视频一区| 欧美不卡视频一区发布| 欧美日韩三级视频| 国产综合色一区二区三区| 亚洲人在线视频| 久久精品首页| 国产精品国产三级国产普通话三级 | 久久久精品国产一区二区三区| 久久中文精品| 欧美日韩国产在线一区| 国产精品高潮在线| 亚洲三级网站| 免费试看一区| 国内精品伊人久久久久av一坑| 亚洲看片一区| 你懂的成人av| 亚洲国产精品尤物yw在线观看| 欧美一区视频| 国产日本欧美在线观看| 亚洲一区二区三区午夜| 欧美大片一区二区| 亚洲激情一区二区| 免播放器亚洲| 亚洲精品一二| 欧美日韩精品系列| 韩国福利一区| 久久中文字幕一区| 在线欧美福利| 欧美aa国产视频| 亚洲另类在线一区| 欧美亚洲成人精品| 小黄鸭精品aⅴ导航网站入口| 国产精品五月天| 久久精品91久久久久久再现| 影音先锋一区| 欧美日韩日韩| 久久久亚洲综合| 亚洲欧洲日产国产网站| 欧美人妖在线观看| 久久国产精品第一页| 一本大道av伊人久久综合| 欧美特黄一级| 免费成人av资源网| 亚洲综合另类| 亚洲毛片av| 在线高清一区| 亚洲欧洲日产国码二区| 欧美日韩喷水| 一区二区三区视频观看| 国产一区二区久久精品| 久久色在线播放| 一本色道久久综合狠狠躁篇的优点| 欧美日韩岛国| 久久精品夜色噜噜亚洲a∨ | 99这里只有久久精品视频| 欧美亚洲成人免费| 久久一区亚洲| 亚洲女爱视频在线| 亚洲欧美国产高清va在线播| 国产伊人精品| 国产精品国内视频| 国产精品一区二区久久国产| 欧美激情第五页| 美女爽到呻吟久久久久| 欧美午夜激情小视频| 狠狠综合久久| 国产欧美一区二区在线观看| 国产乱子伦一区二区三区国色天香| 久久久久一区二区三区| 欧美一区二区三区四区视频 | 久久精品国产99精品国产亚洲性色 | 亚洲黄色在线| 亚洲国产婷婷香蕉久久久久久99| 激情五月综合色婷婷一区二区|