利用碎片化時間查看資訊已經成為互聯(lián)網原住民的生活方式，據大數(shù)據服務QuestMobile報告稱：2016年底，綜合資訊行業(yè)規(guī)模已達5.3億，同比增長率近70%，超過一半的移動網民都在使用新聞App。

河間ssl適用于網站、小程序/APP、API接口等需要進行數(shù)據傳輸應用場景，ssl證書未來市場廣闊！成為創(chuàng)新互聯(lián)的ssl證書銷售渠道，可以享受市場價格4-6折優(yōu)惠！如果有意向歡迎電話聯(lián)系或者加微信：028-86922220（備注：SSL證書合作）期待與您的合作！

　　4月18日，QuestMobile發(fā)布了2017春季報告，新浪新聞App作為新浪網最重要的分支之一，月用戶規(guī)模(月活)達6056萬，同比增長138.3%，中高消費水平用戶占比75.4%。面對如此體量，新浪網的后端數(shù)據庫如何支持?在數(shù)據庫選型上有哪些標準?數(shù)據安全又如何把控?帶著這些疑問，我們訪問了新浪數(shù)據庫平臺高級DBA趙景波。

　　趙景波，先后就職于杭州沃趣科技、新浪網，從事Oracle、MySQL、Redis相關方面的運維工作。目前為新浪數(shù)據庫平臺高級DBA，主要負責新浪數(shù)據庫平臺Redis自動化運維、kafka運維等相關方面工作。

　　揭秘新浪網的數(shù)據庫構成

　　據趙景波介紹，目前新浪網的數(shù)據庫平臺共有9個主要IDC，1200+服務器，7k+實例，1000+億 hits/天，總存儲容量1PB+。為了更好的滿足公司業(yè)務需求，新浪網采取了不同的數(shù)據庫平臺和數(shù)據系統(tǒng)服務平臺來提供相關的數(shù)據服務：

　　·基于MySQL的關系型數(shù)據庫存儲服務

　　·基于Redis的KV存儲服務

　　·基于Mongodb的文檔存儲服務

　　·基于Hbase半結構化大數(shù)據存儲服務

　　·基于Memcached的緩存服務

　　·基于mcq和kafaka的消息隊列服務

　　·zookeeper服務，業(yè)務如果有數(shù)據發(fā)布/訂閱、命名服務，選舉等需求也可以申請使用。

　　新浪網作為國內主流的新聞門戶網站，業(yè)務場景繁多，不同的業(yè)務場景是如何進行數(shù)據庫選型的呢?趙景波表示因為MySQL是一個很成熟的產品，其插件式的引擎特性也能滿足大多數(shù)場景要求，再加上它的社區(qū)相當活躍，人才儲備也最豐富，所以如果業(yè)務場景適合會優(yōu)先選擇MySQL。但是如果業(yè)務場景有某些特殊需求，我們也會考慮其他數(shù)據庫，例如業(yè)務場景只是簡單的kv存儲模型、或者業(yè)務對于響應時間要求極高，再或者業(yè)務需要schemaless類型的數(shù)據庫以便于業(yè)務快速開發(fā)迭代等等。

　　目前新浪網平臺不僅提供MySQL服務，還同時提供MongoDB、Redis、Memcached、Hbase等服務。趙景波為我們介紹了新浪網內部服務發(fā)布系統(tǒng)的變遷，早年新浪網發(fā)布的新聞都是用MySQL存儲，隨著業(yè)務發(fā)展，個性化的需求與日俱增，業(yè)務表結構變更(添加字段)的需求也越來越多，此時MySQL固定schema的存儲模型無法滿足業(yè)務快速開發(fā)迭代的需求，所以發(fā)布系統(tǒng)的新聞數(shù)據就從MySQL全部遷移到了MongoDB。另外，新聞推薦push等業(yè)務對部分接口的響應時間要求很高，所以就采用了Redis或者Memcached這種內存KV緩存來解決業(yè)務的需求。

　　新浪網如何把控數(shù)據安全

　　對于互聯(lián)網公司來說，數(shù)據安全可以說是生命線，據相關媒體報告稱僅在2016年前10個月，全球已約有3000起公開的數(shù)據泄漏事件，22億條記錄被披露，已經超過2015年全年。面對如此嚴峻的數(shù)據安全的局面，趙景波表示新浪網在數(shù)據安全性方面有很多硬性規(guī)定，并做了主機維度、業(yè)務維度和服務維度的層次劃分。

　　主機維度：制定了相關標準，給出了主機安全防護基線要求，主要有身份驗證、訪問控制、入侵防范等，對安裝的軟件、登陸使用的方式等等也都有嚴格的標準。

　　業(yè)務維度：規(guī)定了新浪業(yè)務及應用的安全防護要求，主要約束了應用的上傳下載、網站外鏈、惡意代碼、信息加密等。

　　數(shù)據服務維度：這一層面的安全性主要體現(xiàn)在數(shù)據庫備份、存儲可靠性、服務器資源使用(通過Cgroup隔離)、數(shù)據庫訪問帳號、SQL注入防范、數(shù)據加密、數(shù)據一致性等。

　　·建立了動態(tài)密碼更新機制，對于非常核心的重點業(yè)務做到了數(shù)據庫帳號密碼動態(tài)更新，提高安全性;

　　·數(shù)據庫的賬號只保留了增、刪、改、查的權限，其他的如truncate、drop等權限全部回收，大大減少了業(yè)務方通過此類危險命令誤刪除數(shù)據的機會;

　　·對內部管理數(shù)據庫的賬號做分級，只有少數(shù)資深高級DBA才有較大的權限來操作數(shù)據庫，常規(guī)的DBA也只保有在固定服務器上的有約束性的權限

　　·數(shù)據存儲安全主要做了兩個事情，一個是針對涉密的數(shù)據，我們對備份的數(shù)據做了加密，除了對應的專職管理員有權限查看，其他人沒有權限查看，另外一個就是我們備份的數(shù)據會存儲到HDFS集群，保障數(shù)據的可靠性。

　　在業(yè)務發(fā)展早期，為了更快的滿足業(yè)務資源申請需求而忽視平臺自身的規(guī)范建設是很多企業(yè)都面臨或者正在經歷的事情。在中國數(shù)據庫技術大會(DTCC 2017)上，趙景波會以Redis服務為例，為我們講述隨著業(yè)務規(guī)模壯大，新浪網核心業(yè)務運維遇到了哪些痛點?當運維過程暴露出越來越多的問題時，新浪網又是如何去規(guī)范、完善Redis運維平臺的。

當前文章：1200服務器,1000億hits,揭秘新浪數(shù)據庫-創(chuàng)新互聯(lián)
文章來源：http://sd-ha.com/article4/dohhoe.html

成都網站建設公司_創(chuàng)新互聯(lián)，為您提供品牌網站設計、網站營銷、網站改版、標簽優(yōu)化、自適應網站、企業(yè)建站

廣告

聲明：本網站發(fā)布的內容（圖片、視頻和文字）以用戶投稿、用戶轉載內容為主，如果涉及侵權請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內容未經允許不得轉載，或轉載時需注明來源： 創(chuàng)新互聯(lián)