91久久久久久久久_欧美日韩中文_在线观看中文字幕亚洲_夜夜骑首页_精品久久伊人_天天色天天射天天操

東坡下載:內(nèi)容最豐富最安全的下載站!

首頁(yè)最新資訊 互聯(lián)網(wǎng) → 基于mdrill的大數(shù)據(jù)分析

基于mdrill的大數(shù)據(jù)分析

相關(guān)文章發(fā)表評(píng)論 來(lái)源:本站原創(chuàng)時(shí)間:2014/2/18 14:55:28字體大小:A-A+

更多

作者:不詳點(diǎn)擊:139次評(píng)論:0次標(biāo)簽: 大數(shù)據(jù)分析

數(shù)據(jù)越來(lái)越多,傳統(tǒng)的關(guān)系型數(shù)據(jù)庫(kù)支撐不了,分布式數(shù)據(jù)倉(cāng)庫(kù)又非常貴。幾十億、幾百億、甚至幾千億的數(shù)據(jù)量,如何才能高效的分析?
mdrill是由阿里媽媽開源的一套數(shù)據(jù)的軟件,針對(duì)TB級(jí)數(shù)據(jù)量,能夠僅用10臺(tái)機(jī)器,達(dá)到秒級(jí)響應(yīng),數(shù)據(jù)能實(shí)時(shí)導(dǎo)入,可以對(duì)任意的維度進(jìn)行組合與過濾。
mdrill作為數(shù)據(jù)在線分析處理軟件,可以在幾秒到幾十秒的時(shí)間,分析百億級(jí)別的任意組合維度的數(shù)據(jù)。
在阿里10臺(tái)機(jī)器完成每日30億的數(shù)據(jù)存儲(chǔ),其中10億為實(shí)時(shí)的數(shù)據(jù)導(dǎo)入,20億為離線導(dǎo)入。目前集群的總存儲(chǔ)3200多億80~400維度的數(shù)據(jù)。
mdrill的特性
1.滿足大數(shù)據(jù)查詢需求:adhoc每天的數(shù)據(jù)量為30億條,隨著日積月累,數(shù)據(jù)會(huì)越來(lái)越大,mdrill采用列存儲(chǔ),索引,分布式技術(shù),適當(dāng)?shù)姆謪^(qū)等滿足用戶對(duì)數(shù)據(jù)的實(shí)時(shí)在線分析的需求。
2.支持增量更新:離線形式的mdrill數(shù)據(jù)支持按照分區(qū)方式的增量更新。
3.支持實(shí)時(shí)數(shù)據(jù)導(dǎo)入:在僅有10臺(tái)機(jī)器的情況下,支持每天10億級(jí)別(高峰每小時(shí)2億)的實(shí)時(shí)導(dǎo)入。
4.響應(yīng)時(shí)間快:列存儲(chǔ)、倒排索引、高效的數(shù)據(jù)壓縮、內(nèi)存計(jì)算,各種緩存、分區(qū)、分布式處理等等這些技術(shù),使得mdrill可以僅在幾秒到幾十秒的時(shí)間分析百億級(jí)別的數(shù)據(jù)。
5.低成本:目前在阿里adhoc僅僅使用10臺(tái)48G內(nèi)存的PC機(jī),但確存儲(chǔ)了超過千億規(guī)模的數(shù)據(jù)。
6.全文檢索模式:在mdrill的全文檢索模式數(shù)據(jù)可以直接存儲(chǔ)在hdfs中,并且以每天160億*70維度的數(shù)據(jù)增量提供全文檢索服務(wù)(注:該模式下不能進(jìn)行統(tǒng)計(jì),只能進(jìn)行關(guān)鍵詞匹配查詢數(shù)據(jù)明細(xì))
mdrill的定位
大數(shù)據(jù)
要數(shù)據(jù)量大,幾十億上百億。
還要省錢,普通PC就能搞定。
多維分析
要任意維度組合與過濾
還要對(duì)任意指標(biāo)進(jìn)行統(tǒng)計(jì)和排序
即席查詢
要查詢快,秒級(jí)響應(yīng)。
還要數(shù)據(jù)快,數(shù)據(jù)分鐘級(jí)延遲。

擴(kuò)展知識(shí)

相關(guān)評(píng)論

閱讀本文后您有什么感想? 已有 人給出評(píng)價(jià)!

  • 2791 喜歡喜歡
  • 2101 頂
  • 800 難過難過
  • 1219 囧
  • 4049 圍觀圍觀
  • 5602 無(wú)聊無(wú)聊
熱門評(píng)論
最新評(píng)論
發(fā)表評(píng)論 查看所有評(píng)論(0)
昵稱:
表情: 高興 可 汗 我不要 害羞 好 下下下 送花 屎 親親
字?jǐn)?shù): 0/500 (您的評(píng)論需要經(jīng)過審核才能顯示)
主站蜘蛛池模板: 欧美999| 欧美一区二区视频在线观看 | 精品一区二区三区视频 | 日韩久久久 | 99re国产| 欧美日韩小视频 | 日韩午夜在线观看 | 人人草人人干 | 国产欧美成人 | 久久久一本 | 国产精品一区二区三区免费 | 日韩a在线| 视频在线一区 | 天天干网站 | 久草久草久草 | av一二三 | 亚洲欧美国产精品 | 国产欧美一区二区精品性色超碰 | 亚洲一区视频 | 成人毛片网 | 成人精品一区二区三区 | 欧美日韩在线视频观看 | 中文字幕综合网 | 国产寡妇亲子伦一区二区三区四区 | 亚洲国产成人av | 亚洲一区二区三区在线播放 | 国产精品99精品久久免费 | 国产美女视频网站 | 欧美一二 | 中文字幕在线观看免费视频 | 欧美日韩在线视频观看 | 免费99精品国产自在在线 | 国产伦精品一区二区三区88av | 中文在线视频 | 懂色av一区二区三区 | 国产精品高潮呻吟久久 | 93久久精品日日躁夜夜躁欧美 | 九九国产视频 | 特黄一级视频 | 国产一区精品视频 | 免费国产黄色 |