摘要： 我的獨(dú)立博客網(wǎng)址是：http://wuyouqiang.sinaapp.com/。我的新浪微博：http://weibo.com/freshairbrucewoo。歡迎大家相互交流，共同提高技術(shù)。 上一篇文章介紹了一些關(guān)于scribe的基礎(chǔ)知識(shí)，也是自己在公司內(nèi)部分享的一些內(nèi)容，當(dāng)時(shí)公司很多同事也積極與我溝通，沒(méi)想到網(wǎng)上也有這么多人關(guān)注，下面幾篇文章繼續(xù)分享一些自己研究scribe的一些成果和心得吧！ 其實(shí)我們研究一個(gè)開(kāi)源的系統(tǒng)，第一步通常是先把它用起來(lái)，因?yàn)橐粋€(gè)開(kāi)源的系統(tǒng)能夠出現(xiàn)在大家的面前肯定是比較出名和流行的，所有功能是比較出色的。所以我們必須很清楚的這些功能，而scribe最大的特點(diǎn)就 閱讀全文

摘要： 我的獨(dú)立博客網(wǎng)址是：http://wuyouqiang.sinaapp.com/。我的新浪微博：http://weibo.com/freshairbrucewoo。歡迎大家相互交流，共同提高技術(shù)。 上一篇文章介紹了一些關(guān)于scribe的基礎(chǔ)知識(shí)，也是自己在公司內(nèi)部分享的一些內(nèi)容，當(dāng)時(shí)公司很多同事也積極與我溝通，沒(méi)想到網(wǎng)上也有這么多人關(guān)注，下面幾篇文章繼續(xù)分享一些自己研究scribe的一些成果和心得吧！ 其實(shí)我們研究一個(gè)開(kāi)源的系統(tǒng)，第一步通常是先把它用起來(lái)，因?yàn)橐粋€(gè)開(kāi)源的系統(tǒng)能夠出現(xiàn)在大家的面前肯定是比較出名和流行的，所有功能是比較出色的。所以我們必須很清楚的這些功能，而scribe最大的特點(diǎn)就 閱讀全文

摘要： 我的新浪微博：http://weibo.com/freshairbrucewoo。歡迎大家相互交流，共同提高技術(shù)。以下是我在公司內(nèi)部分享的關(guān)于分布式日志收集系統(tǒng)的PPT內(nèi)容，現(xiàn)在與大家分享，希望對(duì)于需要使用的人能夠起到基本的入門(mén)作用或是了解！1.分布式日志收集系統(tǒng):背景介紹許多公司的平臺(tái)每天會(huì)產(chǎn)生大量的日志（一般為流式數(shù)據(jù)，如，搜索引擎的pv，查詢等），處理這些日志需要特定的日志系統(tǒng)，一般而言，這些系統(tǒng)需要具有以下特征：（1） 構(gòu)建應(yīng)用系統(tǒng)和分析系統(tǒng)的橋梁，并將它們之間的關(guān)聯(lián)解耦；（2） 支持近實(shí)時(shí)的在線分析系統(tǒng)和類(lèi)似于Hadoop之類(lèi)的離線分析系統(tǒng)；（3） 具有高可擴(kuò)展性。即：當(dāng)數(shù)據(jù)量增加時(shí) 閱讀全文