摘要： 我的新浪微博：http://weibo.com/freshairbrucewoo。歡迎大家相互交流，共同提高技術。以下是我在公司內部分享的關于分布式日志收集系統的PPT內容，現在與大家分享，希望對于需要使用的人能夠起到基本的入門作用或是了解！1.分布式日志收集系統:背景介紹許多公司的平臺每天會產生大量的日志（一般為流式數據，如，搜索引擎的pv，查詢等），處理這些日志需要特定的日志系統，一般而言，這些系統需要具有以下特征：（1） 構建應用系統和分析系統的橋梁，并將它們之間的關聯解耦；（2） 支持近實時的在線分析系統和類似于Hadoop之類的離線分析系統；（3） 具有高可擴展性。即：當數據量增加時 閱讀全文

摘要： 我的獨立博客網址是：http://wuyouqiang.sinaapp.com/。我的新浪微博：http://weibo.com/freshairbrucewoo。歡迎大家相互交流，共同提高技術。前面有幾篇文章專門介紹了空間數據的導入，導入的目的是為了統一管理。今天介紹空間數據導出，導出的格式支持和導入的格式一樣，導出的目的是為了方便數據的遷移。其實導入和導出用到的技術基本上都是相同的，不過為了介紹的完整性還是單獨拿出來，因為這一部分的功能也是很重要而且是必不可少的！1.首先定義一個用于操作SDE數據庫的工作空間并且在構造函數中初始化（調用工具類里面提供的靜態方法初始化）：1 ... 閱讀全文

摘要： 我的獨立博客網址是：http://wuyouqiang.sinaapp.com/。我的新浪微博：http://weibo.com/freshairbrucewoo。歡迎大家相互交流，共同提高技術。自從我和我的一個同學都把自己的電腦搬到實驗室以后，我們兩個就變成了整個實驗室、乃至整個學校里面最瘋狂的人，我們除了洗漱回一趟寢室以外我們所有的時間都待在實驗室，當然除了上課和吃飯。當時我們的課程管得比較嚴，每次輔導員都會親自到場點名，如果發現誰沒有到就可能找他談話，所以很多人雖然不想去上課，但是還是會去把時間混滿。雖然我和我的那個同學基本上都是在一起學習和吃飯，但是平時交流并不是很多，造成這種原因不能 閱讀全文

摘要： 我的獨立博客網址是：http://wuyouqiang.sinaapp.com/。我的新浪微博：http://weibo.com/freshairbrucewoo。歡迎大家相互交流，共同提高技術。 提前說明：我的博客文章在博客園與CSDN都是同步更新的，但是我用的GA只能監控博客園的訪問，CSDN不能，是因為CSDN屏蔽了GA的腳本，應該是CSDN會自動過濾JS代碼吧！這里在補充一點點現在自己正在從事的IT技術相關工作，我不喜歡談論公司的任何事情，只是簡單介紹一下自己從事哪些方面的技術，方便與同行交流和溝通！目前自己工作的內容主要三方面：云計算（hadoop生態系統相關：如hbase、hive 閱讀全文

摘要： 我的獨立博客網址是：http://wuyouqiang.sinaapp.com/。我的新浪微博：http://weibo.com/freshairbrucewoo。歡迎大家相互交流，共同提高技術。 上一篇博文介紹了自己初入大學的一些情況，看了幾位博友的評論，有點覺得是流水賬，有的覺得是真實的敘述。其實這些評論都是非常正確和到位的，同一件事情不同的人肯定有不同的看法，而且不同的人都有自己愛好和性格。包括自己愛好的文章，有的喜歡真真切切，有的喜歡夸張或者是描述得更加豐富一些。但是我既然選擇最真實最平淡的描述我的大學生活，因為真實才對別人有真實的意義，因為這個不是小說，可能看起來并不是那么給人淋漓. 閱讀全文

摘要： 我的獨立博客網址是：http://wuyouqiang.sinaapp.com/。我的新浪微博：http://weibo.com/freshairbrucewoo。歡迎大家相互交流，共同提高技術。 本篇文章主要介紹本系統中的日志管理功能，由前面介紹的內容可以知道日志分為三類：分別是用戶操作日志、數據表更新日志以及數據庫監控日志，這些日志的寫入可能遍布整個系統中的各個地方。這里提供一個統一的日志管理界面，可以對日志進行查詢和刪除，并沒有提供修改的功能，因為日志是系統自動生成的，修改日志沒有任何意義，而且還可能造成系統的漏洞，比如誰刪除了數據然后把刪除的日志記錄修改了，就不能正確發現誰刪除了數據！ 閱讀全文

摘要： 我的獨立博客網址是：http://wuyouqiang.sinaapp.com/。我的新浪微博：http://weibo.com/freshairbrucewoo。歡迎大家相互交流，共同提高技術。 最近在北京出差一直沒有時間繼續寫博客，主要是晚上上網的條件不好，而且和幾個同事住在一起也不太方便寫博客，因為隨時我們都可能聊天交流！今晚還是決定繼續寫一遍比較簡單的博客，就是繼續寫ArcGIS的項目，今天主要介紹的內容就是關于空間數據完整性、格式等地檢查！1.首先定義一個用于操作的SDE空間數據庫的工作空間。1 public IFeatureWorkspace pWorkspaceSDE;//SDE 閱讀全文

摘要： 我的新浪微博：http://weibo.com/freshairbrucewoo。歡迎大家相互交流，共同提高技術。 終于下定決心要寫關于自己大學期間學習IT技術的點點滴滴了，很久以前自己就一直構思寫自己大學期間的IT技術生活。為什么一直想寫這一系列的博客呢？因為大學生活期間自己改變的太多，改變自己的最大原因就是因為自己有幸讀取自己最感興趣的計算機專業，其實當時自己只是對計算機感覺到很神秘，興趣那時可能還談不上吧，因為接觸不多。不過進入大學以后開始慢慢接觸計算機，自己的興趣就這樣被計算機慢慢激發出來。還有一點就是我覺得自己的大學生活很算很勵志吧（自己臭美了）。想多說一句的就是：在大學期間可能在我 閱讀全文

摘要： 我的獨立博客網址是：http://wuyouqiang.sinaapp.com/。我的新浪微博：http://weibo.com/freshairbrucewoo。歡迎大家相互交流，共同提高技術。 前面第九篇把Shape格式導入已經完成了，在這個以后我又陸續加入其他幾篇這個項目相關知識介紹的博文，加入那些知識的目的是為了讓博友們能夠更加清楚這個項目的一切相關知識，以便更好的理解這個項目。現在開始完成MDB格式導入Oracle數據庫。 和Shape相同的部分就不在講解了，只講解與Shape不同的實現部分！1.添加一個MDB格式的空間數據文件到導入列表，并顯示其相關信息。 1 //... 閱讀全文

摘要： 我的獨立博客網址是：http://wuyouqiang.sinaapp.com/。我的新浪微博：http://weibo.com/freshairbrucewoo。歡迎大家相互交流，共同提高技術。 本系統主要是針對已有的空間數據和屬性數據進行統一的管理，包括數據的錄入、導入、校核、入庫、分發、同步等。同時要求對空間數據庫進行適當的優化，確保軟件運行的效率。需要實現的功能包括通用數據庫管理、空間數據庫管理、數據檢索、數據備份與恢復、數據庫監控與日志、數據字典管理子系統、元數據管理子系統、數據內容本地化、數據庫優化、數據庫運行維護系統及制度。下面具體分析每一個模塊需要完成的功能。1 通用數據管理通 閱讀全文