摘要： 前言: 由于在平時的工作中，線上服務(wù)器是分布式多臺部署的，經(jīng)常會面臨解決分布式場景下數(shù)據(jù)一致性的問題，那么就要利用分布式鎖來解決這些問題。以自己結(jié)合實際工作中的一些經(jīng)驗和網(wǎng)上看到的一些資料，做一個講解和總結(jié)。之前我已經(jīng)寫了一篇關(guān)于分布式鎖的文章: 分布式鎖1 Java常用技術(shù)方案 。上一篇文章中主要 閱讀全文

摘要： 前言: 由于在平時的工作中，線上服務(wù)器是分布式多臺部署的，經(jīng)常會面臨解決分布式場景下數(shù)據(jù)一致性的問題，那么就要利用分布式鎖來解決這些問題。所以自己結(jié)合實際工作中的一些經(jīng)驗和網(wǎng)上看到的一些資料，做一個講解和總結(jié)。希望這篇文章可以方便自己以后查閱，同時要是能幫助到他人那也是很好的。 長長的分割線 正文: 閱讀全文

摘要： 前言: 工作中需要同步日志到hdfs，以前是找運維用rsync做同步，現(xiàn)在一般是用flume同步數(shù)據(jù)到hdfs。以前為了工作簡單看個flume的一些東西，今天下午有時間自己利用虛擬機搭建了flume環(huán)境，并簡單做了幾個練習(xí)。學(xué)習(xí)過程中還是比較順利的，現(xiàn)在將學(xué)習(xí)的過程記錄與此，供以后自己查閱，如果能幫 閱讀全文

摘要： 前言: 上周末自己學(xué)習(xí)了一下Kafka，參考網(wǎng)上的文章，學(xué)習(xí)過程中還是比較順利的，遇到的一些問題最終也都解決了，現(xiàn)在將學(xué)習(xí)的過程記錄與此，供以后自己查閱，如果能幫助到其他人，自然是更好的。 長長的分割線 正文: 關(guān)于Kafka的理論介紹，網(wǎng)上可以搜到到很多的資料，大家可以自行搜索，我這里就不在重復(fù)贅 閱讀全文

摘要： 前言: 前段時間自己參考網(wǎng)上的文章，梳理了一下基于分布式環(huán)境部署的業(yè)務(wù)系統(tǒng)在解決數(shù)據(jù)一致性問題上的方案，其中有一個方案是使用ZooKeeper，加之在大數(shù)據(jù)處理中，ZooKeeper確實起到協(xié)調(diào)服務(wù)的作用，所以利用周末休息時間，自己在虛擬機上簡單搭建了一個ZooKeeper集群，學(xué)習(xí)了解一下。 長長 閱讀全文

摘要： 前言: 由于公司項目需要，最近開始學(xué)習(xí)一下分布式存儲相關(guān)知識，確定使用FastDFS這個開源工具。學(xué)習(xí)之初，自己利用VMware虛擬機搭建了一個5臺機器的集群，摸清了安裝過程中可能出現(xiàn)的問題和解決方案(http://www.rzrgm.cn/PurpleDream/p/4510279.ht... 閱讀全文

摘要： 前言: 由于公司項目需要，最近開始學(xué)習(xí)一下分布式存儲相關(guān)知識，確定使用FastDFS這個開源工具。利用周末的時間在虛擬機上搭建了分布式存儲系統(tǒng)，在搭建過程中，發(fā)現(xiàn)網(wǎng)上的資料說的并不是很全，有些細(xì)節(jié)需要單獨搜索或者自己判斷，所以現(xiàn)在想寫這篇博客盡量記錄一下自己在過程中遇到的問題，以及是如何解決的，方便 閱讀全文

摘要： 前言: 今天是初五，生活基本要從過年的節(jié)奏中回歸到正常的生活了，所以想想也該想想與工作有關(guān)的事情了。我之前在工作中會經(jīng)常使用memcached和redis，但是自己一直沒有時間系統(tǒng)的好好看下這部分的基礎(chǔ)知識，所以現(xiàn)在打算好好把這兩部分的基礎(chǔ)再看一看。我會把看到的東西努力記錄下來，給自己以后留個參... 閱讀全文

摘要： 前言: 前段時間自己學(xué)習(xí)如何部署偽分布式模式的hadoop環(huán)境，之前由于工作比較忙，學(xué)習(xí)的進(jìn)度停滯了一段時間，所以今天抽出時間把最近學(xué)習(xí)的成果和大家分享一下。 本文要介紹的是如何利用VMware搭建自己的hadoop的集群。如果大家想了解偽分布式的大家以及eclipse中的hadoop編程，... 閱讀全文

摘要： 前言: 畢業(yè)兩年了，之前的工作一直沒有接觸過大數(shù)據(jù)的東西，對hadoop等比較陌生，所以最近開始學(xué)習(xí)了。對于我這樣第一次學(xué)的人，過程還是充滿了很多疑惑和不解的，不過我采取的策略是還是先讓環(huán)境跑起來，然后在能用的基礎(chǔ)上在多想想為什么。 通過這三個禮拜(基本上就是周六周日，其他時間都在加班啊T ... 閱讀全文

摘要： 前言: 畢業(yè)兩年了，之前的工作一直沒有接觸過大數(shù)據(jù)的東西，對hadoop等比較陌生，所以最近開始學(xué)習(xí)了。對于我這樣第一次學(xué)的人，過程還是充滿了很多疑惑和不解的，不過我采取的策略是還是先讓環(huán)境跑起來，然后在能用的基礎(chǔ)上在多想想為什么。 通過這三個禮拜(基本上就是周六周日，其他時間都在加班啊T ... 閱讀全文

摘要： 前言: 畢業(yè)兩年了，之前的工作一直沒有接觸過大數(shù)據(jù)的東西，對hadoop等比較陌生，所以最近開始學(xué)習(xí)了。對于我這樣第一次學(xué)的人，過程還是充滿了很多疑惑和不解的，不過我采取的策略是還是先讓環(huán)境跑起來，然后在能用的基礎(chǔ)上在多想想為什么。 通過這三個禮拜(基本上就是周六周日，其他時間都在加班啊T ... 閱讀全文

摘要： 前記： 畢業(yè)兩年了，前兩天換了份工作，由以前的傳統(tǒng)行業(yè)跳到了互聯(lián)網(wǎng)行業(yè)。之前的公司一直在用WinServer2003+Tomcat+SqlServer/Oracle這套部署環(huán)境。對于Linux+Tomcat(或其他容器)+Mysql這套之前沒用用過。所以利用這周末的我在阿里云上49元搞了個linux 閱讀全文

摘要： 前言: 本文主要是我在大家hadoop集群之前 ，需啊先安裝CentOS虛擬機，記錄在此，作為參考。如果能幫助到其他人，自然是更好啦。============================================================長長的分割線================... 閱讀全文