熬夜的蟲子

摘要：沒有什么高深的東西，1 2天的時間大多數人都能自己摸索出來，這里將自己遇到過的問題分享出來避免其他同學再一次挖坑.目錄 1. 主從節點 2. Nuget自動包還原 3. powershell部署 4. 內網機器實現基于變化的構建 5. Github私有項目pull時限 所謂主從，主要... 閱讀全文

摘要：系列文章完成后 源碼發布在我的GIT上 https://github.com/dubing/文章僅代表個人觀點 旨在交流 歡迎討論正文 按照上一篇結尾留下的話題，本篇著重對數據庫操作方面也就是常用工廠模式的地方來進行泛型 委托方向的使用。 一般大型項目中大家都喜歡依賴注入的方式來數據庫操作進行設... 閱讀全文

摘要：系列文章完成后 源碼發布在我的GIT上 https://github.com/dubing/文章僅代表個人觀點 旨在交流 歡迎討論背景 隨著信息化的普及，信息系統越來越多，通常不同系統是采用不同的技術基于不同平臺開發的，缺乏統一規劃、統一數據標準、統一調用接口，因此系統之間的交互變得很困難.通常大... 閱讀全文

摘要：源碼地址 https://github.com/dubing/YoukuAutomation背景 標題看似新穎實際上這里的自動化在很大范圍內限定在web測試上，和loadrunner測試腳本類似，也都是測試工程師常用的概念。當然作為.net應用，你也可以用在產品演示上。 我使用的背景是在持續集成... 閱讀全文

摘要：就如標題所示了 源碼地址 https://github.com/dubing/CannonSDKandWia/背景一年多沒逛園子了，換了個行業圈子，感覺自己太花心了點，不過能接觸到不同的研發文化也算有點收獲，游戲圈子的技術流、電商圈子的業務流、媒體圈子的藝術流等等。這個應用產生的背景是讓單反相機自動化，本身老大的意思是想做針對usb接口的編程，不過太底層的技術用c#來做不是很合適。討價還價了一番，那就針對單反來做吧。假設一個場景，我們需要N臺單反設備瞄準一朵花，每隔30秒拍一張照片并且自動發到微博上。技術點 佳能SDK WIA標準 佳能sdk提供了dll給.net開發者引用，通過對sdk... 閱讀全文

摘要：由于平臺的特點 用.net做視頻網站的不多 作為興趣研究下背景經常上土豆 youku的朋友可能會發現播放的視頻格式大多是flv格式的 那么我們先來掃盲下flvFLV 是FLASH VIDEO的簡稱，FLV流媒體格式是隨著Flash MX的推出發展而來的視頻格式。由于它形成的文件極小、加載速度極快，使得網絡觀看視頻文件成為可能，它的出現有效地解決了視頻文件導入Flash后，使導出的SWF文件體積龐大，不能在網絡上很好的使用等缺點。更多參考百科 http://baike.baidu.com/view/364757.htm但是用戶手上的資源未必都是flv格式，所以需要格式轉換。這里介紹2款工具FFm 閱讀全文

摘要：背景 分布式鎖服務在大家的項目中或許用的不多，因為大家都把排他放在數據庫那一層來擋。當大量的行鎖、表鎖、事務充斥著數據庫的時候，不如換個角度思考問題。一般web應用很多的瓶頸都在數據庫上，這里給大家介紹的是減輕數據庫鎖負擔的一種方案。簡介 如果我們的需求很簡單，例如對于用戶的賬戶資金，要保證原子性操作。并且不同的客戶端在同一時間內只能提交一個對象操作。lock、單例？！在單臺上還可以，但是大型web項目上，負載均衡是常用的技術手段手段，同一意義的對象可能存在不同的副本，這時我們又如何保證排他操作。數據庫的事務！除了這個，接下來我們引出本章的主題、分布式鎖服務。 一個簡單的鎖服務實現起... 閱讀全文

摘要：關于分布式文件系統 之前已經寫過一些隨筆 不過沒怎么用心 本篇詳細的整理一下背景 海量存儲、系統負載的遷移、服務器吞吐的瓶頸等等 讓文件系統獨立于業務系統 提高整個項目的擴展性以及可維護性 目前主流的方案 MFS FASTDFS GFS LUSTRE HADOOP等等 我選擇的是FASTDFS 用一句廣告語來說 “免費、快速、找得到”。FASTDFS的作者是淘寶的資深架構師余慶，很詼諧、很有愛?。。∑渌桨高€沒玩過 暫不評論。簡介 FastDFS是一款開源的輕量級分布式文件系統純C實現，支持Linux、FreeBSD等UNIX系統類google FS，不是通用的文件系統，只能通過專有... 閱讀全文

摘要：前文 所謂“高效”，覷頭而已。背景 談到分布式緩存，大家首先想到的是memcached。確實memcached是目前最流行的方案之一。不過很多互聯網公司不用memcached，例如新蛋。為什么不選擇memcached呢，命中率？熱插拔？還是性能。這里先不放結論，用事實來說話。算法篇 -1.除余法 如果你手上有老版本的memcache官方文檔。你會發現他們用的是除余法來保持節點的一致性。假如你有N臺緩存服務器，你需要將某個對象set進某一臺節點上。用hash取模這樣可以很均勻的保證每臺的負載。那么，作為最基本的輪詢算法，是否適合分布式緩存我們來看實例。這里假設有4臺緩存節點，先設置除余... 閱讀全文

摘要：如果你應聘互聯網企業的架構師 分布式解決方案屬于必問環節 因為流行SOA 關于SOA就不廢話了 網上資源很多 重視4個字“基于消息”本篇只測評大家項目中常用的幾種Remoting（TCP,HTTP,IPC）WCF(basicHttpBinding,netTcpBinding)HessianMSMQWebService......環境介紹客戶機 windows Xp服務器 windows2003（虛擬機）帶寬2M測試環境和線上環境差距比較大 我們看相對性就可以了所有方案基于相同遠程對象 public class DtoClass : MarshalByRefObject { ... 閱讀全文

摘要：前文事件注入的想法是由依賴注入所聯想到依賴注入不算什么吸引人的話題本篇就不詳說了不過有閑暇時間的機會不妨按照自己的興趣去摸索、研究一些東西，也是一種樂子。在抓蟲系列里簡單的描述一下依賴注入在項目中的應用場景抓蟲(五) 淺談依賴注入與控制反轉關于依賴注入推薦T2噬菌體同學的一篇文章 依賴注入那些事兒關于事件注入已添加進我的設計模式 【系列索引】結合項目實例 回顧傳統設計模式 打造屬于自己的模式類系列 概要所謂事件注入是我一時興起隨便杜撰的詞，其思想借鑒依賴注入。當然看到這個詞很多同學會想到AOP，這里先不置可否。依賴注入（Dependency Injection），是這樣一個過程：由于某客戶類只 閱讀全文

摘要：前篇回顧 上篇介紹一些vim相關的內容 作為新手，起初玩vim還是蠻痛苦的。不過慢慢嘗到甜頭后也很難放下了。本篇帶一樣很久沒玩c的同學溫故下指針。step 1 直接上圖了這里我們定義一個二維數組int a[2][5] = {1,3,5,7,9,2,4,6,8,10};左邊文件我們聲明一個普通指針 將二維數組的內容填充進來我們來看看運行的結果結論我就不總結了 和大家的想法一樣右邊文件我們聲明一個指針數組來存放我們再看看右邊文件的運行結果大學里 譚浩強的c入門熟讀的同學應該也早就知道結果了溫習一下而已，通過上面的2個例子我們可以理解到這些左邊的例子實際上在內存區占用了一連串的地址，右邊的例... 閱讀全文

摘要：前篇回顧 上篇介紹了linux下C編程基本環境配置以及相關工具使用選擇。 不過10個大牛9個用vim，那么咱們就來玩vim。linux下玩c就別依靠圖形界面。好吧告別Ide,命令行才是c的王道。 本篇文章感謝名為孫鶴同學的技術支持　感謝有愛的c大牛們 本文中多處使用vim插件（孫鶴提供），這些插件大多是在http://www.vim.org/處下載。指針客串 因為畢業后就沒玩過c了，都說指針是c的重點。但是指針作為一種地址變量，為什么不直接操作變量本身呢。文章末尾為大家揭曉vim的配置文件 ~/.vimrc 用戶的默認配置文件 ~/.vim/plugin/ 用戶的默認腳本文件... 閱讀全文

摘要：寫在開篇之前 本系列以筆記的方式、將一些書籍的核心內容概括，給自己留一個讀書筆記。也方便大家用最短的時間掌握最豐富最重要的內容。 作為讀書筆記，本身不屬于蟲子原創，對于知識點有疑問的同學可以提出大家一起交流。 書籍的選材目前限定在開發、運維、dba、網絡安全幾方面。歡迎有愛的同學一起學習。 clr基本 CLR(Common Language Runtime)是一個可由多種編程語言使用的“運行時”。(例如：c#，c++/cli,vb,f#,iron python,iron ruby,il...) CLR的核心功能內存管理、程序集加載、安全性、異常處理、線程同步、泛型、尾調用指令和基本... 閱讀全文

摘要：因高層突然變卦 要以存儲過程來完成訂單的拆分歸檔工作 所以蟲子的同步工具先暫時擱置一段時間。詳細設計參考原理篇更新一下測試結果 舊的測試結果放在下面 前一篇關于限制性開源的文章先刪除 因為是企業在用項目 所以不開放性公布源碼了有需要交流的同學可以單獨聯系蟲子更新內容 解決了一些bug，例如以前按一級表、二級表、三級表...的順序刪除，結果導致一級表刪除后，二級表的數據讀取錯誤。 優化了過程安全，在3個階段進行臨時表和游標資源的check。降低預料外異常對程序的影響。 改變刪除的設計。 總的來說不是從性能上更新，而是從業務角度保證數據的完整性最新測試結果　500條查看原圖 ：http:/... 閱讀全文