摘要： ref: https://zhuanlan.zhihu.com/p/380696700 心理素質(zhì)是一個(gè)人整體素質(zhì)的基礎(chǔ)，人和人之間競(jìng)爭(zhēng)，心理素質(zhì)常常會(huì)很大程度上影響到一個(gè)人能力和水平的發(fā)揮。 面對(duì)失敗和挫折，有的人能夠積極振作，東山再起，而有的人卻一蹶不振，自暴自棄。 心理素質(zhì)差的人容易受到周?chē)挠? 閱讀全文

摘要： What is BigTable? 分布式nosql database BigTable HBase Cassandra DynamoDB 文件系統(tǒng)：簡(jiǎn)單讀寫(xiě)文件操作 數(shù)據(jù)庫(kù)系統(tǒng)： 建立在文件系統(tǒng)，負(fù)責(zé)主治把一些數(shù)據(jù)存到文件系統(tǒng)，對(duì)外的接口比較方便操作數(shù)據(jù)。 數(shù)據(jù)最終都會(huì)存到文件里面。 從文件系統(tǒng)的 閱讀全文

摘要： 分布式系統(tǒng) 谷歌三劍客 Distributed File System(Google FIle System) 如何有效存儲(chǔ)數(shù)據(jù)？ Nosql底層需要一個(gè)文件系統(tǒng) Bigtable = Nosql database 怎么鏈接底層存儲(chǔ)和上層數(shù)據(jù) Map Reduce 怎么快速處理數(shù)據(jù) GFS C++ 閱讀全文

摘要： 大數(shù)據(jù)職位 分布式數(shù)據(jù)處理框架 count the word frequency of a web page? for循環(huán)，存在hashmap 缺點(diǎn)：只有一臺(tái)機(jī)器， 慢，內(nèi)存大小受限。 多臺(tái)機(jī)器，并行處理 合并的時(shí)候是瓶頸。 map把任務(wù)打散，reduce把任務(wù)合并 step1 input 輸入 0 閱讀全文

摘要： 2024/02/04 c1 - c4 Chapter 1: scale from zero to millions of users single server setup DNS domain name system is 3rd party service that parses domain 閱讀全文

摘要： Scenerio: fuctional requirements: generate valid coupons users can only get one coupon per day validate coupon non-functional requirements: availabili 閱讀全文

摘要： scenario: 分享鏈接長(zhǎng)度過(guò)長(zhǎng)，字?jǐn)?shù)限制 google url shortener, bitly 根據(jù)long url生成一個(gè)short url 根據(jù)short url還原long url。訪問(wèn)http://bit.ly/跳轉(zhuǎn)到 確認(rèn)的問(wèn)題： long url和short url之間必須是一一 閱讀全文

摘要： 采集項(xiàng)目&數(shù)據(jù)倉(cāng)庫(kù)項(xiàng)目（是企業(yè)中數(shù)據(jù)管理平臺(tái)中的兩個(gè)核心管理模塊） 采集項(xiàng)目：數(shù)據(jù)采集，傳輸為主（flume, kafka, datax, maxwell) 數(shù)據(jù)倉(cāng)庫(kù)：以計(jì)算為主,同時(shí)存儲(chǔ)數(shù)據(jù)(mysql, HDFS, Spark, Flink , MR, Hive) 數(shù)據(jù)庫(kù)&數(shù)據(jù)倉(cāng)庫(kù) 數(shù)據(jù)庫(kù)dat 閱讀全文

摘要： web是怎么工作的？ URL：https://www.google.com 域名 首先訪問(wèn)最近的DNS服務(wù)器 domain name service DNS記錄了這個(gè)域名的ip地址是什么 瀏覽器向該ip地址發(fā)送http/https（傳輸協(xié)議）請(qǐng)求。每臺(tái)服務(wù)器/計(jì)算機(jī)聯(lián)網(wǎng)都需要一個(gè)ip地址。通過(guò)ip地 閱讀全文

摘要： 盡管此刻沒(méi)有如愿以?xún)斦业胶线m的ft，但我希望能夠充分認(rèn)識(shí)到自己的不足，積蓄力量。相信在不久的將來(lái)會(huì)有爆發(fā)的機(jī)會(huì)。 知識(shí)的廣度（component, 目的）和深度(sde1: 3年以?xún)?nèi)，sde2: 4年以上，sde3：team lead，org impact可小可大，深度，3+：org lead, 領(lǐng) 閱讀全文