字節跳動數據平臺

摘要： 實時數據湖在字節跳動的實踐 閱讀全文

摘要： 更多技術交流、求職機會、試用福利，歡迎關注字節跳動數據平臺微信公眾號，回復【1】進入官方交流群 “一站式數據治理解決方案及平臺架構”的分享會分為四個部分展開： 首先，明確數據治理的概念，從平臺視角出發，介紹在字節跳動內部數據治理所服務的目標 其次，介紹字節跳動內部數據治理的現狀與我們需要解決的問題 閱讀全文

摘要： UniqueMergeTree 開發的業務背景 首先，我們看一下哪些場景需要用到實時更新。 我們總結了三類場景： 第一類是業務需要對它的交易類數據進行實時分析，需要把數據流同步到 ClickHouse 這類 OLAP 數據庫中。大家知道，業務數據諸如訂單數據天生是存在更新的，所以需要 OLAP 數據 閱讀全文

摘要： 更多技術交流、求職機會、試用福利，歡迎關注字節跳動數據平臺微信公眾號，回復【1】進入官方交流群 字節跳動數據平臺開發套件數據開發團隊自研了基于依賴關系的全鏈路智能監控報警——基線監控，目前已在字節跳動內部得到廣泛使用，覆蓋抖音、電商、廣告等100+個項目，SLA任務的基線監控覆蓋率超過80%。 隨著 閱讀全文

摘要： 更多技術交流、求職機會、試用福利，歡迎關注字節跳動數據平臺微信公眾號，回復【1】進入官方交流群 作為一款面向 ToB 市場的產品——火山引擎 A/B 測試（DataTester）為了滿足客戶對數據安全、合規問題等需求，探索私有化部署是產品無法繞開的一條路。 在面向 ToB 客戶私有化的實際落地中，火 閱讀全文

摘要： 基于字節跳動分布式治理的理念，數據平臺數據治理團隊自研了SLA保障平臺，目前已在字節內部得到廣泛使用，并支持了絕大部分數據團隊的SLA治理需求，每天保障的SLA鏈路數量過千，解決了數據SLA難對齊、難保障、難管理的問題。 背景介紹 SLA（Service Level Agreement）：服務級別協 閱讀全文

摘要： SparkSQL是Spark生態系統中非常重要的組件。面向企業級服務時，SparkSQL存在易用性較差的問題，導致難滿足日常的業務開發需求。本文將詳細解讀，如何通過構建SparkSQL服務器實現使用效率提升和使用門檻降低。 前言 Spark 組件由于其較好的容錯與故障恢復機制，在企業的長時作業中使用 閱讀全文

摘要： - 文末立即下載白皮書原文 - 近期，《火山引擎A/B測試總體經濟影響白皮書》正式發布。這份白皮書由市場研究公司Forrester調研撰寫，揭示了A/B測試對于企業營收增長、運營成本、生產力優化等方面的重要影響。基于對多家企業調研，Forrester發現企業營收增長與其洞察力高度相關，領先企業的營收 閱讀全文

摘要： 作為數據目錄產品，Data Catalog 通過匯總技術和業務元數據，解決大數據生產者組織梳理數據、數據消費者找數和理解數的業務場景，并服務于數據開發和數據治理的產品體系。本文介紹了字節跳動 Data Catalog 系統的構建和迭代過程，將分為上、下篇發布。上篇主要圍繞 Data Catalog 閱讀全文

摘要： 面向快速迭代，如何降低上線風險？字節跳動 DataTester 團隊找到風險與迭代的平衡點——漸進式發布。 閱讀全文