查詢緩存的作用? 執行查詢語句的時候,會先查詢緩存。不過,MySQL 8.0 版本后移除,因為這個功能不太實用 開啟查詢緩存后在同樣的查詢條件以及數據情況下,會直接在緩存中返回結果。這里的查詢條件包括查詢本身、當前要查詢的數據庫、客戶端協議版本號等一些可能影響結果的信息。 查詢緩存不命中的情況: 任 ...
【IoTDB 視頻小課】第十八期,將為你介紹塑造全球開源生態的重要推手! 關于 IoTDB,關于物聯網,關于時序數據庫,關于開源... 一個問題重點,3-5 分鐘,我們講給你聽: 350+ 開源項目的“幕后推手” 你知道全球無數頂尖開源項目背后的“隱形守護者”是誰嗎? Apache 軟件 ...
一款日均訪問人次超千萬的短視頻App,當面對高并發流量時該如何及時有效地處理用戶請求?本文通過快手APP的技術實踐為大家帶來參考價值 ...
背景 在 Uber Eats 優食的規模上,圖像處理是運營的必要條件。該平臺管理著數億張產品圖片,每小時有數百萬次更新流經系統。每張圖像都有成本:網絡帶寬、處理時間、存儲空間和 CDN 占用空間。隨著 Uber Eats 優食從餐廳擴展到雜貨、酒類和家居用品,形象渠道開始緊張。例如,單一產品(例如一 ...
聚集索引(Clustered Index)和非聚集索引(Non-Clustered Index)是索引設計的核心概念,二者的本質區別體現在 與數據物理存儲的關聯方式 上,這種區別直接決定了它們的性能特性和適用場景。 ...
在PostgreSQL中,利用copy命令快速導入導出數據到平面文件CSV和TXT 1,利用copy to 命令導出表數據到CSV,copy from 命令從CSV文件中導入數據到表,可以自定義,換行符。 create table if not exists test_copy ( c1 int G ...
作為一款完全自主研發的數據庫,OceanBase可以幫助企業節省至少60%的存儲成本,且同時實現硬件成本與運維成本的降低,其核心技術是什么?本文詳細解讀 ...
MySQL主備的基本原理 狀態1中,客戶端讀寫都是直接訪問節點A,節點B只是將節點A的更新同步過來在本地執行。當需要主備切換時,就變成狀態2。 狀態1中沒有直接訪問節點B,但仍然建議把節點B設置成只讀模式,原因如下: 有時一些運營類的查詢語句會被放到備庫上查看,設置為只讀可以防止誤操作; 防止切換邏 ...
1,pg_audit編譯安裝 參考:https://github.com/pgaudit/pgaudit --pgaudit 編譯安裝 git clone https://github.com/pgaudit/pgaudit.git cd pgaudit/ git checkout REL_16_S ...
PostgreSQL記錄SQL日志的參數有三個,如下,這三個參數都可以記錄某種日志,也可以單獨設置,也可以相互設置,因此情況比較多,某些情況下會生成一些奇怪的日志內容,需要弄清楚每一個參數的具體含義,有助于做出合理的配置 1,log_duration = on|off;2,log_statement ...
只要redo log和binlog保證持久化到磁盤,就能確保MySQL異常重啟后,數據可以恢復。本文講講MySQL寫入binlog和redo log的流程。 binlog的寫入機制 binlog的寫入邏輯比較簡單:事務在執行過程中,先把日志寫到binlog cache,事務提交的時候,再把binlo ...
本文分享自天翼云開發者社區《Doris 性能優化》,作者:i****n Doris 通過多種查詢優化策略,如 Join 優化、謂詞下推、運行時過濾,字典優化,算子優化等,來提供高性能的查詢能力。來提升整體性能 Join 優化 在查詢中,Join 操作往往是非常耗時的。Doris 提供了多種 Join ...
謂詞下推的原理是將sql 中的限制條件的邏輯盡可能的提前在sql 中執行,從而減少加載的數據量,提升下游數據處理的效率以及減少內存消耗。該種方式在hive,MySQL,Doris的語法中均適用 。 ...
工具分享-通過開源工具 tuning-primer快速巡檢MySQL5.7 簡介 今天推薦一個開源的調優腳本tuning-primer.sh,這是一個非常實用的性能調優工具,能夠快速檢查 MySQL 的運行狀態,生成詳細的性能報告,并提供優化建議。通過這個腳本,可以更高效地完成調優工作,節省大量的時 ...
[20250727]關于訪問系統視圖v$sqlXXXX的問題.txt--//如果定位解決問題,經常會訪問系統視圖以v$sql開頭的視圖。例如v$sql視圖,其底層視圖是x$kglcursor_child,v$sqlarea其底層視--//圖是x$kglcursor_child_sqlid.如果幾個會 ...
本文分享自天翼云開發者社區《數據治理之數據質量評估維度及方法》,作者:i****n 從某種程度上來說“數據=金錢”,數據質量的好壞直接決定著數據價值高低,直接或簡介影響一個企業的決策方向。數據質量管理是指在數據創建、加工、使用和遷移等過程中,通過開展數據質量定義、過程控制、監測、問題分析和整改、評估 ...
近日,“2025可信數據庫發展大會”在北京隆重召開。作為數據庫產業的重要建設者,天翼云受邀出席,聯合中國信息通信研究院及中國通信標準化協會大數據技術標準推進委員會(CCSA TC601)發布多項最新技術實踐成果,并進行了“中國電信天翼云分布式數據庫創新之路”和“天翼云TeleDB數據庫的SQL治理之 ...
postgresql pg_cron 擴展設置定時任務 原本看起來非常簡單的一個擴展以及使用,最后還是遇到一個奇葩的問題,設置好定時任務之后,所有的任務執行時都提示connection failed,最后也找到相應的解決方案。 ### 1,編譯安裝 git clone https://github. ...
1. 基本信息 用數據說服:如何設計、呈現和捍衛你的數據 米羅·卡扎科夫 著 金城出版社有限公司,2025年07月出版 1.1. 讀薄率 書籍總字數8.6萬字,筆記總字數26227字。 讀薄率26227÷86000≈30.5% 1.2. 讀厚方向 DataMesh權威指南 數據的邊界:隱私與個人數據 ...
去年寫的一個小工具,用于在線獲取 MySQL binlog 的大小、開始時間、結束時間和持續時長。 什么場景下會用上這個工具呢? 云服務場景,無法登錄 MySQL 服務器查看 binlog 的時間戳信息。 主從延遲時,可以使用這個工具來查看 binlog 的大小或者某個時間段 binlog 的寫入量 ...