摘要:
前言: 最近剛接觸寫Hive SQL,卻發現許多查詢的執行速度遠不如預期。為了提升查詢效率,我去閱讀了《Hive編程指南》,希望通過理解其底層機制來找到優化的方式,并為未來能編寫出高效的SQL奠定基礎。謹以此文做個記錄。 一、Hive因何而生 先有Hadoop再有Hive Hadoop實現了一個計算 閱讀全文
posted @ 2024-01-25 11:27
京東云技術團隊
閱讀(52)
評論(0)
推薦(0)
摘要:
一、背景介紹 上一篇文章介紹了CDP中,面對單個標簽或群體數十億的數據如何存儲 我們都知道數據倉庫的概念,它的里邊存儲了我們所有的數據,其中就包含了標簽或群體所依賴的數據,但是這些數據并不能直接拿來使用,想要變成業務需要的標簽或群體數據,還需要進行加工。 數據工程師將數倉里的原始數據,經過一些列的數 閱讀全文
posted @ 2024-01-24 10:07
京東云技術團隊
閱讀(239)
評論(0)
推薦(0)
摘要:
過去一年,圍繞開放生態建設、低價心智等主要方向,京東零售技術團隊持續攻堅。從百億補貼、調整流量分配機制為用戶提供低價品質好貨,到簡化商家進駐流程、優化商家體驗,帶動商家數量增長和平臺生態活躍,再到將大模型結合到內部大量業務場景,探索效率提升……快速響應、助力業務的同時,京東零售技術團隊繼續夯實增強自 閱讀全文
posted @ 2024-01-23 15:31
京東云技術團隊
閱讀(294)
評論(0)
推薦(0)
摘要:
前言 如何評定一個系統的質量?什么樣的系統或者軟件可以稱之為高質量?可以從三個角度來看,一是架構設計,例如技術選型、分布式系統中的數據一致性考慮等,二是項目管理,無論是敏捷開發還是瀑布式開發,都應當對技術負債進行清理,對代碼進行重構等,最后離不開的是代碼質量,代碼質量的高低直接影響系統的可維護性和可 閱讀全文
posted @ 2024-01-22 11:43
京東云技術團隊
閱讀(50)
評論(0)
推薦(0)
摘要:
1、五種連接策略 選擇連接策略的核心原則是盡量避免shuffle和sort的操作,因為這些操作性能開銷很大,比較吃資源且耗時,所以首選的連接策略是不需要shuffle和sort的hash連接策略。 ?Broadcast Hash Join(BHJ):廣播散列連接 ?Shuffle Hash Join 閱讀全文
posted @ 2024-01-22 10:35
京東云技術團隊
閱讀(78)
評論(0)
推薦(0)
摘要:
Ngnix已經廣泛應用于J-one和Jdos的環境部署上,本文對Ngnix的常用的配置和基本功能進行講解,適合Ngnix入門學習。 1 核心配置 找到Nginx安裝目錄下的conf目錄下nginx.conf文件,Ngnix的基本功能配置是由它提供的。 1.1 配置文件結構 Nginx的配置文件(co 閱讀全文
posted @ 2024-01-19 14:34
京東云技術團隊
閱讀(102)
評論(0)
推薦(1)
摘要:
一個簡單的自我介紹 項目規模 截止目前上萬次代碼提交,總代碼行數1 超過21萬行,其中人工維護的代碼超過 13萬行,近千個文件。 前端線上服務直接對接的后端服務,達十多個。 跟很多應用一樣, 它有行云的入口, 也有獨立的服務, 還有單獨的插件接口 它是行云的子應用, 也是其它應用的主應用 技術棧 代 閱讀全文
posted @ 2024-01-18 10:05
京東云技術團隊
閱讀(82)
評論(0)
推薦(0)
摘要:
隨著鴻蒙系統的不斷完善,許多應用廠商都希望將自己的應用移植到鴻蒙平臺上。最近,Taro 發布了 v4.0.0-beta.x 版本,支持使用 Taro 快速開發鴻蒙原生應用,也可將現有的小程序轉換為鴻蒙原生應用。 在 《使用 Taro 開發鴻蒙原生應用》 系列文章中,我們已經介紹了 鴻蒙的基本概念 和 閱讀全文
posted @ 2024-01-17 12:04
京東云技術團隊
閱讀(276)
評論(0)
推薦(0)
摘要:
開篇: 圖片是本人隨筆畫的,有點粗糙,望大家諒解,如有不妥之處,請聯系我們,感謝 一、索引到底是什么 .索引是幫助mysql高效獲取數據的排好序的數據結構 .索引是存儲在文件里的 .數據結構: 二叉樹 HASH BTREE 如果沒有索引的話,循環一條一條的找,找一次就是一次IO,這樣速度就會很慢 我 閱讀全文
posted @ 2024-01-16 11:22
京東云技術團隊
閱讀(180)
評論(0)
推薦(0)
摘要:
本文主要介紹了cdn加速在項目中的實現,以及使用Lighthouse對前端性能指標進行監測打分。 Lighthouse簡介 Lighthouse是谷歌開發并開源的web性能測試工具,用于改進網絡應用的質量,可以將其作為一個Chrome擴展程序運行,或從命令行運行。只需要為其提供一個需要審查的地址,L 閱讀全文
posted @ 2024-01-16 10:35
京東云技術團隊
閱讀(49)
評論(0)
推薦(0)
浙公網安備 33010602011771號