最美情侣中文字幕电影,在线麻豆精品传媒,在线网站高清黄,久久黄色视频

歡迎光臨散文網(wǎng) 會員登陸 & 注冊

21 -【cmu15-721】【高級數(shù)據(jù)庫系統(tǒng)】【卡內(nèi)基梅隆大學(xué)】【中英字幕】

2023-07-22 00:37 作者:alexphil  | 我要投稿

1. Snowflake是一個管理的OLAP數(shù)據(jù)庫系統(tǒng),它使用C++編寫,采用共享磁盤架構(gòu)。

2. Snowflake使用本地附加磁盤作為計算節(jié)點的緩存,以提高性能。

3. Snowflake采用自定義的SQL方言和客戶端-服務(wù)器網(wǎng)絡(luò)協(xié)議。

4. Snowflake的架構(gòu)包括數(shù)據(jù)存儲、虛擬數(shù)據(jù)倉庫和云服務(wù)三個部分。

5. Snowflake的執(zhí)行架構(gòu)由工作節(jié)點和云服務(wù)組成,工作節(jié)點是運行在虛擬數(shù)據(jù)倉庫中的單個實例。

6. Snowflake使用本地磁盤上的緩存來存儲之前的工作進程訪問或檢索的文件以及可能生成的任何結(jié)果。

7. Snowflake使用一種簡單的緩存替換策略(LRU)來管理緩存,而不需要復(fù)雜的策略。

8. Snowflake使用一種一致性哈希分配文件給各個工作節(jié)點的方法,并通過直接通信發(fā)送數(shù)據(jù),而不是像Dremel和Spark SQL那樣使用洗牌階段。

9. Snowflake是一個向量化引擎,可以執(zhí)行多個查詢計劃片段,并使用LLVM風(fēng)格的編譯來進行序列化和反序列化。

10. Snowflake支持工作節(jié)點之間的工作竊取和靈活計算,以提高查詢的性能。它還支持將查詢結(jié)果存儲到共享磁盤存儲中,以便其他查詢可以訪問。

11. Snowflake決定不再使用HDFS作為默認選擇,而是在本地磁盤上構(gòu)建更好的緩存層,以隱藏S3上的查找成本。

12. Snowflake使用自己的專有格式將表分割成微分區(qū),每個微分區(qū)約為50到500兆字節(jié),壓縮后平均每個文件約為16兆字節(jié)。

13. Snowflake通過后臺服務(wù)自動重寫微分區(qū)以重新聚集和重新組織數(shù)據(jù),以優(yōu)化查詢性能。

14. Snowflake支持半結(jié)構(gòu)化數(shù)據(jù),提供了三種特殊的數(shù)據(jù)類型:variants、arrays和objects。

15. Snowflake使用一致性哈希映射來保證節(jié)點之間的負載均衡,并避免在節(jié)點變動時清除本地緩存。

16. 在處理元組時,需要使用另一個評估引擎來直接處理統(tǒng)計數(shù)據(jù)。

17. Databricks和Snowflake之間的爭論涉及到他們各自的性能和成本。

18. Snowflake聲稱Databricks的數(shù)字是錯誤的,并提供了自己的實驗結(jié)果來證明。

19. Databricks反駁Snowflake的說法,并堅持他們的實驗結(jié)果是正確的。

20. Snowflake在2022年推出了混合表和事務(wù)支持的功能。

21. Snowflake是一個成功的云數(shù)據(jù)庫服務(wù)公司,主要競爭對手是微軟、亞馬遜和谷歌的BigQuery。

22. Snowflake最初使用FoundationDB作為其事務(wù)性目錄服務(wù)的存儲引擎,但FoundationDB在2015年被蘋果收購,導(dǎo)致Snowflake需要將自己的開發(fā)成果與開源的FoundationDB進行合并。

23. FoundationDB是一個具有強大容錯性和可靠性的事務(wù)性鍵值存儲系統(tǒng),其獨特之處在于它們首先構(gòu)建了一個數(shù)據(jù)系統(tǒng)的模擬器,以測試系統(tǒng)的容錯性和魯棒性。

24. Snowflake在構(gòu)建核心OLAP引擎的同時,也有一個相當龐大的團隊專門負責(zé)FoundationDB的開發(fā)和維護。

25. 盡管關(guān)于Snowflake內(nèi)部系統(tǒng)的詳細信息不太清楚,但Snowflake公司在CMU進行了一些演講,可以從中了解到一些關(guān)于他們的工作方式的信息。

21 -【cmu15-721】【高級數(shù)據(jù)庫系統(tǒng)】【卡內(nèi)基梅隆大學(xué)】【中英字幕】的評論 (共 條)

分享到微博請遵守國家法律
溧阳市| 双柏县| 开原市| 嘉祥县| 杭锦旗| 昌都县| 陈巴尔虎旗| 六枝特区| 四会市| 商都县| 桂林市| 江阴市| 巴马| 石棉县| 扎赉特旗| 文安县| 宜章县| 定日县| 东丰县| 商都县| 湘阴县| 壶关县| 瑞金市| 揭东县| 绥滨县| 宁化县| 安顺市| 中山市| 尼玛县| 康保县| 铜陵市| 腾冲县| 十堰市| 本溪| 双鸭山市| 措勤县| 武定县| 新民市| 沈阳市| 特克斯县| 岢岚县|