臉書數據庫項目負責人:我從做基礎設施中學到的42件事
編輯【景同】 發布于 2022-05-16 21:06:04
最近讀到了分布式系統研究者MaheshBalakrishnan的一篇博客《42thingsIlearnedfrombuildingaproductiondatabase》。同樣做...
閱讀()評論(0) 贊()
編輯【景同】 發布于 2022-05-16 21:06:04
最近讀到了分布式系統研究者MaheshBalakrishnan的一篇博客《42thingsIlearnedfrombuildingaproductiondatabase》。同樣做...
閱讀()評論(0) 贊()
編輯【陽煦】 發布于 2022-05-16 21:05:53
SQL去重是數據分析工作中比較常見的一個場景，今天給大家具體介紹3種去重的方法。在使用SQL提數的時候，常會遇到表內有重復值的時候，比如我們想得到uv（獨立訪客），就需要做去重。在MySQL中...
閱讀()評論(0) 贊()
編輯【樂詠】 發布于 2022-05-16 21:04:54
具體現象應用遷移至我們的PaaS平臺后會出現偶發性的502問題，錯誤見圖片：相比于程序的請求量，錯誤肯定是比較少的，但是錯誤一直在發生，會影響調用方的代碼，需要檢查下問題原因。為啥我們只看到了POST...
閱讀()評論(0) 贊()
編輯【樂詠】 發布于 2022-05-16 21:04:34
MYSQL的索引優化,如果此時此刻看到索引的優化，僅僅想到添加適合的索引，是不完全的，索引的優化本身就具有很多的不確定性。1索引會隨著時間的推移，有性能的衰減2索引會隨著數據量的增加，有性能的衰...
閱讀()評論(0) 贊()
編輯【樂詠】 發布于 2022-05-16 14:51:56
Oracle11.2.0.4單實例----Oracle19C-RAC遷移模擬測試總體思想：通過RMAN物理備份在備庫恢復主庫數據，后續通過在主庫停業務后，將從備份后的所有日志都同步到新庫應用，重新配置...
閱讀()評論(0) 贊()
編輯【澤洋】 發布于 2022-05-16 14:51:46
行格式(rowformat)決定了我們插入的一行數據，是如何存儲在數據庫中的，MySQL有4種行格式，分別是REDUNDANT，COMPACT，DYNAMIC，COMPRESSED。不同行格式區別:...
閱讀()評論(0) 贊()
編輯【溫瑜】 發布于 2022-05-16 14:51:26
來源:https://c1n.cn/GM8hb目錄場景說明模擬數據場景分析讀取數據處理數據遇到的問題場景說明現有一個10G文件的數據，里面包含了18-70之間的整數，分別表示18-70歲的...
閱讀()評論(0) 贊()
編輯【樂詠】 發布于 2022-05-16 14:51:02
寫在前面：為什么要用ElasticSearch？我們的應用經常需要添加檢索功能，開源的ElasticSearch是目前全文檢索引擎的首選。它可以快速的存儲、搜索和分析海量數據。ElasticSear...
閱讀()評論(0) 贊()
編輯【陽煦】 發布于 2022-05-12 18:32:58
這個月底要召開一個企業運維數字化轉型的研討會，昨天一個合作伙伴和我討論一些研討會的話題問題。數字化轉型是近期十分熱門的話題，各大國企央企也把數字化轉型作為未來幾年的工作重點。不過針對于IT運維，數字化...
閱讀()評論(0) 贊()
編輯【溫瑜】 發布于 2022-05-12 18:32:57
設想一個場景：有100萬用戶同時與一個進程保持著TCP連接，而每一時刻只有幾十個或幾百個TCP連接是活躍的(接收TCP包)，也就是說在每一時刻進程只需要處理這100萬連接中的一小部分連接。那么，如何才...
閱讀()評論(0) 贊()
編輯【溫瑜】 發布于 2022-05-12 18:32:52
Python在程序并行化方面多少有些聲名狼藉。撇開技術上的問題，例如線程的實現和GIL，我覺得錯誤的教學指導才是主要問題。常見的經典Python多線程、多進程教程多顯得偏"重"。而且往往隔靴搔...
閱讀()評論(0) 贊()
編輯【樂詠】 發布于 2022-05-11 21:32:37
作者簡介曹杰，中國結算上海分公司高級經理，從事系統運維管理工作。本文以容器形式部署了開源自動化運維工具Ansible，基于自帶的MySQL管理模塊編排了playbook配置文件，最終實現M...
閱讀()評論(0) 贊()
編輯【景同】 發布于 2022-05-11 21:32:32
以下文章來源于公眾號-蘿卜大雜燴，作者周蘿卜今天我們來學習字符串數據類型相關知識，將討論如何聲明字符串數據類型，字符串數據類型與ASCII表的關系，字符串數據類型的屬性，以及一些重要的字符串方法和...
閱讀()評論(0) 贊()
編輯【澤洋】 發布于 2022-05-11 21:32:31
rm-rf命令該命令可能導致不可恢復的系統崩壞。>rm-rf/#強制刪除根目錄下所有東西。>rm-rf*#強制刪除當前目錄的所有文件。>rm-rf.#強制刪除當前文件夾及其子文件夾。執行rm-r...
閱讀()評論(0) 贊()
編輯【樂詠】 發布于 2022-05-11 18:33:40
以下文章來源于公眾號-云祁的數據江湖，作者云祁如何設計一套切實可行的數據倉庫呢？我們要明白，對于數據倉庫的設計是不能完全依賴于業務的需求，但往往又必須要服務于業務的價值。因此，在構建數據倉庫前，我們...
閱讀()評論(0) 贊()
編輯【澤洋】 發布于 2022-05-11 18:33:38
來源|CSDN（ID：CSDNnews）誕生于1972年的C語言已經50歲了，目前來看，它還像20歲的小伙一樣活力四射，似乎永不會退休，并且正在賦能全世界重量級應用系統的運行。盡管C語言面世多年，...
閱讀()評論(0) 贊()
編輯【景同】 發布于 2022-05-11 18:33:31
很多大數據計算都是用SQL實現的，跑得慢時就要去優化SQL，但常常碰到讓人干瞪眼的情況。比如，存儲過程中有三條大概形如這樣的語句執行得很慢：selecta,b,sum(x)fromTgr...
閱讀()評論(0) 贊()
編輯【陽煦】 發布于 2022-05-09 18:32:45
前言在生產環境中，如何保證在服務升級的時候，不影響用戶的體驗，這個是一個非常重要的問題。如果在我們升級服務的時候，會造成一段時間內的服務不可用，這就是不夠優雅的。那什么是優雅的呢？主要就是指在服務升級...
閱讀()評論(0) 贊()
編輯【澤洋】 發布于 2022-05-09 18:32:41
本文轉自博客園，原文：https://www.cnblogs.com/apink/p/15767687.html，版權歸原作者所有。參數解釋使用Prometheus配置kubernetes環境...
閱讀()評論(0) 贊()
編輯【景同】 發布于 2022-05-09 18:32:41
以下文章來源于公眾號-孤獨煙，作者孤獨煙引言今天，重新回顧一下緩存擊穿這個問題！之所以寫這個文章呢，因為目前網上流傳的文章落地性太差(什么布隆過濾器啊，布谷過濾器啊，嗯，你們懂的)，其實這類方案并不適...
閱讀()評論(0) 贊()
編輯【溫瑜】 發布于 2022-05-09 18:32:41
與以磁盤存儲為主的普通數據庫相比，內存數據庫的數據訪問速度可以高出幾個數量級，能大幅提高運算性能，更適合高并發、低延時的業務場景。不過，當前大部分內存數據庫仍然采用SQL模型，而SQL缺乏一些...
閱讀()評論(0) 贊()
編輯【澤洋】 發布于 2022-05-09 18:32:41
作為一名Linux工程師，會寫好的腳本不僅能提高工作效率，還能有更多的時間做自己的事。最近在網上沖浪的時候，也注意收集一些大佬寫過的腳本，匯總整理一下，歡迎收藏，與君共勉?。?）用戶猜數字#!/b...
閱讀()評論(0) 贊()
編輯【澤洋】 發布于 2022-05-09 18:32:33
文件比較在Linux中起著重要的作用，特別是對于程序員和Linux系統管理員。例如，如果您想找到兩個源代碼文件之間的差異來開發補丁，那么您需要一個文件比較工具來簡化這個過程。Linux中有幾...
閱讀()評論(0) 贊()
編輯【澤洋】 發布于 2022-05-09 18:32:27
如何讓你的Kubernetes集群使用GPU節點CUDA驅動程序如果您還沒有這樣做，請確保您已在GPU節點上安裝了NVIDIACUDA驅動程序。CUDA是來自nvidia的并行計算平臺。ht...
閱讀()評論(0) 贊()
編輯【景同】 發布于 2022-05-09 18:32:22
Linux是目前應用最廣泛的服務器操作系統，基于Unix，開源免費，由于系統的穩定性和安全性，市場占有率很高，幾乎成為程序代碼運行的最佳系統環境。linux不僅可以長時間的運行我們編寫的程序代碼，還可...
閱讀()評論(0) 贊()
509006974