大数据与云计算技术周报(第148期)
“大數據” 三個字其實是個marketing語言,從技術角度看,包含范圍很廣,計算、存儲、網絡都涉及,知識點廣、學習難度高。
? ??
本期會給大家奉獻上精彩的:實時數據、ELK、redis、MongoDB、spark、規則引擎、推薦系統。全是干貨,希望大家喜歡!!!
1ELK
本文主旨是通過一個實際案例來講述下ELK平臺的日常操作方法,幫助我們的后臺工程師能繞開枯燥的理論學習而直接收獲實際應用的干貨,進而幫助提高實際工作效率
https://mp.weixin.qq.com/s/kFmBNjXTXfbcx5bwa5ykHw
2Redis
本文講述了小米是如何將Redis Cluster部署在K8S上提供高質量的服務的
https://mp.weixin.qq.com/s/WrUU3C-C8TBgJfGuOv3qGQ
3實時數倉
趣頭條一直致力于使用大數據分析指導業務發展。目前在實時化領域主要使用 Flink+ClickHouse 解決方案,覆蓋場景包括實時數據報表、Adhoc 即時查詢、事件分析、漏斗分析、留存分析等精細化運營策略,整體響應 80% 在 1 秒內完成,大大提升了用戶實時取數體驗,推動業務更快迭代發展。https://mp.weixin.qq.com/s/rgmTm6tSccVNBj4b8gUTLQ
4MongoDB
本文講述了華為云GaussDB for MongoDB的新特性時間漫游讀能力,這個特性與MongoDB 4.0/4.2提供的readAtClusterTime能力不同的是,
GaussDB for MongoDB時間漫游讀提供的快照是持久化的,及底層實現和案例分享;
https://mongoing.com/archives/72872
5Spark
本文介紹了最新發布的Apache Spark 3.0.0 重要特性全面,解決了3400 多個 ISSUES問題。
https://mp.weixin.qq.com/s/R6XYCUIWDo19mXPybukAYw
6規則引擎
在互聯網時代,安全已經成為企業的命脈。美團信息安全團隊需要采用各種措施和手段來保障業務安全,從而確保美團平臺上的用戶和商戶利益不會受到侵害。
本文主要介紹了美團在打造自有規則引擎Zeus(中文名“宙斯”)的過程中,信息安全團隊遇到的挑戰以及對應的解決方案,并分享了很多踩過的坑,同時還有一些思考和總結。希望對從事安全領域相關工作的同學能夠有所啟發或者幫助。
https://tech.meituan.com/2020/05/14/meituan-security-zeus.html
7Dubbo
本文根據多點生活平臺架構組研發工程師陳鵬,線上主題分享《多點生活在 Service Mesh 上的實踐 -- Istio + MOSN 在 Dubbo場景下的探索之路》整理,文末包含本次分享的視頻回顧鏈接以及 PPT 下載地址。
https://mp.weixin.qq.com/s/oDxuXdpaWf3FG3R7Z1tBmA
8數據湖
Apache Hudi(Hadoop Upserts Deletes and Incrementals)是一個數據湖項目,可在與Apache Hadoop兼容的云存儲系統(包括Amazon S3、Aliyun OSS)上進行流數據處理。
https://mp.weixin.qq.com/s/pLTNuocMLFekU0K1EiLZ3g
9spark
Spark底層原理概述
https://mp.weixin.qq.com/s/M-Umwa9405QSamB8EsB3Vw
10推薦系統
在本文中,將詳細介紹多種類型的推薦系統,具體介紹基于近鄰算法的推薦引擎、個性化推薦引擎、基于模型的推薦系統和混合推薦引擎等,并分析介紹每種推薦系統的優缺點。
https://mp.weixin.qq.com/s/h5FuxJ9tvzyFTLH-iIYf6Q
11開心一刻
請在座的產品經理舉個手?
“在座產品經理舉個手”相當于問“在座不懂技術的舉個手”。
沒辦法,平常產品經理不管程序員的死活,今天我也不管你的死活。
致謝:
周蓬勃、王在道、孫亞飛、馮藝帆、陳少軍、鄧開表、張少華、薛述強、劉彬、劉超、廖程鵬、董言、呂西金、朱潔、藍隨、黃文輝、郭飛
猜你喜歡
#大數據和云計算機技術社區#博客精選(2017)
NoSQL 還是 SQL ?這一篇講清楚
阿里的OceanBase解密
#大數據和云計算技術#: "四有"社區介紹
大數據和云計算技術周報(第56期)
新數倉系列:Hbase周邊生態梳理(1)
《大數據架構詳解》第2次修訂說明
簡單梳理跨數據中心數據庫
云觀察系列:漫談運營商公有云發展史
云觀察系列:百度云的一波三折
云觀察系列:阿里云戰略觀察
超融合方案分析系列(7)思科超融合方案分析
加入技術討論群
《大數據和云計算技術》社區群人數已經6000+,歡迎大家加下面助手微信,拉大家進群,自由交流。
喜歡QQ群的,可以掃描下面二維碼:
歡迎大家通過二維碼打賞支持技術社區(英雄請留名,社區感謝您,打賞次數超過108+):
總結
以上是生活随笔為你收集整理的大数据与云计算技术周报(第148期)的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: pyecharts绘图
- 下一篇: 电子邮件营销的使用