日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

挖财后端架构简介

發布時間:2023/12/13 编程问答 30 豆豆
生活随笔 收集整理的這篇文章主要介紹了 挖财后端架构简介 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

挖財后端技術用的主要是比較大眾的東西,Web容器用Tomcat,框架主要是Spring MVC,也有少量的Play,中間服務層是Dubbo,微容器用Spring Boot,服務注冊這一塊是用ZooKeeper,核心業務開發方式還是圍繞著Spring和Mybatis等;數據的存儲這塊是MySQL和Hbase,分布存儲這塊是用阿里巴巴之前開源的一個中間件Cobar。消息和實時計算這塊主要是Kafka, Storm,日志以及監控系統則是用典型的ELK和Zabbix。另外我們將要放棄MongoDB和Memcached,并不是這些產品自身的問題,而是人的因素,最早的架構師對MongoDB很熟,后來因為他離開,這塊的一些問題缺乏強有力的人把控,就放棄了。其他人對MySQL和Hbase更熟悉,并且這兩種組合基本滿足我們的需求了。Memcached則是被Redis替代。總的來說,我們裁剪掉了一些之前使用的相似產品,減少為一種,主要是基于自身運維能力考慮的,不在于這些技術是否足夠好或者是否符合團隊的特性和遇到的問題,而是你能不能把它維護的好,或者說風險控制好。

業務上面我們大概也是比較典型的。基礎設施是一塊,然后中間是服務,上面是日常的應用。基礎設施就包括典型的存儲、消息、框架,還有發布、運維、監控等等。中間就是現在典型的SOA服務,用戶的資產、服務、流水、交易等等,所有的服務采用Spring Boot打包部署,主要便于運維上的統一和方便做一些切面層的事情。最上面是應用,包括社區、記帳、錢管家、理財。而安全和風控會切入在每一個環節。

其實作為一個互聯網的金融公司,很多時候我們對金融會有一點點陌生,在我們看來做一個理財產品或者一個理財業務其實和電商業務有很大的相似之處。主要就是理財產品,他也是一個商品,這個商品可能有高的回報,最初形成這個商品的時候背后有一套綜合系統或者說有一套邏輯。并且購買這個商品之后,這個商品是有歷史的,他的收益是在變化的,所以簡化之后,我們發現跟電商系統是相似的。

這就是典型的架構,前面是Web或Gateway,中間是Service,中間層協議是Dubbo默認方式或者是HTTP。

數據存儲這一塊主要是MySQL和Hbase,當前還有小部分數據使用的Mongo,ORMapping這塊我們用了MyBatis。數據的水平擴展主要是基于剛才提到的Cobar,它是阿里比較成功的開源產品之一。Cobar支持數據的二維擴展,能滿足我們的場景,比如說幾千萬用戶的流水記錄可以按用戶加時間的維度來劃分。如果單純按時間的維度分區,在查詢用戶的流水時要散落到各個分區上,對各個分區的壓力都較大。而按用戶的維度則可能導致這個分區在一定時間后達到我們預設的容量上線,因為一天有幾百萬甚至上千萬的流水進入。二維的方式可以解決這些問題。盡管我們后來發現用戶的數據大多在最近一段時間內較熱,時間比較早的數據相對較冷,只用了Cobar的一維擴展方式,將冷數據歸檔到Hbase集群來解決。在數據的在線處理這塊,有很多用Akka框架的程序,比如計息系統主要是運算的,所以Akka很適合干這個事情。

自動記帳這塊主要是錢管家這款產品,他會根據銀行的帳單把這些數據匯總到這個產品里面,主要是從其他系統匯聚出原始的數據,根據這些數據我們會進行分類,進行加工和抽取,最后匯總到database,這個過程的思路就是command+pipeline下面這套組合,只不過是分布式命令和管道,分布式里面命令是Akka所承擔的角色。

數據分析這塊,Canal會把binlog數據丟到Kafka然后同步到其他系統。在線分析主要通過Storm進行,數據分析過程中緩存用了豌豆莢的Codis。離線分析目前用Hadoop/Spark的方式,數據分析之后,一部分存到Hbase,另一部分在通過Cober存儲到MySQL里面。

轉載于:https://www.cnblogs.com/linjiqin/p/6406853.html

總結

以上是生活随笔為你收集整理的挖财后端架构简介的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。

主站蜘蛛池模板: 久久久久亚洲国产 | 久久亚洲少妇 | 亚洲视频网站在线观看 | 国产女主播一区二区 | 国产精品熟妇一区二区三区四区 | 日韩欧美国产一区二区三区 | 国产高清在线免费 | 色www亚洲国产张柏芝 | 日韩视频免费播放 | 黄色a一级视频 | 懂色av一区二区三区免费观看 | av番号网 | 办公室荡乳欲伦交换bd电影 | 国产男女啪啪 | 欧美激情一二区 | 色欧美综合 | 国产激情视频在线播放 | 国产传媒第一页 | 国产精品久久久久影院 | 久久网一区二区 | 中文字幕丝袜 | 99久久精品一区二区成人 | 欧美精品五区 | 色婷婷基地 | 黄色污污网站在线观看 | 天天舔天天 | 啦啦啦av| 中国少妇乱子伦视频播放 | 天天舔天天插 | 久久久久三级 | 亚洲图片在线 | 手机av网址 | 日本免费黄色网 | 久久成人高清 | 欧美一区二区三区 | freesex性hd公交车上 | 一区二区不卡视频 | 国产日韩精品在线观看 | 成年人的视频网站 | 婷婷色一区二区三区 | 日产精品久久久 | 成人午夜激情 | 国产在线xxx| 日批视频在线看 | 国产精品视频区 | 国产色婷婷一区二区三区竹菊影视 | 三级黄色图片 | 成年人黄色免费视频 | 日本在线不卡一区二区三区 | 男女在楼梯上高潮做啪啪 | 成人免费大片黄在线播放 | 亚洲av综合av一区二区三区 | 91直接看| 日韩av伦理 | 亚洲天堂女人 | 一区二区三区久久久久 | 欧美激情电影一区二区 | 深夜在线网站 | 丁香六月婷婷综合 | 鸭子av| caoprom在线 | 福利网址在线观看 | 最新黄色av网址 | 国产免费a视频 | 色综合图区 | 日本大奶少妇 | 女同性做爰全过程 | 久久久久久久国产精品毛片 | 深夜视频在线免费 | 不卡的av在线播放 | 精人妻无码一区二区三区 | 一本一道波多野结衣av黑人 | 午夜激情影视 | 台湾佬在线 | 日韩视频久久 | 日本免费一区二区三区四区 | 人妻丰满熟妇岳av无码区hd | 日韩欧美国产一区二区三区在线观看 | 日韩视频免费观看高清完整版 | 老司机午夜免费视频 | 亚洲美女影院 | 亚洲无线视频 | 有码中文| 国产91在线观看 | 九热视频在线观看 | 性色av蜜臀av浪潮av老女人 | 蜜桃视频导航 | 9色在线| 黑人借宿巨大中文字幕 | 国产丝袜视频在线观看 | 河北彩花av在线播放 | 日日干夜夜拍 | 欧美巨大荫蒂茸毛毛人妖 | 成人刺激视频 | 黄色免费视频观看 | 欧美精品五区 | 国产精品99一区二区三区 | 国产一级二级三级视频 | 色婷婷综合网 |