• <track id="oztn4"></track>
    <sup id="oztn4"><form id="oztn4"></form></sup>
    
    
    <mark id="oztn4"></mark>
  • <dfn id="oztn4"><samp id="oztn4"></samp></dfn>
      《地爆天星小姐》电影 ,麦子交换2免费观看2023年上映时间表 ,莫妮卡《爱我几何》,大牛影库战狼6欧式少女全部视频,三年大片国语版在线看,日本空姐电视剧,电影魔镜号中文字幕,和部长一起去出差旅是第几集
      全球「AI學術(shù)頂會」精華匯聚地
      您正在使用IE低版瀏覽器,為了您的雷峰網(wǎng)賬號安全和更好的產(chǎn)品體驗,強烈建議使用更快更安全的瀏覽器
      此為臨時鏈接,僅用于文章預覽,將在時失效
      金融云 正文
      發(fā)私信給周蕾
      發(fā)送

      0

      網(wǎng)商銀行基礎技術(shù)架構(gòu)部負責人:為什么云原生演進之路,我們非走不可?

      導語:這條路又是否適合傳統(tǒng)金融機構(gòu)呢?

      傳統(tǒng)銀行有必要擁抱云原生嗎?這個問題,或許還沒有太多答案。

      但這些問題,在傳統(tǒng)銀行大步向前、業(yè)務飛速發(fā)展的過程中,一定會遇到:

      • 怎樣才能在整個底盤升級過程中,盡量避免對已上線業(yè)務造成打擾?

      • 想做到架構(gòu)平穩(wěn)切換,壓測方案如何設計定奪?

      • 銀行怎樣改造數(shù)據(jù)中心,才能保證不同業(yè)務間的流量調(diào)度、隔離一切正常?

      而網(wǎng)商銀行就用自身的云原生實踐給出了解答。從云平臺+分布式架構(gòu),演化到云原生、混合云彈性架構(gòu),這家被稱為“國內(nèi)首家跑在云技術(shù)之上”的商業(yè)銀行,他們五年來的云化升級歷程,所遇到的典型挑戰(zhàn)、解決思路都頗具借鑒意義。

      在雷鋒網(wǎng)《AI金融評論》與阿里云聯(lián)合主辦“銀行系統(tǒng)云化升級”實戰(zhàn)體驗營,網(wǎng)商銀行基礎技術(shù)架構(gòu)部負責人蔣易民就深入講解了他們的云原生演進之路。

      欲獲得所有講者視頻以及PPT回顧內(nèi)容,可關(guān)注公眾號“AI金融評論”(ID: aijinrongpinglun),進群獲取回放鏈接。

      以下為經(jīng)雷鋒網(wǎng)AI金融評論編輯的蔣易民演講內(nèi)容:

      今天很榮幸和大家分享網(wǎng)商銀行的實踐情況。

      從云計算走向金融級云原生

      網(wǎng)商銀行基礎技術(shù)架構(gòu)部負責人:為什么云原生演進之路,我們非走不可?

      從這張圖來看,網(wǎng)商銀行主要經(jīng)歷了三代架構(gòu)的演進

      一,2015-2016年,主要是基于云平臺+分布式架構(gòu)建立起來的。整個的部署模式是同城雙活模式。

      二,2017-2018年,在同城雙活的基礎上需要建設一個異地數(shù)據(jù)中心,希望這個異地的數(shù)據(jù)中心在日常過程中能承載業(yè)務流量,能與杭州數(shù)據(jù)中心同時對外提供服務。

      在滿足異地災備要求的同時考慮提升整個IT基礎設施的資產(chǎn)利用率,所以打造了單元化多活架構(gòu),它是一個三地五中心的部署結(jié)構(gòu)。

      三,2019年,網(wǎng)商銀行開始關(guān)注云原生架構(gòu),包括開始引進一些產(chǎn)品,設計建設相關(guān)能力。在這個過程中,我們也建設了混合云彈性架構(gòu),具備了在兩朵云之間調(diào)度資源的能力。

      在上圖右側(cè)的曲線可以看出,從網(wǎng)商銀行開業(yè),全行的容量水位大概是50 TPS,經(jīng)過多年的發(fā)展,到現(xiàn)在已經(jīng)到了5萬TPS。

      但在整個過程中,也發(fā)現(xiàn)了存在的一些問題

      在底層基礎架構(gòu)頻繁演進過程中,需要大量上層業(yè)務研發(fā)去配合。這個時候升級改造,控制進度、周期是非常難的。

      一代架構(gòu)的演進大概需要兩年左右的時間,基本上把全行所有的系統(tǒng)都切過了。過程中,研發(fā)人員的體驗感也不是特別好。

      怎樣才能在整個底盤升級過程中,盡量避免對已上線業(yè)務造成打擾?這也是我們引入云原生最初的一個原動力。

      放眼多年的發(fā)展,我們的路徑是一種雙模路徑——為什么叫雙模?就是在多個架構(gòu)運行過程中,除了對新技術(shù)的探索,最重要的是要做好技術(shù)風險的防控,保證業(yè)務的連續(xù)性。

      網(wǎng)商銀行基礎技術(shù)架構(gòu)部負責人:為什么云原生演進之路,我們非走不可?

      怎樣保證在新舊架構(gòu)演進的過程中,最大化地減少對業(yè)務的影響?

      我們在進行新技術(shù)探索時,也需要做好風險防控。

      新一代架構(gòu)誕生以后,并不是立馬全面投產(chǎn),新老架構(gòu)會經(jīng)歷較長時間并軌運行,這種情況下是基于增量式的交付,逐漸把老的架構(gòu)往新的架構(gòu)演進,并且具備快速回退的能力。

      網(wǎng)商銀行的技術(shù)架構(gòu)特征

      回顧網(wǎng)商銀行多年的發(fā)展,全行的技術(shù)架構(gòu)特征,有以下幾個方面:

      網(wǎng)商銀行基礎技術(shù)架構(gòu)部負責人:為什么云原生演進之路,我們非走不可?

      因為網(wǎng)商銀行是一家沒有線下網(wǎng)點的互聯(lián)網(wǎng)銀行,IT系統(tǒng)需要支撐上億的客戶,每天處理上億的交易量,雙11這種活動也會帶來流量的一個突增。同時還要確保安全、穩(wěn)定和可控。

      從我行的架構(gòu)特征來看,要滿足這些高性能、高可靠,還有高彈性、高標準,低成本、低風險等要求,架構(gòu)演進主要也是圍繞著解決穩(wěn)定、效能、安全、容量、成本等多個方面進行。從安全角度來看,有兩個維度:

      一,信息安全,主要是確保抵御惡意攻擊的能力,保證用戶數(shù)據(jù)和隱私安全。

      二,資金安全,需要避免在交易過程中數(shù)據(jù)不一致,特別是一些缺陷導致公司和客戶的資金出現(xiàn)問題。

      網(wǎng)商銀行基礎技術(shù)架構(gòu)部負責人:為什么云原生演進之路,我們非走不可?

      多年的架構(gòu)演進,“壓艙石”是什么,那非全鏈路追蹤和壓測能力莫屬。如何做到架構(gòu)平穩(wěn)切換,壓測方案的設計是其中重要一環(huán)。

      從開業(yè)至今五年多,三代架構(gòu)的演進整體上是平滑的,我們認為很關(guān)鍵的一點是從第一代架構(gòu)誕生就已具備了全鏈路壓測的本領。我們的方案跟一些業(yè)內(nèi)方案可能存在一些差異,我們是直接拿生產(chǎn)環(huán)境去壓測的,沒有去做模擬的環(huán)境,盡最大可能避免環(huán)境配置和服務器的水位不同帶來的一些差異。

      從上圖可以看出,我們計算上是共享的,但是存儲層面是同庫不同表。從這個角度來看,在壓測過程中是能最大化還原真實的生產(chǎn)流量對生產(chǎn)系統(tǒng)的壓力。

      云原生在網(wǎng)商銀行的關(guān)鍵實踐

      網(wǎng)商銀行基礎技術(shù)架構(gòu)部負責人:為什么云原生演進之路,我們非走不可?

      云原生架構(gòu)是基于云原生技術(shù)的一組架構(gòu)原則和設計模式的集合,最關(guān)鍵的點就是把一些業(yè)務處理邏輯中非功能性的代碼剝離出來,從而讓云設施接管應用中原有的大量非功能特性(如彈性、韌性、安全、可觀測性、灰度等)。

      圖左可以看到,傳統(tǒng)架構(gòu)的一段代碼邏輯包含三部分,非功能性代碼、業(yè)務代碼、三方依賴。
      而云原生,希望非功能性的代碼在理想情況下最大化的減少,相對的業(yè)務代碼只要聚焦自己的業(yè)務即可。

      大量非功能的特性,包括彈性、容量、安全可觀測性、灰度等都會逐漸下沉到底層的基礎設施,特別像高可用能力、容災能力、容量保障、安全特性,還有一些可運維的特性,逐漸讓基礎設施去接管。

      這種情況下可以看出,在我們在部署上會發(fā)生的一些變化。從圖的右下角看到,容器會進行進一步的拆分,拆成應用一個進程,邊車(sidecar)一個進程。

      網(wǎng)商銀行云原生的關(guān)鍵實踐,主要包含4個部分:微服務,容器化,不可變基礎設施,服務網(wǎng)格。

      受益于第一代跟第二代架構(gòu)打下的基礎,前兩個層面已經(jīng)有了較好的積累,我們在進行云原生實踐過程中沒有投入太多的精力,后兩個部分投入很大。

      涉及到不可變基礎設施最重要的一點,就是要完成它的鏡像化改造。對此,我們的要求應用是無狀態(tài)化。

      早期的微服務有部分系統(tǒng)并不具備無狀態(tài)化,此時要求逐漸變成無狀態(tài)化。對于服務網(wǎng)格,我們引進SOFA Mesh來實現(xiàn)Mesh的落地。(注:SOFA是螞蟻金服自主研發(fā)的分布式中間件,Scalable Open Financial Architecture;SOFAMesh即其第三輪開源產(chǎn)品)

      網(wǎng)商銀行基礎技術(shù)架構(gòu)部負責人:為什么云原生演進之路,我們非走不可?

      現(xiàn)在網(wǎng)商銀行部署的一個基線,主要是三地五中心的模式。

      網(wǎng)商銀行基礎技術(shù)架構(gòu)部負責人:為什么云原生演進之路,我們非走不可?

      從應用層看,現(xiàn)有容量運用三個數(shù)據(jù)中心已經(jīng)足夠,但在存儲層面選擇了5個中心。這種情況下,我們做的是多活的模式。

      那么這套架構(gòu)是怎么建起來的?依賴于商業(yè)化的一些成熟產(chǎn)品,包括金融級中間件SOFASTACK、分布式數(shù)據(jù)庫OceanBase。

      這套架構(gòu)最核心的一個特征,就是可以做到同城和異地容災切換時,RPO=0。

      如圖所示,IDC1跟IDC2如果同時出現(xiàn)問題,我們可以做到分鐘級內(nèi)把流量切到IDC3。這個過程基于異地多活架構(gòu)提供的能力是非常快的。從近期生產(chǎn)演練的數(shù)據(jù)來看,同城大概是2分鐘,異地大概是3分鐘。

      • 微服務與單元化架構(gòu)

      網(wǎng)商銀行基礎技術(shù)架構(gòu)部負責人:為什么云原生演進之路,我們非走不可?

      如圖所示,網(wǎng)商銀行早期也是非單元化。

      非單元化有一個很典型的特點:在計算跟存儲上,會存在交叉訪問的情況。雖然網(wǎng)商早期設計中,做好了分庫分表的設計,但從上層計算層面看,它也會出現(xiàn)跨層。

      早期運用同城雙活的模式,兩邊的數(shù)據(jù)跟計算存在交叉,這是沒什么問題的。但要建設異地數(shù)據(jù)中心時,兩地之間的延遲可能會導致一次服務的耗時大幅上漲,可能會導致最終客戶的一筆交易會出現(xiàn)超時,這種情況下計算跟存儲之間的跨城通訊是不可以接受的。

      如何解決?采用的是單元化的架構(gòu)模式,最典型特征是,它的流量是受控的,能形成一個小的閉環(huán),讓計算跟存儲基本封閉在一個邏輯數(shù)據(jù)中心,但不排除有部分的跨城或者跨數(shù)據(jù)中心的訪問。

      當跨城、跨數(shù)據(jù)中心的訪問是基于服務級別,不是數(shù)據(jù)級別的情況下,它的延遲是可以得到很好的控制。

      當我們進入了單元化架構(gòu),在服務上會有多種路由模式,除了在同一個數(shù)據(jù)中心內(nèi)部,單元之間、同城的數(shù)據(jù)中心之間也都會存在通訊的情況。最重要的是我們解決了跨城數(shù)據(jù)服務通訊。從實踐來看,延遲是可以接受的。

      重點看右下角的路由表,分片標記用戶,用戶屬于某一個數(shù)據(jù)中心下面的一個單元,通過該路由表,用戶的請求進入后會找到對應的數(shù)據(jù)中心下面的單元。也可能會出現(xiàn)一部分用戶進入后,并沒有到正確的數(shù)據(jù)中心,這種情況下我們會在接入層把用戶的請求轉(zhuǎn)到它對應的一個數(shù)據(jù)中心。

      路由的核心是在SDK層面解決的。在業(yè)務系統(tǒng)代碼里引入一些關(guān)鍵的API去做一些路由的定制,這種情況其實是非常重的。

      從全行的單元化升級來看,花的時間也較長,這個跨度至少是一年以上,才會把一些關(guān)鍵的系統(tǒng)全部切到單元化架構(gòu)上面。

      • 容器技術(shù)

      網(wǎng)商銀行基礎技術(shù)架構(gòu)部負責人:為什么云原生演進之路,我們非走不可?

      網(wǎng)商銀行早期也經(jīng)歷過富容器,這種較重,包含了所有的應用發(fā)布部署需要的依賴,不限于一些關(guān)鍵的RPC、消息、數(shù)據(jù)庫等SDK。

      最小的部署單元也是一個容器,在云原生里做進一步劃分。

      容器會區(qū)分為APP的容器,跟Sidecar 的容器。根據(jù)現(xiàn)在的實踐來看,主要是包含Service Mesh里面MOSN的容器,還有DBMesh的容器。這兩個容器解決的是 RPC、消息,還有數(shù)據(jù)庫跟緩存層面的轉(zhuǎn)發(fā)。

      這種模式有一個最大的好處,就是MOSN跟DBMesh可以獨立演進,即可以不需要在上層業(yè)務容器配合的情況下,自己完成一些升級跟發(fā)布。

      當我們做一次全行的架構(gòu)升級,富容器模式會帶著全行所有的應用,可能會進行一到多次迭代的發(fā)布。

      升級一個SDK最大的問題是什么呢?因為各個系統(tǒng)有自己的進度安排,各自資源可能不一致。要做到全行統(tǒng)一升級,周期往往會拉得非常長。

      最不可控的是什么?升級過程中,不同的系統(tǒng)質(zhì)量保障各有差異。有些可能做得非常好,但有些如果稍有瑕疵,就會引發(fā)生產(chǎn)問題,這種情況下很難通過統(tǒng)一的手段去保障。

      全行架構(gòu)升級過程中,關(guān)注質(zhì)量的品質(zhì),一致性和普遍性。

      相對而言,輕容器較好做,因為所有的能力下沉到MOSN跟DBMesh之后,只要在這兩個層面做好質(zhì)量保障,聚焦后能保障升級品質(zhì)的一致性和普遍性。上層云的應用很少會關(guān)注下層的一些變化。

      舉個例子,有一次全行升級,大概是一個人花了不到一個月的時間,把全行上萬的容器全部進行升級,基本不會對上層的業(yè)務造成打擾。所以輕容器相比富容器模式有了極大的提升。

      • 不可變基礎設施

      網(wǎng)商銀行基礎技術(shù)架構(gòu)部負責人:為什么云原生演進之路,我們非走不可?

      早期發(fā)布時,這是分階段的,一般要先創(chuàng)建服務器,再下載依賴,過程中可能還要安裝一些插件。全程存在很多變量,包括環(huán)境標記,依賴于不同人的配置能力。

      早期配置的過程,會把一部分代碼的參數(shù)放在配置平臺。相當于引入一個可變的變量。

      當配置平臺發(fā)生一些變化,整個部署的效果就可能會出現(xiàn)差異,最明顯的就是線下環(huán)境部署沒問題,但在生產(chǎn)過程可能會發(fā)現(xiàn)問題。

      怎么解決?在云原生架構(gòu)理念上,我們考慮把所有的信息都放在鏡像化包中,最大的好處是所有東西都包含在一個鏡像里面,就可以從鏡像環(huán)境到生產(chǎn)環(huán)境都使用同一個鏡像。

      這個過程需要應用保證它的無狀態(tài)化。如果做不到無狀態(tài)化,它就不能做到自動的擴收容和自動恢復。

      從圖中可以看出,我們的鏡像是分層的,這有利于不同的團隊可以聚焦在自己的那一部分,然后整合起來形成一個大的鏡像。在發(fā)布過程中,能保證質(zhì)量品質(zhì)的一致性,不會受限類似于一些環(huán)境或者人的操作水平。

      • 單機故障問題的云原生解決方法

      網(wǎng)商銀行基礎技術(shù)架構(gòu)部負責人:為什么云原生演進之路,我們非走不可?

      在實際的生產(chǎn)過程中,全行幾百個系統(tǒng)最典型的問題是單物理機故障對業(yè)務產(chǎn)生的影響較大。

      物理機的規(guī)模較小,很容易導致部分核心系統(tǒng)的容器分布集中。普通的PC物理機會有宕機問題,造成影響面的半徑較大。

      比方說一個核心系統(tǒng),可能有百分之四十容器集中在這臺物理機上。當它出現(xiàn)問題,對業(yè)務穩(wěn)定有極大的挑戰(zhàn),即使只是小部分出問題也會引起較大的抖動。

      怎么解決?有了云原生架構(gòu)后,我們根據(jù)業(yè)務特點,包括應用等級,去制定策略,確保所有的調(diào)度不會集中在個別的物理機上,也可以說是把它“打散”。

      另一方面,之前配置中心不能自動發(fā)現(xiàn)物理機上的容器問題并自動剔除,通過監(jiān)控 MOSN的監(jiān)控狀態(tài),探測它的服務健康狀態(tài)。下發(fā)自愈策略后,當它發(fā)現(xiàn)監(jiān)控報警有問題,讓它自動剔除。

      因為在分布式架構(gòu)下,很多業(yè)務最終會匯集到同一個服務上。怎樣保證這些服務占用的資源不會互相影響?這也是我們目前面臨的一個較大的挑戰(zhàn)。

      其實除了物理機故障場景,在實際生產(chǎn)過程中還經(jīng)常遇到這種問題:因為業(yè)務場景增多,有一些日常過程中流量非常少的業(yè)務場景,突然間提速后,會導致周邊跟業(yè)務相關(guān)的所有系統(tǒng)發(fā)生變化。

      這種情況下,很可能出現(xiàn)部分服務器請求積壓,導致其他業(yè)務請求發(fā)到這臺服務器時處理時會失敗。這種情況下可能會影響很多業(yè)務,嚴重情況時會出現(xiàn)“雪崩”效應。

      網(wǎng)商銀行基礎技術(shù)架構(gòu)部負責人:為什么云原生演進之路,我們非走不可?

      很多時候聯(lián)機交易跟批量交易并沒有拆分系統(tǒng),所以他們占用的資源是同一批。

      這種情況下,在新的云原生架構(gòu)下,借助資源調(diào)度和流量的標記能力對資源進行隔離使用,這樣聯(lián)機交易和批量任務所依賴的資源就可以區(qū)分開來,同時,我們希望把這些批量任務托管起來,做到資源的彈性調(diào)度。

      當批量任務開始跑批時,能動態(tài)給它更多的資源;但沒有跑批時,把資源給釋放出來,可以減少對聯(lián)機交易的一些影響。

      網(wǎng)商銀行基礎技術(shù)架構(gòu)部負責人:為什么云原生演進之路,我們非走不可?

      • 不同業(yè)務的流量隔離與調(diào)撥

      從上圖可以看出,當一個流量進到生產(chǎn)系統(tǒng)時,它經(jīng)過了多個系統(tǒng),最終它會反映到的底層是容器,當沒有進行有效區(qū)分時,不同的流量在容器內(nèi)部是互相干擾的。

      基于新的云原生能力,在流量轉(zhuǎn)發(fā)的過程,它會有具備染色能力,可以在流量通過mosn時進行標記,讓它路由到指定的一些容器上,就可以做到不同業(yè)務請求下,它會路由到不同的容器集群里,業(yè)務之間的相互影響就得到進一步降低。

      最典型的是生產(chǎn)遇到的熱點賬戶問題,很容易導致全行的交易抖動。如果我們可以識別不同的業(yè)務所導致的熱點,可以做到有效的隔離,發(fā)生熱點時不會影響到非產(chǎn)生熱點的其他業(yè)務場景。

      而近幾年銀行在改造數(shù)據(jù)中心,新中心的流量調(diào)度能力以往是比較弱的。

      數(shù)據(jù)中心間的流量調(diào)撥的一般做法會在流量入口層做處理。如果投產(chǎn)過程中出現(xiàn)問題,對業(yè)務打擾較大。雖然也能做到快速回切,但從銀行每天上億的交易筆數(shù)來看,哪怕是幾十秒,受影響的用戶數(shù)可能也非常大。

      在新的云原生架構(gòu)之下,基于mosn可以打造更細粒度流量調(diào)撥,從數(shù)據(jù)中心層面進一步下沉到單個應用級別。可以找一些不敏感的應用服務先切流,避免影響到關(guān)鍵業(yè)務內(nèi)容。

      云原生架構(gòu)的核心價值是可以實現(xiàn)流量的精細化隔離

      網(wǎng)商銀行基礎技術(shù)架構(gòu)部負責人:為什么云原生演進之路,我們非走不可?

      在單元化異地多活架構(gòu)下,可以做到數(shù)據(jù)中心里某一個邏輯區(qū)域的隔離。到云原生架構(gòu)下,可以把流量的隔離能力做得更細。

      原來的模式下,兩個業(yè)務同時進來,還是會互相影響。而云原生模式,可以按業(yè)務等級進行管理。

      我們會給不同敏感度的業(yè)務打上標記,以此區(qū)分業(yè)務應該到什么樣的容器下去做完成交易。

      標記能力因為有MOSN,所以實現(xiàn)起來較容易。相比早期第二代架構(gòu)做單元化用UID做標記,是通過研發(fā)人員編寫代碼實現(xiàn)的。因此借助MOSN,可以用很低的代價實現(xiàn)這個邏輯。

      運用MOSN之后新的數(shù)據(jù)中心啟用方式會有什么不一樣?

      我們早期做新數(shù)據(jù)中心壓測,一般來說有兩種方式。

      1、 通過找一些系統(tǒng)進行流量轉(zhuǎn)發(fā)。做流量轉(zhuǎn)發(fā)往往需要系統(tǒng)自我改造,這樣不具備規(guī)模化、快速化的復制能力。

      2、 直接把流量入口遷入新的數(shù)據(jù)中心。

      早期做數(shù)據(jù)中心壓測時,很難做到較細粒度,這和網(wǎng)商銀行是異地多活模式有很大關(guān)系。它有一個全局的路由表,如果做不到新舊數(shù)據(jù)中心隔離,就會有問題。

      網(wǎng)商銀行基礎技術(shù)架構(gòu)部負責人:為什么云原生演進之路,我們非走不可?

      舉個例子:在沒有升級能力的情況下,如果做壓測,可能就需要讓全局路由表在新的數(shù)據(jù)中心生效。新的數(shù)據(jù)中心在沒有經(jīng)過充分驗證的情況下,一旦路由表生效,生產(chǎn)流量進入就很有可能導致故障。我們通過Mesh進行了路由表的隔離。

      新舊數(shù)據(jù)中心的路由表是有差異的,這個差異體現(xiàn)在哪里?

      兩個老數(shù)據(jù)中心生產(chǎn)流量配比可以做到50%:50%,新數(shù)據(jù)中心沒有生產(chǎn)流量,而壓測流量在兩個老數(shù)據(jù)中心和新數(shù)據(jù)中心中配比可以做到40%、40%、20%,壓測流量有一部分在新的機房進行處理,根據(jù)新的路由表轉(zhuǎn)到了新的數(shù)據(jù)中心。

      Mesh在我們新的實踐過程中,可以支撐不同的技術(shù)棧。從網(wǎng)商銀行建站以來,我們是有一部分外購的系統(tǒng),雖然它是Java技術(shù)棧,但是它可能和我們的體系,比方說基于SOFA,還是有差異的。

      網(wǎng)商銀行基礎技術(shù)架構(gòu)部負責人:為什么云原生演進之路,我們非走不可?

      實踐層面上看,讓外購的廠商改成SOFA框架是很難的。傳統(tǒng)模式下是希望廠商適當改一部分,框架不用修改,他可能修改服務調(diào)用方式,而我行內(nèi)部的這些自研系統(tǒng),他會提供某種輕量級的HTTP服務,暴露給外購系統(tǒng)進行互聯(lián)互通。

      整個過程來看,代價是較高的,它對相關(guān)的每個系統(tǒng)都有改造要求。

      現(xiàn)在隨著我們整個業(yè)務的發(fā)展,特別是智能化和新技術(shù)引進,逐漸出現(xiàn)了JAVA之外的其他語言系統(tǒng),最典型的就是Python、GO語言,這些系統(tǒng)怎樣跟Java系統(tǒng)互聯(lián)互通?這種情況下其實也會帶來新的問題。

      在云原生模式下,這個問題就變得簡單。因為sidecar解決了,像服務發(fā)現(xiàn)路由、加密。鑒權(quán),限流等通用性問題,它集成了一些不同的語言,這種情況下,它只要提供一個SDK,輕量化就能對接上系統(tǒng)。

      這樣服務提供方和服務消費者都不用做大的改動,只要單邊系統(tǒng)修改就可以,不需要所有相關(guān)方做改造,對我們整個研發(fā)效能提升和業(yè)務拓展帶來非常大的幫助。

      未來:可信原生

      總結(jié)下來,前面提到的云原生實踐更多的是在穩(wěn)定性、效能方面去提升。現(xiàn)在需要關(guān)注的問題,在云原生架構(gòu)模式下,我們做安全會有哪些不一樣的地方?

      網(wǎng)商銀行基礎技術(shù)架構(gòu)部負責人:為什么云原生演進之路,我們非走不可?

      • 解決應用層的安全。

      • 從整個基礎設施層面做到安全可信。其中包含多個環(huán)節(jié),包括硬件準入,從主機的供應鏈層面可能要防止物理機入侵。

      • 從鏡像準入層面做一些控制,防止鏡像被非法篡改后在生產(chǎn)上運行。

      在有了MOSN以后,最大的好處就是可以做到全局的服務和數(shù)據(jù)鑒權(quán)。

      原來那種架構(gòu)模式,如果要做數(shù)據(jù)鑒權(quán)跟服務鑒權(quán),也需要很多系統(tǒng)去改,去做 SDK的升級。

      網(wǎng)商銀行基礎技術(shù)架構(gòu)部負責人:為什么云原生演進之路,我們非走不可?

      在寫入鏡像中心時,要做安全可信。

      1、首先,控制在研發(fā)環(huán)境的鏡像編譯、準入。

      2、在整個鏡像被使用的過程中,去驗證鏡像是否安全。

      3、從底層的物理機層面,在供應鏈采購時可能會做準入控制。

      4、在上層應用層的容器啟動時,我們也會探測它是不是可信的。

      有了MOSN,我們在進行服務的鑒權(quán),還有數(shù)據(jù)的加密都可以下沉到相關(guān)的sidecar,這種時候做安全方面的控制都集中在底層的基礎設施,可以明顯看到云原生帶來的紅利。

      上層的業(yè)務可以不用關(guān)心相關(guān)的要求,基本上安全工程師通過配置一些規(guī)則,然后把這些規(guī)則下發(fā)到全行相關(guān)的一些sidecar產(chǎn)品上即可,包括 MOSN、DBMESH。

      答疑環(huán)節(jié)精選

      問:壓測采用的是生產(chǎn)流量還是模擬的流量?

      蔣易民:我們用的是模擬的流量,它跟生產(chǎn)流量是不一樣的。這是另外一套賬號體系,它不是真實的。

      生產(chǎn)流量是真實的用戶,壓測流量來源于壓測平臺,且流量并不是同一套流量,用戶體系也是不一樣的。在存儲結(jié)構(gòu)上是同庫上兩套不同的表(表結(jié)構(gòu)完全一致但表名不同),落的數(shù)據(jù)處于不同的區(qū)域。

      問:關(guān)于客戶統(tǒng)一視圖查詢的問題。

      蔣易民:如果要在多個服務中獲得最新的客戶信息匯總,就需要把數(shù)據(jù)集中化處理了。但是從實際的過程看,至少在交易層面,是很少用到客戶信息的匯總,更多的是在批處理層面。在批處理層面,我們會把它放到類似于odps大數(shù)據(jù)平臺去解決。

      所有數(shù)據(jù)回流到大數(shù)據(jù)平臺,多庫多表,最終會集中到一張表里,這個數(shù)據(jù)是全量的。

      采用 sidecar以后,我們運行這套架構(gòu)也有較長時間了,對日常其實沒什么影響。基本上層業(yè)務對它沒有什么感知。整個sidecar引進以后,對資源的占用是非常少的,不會影響到整個系統(tǒng)的容量水平。

      系列全回顧丨銀行系統(tǒng)云化升級·實戰(zhàn)體驗營

      本次實戰(zhàn)體驗營由雷鋒網(wǎng)《AI金融評論》與阿里云聯(lián)合主辦。欲獲得所有講者視頻以及PPT回顧內(nèi)容,可關(guān)注公眾號“AI金融評論”(ID: aijinrongpinglun),進群獲取回放鏈接。

      網(wǎng)商銀行基礎技術(shù)架構(gòu)部負責人:為什么云原生演進之路,我們非走不可?

      雷峰網(wǎng)原創(chuàng)文章,未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知

      分享:
      相關(guān)文章
      最新文章
      請?zhí)顚懮暾埲速Y料
      姓名
      電話
      郵箱
      微信號
      作品鏈接
      個人簡介
      為了您的賬戶安全,請驗證郵箱
      您的郵箱還未驗證,完成可獲20積分喲!
      請驗證您的郵箱
      立即驗證
      完善賬號信息
      您的賬號已經(jīng)綁定,現(xiàn)在您可以設置密碼以方便用郵箱登錄
      立即設置 以后再說
      主站蜘蛛池模板: 黑拳粤语| 魔宫魅影| 安龙县| 特种兵之利刃出鞘免费完整版高清| 古惑仔6国语高清免费| 小凤新婚下在线观看免费版| 冒牌英雄电视剧| 神秘世界历险记| 新垣结衣生日| 蝶舞天涯全集| 法国空姐满天星法版第三季在线播放 | 食人鱼6| 北京奥运会2008年开幕式| 《乡情》罗丽·星克莱尔主演的 | 叶子楣 女机械人| 加勒比海盗女海盗1在线看免费完整版 | 倚天屠龙记 邓超版高清| 兵在哪马在哪俑在哪导游你在哪 | 高清绝望写手 第五季未删减| 成全电影大全在线观看第二季| 美妙发型屋韩国完整版| 弦子 沿海地带| 魔道祖师动漫全集免费| 姐妹牙医在线观电影| 决不饶恕| 《插曲的痛》免费播放完整| 妙手仁心3| 年轻的阿姨| 铜铜钢铿锵锵锵锵锵锵免费观看| 男生女生向前冲2024| 假面超人rx全集| 荣誉守则成人版在线观看| 泰剧在线观看| 做aj的剧免费观看| 行者合金尼泊尔| 色即是空1 qvod| 漂亮的妈妈7字开头| 大侦探拾光季在线观看免费完整版| 电影神奇女侠| 天使爱美丽| 茶杯犬要多少钱| 越南女兵满天星2023年上映时间| 李云龙楚云飞扮演者再同框| 美国保罗2高清版| 今生有你电视剧在线观看| 他是谁电影免费观看完整版高清| 82板杨敏思版本1-5电视剧免费观看就是 | 飞屋环游记字幕| 以家人之名更新| 哇嘎国语电影| 六大禁片震撼来袭| 13一14chinesex破| 坎贝奇无憾人生免费| 禽我无删减版在线观看| 乡村里的中国 纪录片| 特殊美容院待遇免费在线观看| 迷人的保险销售员| 三年国语版高清在线观看| 我家小姐来自一千年短剧免费观看 | 九河龙蛇| 一起嗟嗟嗟30分钟免费看| 危机公关 电影| 兵变1929| 电影《姐妹牙医》播放| 家族荣誉1| 老舅一共多少集| 银瓶梅1-5| 一出好戏免费观看高清| 星球大战4新希望| 新闻女郎下载| 末日村庄电影完整在线观看| 《战争之暴行女囚》| 皇子归来之欢喜县令| 美国电影荣誉守则满天星 | 陆小凤张智霖| 双枪李向阳| 法国空姐4电影| 香港之夜在线完整免费观看| 301勇士| xl司令在线免费观看| 越南女兵电影完整版免费在线播放| 危险关系免费观看完整版| 美国电影馒头逼| 《朋友夫妇:交换》3中文在线| 万载县| 电视剧扫黑风暴免费观看| 高清K-POP:猎魔女团未删减| 大侠黄飞鸿| 秘密世界| 男女一起愁愁愁免费观看全集高清完整版动漫 | 李采潭电影全集在线观看| 映山红原唱| 美容院特殊服8| 恶搞之家无删减在线观看| 《伊波拉病毒2》电影| 儿科医生电视剧| 凡尘称尊:仙帝弃少全集免费| 邓家佳《除却巫山》在线| 好想告诉你第一季在线观看| 高压监狱2019满天星法版免费播放| 沉香如屑电视剧免费观看55集| 女版唐三藏2免费资源| 大鱼海棠| 女版战狼6免费观看999为什么播放不了 | 笑傲江湖 李亚鹏| 白衣女超人满天星版电影| 仁心俱乐部电视剧全集免费观看| 快乐姐妹们韩剧经典电视剧在线观看 | 巜色诱女教师在线观看| 女生按摩胸部电影免费观看| 天浴在线观看| 倔强の驱魔师1-4集| 王朝的女人| 南剑北鞭铁扇子| 盗墓笔记动漫| 韩国电影出轨| 小时代电影在线观看完整版| 毒液2电影免费版在线观看| 超能查派字幕下载| 男人女人愁愁愁免费观看| 盛唐风流1电影完整版| 疯狂的有夫之妇| 隔壁邻居很美味在线观看| 怀玉传奇| 高级贵妇交换俱乐部| 落魄的贵族琉璃川在线观看免费全集| 胡桃大战史莱姆在线观看 | 欢乐家长群2电视剧免费播放完整版 | 法国电影高压监狱第二部完整视频| 电影平果| 女佣机器人vs男招待机器人军团| omoflow第一季无马赛结局| 刘兰芳评书打包下载| 特殊的精油按摩 电影| 善良的的瘦子| 记忆之城演员表| 法医王妃:验尸无敌全集免费| 美国版荷尔蒙6免费观看| 卸岭秘录电影完整版免费观看| 仙剑奇侠传2免费观看| 波吉亚家族电影| 大内密探之零零| 江山市| 巡回检察组全集免费观看西瓜| 乡村爱情变奏曲高清| 酒店1-40集在线观看| 成龙免费高清大全在线观看| 甜蜜惩罚2在线观看| 《荣誉守则》法国| 外出电影在线观看| 杨贵妃传| 朴亚珍《隐身帽子》原版 | 妈妈爱上儿子同学在线播放| 我和我的男人们| 韩国高清mv| 无名天使3d高清| 首部母乳喂养法规| 读百科全书的女人看在线完整| 苍井空的《肉乳浴屋》| 会计账簿的基本内容| 无憾电影坎贝奇全集免费观看中文| 血恋未删减版| 96分钟:列车爆炸案未删减| 谍变1939电视剧| 剑仙归来| 。金银15美国欧式少妇16集全电视| 宫雪花武则天| 年轻的儿媳妇字头范文| 少主且慢行电视剧| 翡翠凤凰39| 千香引电视剧免费观看| 满天星麦乐迪《女超人》免费播放| 老农民60集完整版电视剧| 农场主三姐妹2保罗| 河南曲剧借簪子| 女明星们的按摩师免费观看| 3对1:初次体检4| 冲上云霄第一部粤语| 反贪风暴粤语| 高清《女机械人》| 幸福小丈夫全集| 性解密断| 喋血街头电影| 《聊斋艳谭8陆判性经》| 法国《荣誉守则》满天星高清在线观 | 李光耀观天下| 《女超人:麦乐迪》艾玛| 只想和你睡(1v 1)| 春雨电影大全免费动漫版| 5帕克禁忌| 深宅如渊| 易有三义| 韩国r电影在线| 小女霓裳电视剧免费| 秘密朋友俱乐部| 真破血免费高清观看完整版| 夏奇拉mv| 银魂188| 荃湾区| 吴尊演的电视剧| 记忆传授人| 《法国空乘2015法版》| 暴躁媳妇完整版| 风灵玉秀第二季| 呼啸山乡电视剧全集免费观看| 17.3免费观看高清电影| 双肥临门| 井川里予和别人打扑克牌的链接| 美国电影需要爸爸播种| 武汉十七中事件| 夜关门欲望之花| 莫妮卡爱我几何完整版在线| 《红杏出墙记》| 狂飙在线看| 播放_爱我几何免费完整观看_在线观看_馒头影院| 从前的光景| 四大美女西施惊艳版| 女人的战争2完整版| 我的危险妻子| 圣斗士星矢冥界篇| 巴黎 我爱你| 爱我几何在线免费观看| 赛车总动员1 QVOD| 风水之王:改命转运第一人全集免费| 电影《掌中之物》完整版 | 美国电影需要爸爸播种英文观看| 黑帮少爷爱上我泰剧| 《恋爱禁区》电影| xl司令全集免费观看| 神奇女侠在线观看| 妖怪人间| 疯狂历史补习社粤语| Overflower在线观看| 最终幻想15王者之剑| 苏迪曼杯2023赛程| 工藤拉拉免费| 《新入职的女员工》| 双人调情按摩术在线观看| 寄生兽韩国| 郑铮鲁能| 别墅轮换3攻略免费| 东区女巫| 爱我就别想太多全集在线| 陈雨菲不敌山口茜屈居世锦赛亚军| 《特殊游泳课》免费观看| 黄飞鸿新传| 韩剧《母亲》免费观看| 销售的销售秘密2免费观看高清版 11分钟模拟成结动画在线 | 美女杀羊| 《斯巴达1帝国女版》海盗在线观看| 重庆森林免费| 司藤电视剧在线观看免费| 《女超人满天星版》麦乐迪在线观看| 神秘岛国语版免费| 朋友的妈妈2线在线播放| 公之浮之4| 女部长出差的滋味HD| 神勇武工队传奇2017任帅| 需要爸爸播种免费在线观看| 雁南飞刀郎| 我要爸爸种子美国电影完整版| 大清风云高清| 小土豆歌曲完整版| 女版战狼6免费| 《重启之蛇骨佛蜕》| 电锯惊魂7高清| 美容院的待遇服务3| 梅花三弄鬼丈夫电视剧免费观看| 电视剧梦幻天堂| 5帕克禁忌| 一本之道在线观看| 高清《朱音落语》电视剧| 做aj免费观看完整版| 阵地电视剧免费观看完整版高清| 爱上特种兵全集免费观看网站| 换脸明星电影免费| 有夫之妇韩剧电视剧免费观看| 高清隐身的名字未删减| 花与蛇2电影全集免费播放| 胜者为王粤语| 导弹旅长电视剧| 食人鱼事件剧情介绍| 灌篮高手全国大赛篇| 铃芽之旅免费观影| 年轻的销售员8| 功夫熊猫四| 盲盒电影酒店免费观看| 政者无敌| 电视剧谁懂女儿心| 酒店1-50集| 开始懂了mv| 需要爸爸播种| 上海少妇黑人3P完整版BD| 流浪汉电影| 新津县| 武林风六国拳王争霸赛| 法医嫡女短剧全集| 空盆来蛇| 麦乐迪完整版免费观看| 美妙旋律第三季| 故宫三维动画| 北越暴行电影2| 女机械人在线| 盟约电影免费完整版在线观看| 天降之物剧场版| 郝板栗《大小姐》免费观看| 青青草在9线观看| 办公室里的滋润| 高清沧元图 前传:东宁府的夏天| 一起吃拉面吧韩国电影完整版| 落魄贵族琉璃川在线观看完整版| 破梦游戏电影免费观看完整版高清| 黑白通吃:都市狂龙全集免费| 暴躁少女的视频全集泰国版 | 朝鲜今天发生兵变| 孟姜女哭长城电视剧全集免费| 男女一起愁愁愁免费观看91| 《请求救援》| 兄弟的女人韩剧电视剧| 郝板栗电影无删减版| 迅雷机战| 圣山村谜局电影| 巨大女英雄在线看完整版| 日本电影《替弟还债十日》日剧| 当着老公的面被搬运工在线| 刀郎 爱是你我| 农民影院《法国少女农埸》完整版| 第八个嫌疑人免费观看| 人海孤鸿在线观看完整版| 《酒店服务生》第一季动漫在线观看| 高清白日提灯| 陈加玲惊艳的电影| 初恋是CV大神电视剧| 台剧浪漫女家教在线观看全集| 好日子在线观看视频大全免费动漫| 岳志军的案件最终结果| 酒店1-75集免费全集| 癫凤狂龙| 沧元图第二季第4集| 当蜜桃成熟全集高清| 免费观看爱我几何| 高清《法利赛人》| 张志新子女| 台湾版《村妓》伧理| 青梅竹马是消防员动漫| 千鹤道长出山免费观看| 飞天侠女电影| 麦乐迪和父亲故事电影叫什么 | 低俗小说电影| 高清《猎杀》免费观看| 战狼6免费观看完整版下载高清| 与风行剧情介绍| 约束之地| 女超人麦乐迪无删| 山菊花在线观看| 满天星爱丽丝梦游辣境| 哈利波特3普通话| 小姐韩国免费观看完整版电影| 我在岛屿读书第一季| 美国禁忌三部曲满天星| 爱情睡醒了图片| 重庆农村妇女rap| 麦乐迪家庭矛盾| 乘风破浪5免费观看| 十二金刚| 如何让他忍不住联系你| 地爆满天星 电影高清免费观看| 影音先锋资源 彼女系| 走火40集全免费观看| 三年大片观看免费国语第一集| 日本顶级RAPPER| 新杜十娘| 指甲刀人魔| 美国小蜜桃4| 高清危险关系未删减| 绮梦之旅电影| 丁青县| 《特殊游泳教练》在线观看 | 我是歌手 流浪记| 飞翔吧 战机少女| 《倔强的驱魔师》1-4集完整版| 宸汐缘电视剧免费观看全集| 法国满天星《八尺夫人》免费观看 | 脾虚嘴唇有什么症状| 《十天抵债》在线播放| 天乩全集免费观看完整版下载| 玉女聊斋| 91密桃| 五十度灰在线观看未删版 m| 嫡女宅斗:全精通短剧全集| 美容室:待遇服务6| 刻舟求剑免费| 《无赦之罪》免费观看全集高清| 天地争霸美猴王高清| 119纳粹营免费看| 解放电影| 暗算全集| 有friend无惊| 菊色宫先锋影音| 错点鸳鸯| 光阴的故事 电视剧| 粉红大白菜在线观看 | 新金银悔1—5普| 《师生恋:禁忌之恋》在线观看| 破灭之国| 保险女王的秘密| 我的堂妹| 准妈妈四重奏电视剧| 电影《北越暴行》免费播放| 金银梅一5普通话版| 爱我就别想太多大结局| 小岳母在线播放| 朋友的妈妈2018中语| 男女一起愁愁愁视频在线观看| 婚外初夜 完整版| 侯门嫡女:宅斗冠军是我短剧全集| 站着再来一次17集全免费播放 | 帝国2高清版| 人前是爸爸背后是老公| 聊斋先生25集全免费| 中国推背图| 乃万单手脱上衣| 浮之手HD版免费观看| 朝美穗香| 美英空袭也门:夜空升起巨大火球| 爱情珠宝电视剧全集免费观看| 约翰尼盖尔克奇| 黑白配国语在线播放免费| 《冬日的什么呀,春日的什么呢》| 临时劫案 免费观看| 按摩四位少妇| 尹律最新电影| 电影网站在线| 我不会爱你| 高柳家的花嫁动画片在线| 哑巴千金电视剧| 我在精神病院学斩神动漫| 女销售| 史蒂夫 科尔| 密室大逃脱第七季大神版| 少儿节目小猪佩奇| 性的暴行在线播放| 《热血青春》完整版| 国家形象电视剧高清| 监禁gv| HD版泰山《激战丛林》完整版免费免费| 我要成为世界最强| 特战荣耀免费观看全集| 漂亮女邻居| 《荣誉守则》在线观看 | 微微一笑很倾城免费完整版电视剧| 许我耀眼电视剧全集| 与女部长一起去研修电影| 策驰影院在线观看免费高清电视剧| 淮文《攀缠》短剧全集| 盛唐风流电影免费观看国语版| 桃色天使终极猎杀| 挽歌qvod| 法国空姐3在线观看完整免费高| 电影《虐心》完整版| 北大荒电视剧| 凯·帕克的私人水疗| 少年包青天第二部| 洛丽塔 电影| 花琉璃电视剧全集免费播放| 吾家有姐满天星版| 忍风战队破里剑者| 佐佐木与宫野| 你好 李焕英在线观看| 电影《千金小姐》免费观看| 寻秦记免费完整版全集在线观看| 关于雇佣军的电影| 波多野结衣119分钟| 法国满天星《古墓丽影》完整版在线| 青春派 电影| 你给我的喜欢免费观看全集完整版| 高压监狱2完整版在线看中文| 小猪佩奇 第十季 2024| 女战狼10免费高清资源| 隋唐英雄108| 特别的酒店在线观看免费完整版| 斗罗大陆免费完整观看174| 《狂飙》在线| 战狼六欧式少女全部剧情| 庆余年第二季免费完整| 暴躁老妈高清免费观看电视剧| 请你原谅我 电视剧| 天生一对泰剧在线播放| 我的好朋友瘦子4| 电视剧幻影全集| 憨豆先生动画片免费观看全集| 迪迦奥特曼动画片全集| 已婚妇女的火辣日子 | 被冲走前 父亲试图将孩子抛上岸| h视频| 欧阳正华| 喜人奇妙夜第二季在线观看| 女英雄堕落之水星陨落2在线观 | 最美逆行者| 糊涂的爱小品| 岳云鹏把壁纸换成张钧甯名字 | 我朋友的老婆3中文| 野花香影视| 金瓶梅高清完整版百度影音| 叶问 粤语| 我愿意在线观看免费完整版电影| 被义子糟蹋电影| 北京遇上西雅图完整版| 非常勿扰| 高清《朋友的妈妈》2中字头歌词| 《再来一次吧》高清版| 打开腿让我尝尝你的味道是什么歌| 加藤绫佳| 吴磊赵今麦吻戏堪比火烈鸟| 坎贝奇三部品味人生在线观| 洛阳影视| 新来的私人瑜伽教练在线观看| 艰难爱情全集| 爱情公寓ii| 瓜达卢佩的玫瑰 墨西哥电视剧| 如果你也听说 周杰伦| 月光下的凤尾竹 葫芦丝| 朝五晚九 百度云| Melody女超人免费观看高清| 花样男子第二部| 《百劫红颜》| 潜伏全集百度影音| 性的暴行在线观看| 冤罪 bl| 赤狐书生免费观看全集| 湄公河行动| 放学后的优等生| 绅探电视剧免费高清完整版| 日历女孩2一K8伦理电影| 马达加斯加的企鹅第三季动漫| 美丽小蜜蜂9| 蜜桃视频17| 错儿电视剧全集播放| 海洋之恋泰剧特别篇| 南风拂我意| 怪盗女谍之天海翼免费播放下载 | 电影布鲁克读大学| 海底小纵队海啸大危机| 激光去斑会留疤吗| 《偿还4》电影| 男人女人一愁愁愁电视剧| 开端一共多少集| 望向太阳电影| 行尸走肉十二季在线播放| 私人女性| 警察故事3 超级警察| 怀旧酷狱忠魂下| 长月烬明全集免费完整| 日军在越南的暴行2| 王多鱼打扑克牌免费视频| 彬彬来了免费观看完整版| 履霜坚冰至| 小草青青| 替丈夫还债电影高清完整版免费观看| 贝多芬小姐的启示电影| 美女化妆前后对比| 奇袭白虎团快板| 需要爸爸播种的| 说英雄谁是英雄免费观看| 东北警察故事2谢苗| 五等分的新娘夏季特别篇| 呱达卢佩的玫瑰免费播放完整版电影| 大江大河第3部53集免费观看| 请做我的奴隶| 善良的她在线观看| 年轻母亲6中文字版免费| 被可怕的科长欺负| 海棠红电影完整版免费观看 | 部长外出的日子免费观看| 我为情狂| 美女食神优酷| 火影忍者国语版全集高清优酷| 大牛影库战狼6免费观看| 插曲的痛120集在线观看免费下载| 妒忌电影| 如月车站Re:| 欲望悬流| 八戒电影观看8| 扫黑风暴21集在线观看| 《理想之城2》全集观看| 火影492| 《美味快递员2》| 不输男儿郎:将门嫡女沙场全集免费| 《窃欲无罪》电影| 爱要怎么戒| 21世纪性格爱情指南免费版| 女律师的堕落zaixianq| 雷霆战警 粤语| 六月的日记| 终极一班3全集观看| 一起愁愁30集全集免费看 | 国足 新加坡 直播| 兔子先生免费高清观看全集| 满天星护士学校在线看| 蝴蝶梦越剧| 剧看了又看第二部国语第48集| 摇啊笑啊桥2018| 国风按摩院1-5季| 电视剧咱们结婚吧免费观看| 电梯小姐电影在线观看| 人猿泰山hr版 时间| 抗战40集免费观看| 我独自升级动漫第二季| 《黑白配》电影| 一眉道姑免费观看高清| 世界上已消失的8个汉字十组词| 奇怪的美发乌龙沙| 锵锵锵免费完整观看| 致命快感| 田蕴章每日一字| 开心公寓| 你好李焕英免费观看天堂| 黑白配电影高清在线观看| 沧元图第二季2集完整版 | 拥抱未来的你| 女版《壮志凌云》免费 | 预祝中考成功的话| 高清爱你的基蒂 第三季未删减| 保险公司的推销员8中字手机 | 厨房激情3日本| 最后的生还者在线观看| 生死狙击百度影音| 樱兰高校男公关部电影| 《金牌销售的秘密| 《茂盛的森林》电影在线观看 | xl司令第一季免费全集在线观看| 爷爷吃我小扇贝| 谢谢你爱过我全集免费观看| 潜入搜救官完整版在线观看| 《法国空姐三部曲》| 甄嬛传电视剧完整版免费观看高清| 山村姑娘| 《美姐妹牙医》完整版| 19岁大学生免费观看电视剧 | 宫锁沉香电影高清| 花便当全集观看| 人挤人!五一首日故宫游客爆满| 圣特罗佩斯的姑娘们全集免费播放 | 国庆阅兵2023有吗| 《新金莲外传》在线观看| 爱上黑道女| 猪猪侠超级棒棒糖| 前妻乖乖回来| 这么多年免费观看完整版| 梦幻军事地区电影| 超时空辉夜姬!未删减| 年经继拇| 易有三义| 韩剧《权利迷雾》在线观看全集 | 苦口婆心比喻什么人| 桦川县| 私人女性监狱日韩高清版| 传家电视剧免费观看| 家教韩国| 24小时在线观看免费播放电视剧| 道士下山免费完整版在线观看| 修理工的艳遇三级片| 电影南京照相馆完整版免费观看| 婚姻攻略全集免费观看| 《无敌少侠 第四季》| 老炮儿在线观看| 成人片《男按摩师乳房按摩》在线观| 画皮2011| 少林扫地僧| 靳东甄子丹当选全国政协委员| 将军在上| 京香在线观看| 荣誉守则翻拍版成人版| 《陈圆圆》谭干聪| 以法名义电视剧播放| 变形金刚1高清在线观看 | 做aj的电影大全免费观看英国| 今生有你电视剧在线观看| 罪恶黑名单第一季| 摩登家庭剧照| 房山区| 轮换2HD中字_午夜电影全集_完整版免费在线观看-天天影院 | 农民伯伯下乡3国语版电影免费观看| 爱我几何原版无删| 第三种爱情在线观看| 性与爱的电影在线观看| 孤舟电视剧40集免费观看| 金银梅5普通话版在线观看免费 | 新乌托邦7| 桃姐电影| 行唐县| 落魄贵族琉璃川动漫全集免费| 老伴电视剧| 龙非龙凤非凤电视剧| 紫禁惊雷下载| 泰剧人的价值| 一起愁愁30集高清播放在线| 马斯顿教授与神奇女侠| 孙杨复出首秀| 嫌疑人在线观看免费完整国语版| 意大利语95版泰山在线播放| 局长太大太粗进不去| 明明不喜欢 在钱| 满天星《老板的女儿》| 艳女十八式婬乱史在线| 千金归来全集免费| 《魔法少女伊莉雅》| 赖汉的幸福指数| 公之扶手4中文版免费观看| 怎敌她千娇百媚在线播放 | 罗莎《拳击手2》在线观看| 《长安如故》电视剧免费观看| 夏娃的丑闻| 唐朝禁宫风月| 色影影院| 午夜凶铃日版| 吸血鬼偶像 电视剧| 战狼6免费完整电影在线观看高清 战狼6免费高清版999加拿大版 | 近距离爱上你免费在线观看完整版| 我们都是好朋友电视剧| 乱世情劫电视剧| 丰满的继牳3理伦片| 速度与激情7完整版国语| 美国大选11月5日宣布结果| 挣扎吧亚军君免费观看完整版| 馅老满饺子| Jizz日本| 战狼6高清在线观看免费完整版电影 | 一路向西电影完整版国语| 《不当交易》完整版在线观看| 八尺夫人免费观看全集完整版意大利| 纯情罗曼史第一季| 绝世弃少逆袭:成传奇全集免费| 兽兽 BT| 电视剧哈儿传奇| 陪讨厌部长出差旅| 屋顶上的吻| 餐馆厕所突然钻出一截管子剧烈扭动| 师傅日徒弟的场景| 来不及了在车CH| 家庭矛盾麦乐迪| 加勒比海盗成人版无删减免费观看 | 《交换上司的秘书2》| 女娲传说之灵珠| 女婿难当| 春雨电影大全免费观看在线| 第一次的滋味免费观看电视剧| 双江| 需要爸爸播种子美剧言情剧| 美国忌讳2美国1984| 美丽新娘| 美丽姑娘免费高清电影大全| 欢乐颂5在线观看免费版| 《唤醒》:凯登·克罗斯| 爱我几何免费观看原声在线播放| 鬼父ova| 雾岛奈津美全集种子| 金瓶梅电影百度影音| 炮火杀狼花第二部| 女版战狼10高清免费看| 王多鱼打扑克免费观看| 吸血鬼日记第四季快播| 幸福照相馆的演员| 电视剧战争不相信眼泪 | 电影双女任务怎么播放| 用身体偿还给社长的妻子电影在哪里| 冰糖葫芦广场舞| 《刀尖》在线观看| 星际迷航1电影| 步步高音乐手机| 爸爸的种子高清免费版电视剧混乱公交车 | 春风化雨方响为什么死了| 欧美506070| 《伊波拉病毒第二部在线播放| 年轻老师2| 刘老根第三部| 樱桃电影| 庆余年第四部50集免费观看| 医院特殊待遇2| 男孩女孩一起相愁愁愁电视剧在线观 | 新兵正传| 爱我几何完整版免费观看在线播放| 混战两姐妹电影版免费观看| 公车乱欲| 龙王的工作| 赵薇不能和你分手| 年轻的妈妈4在线| 昆山市| 圣特罗佩姑娘们1982电影在线观看| 奈克瑟斯奥特曼| 爸爸是女儿在线观看韩国电影| 最近我的妹妹样子有点怪真人电影原声| 美丽的小蜜桃9| 深海利剑电视剧| 猛士的士高全集| 保罗2雪莉一家| 香坂美优| 正中下怀的意思| 狄仁杰通天人偶免费观看全集高清版| 法国满天星《新手律师》| 忍不住的继拇HD| 专家称女生游泳私密贴是智商税| 长跑呼吸| 幸福触手可及| 香香公主| 黑白配1080P高清完整版| 牙医姊妹电影在线观看| 神雕侠侣未删减陈晓版| 凤归短剧全集免费观看视频播放| 《权力王朝:默多克家族》| 归棹电视剧| 高清杀手记忆 第一季| 长相思2在线观看| 年轻的表妹在线观看| 奥特曼大电影超银河传说国语| 电视剧媳妇的眼泪| 电影《出行的目的》的剧情简介 | 洪真英被躁B在线观看| 太平公主秘史在线观看免费| 主君的太阳第八集插曲| 刘纪鹏:股市破3000点是爆发 | 我的大胸,继母| 全境封锁电影完整| 镀金时代第二季| 海绵宝宝第十一季| 逆天改命:锦绣嫡女短剧全集| 外出抵摘的麦子2| 《妈妈爱上儿子同学》全集免费看| 济南到北京动车时刻表| 电影《姐妹花》免费观看国语| 精瓶梅电影在线观看| 难得有情人| 正在缩小的男人电影| 法剧需要爸爸播种子| 女战狼10可下载| 熟男有惑 粤语| 战狼10女版国语高清无广告| 有关黄河的诗歌| 黑暗的欲望在线观看| 保罗3雪莉一家1| 日本部长| 重庆娱乐频道直播| 《蜜桃成熟时3》电影| 宫锁沉香电影下载| 宫锁沉香| 范建明李婧婧小说免费阅读在线| 《荣誉守则》法国| 越南女兵| 可疑的理发店在线观看| 说书人 电视剧| 我的妻子妹妹3在线播放中文|