合合信息啟信產(chǎn)業(yè)大腦攜手市北新區(qū)打造“一企一畫像”平臺,加速數(shù)字化轉(zhuǎn)型重慶:力爭今年智能網(wǎng)聯(lián)新能源汽車產(chǎn)量突破 100 萬輛,到 2027 年建成萬億級產(chǎn)業(yè)集群微信iOS最新版上線:iPhone用戶可在朋友圈發(fā)實(shí)況照片了蘋果有線耳機(jī)或?qū)⑼.a(chǎn)沖上熱搜!閑魚相關(guān)搜索量暴漲384%2024 vivo開發(fā)者大會官宣:OriginOS 5/自研藍(lán)河系統(tǒng)2降臨真·AI程序員來了,阿里云「通義靈碼」全面進(jìn)化,全流程開發(fā)僅用幾分鐘東方甄選烤腸全網(wǎng)銷量及銷售額領(lǐng)先鴻蒙PC要來了 界面很漂亮!余承東:目前華為PC將是最后一批搭載Windows上半年中國AR/VR出貨23.3萬臺,同比下滑了 29.1%IDC:2024 上半年中國 AR / VR 頭顯出貨 23.3 萬臺,同比下滑 29.1%英特爾AI加速器Gaudi3下周發(fā)布,挑戰(zhàn)NVIDIA統(tǒng)治地位!大屏技術(shù)邂逅千年色彩美學(xué)!海信激光電視成為電影《只此青綠》官方合作伙伴OpenAI將最新AI模型o1擴(kuò)展到企業(yè)和教育領(lǐng)域三星新專利探索AR技術(shù)新應(yīng)用:檢測屏幕指紋殘留,提高手機(jī)安全性猛瑪傳奇C1:直播圖傳技術(shù)的革新者JFrog推出首個(gè)運(yùn)行時(shí)安全解決方案,實(shí)現(xiàn)從代碼到云的全面軟件完整性和可追溯性亞馬遜推出一大波生成式 AI 工具,購物體驗(yàn)全面升級機(jī)器人公司1X推出世界模型Apple Intelligence測試版現(xiàn)已開放革命性AI對話系統(tǒng)Moshi問世:機(jī)器也能說人話了?
  • 首頁 > 數(shù)據(jù)存儲頻道 > 數(shù)據(jù)庫頻道 > 數(shù)據(jù)庫

    降本、提速、少干擾,火山引擎DataLeap重點(diǎn)升級CDC分庫分表能力

    2023年10月24日 19:50:09   來源:中文科技資訊

      CDC(Change Data Capture)是一種數(shù)據(jù)捕獲技術(shù),用于跟蹤數(shù)據(jù)庫中數(shù)據(jù)的變化。它的主要目的是捕獲數(shù)據(jù)庫中數(shù)據(jù)的增刪改操作,并將這些變化實(shí)時(shí)或定時(shí)地記錄下來,以便進(jìn)行后續(xù)的處理和分析。

      近日,在原有的整庫方案基礎(chǔ)上,大數(shù)據(jù)研發(fā)治理套件 DataLeap 重點(diǎn)升級了數(shù)據(jù)集成CDC分庫分表能力,可離線+實(shí)時(shí)將多個(gè)實(shí)例的多個(gè)數(shù)據(jù)庫多個(gè)分表同步到目標(biāo)端中,更精準(zhǔn)適配于業(yè)務(wù)中的實(shí)時(shí)分庫分表場景。

      同時(shí),DataLeap支持將 MySQL 同步到 EMR-Doris、EMR-Starrocks、LAS,助力將最新增量數(shù)據(jù),以最快且最低的帶寬成本同步到目標(biāo)庫,輔助業(yè)務(wù)數(shù)據(jù)分析更加準(zhǔn)確、高效。

      相比于批量抽取而言,CDC有著成本低、速度快、少干擾三大優(yōu)勢。

      通過僅發(fā)送增量變更,CDC能力可幫助用戶降低通過網(wǎng)絡(luò)傳輸數(shù)據(jù)的成本。同時(shí),CDC可將事務(wù)直接傳輸?shù)綄9┓治龅膽?yīng)用上,幫助用戶根據(jù)最新的數(shù)據(jù)做出更快、更準(zhǔn)確的決策;最后,CDC 可以通過監(jiān)聽數(shù)據(jù)庫的日志或 API 接口,捕獲數(shù)據(jù)變更事件,并將其發(fā)送到目標(biāo)系統(tǒng)或存儲庫中,而無需在生產(chǎn)環(huán)境中大量傳輸數(shù)據(jù),減少了網(wǎng)絡(luò)流量的占用,降低了對生產(chǎn)環(huán)境的干擾。

    圖片1.jpg

      火山引擎DataLeap——實(shí)時(shí)分庫分表同步能力界面

      同時(shí),火山引擎DataLeap CDC分庫分表能力目前支持“使用緩存”、“無需緩存,直接同步”兩種緩存配置方式,可做到直連同步,也可支持中間件緩存到后kafka后再同步,這樣更靈活的緩存同步模式、極大地幫助客戶提高了數(shù)據(jù)消費(fèi)靈活性。

      火山引擎DataLeap通過快速連接云下自建/云上數(shù)據(jù)源進(jìn)行數(shù)據(jù)采集同步,可幫助客戶連接各類數(shù)據(jù)上云,以及云上數(shù)據(jù)流動,輕松完成數(shù)據(jù)入倉入湖,有效發(fā)揮數(shù)據(jù)的價(jià)值,同時(shí)借助CDC分庫分表同步能力,支持?jǐn)?shù)據(jù)端到端快速同步,數(shù)據(jù)實(shí)時(shí)性得到進(jìn)一步增強(qiáng),業(yè)務(wù)決策時(shí)效性提高且更準(zhǔn)確。

      除了上述集成能力,火山引擎DataLeap還可提供數(shù)據(jù)治理、數(shù)據(jù)開發(fā)、運(yùn)維、資產(chǎn)等能力,幫助用戶提升數(shù)據(jù)研發(fā)效率、降低管理成本,加速推動企業(yè)的數(shù)據(jù)化轉(zhuǎn)型,目前已經(jīng)應(yīng)用于泛互聯(lián)網(wǎng)、制造、新零售、汽車等領(lǐng)域。

      

    [No. X048]
    分享到微信

    即時(shí)

    TCL實(shí)業(yè)榮獲IFA2024多項(xiàng)大獎,展示全球科技創(chuàng)新力量

    近日,德國柏林國際電子消費(fèi)品展覽會(IFA2024)隆重舉辦。憑借在核心技術(shù)、產(chǎn)品設(shè)計(jì)及應(yīng)用方面的創(chuàng)新變革,全球領(lǐng)先的智能終端企業(yè)TCL實(shí)業(yè)成功斬獲兩項(xiàng)“IFA全球產(chǎn)品設(shè)計(jì)創(chuàng)新大獎”金獎,有力證明了其在全球市場的強(qiáng)大影響力。

    新聞

    敢闖技術(shù)無人區(qū) TCL實(shí)業(yè)斬獲多項(xiàng)AWE 2024艾普蘭獎

    近日,中國家電及消費(fèi)電子博覽會(AWE 2024)隆重開幕。全球領(lǐng)先的智能終端企業(yè)TCL實(shí)業(yè)攜多款創(chuàng)新技術(shù)和新品亮相,以敢為精神勇闖技術(shù)無人區(qū),斬獲四項(xiàng)AWE 2024艾普蘭大獎。

    企業(yè)IT

    重慶創(chuàng)新公積金應(yīng)用,“區(qū)塊鏈+政務(wù)服務(wù)”顯成效

    “以前都要去窗口辦,一套流程下來都要半個(gè)月了,現(xiàn)在方便多了!”打開“重慶公積金”微信小程序,按照提示流程提交相關(guān)材料,僅幾秒鐘,重慶市民曾某的賬戶就打進(jìn)了21600元。

    3C消費(fèi)

    “純臻4K 視界煥新”——愛普生4K 3LCD 激光工程投影

    2024年3月12日,由愛普生舉辦的主題為“純臻4K 視界煥新”新品發(fā)布會在上海盛大舉行。

    研究

    2024全球開發(fā)者先鋒大會即將開幕

    由世界人工智能大會組委會、上海市經(jīng)信委、徐匯區(qū)政府、臨港新片區(qū)管委會共同指導(dǎo),由上海市人工智能行業(yè)協(xié)會聯(lián)合上海人工智能實(shí)驗(yàn)室、上海臨港經(jīng)濟(jì)發(fā)展(集團(tuán))有限公司、開放原子開源基金會主辦的“2024全球開發(fā)者先鋒大會”,將于2024年3月23日至24日舉辦。