<acronym id="s8ci2"><small id="s8ci2"></small></acronym>
<rt id="s8ci2"></rt><rt id="s8ci2"><optgroup id="s8ci2"></optgroup></rt>
<acronym id="s8ci2"></acronym>
<acronym id="s8ci2"><center id="s8ci2"></center></acronym>
0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

DBSyncer支持多種數據源和預警功能

jf_ro2CN3Fa ? 來源:芋道源碼 ? 2023-05-18 16:37 ? 次閱讀

設計

應用場景

使用教程

預覽

DBSyncer是一款開源的數據同步中間件,提供MySQL、Oracle、SqlServer、PostgreSQL、Elasticsearch(ES)、Kafka、File、SQL等同步場景。

支持上傳插件自定義同步轉換業務,提供監控全量和增量數據統計圖、應用性能預警等。

特點

組合驅動 ,自定義庫同步到庫組合,關系型數據庫與非關系型之間組合,任意搭配表同步映射關系

實時監控 ,驅動全量或增量實時同步運行狀態、結果、同步日志和系統日志

開發插件 ,自定義轉化同步邏輯

設計

架構圖

f4359d5e-f496-11ed-90ce-dac502259ad0.png

基于 Spring Boot + MyBatis Plus + Vue & Element 實現的后臺管理系統 + 用戶小程序,支持 RBAC 動態權限、多租戶、數據權限、工作流、三方登錄、支付、短信、商城等功能

項目地址:https://github.com/YunaiV/ruoyi-vue-pro

視頻教程:https://doc.iocoder.cn/video/

應用場景

連接器 數據源 目標源 支持版本(包含以下)
MySQL 5.7.19以上
Oracle 10gR2 -11g
SqlServer 2008以上
PostgreSQL 9.5.25以上
ES 6.0以上
Kafka 開發中 2.10-0.9.0.0以上
File *.txt, *.unl
SQL 支持以上關系型數據庫
后期計劃 Redis

基于 Spring Cloud Alibaba + Gateway + Nacos + RocketMQ + Vue & Element 實現的后臺管理系統 + 用戶小程序,支持 RBAC 動態權限、多租戶、數據權限、工作流、三方登錄、支付、短信、商城等功能

項目地址:https://github.com/YunaiV/yudao-cloud

視頻教程:https://doc.iocoder.cn/video/

使用教程

1.啟動 代理 和 數據庫 服務

f43b1dce-f496-11ed-90ce-dac502259ad0.png

2.準備測試賬號,test

f4440ae2-f496-11ed-90ce-dac502259ad0.png

3.分配sysadmin角色

f44ac0f8-f496-11ed-90ce-dac502259ad0.png

4.分配指定數據庫權限

f4504a96-f496-11ed-90ce-dac502259ad0.png

PostgreSQL

通過復制流技術監聽增量事件,基于內置插件pgoutput、test_decoding實現解析wal日志

1、修改postgresql.conf文件,重啟服務

wal_level=logical

2、授予賬號權限LOGIN和REPLICATION

File

監聽文件修改時間得到變化文件,通過文件偏移量讀取最新數據

https://gitee.com/ghi/dbsyncer/issues/I55EP5

ES

定時獲取增量數據。

賬號具有訪問權限。

日志

建議MySQL、SqlServer、PostgreSQL都使用日志

f45773e8-f496-11ed-90ce-dac502259ad0.png

定時

假設源表數據格式

f45f4050-f496-11ed-90ce-dac502259ad0.pngf468bcfc-f496-11ed-90ce-dac502259ad0.png

預覽

驅動管理

f46f32a8-f496-11ed-90ce-dac502259ad0.png

驅動詳情

f476ef02-f496-11ed-90ce-dac502259ad0.png

驅動表字段關系配置

f482318c-f496-11ed-90ce-dac502259ad0.png

監控

f48c4988-f496-11ed-90ce-dac502259ad0.png

上傳插件

f4927754-f496-11ed-90ce-dac502259ad0.png

開源地址

審核編輯:彭靜

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 開源
    +關注

    關注

    3

    文章

    2991

    瀏覽量

    41729
  • 管理系統
    +關注

    關注

    1

    文章

    1940

    瀏覽量

    34481
  • 數據源
    +關注

    關注

    1

    文章

    59

    瀏覽量

    9593

原文標題:星標1.4k,一款國產開源數據同步中間件,支持多種數據源和預警功能!

文章出處:【微信號:芋道源碼,微信公眾號:芋道源碼】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    LabView動態創建數據源的方法

    在LabView中LabSQL操作數據庫是通過ODBC連接,用戶需要在ODBC中指定數據源名稱和驅動程序。因此在使用LabSQL之前,首先需要在Windows操作系統中的ODBC數據源中創建一個
    發表于 09-23 01:53

    本例中采用的是數據源綁定的方式

    控制面板--管理工具--數據源(ODBC)--系統DSN--添加數據庫即可。
    發表于 12-27 12:03

    數據源的類型是DAQmx Event改成數字波形

    數據源的類型是DAQmx Event改成數字波形
    發表于 05-04 21:38

    數據源那個dbase驅動 電腦上怎么裝

    數據源那個dbase驅動電腦上怎么裝
    發表于 01-21 20:45

    ODBC數據源的建立

    我找不到數據源這個選項啊,怎么辦?
    發表于 04-21 11:39

    DxDataBook 如何調用網絡數據源

    DxDataBook 如何調用網絡數據源: 就是在library wizard中有三種調用三種數據源的方式:WWW、oracle、ODBC三種,后面兩種我知道怎么調用,但有人知道第一種(www)怎么調用嗎?求大神解救??!
    發表于 07-19 10:06

    請問labview連接oracle數據庫時用了udl 數據源名稱過長怎么解決

    用labview連接oracle時用的udl連接,數據連接屬性時可以連接成功的,但是在labview 里他說數據源名稱過長。請問這個怎么解決?錯誤提示:NI_Database_API.lvlib
    發表于 08-18 15:26

    QuickBI助你成為分析師——搞定數據源

    摘要: QuickBI支持多種數據源連接,添加數據源數據分析展示的第一步,下面來詳細介紹一下產品數據源
    發表于 03-28 12:43

    QuickBI助你成為分析師——數據源FAQ小結

    摘要: 添加數據源的時候經常會遇到各種問題,下面來講解一下常見情況,若仍有疑問掃碼咨詢哦!使用 Quick BI 分析數據時,需要先指定原始數據所在的數據源,測試連通
    發表于 03-28 12:58

    聚合不同數據源的屬性得分

    本節首先直觀地討論屬性的打分原則,進而介紹如何處理CB和IB列表以完成對屬性的打分,最后討論如何聚合不同數據源的屬性得分。
    發表于 08-07 08:22

    怎么建立一個驅動為SQL D 的數據源?

    怎么建立一個驅動為SQL D 的數據源
    發表于 12-09 14:46

    SpringBoot項目多數據源配置數據

    SpringBoot項目多數據源配置
    發表于 06-05 09:51

    ViCANdo Suite直接支持數據源

    點云數據實時處理ViCANdo Suite直接支持數據源ViCANdo Suite 產品介紹
    發表于 01-05 07:28

    Quick BI 支持多種數據源進行多維分析

    Quick?BI?支持多種數據源進行多維分析 一、摘要 隨著互聯網的高速發展,數據量爆發式增長的同時,數據的存儲形式也開始呈現出多樣性,有結構化存儲,如?Mysql, Oracle
    發表于 12-27 16:45 ?287次閱讀
    Quick BI <b class='flag-5'>支持</b><b class='flag-5'>多種數據源</b>進行多維分析

    數據源數據轉換和同步的ETL工具推薦

    多種數據源的連接,包括文件系統、數據庫、消息隊列、網絡接口等。它提供了可視化的界面和強大的數據處理功能,可以輕松地創建數據流,進行
    的頭像 發表于 07-28 16:32 ?518次閱讀
    亚洲欧美日韩精品久久_久久精品AⅤ无码中文_日本中文字幕有码在线播放_亚洲视频高清不卡在线观看
    <acronym id="s8ci2"><small id="s8ci2"></small></acronym>
    <rt id="s8ci2"></rt><rt id="s8ci2"><optgroup id="s8ci2"></optgroup></rt>
    <acronym id="s8ci2"></acronym>
    <acronym id="s8ci2"><center id="s8ci2"></center></acronym>