Wesley13 Wesley13
3年前
java增量发布工具
有些公司由于没有使用maven作为构建工具,全量发布时没问题,而修改bug增量发布往往是将改动的代码手动编译后,从classes目录下拷贝到jar中然后再放到tomcat目录下发布,这种方法准确度不高,当修复bug时间跨度较大且文件较多时就不好提供了,下面介绍下一个增量打包工具https://gitee.com/lpxs/ProjectPatch.git
Stella981 Stella981
3年前
Canal简介及配置说明
1.简介canal是纯Java开发的,基于数据库增量日志解析,提供增量数据订阅&消费,目前主要支持了mysql。原理相对比较简单:1.1.canal模拟mysqlslave的交互协议,伪装自己为mysqlslave,向mysqlmaster发送dump协议2.2.mysqlmaster收到dump请
Easter79 Easter79
3年前
TiDB DM踩坑实践总结
一、背景在早期从MySQL到TiDB实施同步操作过程中,我们大多数用的是mydumperloader进行整体全量备份的导出,之后拿到meta信息后,通过syncer实现增量同步,整体操作起来比较麻烦,涉及的配置文件较多,其基本原理就是Syncer通过把自己注册为一个MySQLSlave的方式,和MySQLMaster进行通信,然后不
Wesley13 Wesley13
3年前
Mysql之binlog日志说明及利用binlog日志恢复数据操作记录
众所周知,binlog日志对于mysql数据库来说是十分重要的。在数据丢失的紧急情况下,我们往往会想到用binlog日志功能进行数据恢复(定时全备份binlog日志恢复增量数据部分),化险为夷!一、简单了解binlogMySQL的二进制日志binlog可以说是MySQL最重要的日志,它记录了所有的DDL和DML语句(除了数据查询语句sel
Stella981 Stella981
3年前
Flink 助力美团数仓增量生产
简介:本文由美团研究员、实时计算负责人鞠大升分享,主要介绍Flink助力美团数仓增量生产的应用实践。内容包括:1、数仓增量生产;2、流式数据集成;3、流式数据处理;4、流式OLAP应用;5、未来规划。一、数仓增量生产1.美团数仓架构先介绍一下美团数仓的架构以及增量生产。如下图所示,这是美团数仓的简单架构,我
Wesley13 Wesley13
3年前
MySQL 8 备份与恢复
备份应用的场景包括:系统崩溃、硬件故障、用户错误、升级MySQLInstallation、传输MySQLInstallation到另一台机器、设置复制等。SlaveServer备份在备份Slave数据库时,应该备份Masterinfo和Relayloginforepository,如果在备份时,Slave正在复制LOADDA
Wesley13 Wesley13
3年前
mysqldump 逻辑备份和物理备份
逻辑备份逻辑备份是备份sql语句,在恢复的时候执行备份的sql语句实现数据库数据的重现。工具:mysqldump特点:1、可移植性比较强2、备份和恢复的花费时间长,不适用于大型业务系统物理备份物理备份就是备份数据文件了,比较形象点就是cp下数据文件,但真正备份的时候自然不是的cp这么简单。工具:xtraba
铁扇公主 铁扇公主
1年前
简单高效文件备份和同步软件:Syncovery 激活最新版
Syncovery是一款功能强大的文件备份和同步软件,可以帮助用户在不同的设备之间备份和同步数据。它支持多种备份和同步方式,包括本地备份、网络备份、云备份等。Syncovery提供了直观的用户界面,使用户可以轻松设置备份和同步任务。用户可以选择备份的文件类
燕青 燕青
1年前
文件备份同步工具:Syncovery 支持M1
是一款功能强大的文件备份和同步软件,可帮助用户在不同的设备之间备份和同步数据。它支持多种备份和同步方式,包括本地备份、网络备份、云备份等。该软件提供了一个直观的用户界面,使用户可以轻松设置备份和同步任务。用户可以选择备份的文件类型、备份目录、备份频率等,并
快照技术对比学习
根据SNIA的定义,快照有全量快照(fullsnapshot)和增量快照(incrementalsnapshot)两种类型。