不灭的焱

革命尚未成功,同志仍须努力下载JDK17

作者:php-note.com  发布于:2022-05-28 17:40  分类:网络数据采集  编辑

DataX用来做批量数据迁移很适合,能够保证数据的一致性,性能也很好,结合时间戳字段,用来实现数据定时增量同步也是可以的,如每分钟或每5分钟增量同步一次数据。用DataX这个方案做增量同步要求每个表带一个时间戳字段,删除数据采用逻辑删除,这个要求也比较容易做到。

作者:php-note.com  发布于:2022-05-28 11:30  分类:网络数据采集  编辑

DataX-Web的搭建(Windows/Linux环境),本地idea调试

作者:php-note.com  发布于:2022-05-24 12:03  分类:网络数据采集  编辑

不建议在没有服务器身份验证的情况下建立SSL连接,根据MySQL 5.5.45+、5.6.26+和5.7.6+的要求,如果没有设置显式选项,则必须默认建立SSL连接。