2014年12月29日 归档

结合批处理与Windows计划任务简单实现MYSQL增量采集

整理这个原因很简单,最近做数据采集遇到有N多MYSQL数据库需要采集、同步,原有对接系统单一库、REST等形式的采集实现起来略显麻烦。考虑到是内部系统,且采集、同步时间一般在晚上,故而打算开个先例,抛弃之前的采集方案,直接使用MYSQL命令导出远程库表再还原至本地。思路有了,实现起来就更简单了,这里只介绍大概,不详细讲解枯燥的业务及实现。

首先,得知道MYSQL导入、导出命令:

导出:mysqldump -u用户名 -p密码 -h主机 数据库 a -w "sql条件" --lock-all-tables > 路径

导入:mysql -u用户名 -p密码 -h主机 数据库 < 路径 有很多文章描述的导入是登录后使用source,这里因为我们要连多个库、多个表,频繁登录操作也不方便,还是选择这样的方式了,具体内部实现是否一样,不在我们探究范围。 查看更多...