自动生成MySQL数据表的数据字典支持多个 代码直接配置数据库连接信息，免输入

因工作需要需要将mysql数据同步到另一个mysql，研究了阿里的开源系统otter，现将研究成果分享出来哈哈

shell-mysql 使用shell脚本分页读取MySQL数据 脚本背景 由于要在Linux上，远程读取mysql的表的数据，然后做一定清洗后，把数据上传至Hadoop集群中，使用Java写吧，感觉太麻烦了，得在Win上开发好，还得打成jar包， 上传到Linux上，如果那里出了问题，还得重复这样，非常不方便，那就用shell写一个吧，也不需要什么jdbc驱动包，只需要在Linux上装个MySQL的 客户端即可，用一行yum命令即可搞定，所以就花了点时间，封装了一个小脚本 功能介绍 直接在Linux下使用shell脚本远程分页读取MySQL表的数据的一个小脚本，已测过读取600万+的数据 效率与jdbc相差无几 脚本介绍 主要有三个脚本构成1，page.sh 这是一主脚本，里面定义了分页的条件，大家看下便知2，f.sh 一个小包装的脚本吧，里面会用sed去掉表头一些信息3，port.

数据字典导出工具，只支持mysql数据库，导出格式只有html

该方案优点是简单，容易手上；缺点是停机时间较长。 因此它适用于数据量不大，或者允许停机的时间较长，并且在这个时间范围内能够完成。 以下是MySQLdump命令的一些用法： 1.将整个数据库的数据及建表文件导出到sql文件中 mysqldump -uroot -proot database1 > database1.sql 2.将sql文件的数据导入,不再是mysqldump,而是mysql mysql -uroot -proot database2 < database1.sql 3.将数据库中的某个表的数据及结构导出到sql文件中 mysqldump -uroot -proot da

2022年每日对应的日期类型mysql数据表sql 导入sql到数据库即可根据实际情况改动使用

利用flume将mysql的数据同步到kafak，flume是基于CDH6.2.0安装的。解决已下问题：java.lang.NoSuchMethodError:    org.apache.flume.Context.getSubProperties(Ljava/lang/String;)Lcom/google/common/collect/ImmutableMap;

水资源远程监控系统，能够将从传感器获取到的数据以曲线的形式实时的显示出来，并且存储到数据库以及云服务器中，具备数据异常报警功能和多条件历史数据查询功能

V2 版本更新： 可以导出原来数据库中的 comment 字段了！ 原程序为外国人缩写，但是原作者的blog已经无法打开。 从 http://download.csdn.net/detail/esr2587758/2121033 这里下载后，发现代码有兼容问题和中文乱码问题。 于是修复了兼容问题和编码问题，亲自测试，已经可以正常使用。使用环境： windows 7 php 5.4 mysql 5.1 可以在线查看和正常导出excel表。

red gate for mysql 数据比对工具