标签：总结 同步 Python 数据源 hj job DataX datax

同步需求：mysql中的数据同步到atomdata（一个数据，和你认为的oracle一样）

Github主页地址：https://github.com/alibaba/DataX

一、dataX概览

1.1 DataX

DataX 是阿里巴巴集团内被广泛使用的离线数据同步工具/平台，实现包括 MySQL、SQL Server、Oracle、PostgreSQL、HDFS、Hive、HBase、OTS、ODPS 等各种异构数据源之间高效的数据同步功能。

1.2 Features

DataX本身作为数据同步框架，将不同数据源的同步抽象为从源头数据源读取数据的Reader插件，以及向目标端写入数据的Writer插件，理论上DataX框架可以支持任意数据源类型的数据同步工作。同时DataX插件体系作为一套生态系统, 每接入一套新数据源该新加入的数据源即可实现和现有的数据源互通。

1.3 System Requirements

• Linux
• JDK(1.8以上，推荐1.8)  
• Python(推荐Python2.6.X)
• Apache Maven 3.x (Compile DataX)

（1）jdk安装方法：

见链接： https://www.cnblogs.com/syw20170419/p/16250500.html

（2）python安装方法：

优先执行python -v， 如当前机器有python2.7版本，则跳过下面步骤

a、离线安装, 先将Python-2.7.15.zip

标签：总结,同步,Python,数据源,hj,job,DataX,datax
来源： https://www.cnblogs.com/syw20170419/p/16289201.html

本站声明： 1. iCode9 技术分享网（下文简称本站）提供的所有内容，仅供技术学习、探讨和分享；
2. 关于本站的所有留言、评论、转载及引用，纯属内容发起人的个人观点，与本站观点和立场无关；
3. 关于本站的所有言论和文字，纯属内容发起人的个人观点，与本站观点和立场无关；
4. 本站文章均是网友提供，不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属；如您发现该文章侵犯了您的权益，可联系我们第一时间进行删除；
5. 本站为非盈利性的个人网站，所有内容不会用来进行牟利，也不会利用任何形式的广告来间接获益，纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。