guohongyuan88/dataxserver

为DataX(https://github.com/alibaba/DataX) 提供远程多语言调用（ThriftServer，HttpServer） 分布式运行（DataX on YARN） 功能

DataX Server

  生产环境用的基于阿里早期开源的DataX1.0.0
当前版本基于新开源的DataX 3.0.0 重构 还未用在生产环境
为 DataX 提供远程调用（Thrift Server， Http Server）分布式运行（DataX On YARN）功能

Feature

• 1. Thrift Server
• 2. DataX on Yarn
• 3. Http Server （开发中）

TODO

• 1.Http Server(开发中)
• 2.代码重构 (待开发)

按照功能类型拆分到多个子项目中　重新组织包名　方便后续新增功能

Deploy

  下载发布包DataXServer-0.0.1.tar.gz 并解压 进入 0.0.1 目录

  执行   ./bin/startThriftServer.sh  启动Thrift Server

  进入 example/nodejs 目录

  执行 node submitStream2Stream.js  提交测试任务到Thrift Server

Develop

 项目依赖阿里 DataX
git https://github.com/alibaba/DataX.git cd DataX
mvn install

git https://github.com/TianLangStudio/DataXServer.git
cd DataXServer
mvn compile