streamset下载(要先注册才能下载):
https://streamsets.com/products/dataops-platform/data-collector-engine/
1、安装jdk8 2、系统文件数设置必须要大于32768
[root@locaohsot~]# vi /etc/security/limits.conf sdc soft nofile 32768 sdc hard nofile 32768 [root@locaohsot~]# vi /etc/profile ulimit -HSn 32768 [root@locaohsot~]# source /etc/profile
3、注册之后下载是自动的 4、解压:tar xvzf streamsets-datacollector-common-3.22.3.tgz 5、cd streamsets-datacollector-3.22.3 6、启动:bin/streamsets dc 7、http://ip:18360 8、要用注册的账户登录
注意:
1.创建成功了但是如果要是用mysql或者oracle数据源,需要导入相应的jar包
2.streamsets-datacollector-3.9.1/streamsets-libs/streamsets-datacollector-jdbc-lib/lib
3.找到路径把jar导入,并重启streamsets就可以使用了。