开发环境: Oracle Java + Eclipse + Scala + Gradle + Kafka
1、Gradle安装配置
https://www.gradle.org/downloads/ 下载最新的Gradle版本。下载解压到一个目录,然后创建一个环境变量GRADLE_HOME指向解压的目录,再将%GRADLE_HOME%in加到PATH环境变量中,Gradle就安装配置好了。打开一个cmd输入gradle -v 验证一下:
2、kafka源代码下载
安装好Gradle之后我们开始下载Kafka的源代码,当前最新的稳定版本是2.2.0,你可以从http://kafka.apache.org/downloads处下载源代码包。下载之后解压缩到一个目录,目录结构如下图所示:
重要目录的作用如下:
bin目录: Windows和Unix平台下的执行脚本,比如kafka-server-start,console-producer,console-consumer等
clients目录: Kafka客户端代码
config目录: Kafka配置文件,其中比较重要的是server.properties,启动Kafka broker需要直接加载这个文件
core目录: Kafka的核心代码
examples目录: Kafka样例代码,例如如何使用Java编写简单的producer和consumer
test: 系统测试脚本,主要用python编写
其他的目录和配置文件大多和gradle配置有关,就不赘述了。
3、下载gradle wrapper类库
因为源代码的gradle子目录中没有wrapper类库,因此我们要先安装一个Gradle Wrapper库,方法也很简单,打开个cmd窗口,在Kafka源代码根目录下执行gradle wrapper即可。你只需运行这个命令一次即可。如果是首次安装需要花一些时间去下载所需的jar包。Kafka的源代码是用Scala语言编写的,下图中清晰地显示我们使用Scala版本是2.12.8。你可以在gradle.properties文件中指定Scala版本。
命令运行成功之后,在kafka的gradle子目录中会多出一个wrapper子目录,里面包含了一个jar包和一个配置文件。至此Gradle wrapper已被成功安装在本机:
4.安装scala
5.生成Eclipse工程文件并导入到MyEclipse中
上述准备工作一切就绪后,我们现在可以生成Eclipse工程文件。具体做法为打开一个cmd窗口,切换到kafka源代码根路径下,运行gradlew eclipse,如果是第一次运行,可能会花费一些时间去下载必要的jar包,在等待了一段时间之后,终于看到了BUILD SUCCESSFUL的字样表示项目工程文件生成成功:
看到成功后,说明gradle项目构建成功了,下面在myeclipse中导入项目
可以看到当前kafka版本中的主要工程
core工程就是最核心的kafka工程
至此kafka源码已经成功导入到myeclipse中。