在开始本地运行前,您需要确保您已经安装了Ares所需要的以下软件:
- 安装Java (Java 8 或 11, 其他高于Java 8的版本理论上也可以工作) 以及设置
JAVA_HOME
。 - 安装Spark (Spark 2.4.3 或 高于3.0.0的版本) 以及设置
SPARK_HOME
。
下载Ares代码并通过Maven构建,在ares-dist/target目录下,可以找到构建好的ares-bin.tar.gz文件。
解压ares-bin.tar.gz文件,进入ares-bin目录,进入connectors目录,将不需要的插件删除(目前Ares connectors支持Jdbc connector),然后将需要的插件拷贝到connectors目录下。
您可以按照快速开始来配置开发脚本文件。
进入ares-bin目录,运行如下命令:
./bin/start-ares-spark3-connector.sh --sql /path/to/sample.sql --master spark://127.0.0.1:7077
您可以按照快速开始来运行任务。