Skip to content

Stark-1.2.0-preview
Compare
Choose a tag to compare
@hexnn hexnn released this 28 Nov 02:03
· 43 commits to main since this release
1.2.0-preview
8be2059
This commit was created on GitHub.com and signed with GitHub’s verified signature.
GPG key ID: B5690EEEBB952194
Verified
Learn about vigilant mode.

Stark引擎 [预览版] 重磅更新！支持[MySQL/Oracle/PostgreSQL/DB2/SQLServer/HiveJDBC]六种数据源

  • 下载并修改 Stark-1.2.0-preview.jar 根目录下的 rule.json 规则文件，指定 source 和 sink 中的 [MySQL/Oracle/PostgreSQL/DB2/SQLServer/HiveJDBC] 数据源连接信息（支持任意多源异构数据源读写混用）
  • 上传修改后的 Stark-1.2.0-preview.jar 到服务器（需要安装 Spark3.x 客户端，官网下载tgz包解压即可）
  • 进入 $SPARK_HOME/bin 目录下，执行 spark-submit --master local[*] Stark-1.2.0-preview.jar 命令，等待任务执行结束
  • 进入 [MySQL/Oracle/PostgreSQL/DB2/SQLServer/HiveJDBC] 数据库，查看 sink 节点指定的输出表，验证数据是否采集成功

注意： [预览版] 只能使用 [MySQL/Oracle/PostgreSQL/DB2/SQLServer/HiveJDBC] 数据源做 [批处理] 操作，想要体验Stark引擎完整版功能请联系↓↓↓

Assets 3
Loading