数据湖探索 DLI-ClickHouse:注意事项

时间:2024-11-16 13:21:44

注意事项

  • 创建Flink OpenSource SQL作业时,在作业编辑界面的“运行参数”处,“Flink版本”需要选择“1.15”,勾选“保存作业日志”并设置保存作业日志的OBS桶,方便后续查看作业日志。
  • 认证用的username和password等硬编码到代码中或者明文存储都有很大的安全风险,建议使用DEW管理凭证。配置文件或者环境变量中密文存放,使用时解密,确保安全。Flink Opensource SQL使用DEW管理访问凭据
  • 创建 MRS 的ClickHouse集群,集群版本选择MRS 3.1.0及以上版本。
  • ClickHouse结果表不支持删除表数据操作。
  • Flink中支持字段类型范围为:string、tinyint、smallint、int、bigint、float、double、date、timestamp、decimal以及Array。

    其中Array中的数据类型仅支持int、bigint、string、float、double。

support.huaweicloud.com/sqlref-flink-dli/dli_08_15030.html