检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Kafka应用开发规则 调用Kafka API（AdminZkClient.createTopic）创建Topic 对于Java开发语言，正确示例： import kafka.zk.AdminZkClient; import kafka.zk.KafkaZkClient; import
避免COLLSCAN全表扫描。 查询条件和索引字段匹配有顺序性。 insert/update命令中涉及的文档，最大不能超过16MB。 使用写入/更新命令修改业务数据会造成业务数据变更。 父主题： 基础命令规范
企业内部开放API及文档 本章节讲述企业内部如何开放API及文档。企业内部之间通过ROMA API将服务或数据变现，内部之间相互调用实现资源共享。 例如，部门A在ROMA API开放API，设计API、生成产品并上架到API目录，部门B通过API目录查看和订阅API。此时，部门A
流流关联中不能加入批Source算子 流流关联中不能加入批Source算子，根据业务情况将该Source算子调整为维表算子。 父主题： Flink SQL逻辑开发规范
FlinkSQL DWS表开发建议 FlinkSQL DWS表开发建议 开发FlinkSQL DWS作业，DWS可以作为源表、结果表和维表。 开发FlinkSQL DWS表请参考Flink SQL概述。 父主题： FlinkSQL Connector开发规范
一致 当Kafka Source并行度大于Topic分区数时，多余的并行度不能消费数据。 父主题： FlinkSQL Connector开发规范
FlinkSQL JDBC表开发建议 Flink SQL与JDBC数据类型对应关系 参考表1开发Flink SQL作业。 表1 Flink SQL与JDBC数据类型对应关系 Flink SQL数据类型 MySQL数据类型 Oracle数据类型 PostgreSQL数据类型 SQL
insert into sink-B select id,org_id from source-B; 父主题： Flink SQL逻辑开发规范
SELECT * FROM payments WHERE payment_amount < 500; 父主题： FlinkSQL Connector开发规范
overwrite，否则会导致文件个数与桶数不一致。 使用WebHCat的部分REST接口的前置条件 WebHCat的部分REST接口使用依赖于MapReduce的JobHistoryServer实例，具体接口如下： mapreduce/jar(POST) mapreduce/streaming(POST)
HBase Java API接口介绍 HBase采用的接口与Apache HBase保持一致，请参见http://hbase.apache.org/apidocs/index.html。 新增或修改的接口 HBase 0.98.3建议使用org.apache.hadoop.hbase
此时若客户端异常、断电，则数据丢失。对于有高可靠要求的数据，应该写完后，调用hflush将数据刷新到HDFS侧。 父主题： HDFS应用开发规范
FlinkSQL DWS表开发规则 提前在DWS中创建表 若开发FlinkSQL DWS表作业，需要在DWS中创建数据表。 由于Flink作业在DWS中找不到对应表会报错，所以需要提前在DWS中创建好用于接收数据的空表。 父主题： FlinkSQL Connector开发规范
Hive/Presto等引擎可以直接修改表属性，但是这种修改会导致整个Hudi表出现数据重复，甚至数据损坏；因此禁止修改上述属性。 父主题： Spark on Hudi开发规范
uet等。为了节省存储空间，或者大部分时间只查询其中的一部分字段时，可以在建表时使用列式存储(比如ORC文件)。 父主题： Hive应用开发规范
Hudi数据表设计规范 Hudi表模型设计规范 Hudi表索引设计规范 Hudi表分区设计规范 父主题： Hudi应用开发规范
ue”，表示当前Hive已开启LakeFormation，未使用MetaStore功能。 父主题： FlinkSQL Connector开发规范
'default', 'cluster.name' = 'flink_hive' ); 父主题： FlinkSQL Connector开发规范
创建开发环境实例 功能介绍 创建开发环境实例，用于代码开发。 该接口为异步操作，创建开发环境实例的状态请通过查询开发环境实例详情接口获取。 URI POST /v1/{project_id}/demanager/instances 参数说明如表1所示。 表1 参数说明 参数 是否必选
应用在各类与HBase操作相关的接口方法的容错处理过程中。 不用Admin时，要及时关闭，Admin实例不应常驻内存 Admin的实例应尽量遵循 “用时创建，用完关闭”的原则。不应该长时间缓存同一个Admin实例。 父主题： HBase应用开发规范
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
