MAPREDUCE服务 MRS-SET/RESET:注意事项

时间：2024-07-02 16:40:05

MAPREDUCE服务 MRS Hudi DML语法说明

以下为分别使用SET和RESET命令进行动态设置或清除操作的属性：

表2 属性描述
属性	描述
hoodie.insert.shuffle.parallelism	insert方式写入数据时的spark shuffle并行度。
hoodie.upsert.shuffle.parallelism	upsert方式写入数据时的spark shuffle并行度。
hoodie.delete.shuffle.parallelism	delete方式删除数据时的spark shuffle并行度。
hoodie.sql.insert.mode	指定Insert模式，取值为strict、non-strict及upsert。
hoodie.sql.bulk.insert.enable	指定是否开启bulk insert写入。
spark.sql.hive.convertMetastoreParquet	sparksql把parquet表转化为datasource表进行读取。当hudi的provider为hive的情况下，使用sparksql或sparkbeeline进行读取，需要将该参数设置为false。