检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
SparkJavaExample Spark Core任务的Java/Python/Scala/R示例程序。 本工程应用程序实现从HDFS上读取文本数据并计算分析。 SparkRExample示例不支持未开启Kerberos认证的集群。 SparkPythonExample SparkScalaExample
vcores 40,memory 28 resourcepool -status <resourcepoolname>以列表格式显示资源库详细信息。示例如下: > superior resourcepool -status default NAME: default DESCRIPTION:
“beforeStart”方法有以下作用: 帮助用户解析SQL语句中的UDF参数。 配置UDF运行时必要的信息,即指定UDF访问原始数据时采取的策略和输出结果序列的类型。 创建资源,比如建立外部链接,打开文件等。 UDFParameters UDFParameters的作用是解析SQL语句中的UDF参数(SQL中UD
是IAM最初提供的一种根据用户的工作职能定义权限的粗粒度授权机制。策略以API接口为粒度进行权限拆分,授权更加精细,可以精确到某个操作、资源和条件,能够满足企业对权限最小化的安全管控要求。 如果您要允许或是禁止某个接口的操作权限,请使用策略。 账号具备所有接口的调用权限,如果使
维修或者更换故障部件,并重启节点。查看告警列表中,该告警是否已清除。 是,处理完毕。 否,执行8。 当集群中上报大量的节点故障时,可能是浮动IP资源异常导致Controller无法检测NodeAgent心跳。 登录任一管理节点,查看“/var/log/Bigdata/omm/oms/ha/scriptlog/floatip
Kafka服务未完全同步的Partition数过多,会影响服务的可靠性,一旦发生leader切换,可能会导致丢数据。 50% broker上用户连接数使用率 38011 Broker上用户连接数使用率超过设定阈值 当同一个用户连接数太多时,产生告警的用户将无法与Broker建立新的连接。 80% Broker磁盘使用率
join-pushdown.enabled true:允许将Join下推到数据源执行 false: Join不会被下推到数据源执行,因此会消耗更多的网络和计算资源 true join-pushdown.strategy 前提条件:Join下推功能已开启 AUTOMATIC:基于代价估算(cost-based)的Join下推
参数解释: 数据连接名称。 约束限制: 不涉及 取值范围: 不涉及 默认取值: 不涉及 limit 否 Integer 参数解释: 每页返回的资源个数。 约束限制: 不涉及 取值范围: 1-1000 默认取值: 不涉及 offset 否 Integer 参数解释: 分页查询起始偏移量。
在实际情况下,对大量数据进行统计时,有时只关心一个近似值,而非具体值,比如统计某产品的销量,这种时候,近似值聚合函数就很有用,它使用较少的内存和CPU资源,以便可以获取数据结果而不会出现任何问题,例如溢出到磁盘或CPU峰值。这对于数十亿行数据运算的需求很有用。 approx_median(x)
新进行EIP的绑定来修复该问题。 约束限制: 不涉及 取值范围: 不涉及 默认取值: 不涉及 queue String 参数解释: 作业的资源队列类型。 约束限制: 不涉及 取值范围: 不涉及 默认取值: 不涉及 状态码: 400 表4 响应Body参数 参数 参数类型 描述 error_code
参数解释: 虚拟机当前状态。 约束限制: 不涉及 取值范围: 不涉及 默认取值: 不涉及 resource_id String 参数解释: 节点资源ID。 约束限制: 不涉及 取值范围: 不涉及 默认取值: 不涉及 flavor String 参数解释: 虚拟机规格ID。 约束限制: 不涉及
取值范围: 不涉及 默认取值: 不涉及 resource_requirement Array of strings 参数解释: 版本所需的ip等资源说明。 约束限制: 不涉及 取值范围: 不涉及 默认取值: 不涉及 constraints VersionConstraint object
角色授权操作 授予访问表所在的Catalog策略 在“Policy Name”填写策略名称。 在“Presto Catalog”填写要授权的资源所在的catalog,如“hive”。 在“Select User”中填授权的Hetu用户。 在“Permissions”中勾选“Select”。
节点名称,对应manager里的节点名称。 约束限制: 不涉及 取值范围: 不涉及 默认取值: 不涉及 resource_id String 参数解释: 资源id。确定节点的唯一性,包周期节点可用于计费的查询。 约束限制: 不涉及 取值范围: 不涉及 默认取值: 不涉及 node_group_name
input Hadoop中input的路径。 output 存储output的路径。如没有规定,WebHCat将output储存在使用队列资源可以发现到的路径。 mapper mapper程序位置。 reducer reducer程序位置。 files HDFS文件添加到分布式缓存中。
input Hadoop中input的路径。 output 存储output的路径。如没有规定,WebHCat将output储存在使用队列资源可以发现到的路径。 mapper mapper程序位置。 reducer reducer程序位置。 files HDFS文件添加到分布式缓存中。
input Hadoop中input的路径。 output 存储output的路径。如没有规定,WebHCat将output储存在使用队列资源可以发现到的路径。 mapper mapper程序位置。 reducer reducer程序位置。 files HDFS文件添加到分布式缓存中。
input Hadoop中input的路径。 output 存储output的路径。如没有规定,WebHCat将output储存在使用队列资源可以发现到的路径。 mapper mapper程序位置。 reducer reducer程序位置。 files HDFS文件添加到分布式缓存中。
input Hadoop中input的路径。 output 存储output的路径。如没有规定,WebChat将output储存在使用队列资源可以发现到的路径。 mapper mapper程序位置。 reducer reducer程序位置。 files HDFS文件添加到分布式缓存中。