-
MapReduce服务 MRS - MapReduce服务 MRS
开发指南 获取MRS二次开发样例工程 通过Flink分析网页停留时间 通过HBase管理企业用户信息 HDFS文件操作 Hive数据分析应用 Impala应用开发 Kafka消息发布及订阅 Kudu应用开发 MapReduce应用开发 Oozie离线分析网站日志 通过Spark分析网页停留时间
-
ClickHouse客户端使用实践 - MapReduce服务 MRS
--config-file 配置文件的名称。 --secure 如果指定,将通过SSL安全模式连接到服务器。 --history_file 存放命令历史的文件的路径。 --param_<name> 带有参数的查询,并将值从客户端传递给服务器。
-
开发和部署HetuEngine Function Plugin - MapReduce服务 MRS
修改“pom.xml”文件如下: <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation=
-
分析Hive数据 - MapReduce服务 MRS
若直连HiveServer的方式访问Hive,需按如下方式拼接JDBC URL,并将hiveclient.properties文件中的zk.quorum配置项的端口改为10000。
-
快速使用IoTDB - MapReduce服务 MRS
将生成的“truststore.jks”文件复制到“客户端安装目录/IoTDB/iotdb/conf”目录下: cp truststore.jks 客户端安装目录/IoTDB/iotdb/conf 如果当前集群已启用Kerberos认证,执行以下命令认证当前用户,当前用户需要具有创建
-
Spark HA方案介绍 - MapReduce服务 MRS
<path_to_keytab>表示<principal_name>对应的keytab文件路径,如“/opt/auth/test/user.keytab”。
-
ClickHouse用户及权限管理 - MapReduce服务 MRS
执行以下命令获取“clickhouse.keytab”文件路径。
-
ALM-25005 Nscd服务异常 - MapReduce服务 MRS
用root用户登录故障节点,执行cat /etc/nscd.conf命令,查看配置文件中“enable-cache passwd”、“positive-time-to-live passwd”、“enable-cache group”、“positive-time-to-live
-
YARN Command介绍 - MapReduce服务 MRS
jar <jar> 运行jar文件。 logs 获取container日志。 classpath 打印获取Hadoop JAR包和其他库文件所需的CLASSPATH路径。 daemonlog 获取或者设置服务LOG级别。
-
YARN Command介绍 - MapReduce服务 MRS
jar <jar> 运行jar文件。 logs 获取container日志。 classpath 打印获取Hadoop JAR包和其他库文件所需的CLASSPATH路径。 daemonlog 获取或者设置服务LOG级别。
-
MRS集群中的用户与权限 - MapReduce服务 MRS
HDFS HDFS中的目录和文件授权。 Hive Hive Admin Privilege Hive管理员权限。 Hive Read Write Privileges Hive数据表管理权限,可设置与管理已创建的表的数据操作权限。 Hue 存储策略管理员权限。
-
YARN Command介绍 - MapReduce服务 MRS
jar <jar> 运行jar文件。 logs 获取container日志。 classpath 打印获取Hadoop JAR包和其他库文件所需的CLASSPATH路径。 daemonlog 获取或者设置服务LOG级别。
-
YARN Command介绍 - MapReduce服务 MRS
jar <jar> 运行jar文件。 logs 获取container日志。 classpath 打印获取Hadoop JAR包和其他库文件所需的CLASSPATH路径。 daemonlog 获取或者设置服务LOG级别。
-
Hive应用开发规则 - MapReduce服务 MRS
分桶表不支持insert into 分桶表(bucket table)不支持insert into,仅支持insert overwrite,否则会导致文件个数与桶数不一致。
-
策略及授权项说明 - MapReduce服务 MRS
{project_id}/clusters/{cluster_id} mrs:cluster:delete √ √ 查询主机列表(V1) GET /v1.1/{project_id}/clusters/{cluster_id}/hosts mrs:host:list √ √ 查询文件列表
-
Spark2x多主实例 - MapReduce服务 MRS
<path_to_keytab>表示<principal_name>对应的keytab文件路径,如“/opt/auth/test/user.keytab”。
-
Spark2x多租户 - MapReduce服务 MRS
<path_to_keytab>表示<principal_name>对应的keytab文件路径,如“/opt/auth/test/user.keytab”。
-
查看集群基本信息 - MapReduce服务 MRS
节点类型 节点类型: Master:集群主节点,负责管理集群,协调将MapReduce可执行文件分配到核心节点。此外,还会跟踪每个作业的执行状态,监控DataNode的运行状况。
-
Storm基本原理 - MapReduce服务 MRS
Spout Topology中产生源数据的组件,是Tuple的来源,通常可以从外部数据源(如消息队列、数据库、文件系统、TCP连接等)读取数据,然后转换为Topology内部的数据结构Tuple,由下一级组件处理。
-
Flink Job Pipeline增强 - MapReduce服务 MRS
另外,NettyServer的端口及子网需要在“flink-conf.yaml”配置文件中配置: 端口范围 nettyconnector.sinkserver.port.range: 28444-28943 子网 nettyconnector.sinkserver.subnet: