检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
FDI通过公网对接其他租户的MRS HIVE如何配置? 首先需要将MRS的IP全部绑定EIP,然后在MRS配置文件中的私网IP全部替换成EIP,再到hdfs-site.xml文件中添加一个配置项“dfs.client.use.datanode.hostname”,值设为“true”。
Hive数据源时,上传的配置文件中全部用的EIP,Hosts里面也配置好IP与Hostname,但是在上传文件时HDFS的Master节点返回的node节点的IP为内网IP,所以连接不通,导致FDI任务执行异常。 解决方案 修改在创建MRS Hive数据源时上传的hdfs-site.xml文件中,在hdfs-site
的集成。 以下是一些行业特定的ROMA Connect集成模板介绍。 教育行业 帮助学校、教育机构和在线学习平台实现学员数据管理、教学资源共享、课程管理等方面的集成,主要包括: 获取并记录学生作业完成情况:每周作业收取截止时间,查询获取指定课程下学生列表,查询学生作业的完成情况,并进行记录。
导入导出组合应用 ROMA Connect支持通过文件的方式导入导出组合应用。 导入组合应用:支持导入JSON格式组合应用文件。 导出组合应用:支持导出JSON格式组合应用文件。 带有自定义连接器的组合应用导出后,暂不支持导入到其他环境使用。 连接器的连接实例信息不支持导出。 导出组合应用
执行以下命令对filebeat.yml文件进行授权。 cd /filebeat sudo chown root filebeat.yml 执行以下命令启动Filebeat。 docker-compose up -d 部署ELK 登录ELK所部署的服务器,切换root用户。 执行以下命令启动ELK。
(可选)准备设备列表和规则列表文件。 从资产包所属的源实例获取导出的设备列表和规则列表文件。 创建设备。 在实例控制台的“设备集成 LINK > 设备管理”页面。 若获取到设备列表文件,则单击“导入设备”,通过导入设备列表文件创建设备。 若未获取到设备列表文件,则单击“创建设备”,手动创建设备。
导出Topic”,导出Topic文件到本地。 导出所有Topic:单击“导出所有Topic”,导出Topic文件到本地。 在导出Topic弹窗中选择要导出文件的格式,然后单击“导出”,导出Topic文件到本地。 当前支持导出xlsx、xls和csv格式文件。若Topic数据中含有英文逗号(
向DWS写入数据时越来越慢怎么解决 原因分析 查看界面上的采集数据,如果写入数据耗时在秒级,属于正常的情况。如果写入几千条数据超过5秒,一般是性能劣化的表现。 解决方案 如果对DWS的某个表频繁访问,会导致写入性能逐渐降低,需要对DWS进行调优,例如,定时使用analyze规划表、VACUUM
填写插件的名称,根据规划自定义。建议您按照一定的命名规则填写插件名称,方便您快速识别和查找。 插件类型 选择插件的类型,不同类型的插件提供不同扩展能力。 跨域资源共享:为API的跨域访问提供指定预检请求头和响应头、自动创建跨域预检请求API的能力。 Kafka日志推送:提供了把API的详细调用日志推送到Kafka的能力。
导入导出资产 概述 ROMA Connect支持把实例的应用和任务资产以文件形式导出到本地,也可以把本地的资产文件导入ROMA Connect,实现资产的批量迁移。 前提条件 资产导入功能仅支持集成资产数据导入,不支持资产相关的实例配置数据导入。在完成集成资产的导入后,还需要完成
导入设备前,请确保设备的配额满足需求。 导入文件格式为csv,并需要使用UTF-8 BOM编码。 在使用导出的文件导入设备时: 如果要新增设备,则需要另外新建导入文件,并在新建的文件中添加新的设备信息。 设备导入文件中表头的名称和顺序固定不能更改,表头名称请参考设备导入文件说明。 确认导入文件是否从老版本实例
导入规则前,请确保规则的配额满足需求。 导入文件格式为csv,并需要使用UTF-8 BOM编码。 在使用导出的文件导入规则时: 如果要新增规则,则需要另外新建导入文件,并在新建的文件中添加新的规则信息。 规则导入文件中表头的名称和顺序固定不能更改,表头名称请参考规则导入文件说明。 确认导入文件是否从老版本实例
导入产品前,请确保产品的配额满足需求。 导入文件格式为csv,并需要使用UTF-8 BOM编码。 在使用导出的文件导入产品时: 如果要新增产品,则需要另外新建导入文件,并在新建的文件中添加新的产品信息。 产品导入文件中表头的名称和顺序固定不能更改,表头名称请参考产品导入文件说明。 确认导入文件是否从老版本实例
用户创建的集成应用和资源,管理员权限的用户可查看和管理其下所有IAM用户所创建的资源。 如果需要把自己创建的资源共享给其他IAM用户查看和使用,可通过将集成应用授权给其他IAM用户的方式实现,具体操作可查看配置集成应用授权。 创建集成应用 登录ROMA Connect控制台,在“
上传配置文件 单击“上传文件”,上传MRS Kafka配置文件。配置文件获取请参考获取MRS Kafka配置文件。 获取MRS Kafka配置文件 获取“krb5.conf”和“user.keytab”文件。 参考下载用户认证文件,在MRS Manager下载用户认证文件,解压后得到“krb5
上传配置文件 单击“上传文件”,上传MRS HBase配置文件。配置文件获取请参考获取MRS HBase配置文件。 获取MRS HBase配置文件 获取“krb5.conf”和“user.keytab”文件。 参考下载用户认证文件,在MRS Manager下载用户认证文件,解压后得到“krb5
创建“Version”文件。 手动创建名为“Version”的文本文件,文件不需要后缀格式,文件内容填写为version=MRS 3.1.0。 生成MRS Hive配置文件。 将上述获取到的文件放到一个新的目录下,并打包成zip文件,所有文件位于zip文件的根目录下。 文件名只能由英文字母或数字组成,长度不超过255个字符。
HDFS的机机类型用户名。 上传配置文件 单击“上传文件”,上传MRS HDFS配置文件。配置文件获取请参考获取MRS HDFS配置文件。 获取MRS HDFS配置文件 获取“krb5.conf”和“user.keytab”文件。 参考下载用户认证文件,在MRS Manager下载用户认证文件,解压后得到“krb5
选择SSL认证所使用的协议,固定为“TLS”。 公钥库文件 仅当“是否开启SSL认证”选择“是”时需要配置。 SSL认证过程中,客户端(ROMA Connect)使用的公钥库文件,与服务端(RabbitMQ)使用的私钥相匹配。 公钥库密码 仅当“是否开启SSL认证”选择“是”时需要配置。 公钥库文件对应的密码。 Ra
已安装开发工具和PHP开发语言环境,具体请参见开发准备。 将PHP安装目录中的“php.ini-production”文件复制到“C:\windows”,改名为“php.ini”,并在文件中增加如下内容。 extension_dir = "php安装目录/ext" extension=openssl