检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
数据API:通过编写SQL脚本方式,读取数据库中的数据。操作简单方便,但灵活性较低。 函数API:通过编写JavaScript脚本方式,读取数据库中的数据。ROMA Connect提供了用于读取数据库数据的Java类DataSourceClient,在读取数据后可以通过JavaScri
文件不存在或文件格式不正确,请导入csv格式的文件 检查是否导入正确的csv文件。 500 ROMA.00110721 Failed to read the CSV file. Check the file content. 读取csv文件失败,请检查文件内容 检查csv文件内容是否正确。 500 ROMA.00110722
16(被强制取消) 99(任务开始) 100(Reader 任务开始) 101(Reader 任务结束) 102(正在读取数据) 103(读端数据源端异常) 104(读取数据结束) 105(读取数据为0) 106(读任务强制取消) 107(在reader plugin中,任务发生了中断) 108(读任务恢复运行)
由腾讯公司推出。QQ邮箱提供了可靠的电子邮件服务,包括邮件收发、管理和安全防护等功能。用户可以通过QQ邮箱发送和接收邮件,通过邮件附件共享文件,进行日程安排和备忘录管理,还可以设置邮件过滤和垃圾邮件过滤等安全保护措施。 前提条件 已获取QQ邮箱授权码,具体操作请参考配置QQ邮箱授权码。
月、天”时需要配置。 选择文件名中的时间格式,必须与“文件名前缀”配合使用,用于筛选要集成的数据文件。若只选择时间格式不填文件名前缀,则不会过滤文件。选了时间格式的话,则会将任务运行时的时间转换成选择的时间格式,与文件名前缀来共同过滤文件。 例如,文件名前缀为test,时间格式为yyyyMMdd
16(被强制取消) 99(任务开始) 100(Reader 任务开始) 101(Reader 任务结束) 102(正在读取数据) 103(读端数据源端异常) 104(读取数据结束) 105(读取数据为0) 106(读任务强制取消) 107(在reader plugin中,任务发生了中断) 108(读任务恢复运行)
getProtocol() 获取请求协议 返回信息 返回请求协议 public int getReadTimeout() 获取读取超时时间 返回信息 返回读取超时时间 public String getSoapAction() 获取操作请求地址 返回信息 返回操作请求地址 public
long maxItems) 消费消息 输入参数 topic:消息队列 timeout:读取超时时间,最大值为30000毫秒,建议timeout设置值小于前端API的“后端超时”时间值 maxItems:读取消息的最大数量 返回信息 Kafka已消费的消息数组,消息数组即将多条消息的内容组成一个数组
port:端口号 public void setSoTimeout(int soTimeout) 设置jedis的读取超时时间,默认600秒 输入参数 soTimeout:读取超时时间 public void setTimeout(int timeout) 设置jedis的超时时间 输入参数
其他参数请参考创建函数API进行设置。 后端创建完成后,页面自动跳转到该后端的编辑器页面。 开发函数后端的功能实现。 在编辑器的左上角单击“文件 > 新建函数后端 > 空白模板”,在弹窗中单击“确定”,然后编写用于安全认证的函数脚本,完成后单击“保存”。 用于前端自定义认证的函数脚本应满足如下条件:
数据集成组合任务 目标表中配置的RowId字段类型不正确导致写入数据失败 读取MySQL的binlog时报“binlog probably contains events generated with statement or mixed based replication forma”错误
创建“Version”文件。 手动创建名为“Version”的文本文件,文件不需要后缀格式,文件内容填写为version=MRS 3.1.0。 生成MRS Hive配置文件。 将上述获取到的文件放到一个新的目录下,并打包成zip文件,所有文件位于zip文件的根目录下。 文件名只能由英文字母或数字组成,长度不超过255个字符。
上传配置文件 单击“上传文件”,上传MRS HBase配置文件。配置文件获取请参考获取MRS HBase配置文件。 获取MRS HBase配置文件 获取“krb5.conf”和“user.keytab”文件。 参考下载用户认证文件,在MRS Manager下载用户认证文件,解压后得到“krb5
上传配置文件 单击“上传文件”,上传MRS Kafka配置文件。配置文件获取请参考获取MRS Kafka配置文件。 获取MRS Kafka配置文件 获取“krb5.conf”和“user.keytab”文件。 参考下载用户认证文件,在MRS Manager下载用户认证文件,解压后得到“krb5
HDFS的机机类型用户名。 上传配置文件 单击“上传文件”,上传MRS HDFS配置文件。配置文件获取请参考获取MRS HDFS配置文件。 获取MRS HDFS配置文件 获取“krb5.conf”和“user.keytab”文件。 参考下载用户认证文件,在MRS Manager下载用户认证文件,解压后得到“krb5
上传认证文件 单击“上传文件”,上传MRS Hive配置文件。配置文件获取请参考获取MRS Hive配置文件。 获取MRS Hive配置文件: 参考下载用户认证文件,在MRS Manager下载用户认证文件,解压后得到“krb5.conf”和 “user.keytab”文件,即MRS
用户名 数据库的登录用户名。 上传认证文件 单击“上传文件”,上传MRS HBase配置文件。配置文件获取请参考获取MRS HBase配置文件。 获取MRS HBase配置文件: 参考下载用户认证文件,在MRS Manager下载用户认证文件,解压后得到“krb5.conf”和 “user
数据库的登录用户名。 上传认证文件 单击“上传文件”,上传FI Hive配置文件。配置文件获取请参考获取FI Hive配置文件。 获取FI Hive配置文件: 参考下载用户认证文件,在MRS Manager下载用户认证文件,解压后得到“krb5.conf”和 “user.keytab”文件,即FI Hive配置文件。
API表单参数:表示通过API表单的方式来提交目标文件信息。 文本输入:表示直接通过文件传输服务器(如:FTP)方式来提交目标文件信息。 API表单参数 仅当“输入方式”选择“API表单参数”时需要配置。 获取上一节点传递的文件信息,填写API请求体表单中上传文件使用的参数名称,可以通过变量的方式引用前序节点中的数据,请参考引用变量。
上传认证文件 单击“上传文件”,上传FI HBase配置文件。配置文件获取请参考获取FI HBase配置文件。 获取FI HBase配置文件: 参考下载用户认证文件,在FI Manager下载用户认证文件,解压后得到“krb5.conf”和 “user.keytab”文件,即FI