已找到以下 280 条记录
AI智能搜索
产品选择
数据湖探索 DLI
没有找到结果,请重新输入
产品选择
数据湖探索 DLI
在搜索结果页开启AI智能搜索
开启
产品选择
没有找到结果,请重新输入
  • 使用DataSource语法创建OBS表 - 数据湖探索 DLI

    CTAS建表语句不能指定表属性。 OBS目录下包含子目录场景: 创建表时,若指定路径为OBS上目录,且该目录下包含子目录(或嵌套子目录),则子目录下所有文件类型及其内容也是表内容。 您需要保证所指定目录及其子目录下所有文件类型建表语句中指定存储格式一致,所有文件内容表中字段一致,否则查询将报错。

  • 在DataArts Studio开发DLI SQL作业 - 数据湖探索 DLI

    弹性资源池为DLI作业运行提供所需计算资源(CPU内存),用于灵活应对业务对计算资源变化需求。 创建弹性资源池后,您可以在弹性资源池中创建多个队列,队列关联到具体作业和数据处理任务,是资源池中资源被实际使用分配基本单元,即队列是执行作业所需具体计算资源。 同一弹性资源池中,队列之间计算资源支持共享。

  • 费用账单 - 数据湖探索 DLI

    其他统计维度周期,详细介绍请参见流水与明细账单。 图3 查询数据存储资源账单 查看数据扫描量资源账单 DLIdefault队列采用数据扫描量计费方式。扫描量计费=单价*扫描量数据(GB)。怎样查看DLI数据扫描量? 您可以在费用中心查询DLI数据扫描量资源账单。 在控制台顶部菜单栏中选择“费用与成本

  • 典型场景示例:配置DLI 与公网网络连通 - 数据湖探索 DLI

    操作场景 公网数据源指的是可以通过互联网访问数据源。这些数据源资源有一个公网IP地址,配置DLI与公网网络联通可以实现对这些数据源访问。 本节提供了详细操作指导,介绍如何通过设置SNAT规则配置路由信息,实现DLI服务与公网网络连接。 操作流程 图1 配置DLI队列访问公网流程

  • 使用DLI分析电商BI报表 - 数据湖探索 DLI

    某电商商城在保持高速发展同时,沉淀了数亿忠实用户,积累了海量真实数据。如何利用BI工具从历史数据中找出商机,是大数据应用在精准营销中关键问题,也是所有电商平台在做智能化升级时所需要核心技术。 本案例以某商城真实用户、商品、评论数据(脱敏后)为基础,利用数据湖探索来分析用户商品各种数

  • Java开发环境配置 - 数据湖探索 DLI

    Java开发环境配置 操作场景 在安装使用Java SDK前,确保您已经完成开发环境基本配置。 Java SDK要求使用JDK1.8或更高版本。考虑到后续版本兼容性,推荐使用1.8版本。 在Java运行环境配置好情况下,打开windows命令行,执行命令Java -version,可以检查版本信息。

  • Flink作业常用操作 - 数据湖探索 DLI

    用户可以根据需要修改作业名称描述。 在DLI管理控制台左侧导航栏中,单击“作业管理”>“Flink作业”,进入Flink作业管理页面。 在需要修改名称描述作业对应“操作”列中,单击“更多 > 名称描述修改”,弹出“属性修改”页面。修改作业名称描述。 单击“确定”完成修改。 触发保存点

  • 获取项目ID - 数据湖探索 DLI

    jects”,其中{Endpoint}为IAM终端节点,可以从地区终端节点获取。 响应示例如下,例如DLI服务部署区域为“cn-north-4”,相应消息体中查找“name”为“cn-north-4”,其中projects下“id”即为项目ID。 { "projects":

  • 停止计费 - 数据湖探索 DLI

    对于包年/包月计费模式资源,例如包年/包月弹性资源池、包年/包月队列等,用户在购买时会一次性付费,服务将在到期后自动停止使用。 如果在计费周期内不再使用包年/包月资源,您可以执行退订操作,系统将根据资源是否属于五天无理由退订、是否使用代金券折扣券等条件返还一定金额到您账户。详细退订规则请参见云服务退订规则概览。

  • 使用DLI提交SQL作业查询OBS数据 - 数据湖探索 DLI

    单击“提交”完成弹性资源池创建。 在弹性资源池列表页,选择要操作弹性资源池,单击操作列“添加队列”。 配置队列基础配置,具体参数信息如下。 表3 弹性资源池添加队列基础配置 参数名称 参数说明 配置样例 名称 弹性资源池添加队列名称。 dli_queue_01 类型 选择创建队列类型。

  • 使用DLI提交Flink Jar作业 - 数据湖探索 DLI

    单击“提交”完成弹性资源池创建。 在弹性资源池列表页,选择要操作弹性资源池,单击操作列“添加队列”。 配置队列基础配置,具体参数信息如下。 表3 弹性资源池添加队列基础配置 参数名称 参数说明 配置样例 名称 弹性资源池添加队列名称。 dli_queue_01 类型 选择创建队列类型。

  • 自动续费 - 数据湖探索 DLI

    自动续费 自动续费可以减少手动续费管理成本,避免因忘记手动续费而导致资源被自动删除。自动续费规则如下所述: 以资源到期日计算第一次自动续费日期计费周期。 您可以在购买资源时开通自动续费,在购买资源时,自动续费周期以实际选择续费时长为准。 在到期前均可开通自动续费,到期前

  • 返回结果 - 数据湖探索 DLI

    返回结果 状态码 请求发送以后,您会收到响应,包含状态码、响应消息头消息体。 状态码是一组从1xx到5xx数字代码,状态码表示了请求响应状态,完整状态码列表请参见状态码。 对于获取用户Token接口,如果调用后返回状态码为“201”,则表示请求成功。 响应消息头 对应请求

  • 新建跨源连接,显示已激活,但使用时提示communication link failure错误怎么办? - 数据湖探索 DLI

    failure”错误。 将原有跨源连接删除重新创建。再次创建时,必须确保所选“安全组”、“虚拟私有云”、“子网””“目的地址”与RDS中设置完全一致。 请选择正确“服务类型”,本示例中为“RDS”。 图1 创建经典型跨源连接-RDS 检查安全组网络(vpc)配置。 若按照步骤

  • 数据迁移与传输方式概述 - 数据湖探索 DLI

    CDM支持数据库、数据仓库、文件等多种类型数据源,通过可视化界面对数据源迁移任务进行配置,提高数据迁移集成效率。 具体操作请参考迁移外部数据源数据至DLI。 图1 迁移数据至DLI 配置DLI读写外部数据源 如果您不想将数据导入OBS或DLI数据表中,DLI提供跨源访问能力,支持您在不迁移数据情况下,连接数据源获取数据并进行数据分析。

  • 基本概念 - 数据湖探索 DLI

    使得资源权限控制更加精确。 在我的凭证下,您可以查看项目ID。 图1 项目隔离模型 企业项目 企业项目是项目的升级版,针对企业不同项目间资源分组管理,是逻辑隔离。企业项目中可以包含多个区域资源,且项目中资源可以迁入迁出。 关于企业项目ID获取及企业项目特性详细信息,请参见《企业管理服务用户指南》。

  • DLI跨源连接报错找不到子网怎么办? - 数据湖探索 DLI

    Access”是跨源场景访问使用VPC、子网、路由、对等连接权限。 了解更多DLI委托权限请参考DLI委托权限。 选择dli_management_agency需要包含权限后,并单击“更新委托权限”。 图1 更新委托权限 委托更新完成后,重新创建跨源连接运行作业。 父主题: 增强型跨源连接类

  • 配置多版本过期数据回收站 - 数据湖探索 DLI

    表添加key/value属性。 参数说明 表1 参数说明 参数 描述 db_name 数据库名称,由字母、数字下划线(_)组成。不能是纯数字,且不能以数字下划线开头。 table_name 表名称。 obs桶多版本回收站目录 当前OBS表所在桶下一个目录,您可以根据需要调

  • scala样例代码 - 数据湖探索 DLI

    MRS集群OpenTSDB IP信息”“图 MRS集群OpenTSDB 端口信息”。若使用经典型跨源,填写经典型跨源返回连接地址,管理控制台操作请参考《数据湖探索用户指南》。 metric 所创建dli表对应OpenTSDB中指标名称。 tags metric对应标签,用于归类、过滤、

  • 存储计费 - 数据湖探索 DLI

    华为云根据客户等级定义了不同客户宽限期保留期时长。 关于充值详细操作请参见账户充值。 按需计费模式套餐包组合使用 DLI支持套餐包按需计费模式结合使用。 购买了存储量套餐包,按需使用过程中优先抵扣存储套餐包规格额度,超过套餐包额度按照按需计费。存储套餐额度每个小时会重置。 套餐包使用示例请参考套餐包计费。