已找到以下 457 条记录
AI智能搜索
产品选择
数据湖探索 DLI
没有找到结果,请重新输入
产品选择
数据湖探索 DLI
在搜索结果页开启AI智能搜索
开启
产品选择
没有找到结果,请重新输入
  • 服务韧性 - 数据湖探索 DLI

    DLI通过流量限制、跨AZ容灾、备份恢复等技术方案,保障数据的持久性可靠性。 流量限制:DLI通过设置流量控制机制,防止服务过载并保持服务的稳定性。 跨AZ容灾:DLI云服务采用跨可用区容灾部署,减少单点故障的风险,提高系统的可用性弹性。 备份恢复:DLI自动化的备份策略恢复计划,确保在发生故障时可以迅速恢复服务和数据。

  • 更新管理 - 数据湖探索 DLI

    一旦发现服务模块涉及漏洞影响,会迅速通过官方解决方案升级现网更新漏洞。 更新配置 DLI云服务通过版本更新升级更新配置,确保服务的安全性稳定性。 父主题: 安全

  • DLI Spark 2.3.2版本停止服务(EOS)公告 - 数据湖探索 DLI

    Multi-INSERT语句查询性能提升。 切换至新版本对DLI资源价格是否有影响? DLI按作业运行所需的计算资源存储资源计费,与计算引擎版本无关。 如何升级到DLI Spark 2.4.5版本? 在DLI管理控制台,购买弹性资源池队列资源,用于提供执行作业所需的计算资源。 单击“作业管理 > Spark作业”,新建Spark作业。

  • DLI Flink1.7版本停止服务(EOS)公告 - 数据湖探索 DLI

    12升级指导。 切换至新版本计算引擎对DLI资源价格是否有影响? DLI按作业运行所需的计算资源存储资源计费,与计算引擎版本无关。 如何升级到Flink 1.12版本? 在DLI管理控制台,购买弹性资源池队列资源,用于提供执行作业所需的计算资源。 在DLI管理控制台,单击“作业管理 > Flink作业”。

  • 应用场景 - 数据湖探索 DLI

    据,单CU每秒吞吐1千~2万条消息。 细粒度权限管理:P公司内部N个子部门,子部门之间需要对数据进行共享隔离。DLI支持计算资源按租户隔离,保障作业SLA;支持数据权限控制到表/列,帮助企业实现部门间数据共享权限管理。 建议搭配以下服务使用 OBS、DIS、DataArts

  • 审计与日志 - 数据湖探索 DLI

    Trace Service,CTS),是华为云安全解决方案中专业的日志审计服务,提供对各种云资源操作记录的收集、存储查询功能,可用于支撑安全分析、合规审计、资源跟踪问题定位等常见应用场景。 CTS可记录的DLI操作列表详见云审计服务支持的DLI操作列表说明。用户开通云审计服务并

  • 故障恢复 - 数据湖探索 DLI

    故障恢复 系统级故障恢复 DLI系统采用存算分离的架构,计算集群基于K8s资源调度故障切换机制,在系统故障时,支持自动故障恢复。 作业级故障恢复 Flink、Spark作业支持配置自动重启恢复机制,在开启自动重启功能后,当作业出现异常时将自动重启恢复作业。 父主题: 安全

  • DLI Spark 3.1.1版本停止服务(EOS)公告 - 数据湖探索 DLI

    Multi-INSERT语句查询性能提升。 切换至新版本对DLI资源价格是否有影响? DLI按作业运行所需的计算资源存储资源计费,与计算引擎版本无关。 如何升级到DLI Spark 3.1.1版本? 在DLI管理控制台,购买弹性资源池队列资源,用于提供执行作业所需的计算资源。 单击“作业管理 > Spark作业”,新建Spark作业。

  • 数据保护技术 - 数据湖探索 DLI

    Manager之间data传输通道的SSL,会对性能会有较大影响,建议结合安全性能综合考虑是否开启。 证书文件还需要在作业配置页面的“其他依赖文件”中完成配置。 OBS路径/opt/flink/usrlib/userData/为默认存储依赖文件路径。 请确保已上传密钥证书到指定的OBS路径下,并在作业配置中的其他依赖文件中引入。

  • DLI Flink 1.10、Flink 1.11版本停止服务(EOS)公告 - 数据湖探索 DLI

    15升级指导。 切换至新版本计算引擎对DLI资源价格是否有影响? DLI按作业运行所需的计算资源存储资源计费,与计算引擎版本无关。 如何升级到Flink 1.15版本? 在DLI管理控制台,购买弹性资源池队列资源,用于提供执行作业所需的计算资源。 在DLI管理控制台,单击“作业管理 > Flink作业”。

  • 认证证书 - 数据湖探索 DLI

    华为云还提供以下资源来帮助用户满足合规性要求,具体请查看资源中心。 图2 资源中心 销售许可证&软件著作权证书 另外,华为云还提供了以下销售许可证及软件著作权证书,供用户下载参考。具体请查看合规资质证书。 图3 销售许可证&软件著作权证书 父主题: 安全

  • DLI经典型跨源连接下线(EOL)公告 - 数据湖探索 DLI

    Marketing,停止该功能销售。 EOL:End of life,停止所有销售、服务活动。 常见问题 DLI经典型跨源连接EOMEOL后,正在使用该功能的作业哪些影响? 如果您正在使用DLI经典型跨源连接的功能,请尽快更换使用增强型跨源连接。 否则使用经典型跨源连接操作过程中出现的

  • 责任共担 - 数据湖探索 DLI

    华为云:负责云服务自身的安全,提供安全的云。华为云的安全责任在于保障其所提供的IaaS、PaaSSaaS类云服务自身的安全,涵盖华为云数据中心的物理环境设施运行其上的基础服务、平台服务、应用服务等。这不仅包括华为云基础设施各项云服务技术的安全功能性能本身,也包括运维运营安全,以及更广义的安全合规遵从。 租户

  • 监控安全风险 - 数据湖探索 DLI

    队列,执行自动实时监控、告警通知操作。用户可以实时掌握队列中的运行作业网络流入速率、网络流出速率、CPU使用率、内存使用率、磁盘利用率、失败作业率、等待作业数等信息。还可以通过云监控服务提供的管理控制台或API接口来检索数据湖探索服务产生的监控指标告警信息。 关于DLI支持的

  • 提交SQL作业(废弃) - 数据湖探索 DLI

    作业包含以下类型:DDL、DCL、IMPORT、EXPORT、QUERYINSERT。其中,IMPORTEXPORT分别与导入数据(废弃)与导出数据(废弃)的功能一致,区别仅在于实现方式不同。 另外,用户可使用其他API来对作业进行查询管理。具体操作: 查询作业状态 查询作业详细信息 查询作业结果-方式一(废弃)

  • 与其他云服务的关系 - 数据湖探索 DLI

    表在DLI服务中只有元数据,实际数据在该表对应的OBS路径中。 创建OBS表的SQL语法请参考《使用DataSource语法创建OBS表》《使用Hive语法创建OBS表》。 备份数据:使用DLI提供导出API,将DLI的数据导出到OBS中备份。 具体API请参考《导出数据》。

  • 身份认证与访问控制 - 数据湖探索 DLI

    提供用户身份认证、权限分配、访问控制等功能,可以帮助您安全的控制华为云资源的访问。 关于IAM的详细介绍,请参见IAM产品介绍。 权限根据授权精细程度分为角色策略。 角色:IAM最初提供的一种根据用户的工作职能定义权限的粗粒度授权机制。该机制以服务为粒度,提供有限的服务相关角色

  • 图解数据湖探索 - 数据湖探索 DLI

    图解数据湖探索

  • DLI弹性资源池队列类 - 数据湖探索 DLI

    DLI弹性资源池队列类 怎样查看弹性资源池作业的资源使用情况? 怎样判断当前DLI队列中的作业是否积压? 怎样查看DLI队列负载? 怎样监控DLI队列上的作业异常? 怎样将老版本的Spark队列切换成通用型队列 在default队列执行DLI SQL失败,提示超时异常怎么办?

  • 怎样获取DLI作业样例(Demo) - 数据湖探索 DLI

    “dli-spark-demo-obs”读取写入OBS数据。 “dli-spark-demo-redis”读取写入Redis数据。 dli-pyspark-demo:使用Python语言开发Spark作业。例如,样例包中的样例代码实现创建Redis表的功能。 父主题: DLI产品咨询类