华为云用户手册

组成部分 全球加速实例：全球加速实例是一个运行的全球加速服务。使用全球加速服务前，需要先创建全球加速实例，选择加速区域，全球加速实例会为相应加速区域分配一个Anycast IP，客户端流量根据监听器配置通过Anycast IP就近从接入点接入华为云骨干网络，将客户端的访问请求分发至最佳终端节点。 加速区域：需要进行访问加速的区域，分为中国大陆和中国大陆以外，您可以根据自己的用户所在地选择加速区域，为用户提供全球加速服务。 监听器：负责检查连接请求，根据您指定的端口和协议处理来自客户端的连接请求，每个监听器通过指定要分发流量的区域与终端节点组关联。关联后，全球加速服务将流量分配至与监听器关联的终端节点组内的最佳终端节点。 终端节点组：配置监听器后，您需要为监听器添加终端节点组，从而将流量定向分配到该终端节点组。每个终端节点组都与特定的区域关联，终端节点组在区域内包含一个或多个终端节点。 终端节点：客户端请求访问的目标主机，目前终端节点支持的后端服务类型包含弹性公网IP（EIP）、弹性云服务器（E CS ）、弹性负载均衡（ELB）、自定义IP、自定义 域名 、自定义EIP。 云内资源加速支持选择EIP、ECS、ELB、自定义EIP。 云外资源加速支持选择自定义IP、自定义域名。 不同类型的终端节点已支持的区域详细请参见下表。 表1 全球加速支持终端节点类型 终端节点类型 说明 上线区域 EIP 本账号中的弹性公网IP。 所有区域 自定义EIP 本区域中的弹性公网IP，包括其他账号中的弹性公网IP。 所有区域 ECS 本账号中私网ECS、私网ELB实例，可以不绑定弹性公网IP。 华东-上海一、华北-北京四、华南-广州、中国-香港、亚太-新加坡、土耳其-伊斯坦布尔 ELB 自定义IP 云外第三方业务。 自定义域名

服务韧性 DBSS提供四层可靠性架构，通过检测、承受、恢复和适应四个方面保障系统在收到攻击后可以手动、自动恢复服务能力，保障服务和数据的持久性和可靠性。 表1 DBSS可信架构分类 可信架构分类 可信架构能力项 目标 分类 检测 入侵检测 支持主机异常检测，部署主机安全服务，检测率准确率98%以上。检测时长1分钟 安全 监控 针对微服务的异常日志出对应的告警 系统 承受 数据备份 支持关键数据100%备份，即使数据库遭到完全损坏，也可以根据以前备份数据恢复业务。 用户业务日志备份到OBS 系统 快速响应 AZ级或Region级服务故障时，快速检测和恢复。DBSS本身属于旁路业务，不会影响业务系统。 系统 服务解耦 微服务化，微服务独立部署和启停 系统 恢复 虚机级恢复 虚机级恢复：单虚拟机故障，支持自动重建和手工重建 系统 系统级恢复 系统级的恢复：自动恢复和系统手工恢复能力。 系统 适应 密钥自动轮转 SCC密钥动态轮转 安全 证书自动轮转 内部微服务通信证书动态轮转 安全 账号口令自动轮转 服务账号口令动态轮转 安全 父主题： 安全

审计与日志 审计 DBSS向用户提供数据库审计功能，可以对普通用户、管理员账户的所有活动情况进行审计，并生成合规性报告。DBSS通过记录流量、入侵、异常监控、数据脱敏、远程工作等日志，锁定异常操作到人，对特定事件实时告警，对TOP活动进行可视化呈现，满足ISO27001、信息安全等级保护测评等合规场景下对数据库审计的要求。 表1 DBSS审计功能 功能特性 功能详情 系统行为审计 系统操作行为全纪录，针对您设置的高、中、低风险行为、发送告警通知。 SQL注入检测：DBSS提供“添加SQL注入规则”，您可根据需要自定义添加对应的SQL规则，添加后可以对成功连接数据库安全审计的所有数据进行安全审计。 风险操作检测：DBSS内置了“数据库拖库检测”、“数据库慢SQL检测”、“批量数据篡改检测”和“批量数据删除检测”四条检测规则，帮助您及时发现数据库安全风险。同时，您也可以通过添加风险操作，自定义数据库需要审计的风险操作规则。 告警通知：通过配置系统告警，针对系统操作和系统环境制定不同告警方式和告警级别，以邮件方式和系统消息方式推送告警通知，以便及时发现系统异常和用户异常操作。 同时DBSS已经接入 云审计 服务（Cloud Trace Service， CTS ），是华为 云安全 解决方案中专业的日志审计服务，提供对各种云资源操作记录的收集、存储和查询功能，可用于支撑安全分析、合规审计、资源跟踪和问题定位等常见应用场景。 用户开通云审计服务并创建和配置追踪器后，CTS可记录DBSS的管理事件用于审计。 CTS的详细介绍和开通配置方法，请参见CTS快速入门。 CTS支持追踪的DBSS操作列表，请参见云审计服务支持的DBSS操作列表。 日志 出于分析或审计等目的，用户开启了云审计服务后，系统开始记录DBSS资源的操作。云审计服务管理控制台保存最近7天的操作记录。 关于DBSS云审计日志的查看，请参见如何查看云审计日志。 父主题： 安全

数据保护技术 DBSS通过多种数据保护手段和特性，保证审计、存储在DBSS中的数据安全可靠。 表1 DBSS的数据保护手段和特性 数据保护手段 简要说明 详细介绍 传输加密（HTTPS） DBSS支持HTTP和HTTPS两种传输协议，为保证数据传输的安全性，推荐您使用更加安全的HTTPS协议。 构造请求 个人数据保护 DBSS通过控制个人数据访问权限以及记录操作日志等方法防止个人数据泄露，保证您的个人数据安全。 个人数据保护机制 隐私数据保护 DBSS会对存储的用户审计数据进行敏感数据脱敏。 管理隐私数据保护规则 数据备份 DBSS支持用户手动、自动备份审计日志。备份日志后，审计日志将备份到OBS中。 备份和恢复数据库审计日志 数据销毁 DBSS在用户主动删除实例，或用户销户的情况下，会删除对应用户的审计实例。 - 父主题： 安全

身份认证与访问控制 身份认证 用户访问DBSS的方式有多种，包括DBSS控制台、API、SDK，无论访问方式封装成何种形式，其本质都是通过DBSS提供的REST风格的API接口进行请求。 DBSS的接口需要经过认证请求后才可以访问成功。DBSS支持如下认证方式： Token认证：通过Token认证调用请求，访问DBSS控制台默认使用Token认证机制。 AK/SK认证：通过AK（Access Key ID）/SK（Secret Access Key）加密调用请求。推荐使用AK/SK认证，其安全性比Token认证要高。 关于认证鉴权的详细介绍及获取方式，请参见认证鉴权。 访问控制 DBSS支持通过权限控制（ IAM 权限）进行访问控制。 表1 DBSS访问控制 访问控制方式 简要说明 详细介绍 权限控制 IAM权限 IAM权限是作用于云资源的，IAM权限定义了允许和拒绝的访问操作，以此实现云资源权限访问控制。管理员创建IAM用户后，需要将其加入用户组，并给用户组授予策略或角色，才能使得用户组中的用户获得对应的权限。 IAM权限介绍 DBSS权限管理 DBSS权限管理（细粒度） 父主题： 安全

责任共担 华为云秉承“将公司对网络和业务安全性保障的责任置于公司的商业利益之上”。针对层出不穷的云安全挑战和无孔不入的云安全威胁与攻击，华为云在遵从法律法规业界标准的基础上，以安全生态圈为护城河，依托华为独有的软硬件优势，构建面向不同区域和行业的完善云服务安全保障体系。 安全性是华为云与您的共同责任，如图1所示。 华为云：负责云服务自身的安全，提供安全的云。华为云的安全责任在于保障其所提供的IaaS、PaaS和SaaS类云服务自身的安全，涵盖华为云数据中心的物理环境设施和运行其上的基础服务、平台服务、应用服务等。这不仅包括华为云基础设施和各项云服务技术的安全功能和性能本身，也包括运维运营安全，以及更广义的安全合规遵从。 租户：负责云服务内部的安全，安全地使用云。华为云租户的安全责任在于对使用的IaaS、PaaS和SaaS类云服务内部的安全以及对租户定制配置进行安全有效的管理，包括但不限于虚拟网络、 虚拟主机 和访客虚拟机的操作系统，虚拟防火墙、API网关和高级安全服务，各项云服务，租户数据，以及身份账号和密钥管理等方面的安全配置。 《华为云安全白皮书》详细介绍华为云安全性的构建思路与措施，包括云安全战略、责任共担模型、合规与隐私、安全组织与人员、基础设施安全、租户服务与租户安全、工程安全、运维运营安全、生态安全。 图1 华为云安全责任共担模型 父主题： 安全

服务版本规格 数据库安全审计提供了入门版、基础版、专业版和高级版四种服务版本。您可以根据业务需求选择相应的服务版本。 各版本的性能规格说明如表1所示。 表1 数据库安全服务版本规格说明 版本 支持的数据库实例 性能参数 入门版 最多支持1个数据库实例 吞吐量峰值：1,000条/秒 入库速率：120万条/小时 在线SQL语句存储：1亿条 基础版 最多支持3个数据库实例 吞吐量峰值：3,000条/秒 入库速率：360万条/小时 在线SQL语句存储：4亿条 专业版 最多支持6个数据库实例 吞吐量峰值：6,000条/秒 入库速率：720万条/小时 在线SQL语句存储：6亿条 高级版 最多支持30个数据库实例 吞吐量峰值：30,000条/秒 入库速率：1,080万条/小时 在线SQL语句存储：15亿条 数据库实例通过数据库IP+数据库端口计量。 如果同一数据库IP具有多个数据库端口，数据库实例数为数据库端口数。1个数据库IP只有1个数据库端口，即为一个数据库实例；1个数据库IP具有N个数据库端口，即为N个数据库实例。 例如：用户有2个数据库资产分别为IP1和IP2，IP1有一个数据库端口，则为1个数据库实例；IP2有3个数据库端口，则为3个数据库实例。IP1和IP2合计为4个数据库实例，选择服务版本规格时需要大于或等于4个数据库实例，即选用专业版（最多支持审计6个数据库实例）。 不支持修改规格。若要修改，请退订后重购。 云原生版仅支持在RDS控制台购买。 本表中的系统资源要求，是指购买数据库安全审计实例时会消耗的系统资源。购买时，用户的系统需要满足审计版本对应的配置。 本表中在线SQL语句的条数，是按照每条SQL语句的容量为1KB来计算的。 数据库安全加密提供了1资产量、3资产量、6资产量和10资产量四种服务版本。您可以根据业务需求选择相应的服务版本。 版本性能规格如表2所示。 表2 数据库安全加密版本性能规格说明 版本 支持的数据库实例 系统资源要求 性能参数 1资产量 只支持1个数据库 CPU：8U 内存：16GB 加解密性能：20000QPS 最大并发连接数：1500 3资产量 最多支持3个数据库 CPU：8U 内存：16GB 加解密性能：20000QPS 最大并发连接数：1500 6资产量 最多支持6个数据库 CPU：16U 内存：32GB 加解密性能：40000QPS 最大并发连接数：3000 10资产量 最多支持10个数据库 CPU：16U 内存：32GB 加解密性能：40000QPS 最大并发连接数：3000 数据库安全运维提供了1资产量、3资产量、6资产量和10资产量四种服务版本。您可以根据业务需求选择相应的服务版本。 版本性能规格如表3所示。 表3 数据库安全运维版本性能规格说明 版本 支持的数据库实例 系统资源要求 性能参数 1资产量 只支持1个数据库 CPU：4U 内存：8GB 性能：25000QPS 最大并发连接数：3000 3资产量 最多支持3个数据库 CPU：4U 内存：8GB 性能：25000QPS 最大并发连接数：3000 6资产量 最多支持6个数据库 CPU：8U 内存：16GB 性能：35000QPS 最大并发连接数：5000 10资产量 最多支持10个数据库 CPU：8U 内存：16GB 性能：35000QPS 最大并发连接数：5000

DBSS权限 默认情况下，管理员创建的IAM用户没有任何权限，需要将其加入用户组，并给用户组授予策略或角色，才能使得用户组中的用户获得对应的权限，这一过程称为授权。授权后，用户就可以基于被授予的权限对云服务进行操作。 DBSS部署时通过物理区域划分，为项目级服务。授权时，“授权范围”需要选择“指定区域项目资源”，然后在指定区域（如华北-北京1）对应的项目（cn-north-1）中设置相关权限，并且该权限仅对此项目生效；如果“授权范围”选择“所有资源”，则该权限在所有区域项目中都生效。访问DBSS时，需要先切换至授权区域。 权限根据授权精细程度分为角色和策略。 角色：IAM最初提供的一种根据用户的工作职能定义权限的粗粒度授权机制。该机制以服务为粒度，提供有限的服务相关角色用于授权。由于华为云各服务之间存在业务依赖关系，因此给用户授予角色时，可能需要一并授予依赖的其他角色，才能正确完成业务。角色并不能满足用户对精细化授权的要求，无法完全达到企业对权限最小化的安全管控要求。 策略：IAM最新提供的一种细粒度授权的能力，可以精确到具体服务的操作、资源以及请求条件等。基于策略的授权是一种更加灵活的授权方式，能够满足企业对权限最小化的安全管控要求。例如：针对ECS服务，管理员能够控制IAM用户仅能对某一类云服务器资源进行指定的管理操作。多数细粒度策略以API接口为粒度进行权限拆分，权限的最小粒度为API授权项（action），DBSS支持的API授权项请参见策略支持的授权项。 如表1所示，包括了DBSS的所有系统角色。 表1 DBSS系统角色 角色名称 描述 依赖关系 DBSS System Administrator （数据库安全服务系统管理员，拥有操作数据库安全服务系统资源的权限） 数据库安全审计操作权限： 购买实例。 开启、关闭、重启实例。 获取实例列表。 获取基本信息。 获取审计概况。 获取监控信息。 获取操作日志。 数据库管理。 Agent管理。 邮件设置。 备份与恢复。 进行付费操作（例如，购买DBSS实例、续费）时需要同时具有BSS Administrator角色、VPC Administrator角色和ECS Administrator角色。 VPC Administrator：对虚拟私有云的所有执行权限。项目级角色，在同项目中勾选。 BSS Administrator：对账号中心、费用中心、资源中心中的所有菜单项执行任意操作。项目级角色，在同项目中勾选。 ECS Administrator：对弹性云服务器的所有执行权限。项目级角色，在同项目中勾选。 DBSS Audit Administrator （数据库安全服务审计管理员，拥有审核数据库安全服务日志信息的权限） 数据库安全审计操作权限： 获取实例列表。 获取基本信息。 获取审计概况。 获取报表结果。 获取规则信息。 获取语句信息。 获取会话信息。 获取监控信息。 获取操作日志。 获取数据库列表。 报表管理。 无 DBSS Security Administrator （数据库安全服务安全管理员，拥有设置数据库安全服务安全策略的权限） 数据库安全审计操作权限： 获取实例列表。 获取基本信息。 获取审计概况。 获取报表结果。 获取规则信息。 获取语句信息。 获取会话信息。 获取监控信息。 获取操作日志。 获取数据库列表。 审计规则设置。 告警通知设置。 报表管理。 无 表2列出了DBSS常用操作与系统权限的授权关系，您可以参照该表选择合适的系统权限。 表2 常用操作与系统权限的关系 子服务 操作 DBSS System Administrator DBSS Audit Administrator DBSS Security Administrator 数据库安全审计 购买实例 √ × × 开启、关闭、重启实例 √ × × 获取实例列表 √ √ √ 获取基本信息 √ √ √ 获取审计概况 √ √ √ 获取监控信息 √ √ √ 获取操作日志 √ √ √ 数据库管理 √ × × Agent管理 √ × × 邮件设置 √ × × 备份与恢复 √ × × 获取报表结果 × √ √ 获取规则信息 × √ √ 获取语句信息 × √ √ 获取会话信息 × √ √ 获取数据库列表 √ √ √ 报表管理 × √ √ 审计规则设置 × × √ 告警通知设置 × × √

数据库安全审计 数据库安全审计提供的旁路模式数据库审计功能，可以对风险行为进行实时告警。同时，通过生成满足数据安全标准的合规报告，可以对数据库的内部违规和不正当操作进行定位追责，保障数据资产安全。 部署简单 采用数据库旁路部署方式，操作简单，快速上手。 全量审计 支持对华为云上的RDS、ECS/BMS自建的数据库进行审计。 快速识别 实现99%+的应用关联审计、完整的SQL解析、精确的协议分析。 高效分析 每秒万次入库、海量存储、亿级数据秒级响应。 多种合规 满足等保三级数据库审计需求。 满足网安法，SOX等国内外法案。 三权分立 系统管理员，安全管理员，审计管理员权限分离，满足审计安全需求。 细粒度和运维权限管控 数据库运维安全管理系统访问控制基于主体、客体和行为三元组进行设置，每个类别之下再细分多种维度。策略组合种类多达数百种，能够精准实现各种数据级的访问控制。 主体颗粒度可细化至用户、IP、主机、程序、时间、频次等。 客体颗粒度可达针对表、列、行数等。 行为颗粒度可达操作、特权操作、SQL语句、异常、存储过程等。 强大的内置威胁特征库 数据库运维安全管理系统内置丰富的数据库漏洞信息、SQL注入攻击、以及其它高危风险操作特征模板（其中数据库漏洞数超过600个，高危操作、SQL注入攻击特征超过200个，数据库风险配置策略超过200个），能够精准检测数据库风险操作，并定位至具体用户、实时阻断，保障客户数据资产安全。 灵活的保护对象及策略 数据库运维安全管理系统支持针对数据资产进行分级管控。通过策略配置，使得用户可以灵活定义被保护的对象，包括库、表、字段、记录、关键字、条件等。可以针对上述被保护的对象设置严格管控策略，非经审批不可改、不可删甚至不可见。

数据库安全加密 数据加密 系统支持对数据进行加密和完整性校验，满足等保、分保等评测要求，同时也满足商用密码系统应用与安全性评估的存储数据完整性和机密性保障的评测要求。 加密算法：支持AES算法和SM4国密算法。 完整性校验算法：支持AES-GCM算法和SM3-HMAC算法。 访问控制 系统具有独立于数据库的访问授权机制，拥有合法访问权限可以访问加密数据，非授权用户无法访问加密数据，从而有效防止管理员越权访问及黑客拖库。 系统支持系统管理员，安全管理员，审计管理员的三权分立管理，增强数据库使用的安全合规性

数据库安全审计 数据库安全审计提供用户行为发现审计、多维度分析、实时告警和报表功能。 用户行为发现审计 关联应用层和数据库层的访问操作。 提供内置或自定义隐私数据保护规则，防止审计日志中的隐私数据（例如，账号密码）在控制台上以明文显示。 多维度线索分析 行为线索 支持审计时长、语句总量、风险总量、风险分布、会话统计、SQL分布等多维度的快速分析。 会话线索 支持根据时间、数据库用户、客户端等多角度进行分析。 语句线索 提供时间、风险等级、数据用户、客户端IP、数据库IP、操作类型、规则等多种语句搜索条件。 风险操作、SQL注入实时告警 风险操作 支持通过操作类型、操作对象、风险等级等多种元素细粒度定义要求监控的风险操作行为。 SQL注入 数据库安全审计提供SQL注入库，可以基于SQL命令特征或风险等级，发现数据库异常行为立即告警。 系统资源 当系统资源（CPU、内存和磁盘）占用率达到设置的告警阈值时立即告警。 针对各种异常行为提供精细化报表 会话行为 提供客户端和数据库用户会话分析报表。 风险操作 提供风险分布情况分析报表。 合规报表 提供满足数据安全标准（例如Sarbanes-Oxley）的合规报告。

支持的数据库 数据库安全审计仅支持对华为云上的以下数据库提供旁路模式的数据库审计功能： 云数据库 弹性云服务器（Elastic Cloud Server ，ECS）的自建数据库 裸金属服务器（Bare Metal Server，BMS）的自建数据库 部分数据库类型及版本支持免安装Agent方式，如表1所示。 表1 支持免Agent安装的关系型数据库 数据库类型 支持的版本 GaussDB for MySQL 默认都支持 RDS for SQLServer （华为云审计实例：23.02.27.182148 及其之后的版本支持） 默认都支持 RDS for MySQL 5.6（5.6.51.1及以上版本） 5.7（5.7.29.2及以上版本） 8.0（8.0.20.3及以上版本） GaussDB(DWS) 8.2.0.100及以上版本 PostgreSQL （华为云审计实例：23.04.17.123301 及其之后的版本支持） 须知： 当SQL语句大小超过4KB审计时会被截断，会导致审计到的SQL语句不完整。 14（14.4及以上版本） 13（13.6及以上版本） 12（12.10及上版本） 11（11.15及以上版本） 9.6（9.6.24及以上版本） 9.5（9.5.25及以上版本） RDS for MariaDB 默认都支持 数据库安全审计支持数据库类型及版本如表2所示。 表2 数据库安全审计支持的数据库类型和版本 数据库类型 版本 MySQL 5.0、5.1、5.5、5.6、5.7 8.0（8.0.11及以前的子版本） 8.0.30 8.0.35 8.1.0 8.2.0 Oracle 11g 11.1.0.6.0 、11.2.0.1.0 、11.2.0.2.0、11.2.0.3.0、11.2.0.4.0 12c 12.1.0.2.0 、12.2.0.1.0 19c PostgreSQL 7.4 8.0、8.1、8.2、8.3、8.4 9.0、9.1、9.2、9.3、9.4、9.5、9.6 10.0、10.1、10.2、10.3、10.4、10.5 11 12 13 14 SQL Server 2008 2012 2014 2016 2017 GaussDB(for MySQL) 8.0 DWS 1.5 8.1 DAMENG DM8 KINGBASE V8 SHENTONG V7.0 GBase 8a V8.5 GBase 8s V8.8 Gbase XDM Cluster V8.0 Greenplum V6.0 HighGo V6.0 GaussDB 1.3企业版 1.4企业版 2.8企业版 3.223企业版 MongoDB V5.0 DDS 4.0 Hbase （华为云审计实例：23.02.27.182148 及其之后的版本支持） 1.3.1 2.2.3 Hive （华为云审计实例：23.02.27.182148 及其之后的版本支持） 1.2.2 2.3.9 3.1.2 3.1.3 MariaDB 10.6 TDSQL 10.3.17.3.0 Vastbase G100 V2.2 TiDB V4 V5 V6 V7 V8 数据库安全加密支持的数据库类型和版本如表3所示： 表3 数据库安全加密支持的数据库类型和版本 数据库类型 版本 MySQL 5.5、5.6、5.7 8.0 Oracle 11g 12c PostgreSQL 9.4 11.5 SQL Server 2012 DAMENG DM6 DM7.6 DM8.1 KINGBASE V8R3 V8R6 TBASE V2.15 HOTDB 2.5.6 GaussDB A TDSQL 10.3 数据库安全运维支持的数据库类型和版本如表4所示： 表4 数据库安全运维支持的数据库类型和版本 数据库类型 版本 MySQL 5.5、5.6、5.7.29、5.7.32、5.7.36 8.0.21、8.0.22、8.0.27、8.0.28 Oracle 11g 11.1.0.60、11.2.0.1、11.2.0.4 12c 12.1.0.2、12.2.0.1 19c PostgreSQL 9.6.6 10 12.2、12.3、12.4 SQL Server 2008 2014 2019 DAMENG DM7.1.2 DM8.1.2.84 KINGBASE 7.1.2.0480 TBASE V2.15.17.3.6 Hive 1.1 2.1.1 DB2 8 10 GaussDB 100 200 GreemPlum 4.3.8.1 TDSQL 10.3.14.6.0

服务特点 助力企业满足等保合规要求 满足等保测评数据库审计需求 满足国内外安全法案合规需求，提供满足数据安全标准（例如Sarbanes-Oxley）的合规报告 支持备份和恢复数据库审计日志，满足审计数据保存期限要求 支持风险分布、会话统计、会话分布、SQL分布的实时监控能力 提供风险行为和攻击行为实时告警能力，及时响应数据库攻击 帮助您对内部违规和不正当操作进行定位追责，保障数据资产安全 数据库安全审计采用数据库旁路部署方式，在不影响用户业务的前提下，可以对数据库进行灵活的审计。 基于数据库风险操作，监视数据库登录、操作类型（数据定义、数据操作和数据控制）和操作对象，有效对数据库进行审计。 从风险、会话、SQL注入等多个维度进行分析，帮助您及时了解数据库状况。 提供审计报表模板库，可以生成日报、周报或月报审计报表（可设置报表生成频率）。同时，支持发送报表生成的实时告警通知，帮助您及时获取审计报表。

使用DataArts创建Hudi表 DataArts支持通过Spark JDBC方式和Spark API方式操作Hudi表： Spark JDBC方式使用公用资源，不用单独起Spark作业，但是不能指定执行SQL所需要的资源以及配置参数，因此建议用来做建表操作或小数据量的查询操作。 Spark API方式执行的SQL独立起Spark作业，有一定的耗时，但是可以通过配置运行程序参数来指定作业所需要的资源等参数，建议批量导入等 作业使用API方式来指定资源运行，防止占用jdbc资源长时间阻塞其他任务。 DataArts使用Spark API方式操作Hudi表，必须要添加参数--conf spark.support.hudi=true，并且通过执行调度来运行作业。

实例架构设计 DCS的Redis单机实例架构，如图1所示。 Redis 3.0和Redis 6.0企业版实例不支持定义端口，端口固定为6379，Redis 4.0及以上版本的基础版实例支持自定义端口，如果不自定义端口，则使用默认端口6379。以下图中以默认端口6379为例，如果已自定义端口，请根据实际情况替换。 不支持Redis版本的升级，例如，不支持Redis 4.0单机升级为Redis 5.0单机实例。如果需要使用高版本Redis单机实例，建议重新创建高版本Redis单机实例，然后将原有Redis实例的数据迁移到高版本实例上。 图1 Redis单机实例示意图 示意图说明： VPC 虚拟私有云。实例的内部所有服务器节点，都运行在相同VPC中。 客户应用 运行在ECS上的客户应用程序，即实例的客户端。 Redis实例兼容开源协议，可直接使用开源客户端进行连接，关于多语言客户端连接示例，请参考用户指南的连接缓存实例。 DCS缓存实例 DCS单机实例只有1个节点，1个Redis进程。

运行函数时报错error while loading shared libraries时如何处理？ 出现如图1报错，说明依赖包没有把程序运行所需的动态链接库打包进去。 图1 error while loading shared libraries 针对该问题有以下两种处理方案： 代码逻辑较为复杂的情况下建议使用自定义镜像函数，创建自定义镜像函数详情请参见使用容器镜像创建函数。 制作依赖包时，把动态链接库一同复制到依赖包最外层。 如图2是chrome内核所需的动态链接库。 图2 chrome内核动态链接库 系统默认动态链接库路径：“/lib64:/usr/lib64”。 父主题： 调用函数

添加签名信息到请求头 在计算签名后，将它添加到Authorization的HTTP消息头。Authorization消息头未包含在已签名消息头中，主要用于身份验证。 伪代码如下： Authorization header创建伪码： Authorization: algorithm Access=Access key, SignedHeaders=SignedHeaders, Signature=signature 需要注意的是算法与Access之前有空格但没有逗号，但是SignedHeaders与Signature之前需要使用逗号隔开。 得到的签名消息头为： SDK-HMAC-SHA256 Access=QTWA***KYUC, SignedHeaders=content-type;host;x-sdk-date, Signature=f12f84a5ecf9eff3206499c4a55b13d1adad745dc8624a2e31f15c6b381d5b80 得到签名消息头后，将其增加到原始HTTP请求内容中，请求将被发送给云服务API网关，由API网关完成身份认证。身份认证通过后，该请求才会发送给具体的云服务进行业务处理。 包含签名信息的完整请求如下： GET /v1/77b6a44cba5143ab91d13ab9a8ff44fd/vpcs?limit=2&; marker=13551d6b-755d-4757-b956-536f674975c0 HTTP/1.1 Host: service.region.example.com Content-Type: application/json x-sdk-date: 20191115T033655Z Authorization: SDK-HMAC-SHA256 Access=QTWA***KYUC, SignedHeaders=content-type;host;x-sdk-date, Signature=f12f84a5ecf9eff3206499c4a55b13d1adad745dc8624a2e31f15c6b381d5b80 Curl方式样例如下： curl -X GET "https://service.region.example.com/v1/77b6a44cba5143ab91d13ab9a8ff44fd/vpcs?limit=2&marker=13551d6b-755d-4757-b956-536f674975c0" -H "content-type: application/json" -H "X-Sdk-Date: 20191115T033655Z" -H "host: service.region.example.com" -H "Authorization: SDK-HMAC-SHA256 Access=QTWA***KYUC, SignedHeaders=content-type;host;x-sdk-date, Signature=f12f84a5ecf9eff3206499c4a55b13d1adad745dc8624a2e31f15c6b381d5b80" -d $'' 父主题： AK/SK签名认证算法详解

计算签名 将SK（Secret Access Key）和创建的待签字符串作为加密哈希函数的输入，计算签名，将二进制值转换为十六进制表示形式。 伪代码如下： signature = HexEncode(HMAC(Secret Access Key, string to sign)) 其中HMAC指密钥相关的哈希运算，HexEncode指转十六进制。伪代码中参数说明如表1所示。 表1 参数说明 参数名称 参数解释 Secret Access Key 签名密钥 string to sign 创建的待签字符串 假设Secret Access Key为MFyf***VmHc，则计算得到的signature为： f12f84a5ecf9eff3206499c4a55b13d1adad745dc8624a2e31f15c6b381d5b80 父主题： AK/SK签名认证算法详解

自定义镜像函数执行失败报“CrashLoopBackOff” 若出现“CrashLoopBackOff: The application inside the container keeps crashing”错误字段： 请根据页面提示信息诊断原因。 图1 查看执行结果 请参见使用容器镜像部署函数章节进行容器镜像自验证。 排查镜像是否为x86 linux架构，目前仅支持x86 linux架构镜像。 父主题： 调用函数

Python语言的函数从V1版本迁移到V2版本时需注意哪些兼容性问题？ args的区别 V1使用的语法： args = parser.parse_args() 如果迁移到V2，需修改为： args = parser.parse_args(args=[]) 因为V1和V2 python runtime的sys.argv不一样。 V2是['/home/snuser/runtime/python3.6/server.py', '127.0.0.1:31536', '/opt/function/code']，比v1多了后面2个参数。 asyncio的区别 V1使用的语法： loop = asyncio.get_event_loop() loop.run_until_complete(func(arg1, arg2)) loop.close() 如果迁移到V2，需修改为： loop_tmp = asyncio.new_event_loop() asyncio.set_event_loop(loop_tmp) loop = asyncio.get_event_loop() loop.run_until_complete(func(arg1, arg2)) loop.close() 因为asyncio.get_event_loop()是从OS线程（主线程）获取当前事件循环，而V2的Python runtime不是在主线程运行用户函数，所以函数内asyncio.get_event_loop()会抛出RuntimeError。 V2使用asyncio需要新建并设置事件循环。 父主题： 产品咨询

函数如何获取APIG触发器中的请求路径或请求参数？ 请求路径或请求参数默认携带在event的入参中，FunctionGraph函数对APIG调用的传入值为函数自带的事件模板，请参考APIG事件源中的示例事件查看事件模板内容。 获取方式： 从event对象获取APIG请求路径和请求参数的格式如下： 获取请求路径的格式：event['path'] 获取请求参数的格式：event['queryStringParameters']['具体参数名'] 调用方式： 您可以直接通过请求路径调用：https://464d86ec641d45a683c5919ac57f3823.apig.projectID.huaweicloudapis.com/apig-demo/subpath 也可以通过添加请求参数调用：https://464d86ec641d45a683c5919ac57f3823.apig.projectID.huaweicloudapis.com/apig-demo/subpath?a=1&b=2 表1 请求路径和请求参数说明 参数 说明 queryStringParameters 请求参数。 GET请求中URL后面要带的参数，当发起一次GET请求时，参数会以URL string的形式进行传递。即?后的字符串则为其请求参数，并以&作为分隔符。 path 请求路径。 API访问地址。 父主题： 配置触发器

为函数挂载文件系统时，报“failed to mount exist system path” 您可以将文件重新挂载在新的路径下。 用户/用户组ID: 可设置为1000之外的其他数字id，如果为-1默认设置为1003。用户/用户组ID用于对访问远端文件系统的目录权限进行控制。 文件系统/云服务器名称：选择创建的文件系统或者云服务器资源，注意函数配置的VPC和委托要有访问权限。 共享目录路径：如果选择ECS挂载需要配置远端共享目录，请参见ECS创建nfs共享目录。 函数访问路径：为本地文件系统挂载目录，不能是系统已存在目录。建议使用/mnt/ 下二级子目录，例如/mnt/test。 父主题： 配置函数

FunctionGraph如何通过域名访问专享版APIG中注册的接口？ 以域名www.test.com为例，具体请参考如下步骤。 图1 域名示例 登录API网关控制台，在左侧导航栏选择“专享版”，单击实例名称，进入“实例概览”页面，在“入口地址”区域查看“弹性IP地址”，获取APIG的访问地址（ip格式）。 图2 获取APIG访问地址 在DNS控制台，配置用户域名www.test.com解析到apig地址的ipv4规则，可参考网站解析至IP地址。 图3 配置ipv4规则 最后在函数服务配置该域名的解析配置（可参考FunctionGraph如何实现域名解析？），这样就能在函数中通过域名(www.test.com)访问专享版APIG中注册的接口了。 父主题： 配置函数

如何制作基于ODBC驱动的Python语言函数依赖包？ 对于依赖操作系统的包（以unixODBC为例），需要下载源码编译制作依赖包： 通过ecs控制台页面登录ecs机器（确保gcc、make工具安装完成），执行如下命令下载相关源码包。 wget 源码路径 若下载包为zip文件，执行如下命令进行解压： unzip xxx/xx.zip 若下载包为tar.gz文件，执行如下命令进行解压： tar -zxvf xxx/xx.tar.gz 执行如下命令，创建/opt/function/code目录。 mkdir /opt/function/code 进入解压目录执行如下命令 ./configure --prefix=/opt/function/code --sysconfdir=/opt/function/code;make;make install 进入/opt/function/code/lib/pkgconfig检查配置，确认prefix目录是/opt/function/code。 cd /opt/function/code/lib/pkgconfig 将/opt/function/code/lib中的文件都拷到/opt/function/code。 cp -r /opt/function/code/lib/* /opt/function/code 切换到/opt/function/code目录下，将/opt/function/code下的文件都打入xxx.zip，依赖包制作完成。 cd /opt/function/code zip -r xxx.zip * 父主题： 配置依赖包

解决方案 与客户确认问题现象，Redis1在VPC1中，Redis2在VPC2中，Redis客户端代码是同一套代码。 查看连接报错信息如下，通过VPC2连接Redis2时，Redis IP地址变成乱码。 分析Redis1与Redis2除了IP地址和密码不一样之外，其他没有什么不同，让客户比较两个Redis密码后发现，Redis2的密码中含有@符号，导致请求redis的时候IP地址截取有误变成乱码了。 修改Redis2的密码后正常。

为什么首次调用函数时速度会比较慢？ 因为函数是冷启动的，所以如果有初始化或者函数中有第一次执行比较耗时的操作（例如加载函数代码及依赖包），第一次请求会比较慢，后面接着的请求就会很快，因为此时容器还没有销毁。如果间隔一分钟没有请求，容器就会销毁。 如果您使用的是C#或者Go语言，因为机制原因，启动速度会比其他语言慢。此时，您可以通过以下设置，增加运行速度。 适当增加函数的内存。 精简函数代码，例如：删除不必要的依赖包。 使用C#语言时，除了以上两种方法，在非并发场景下，您还可以通过以下方法增加运行速度。 创建一个一分钟一次的定时触发器，确保至少有一个存活的实例。 父主题： 调用函数

Python语言的函数中，中文注释报乱码错误 使用Python语言在线编辑代码，需要输出中文时，请在编辑器中增加如下代码： # -*- coding:utf-8 -*- import json def handler (event, context): output = 'Hello message: ' + json.dumps(event,ensure_ascii=False) return output 父主题： 配置函数

为PHP函数制作依赖包 制作函数依赖包推荐在Huawei Cloud EulerOS 2.0环境中进行。 为php7.3通过composer安装protobuf3.19依赖包，默认环境中已经安装了composer和对应版本的php。 新建一个composer.json文件，在composer.json中填入以下内容。 { "require": { "google/protobuf": "^3.19" } } 执行如下命令。 Composer install 可以看到当前目录底下生成一个vendor文件夹，文件夹中有autoload.php、composer 和google三个文件夹。 Linux系统 Linux系统下可以使用以下命令生成zip包。 zip –rq vendor.zip vendor windows系统 用压缩软件将vendor目录压缩成zip文件即可。 如果要安装多个依赖包，在composer.json文件中指定需要的依赖，把生成的vendor文件整体打包成zip上传。 php工程代码中使用通过composer下载的第三方依赖时，需要通过require "./vendor/autoload.php" 加载，平台默认把上传的zip包解压后的内容置于项目代码的同级目录下。

搭建EulerOS环境 EulerOS是基于开源技术的企业级Linux操作系统软件，具备高安全性、高可扩展性、高性能等技术特性，能够满足客户IT基础设施和云计算服务等多业务场景需求。此处推荐Huawei Cloud EulerOS。 在华为云购买一台EulerOS的ECS弹性云服务器，请参见购买并登录Linux弹性云服务器。在基础配置环节选择公共镜像时，选择Huawei Cloud EulerOS操作系统和具体的镜像版本。 下载EulerOS镜像，在本地使用虚拟化软件搭建EulerOS系统的虚拟机。

为Nodejs函数制作依赖包 需要先保证环境中已经安装了对应版本的Nodejs。 为Nodejs 8.10安装MySQL依赖包，可以执行如下命令。 npm install mysql --save 可以看到当前目录下会生成一个node_modules文件夹。 Linux系统 Linux系统下可以使用以下命令生成zip包。 zip -rq mysql-node8.10.zip node_modules 即可生成最终需要的依赖包。 windows系统 用压缩软件将node_modules目录压缩成zip文件即可。 如果需要安装多个依赖包，也可以先新建一个package.json文件，例如在package.json中填入如下内容后，执行如下命令。 { "name": "test", "version": "1.0.0", "dependencies": { "redis": "~2.8.0", "mysql": "~2.17.1" } } npm install --save 不要使用CNPM命令制作nodejs依赖包。 然后将node_modules打包成zip即可生成一个既包含MySQL也包含redis的依赖包。 Nodejs其他版本制作依赖包过程与上述相同。