内容选择
全部
内容选择
内容分类
  • 学堂
  • 博客
  • 论坛
  • 开发服务
  • 开发工具
  • 直播
  • 视频
  • 用户
时间
  • 一周
  • 一个月
  • 三个月
  • 迁移HDFS数据至OBS

    hadoop fs -ls obs://obs-bigdata-posix-bucket2/backup/ CDM方式迁移 云数据迁移(Cloud Data Migration,CDM)提供同构/异构数据源之间批量数据迁移服务,帮助您实现数据自由流动

  • 七十、SpringBoot整合 Druid数据

    官方文档:https://druid.apache.org/docs/latest/tutorials/index.html Druid设计目标: 快速查询 : 部分数据聚合 + Cache + 索引 水平拓展能力:分布式数据+并行化查询 实时分析:不可变性、Append-Only

    作者: 毛利
    发表时间: 2021-07-14 21:42:17
    993
    0
  • 【柏睿数据科技】实时分析数据库产品入驻华为云市场,助力智慧数据赋能未来

    二、产品功能1、Rapids Federation 数据库联邦为RapidsDB提供各种外部数据源连接器,使RapidsDB执行异构跨库数据分析提供包括流数据、半结构化数据、Hadoop和传统数据的连接分析支持消除ETL的需要,实现生产数据实时分析提供OLTP与OLAP的混合支持2

    作者: 柏睿数据
    发表时间: 2018-10-15 12:20:28
    5021
    0
  • 数据中台建设(七):数据资产管理

    企业急需通过建立底层数据集成平台来联系横贯整个企业的异构系统、应用、数据源等,完成在企业内部的ERP、CRM、SCM、数据库、数据仓库,以及其它重要的内部系统之间无缝的共享和交换数据,避免“数据孤岛”问题。

    作者: Lansonli
    发表时间: 2022-05-06 01:59:19
    1111
    0
  • 数据湖工厂服务DLF

    假如我们从多个平台爬取了数据,在这里就可以进行整合,从不同的表中select即可。运行这个脚本后就会生成上图所示的文件,最后记得保存这个脚本。

    作者: 砖头2333
    发表时间: 2019-01-20 23:15:04
    7997
    0
  • 破解异构数据库迁移难题,华为云UGO正式公测

    简称为UGO),是专注于异构数据库对象迁移和应用迁移的专业化工具,帮助用户解决替换数据库风险大的难题。

    作者: GaussDB 数据库
    3697
    0
  • 数据湖(六):Hudi与Flink整合

    Hudi与Flink整合 Hudi0.8.0版本与Flink1.12.x之上版本兼容,目前经过测试,Hudi0.8.0版本开始支持Flink,通过Flink写数据到Hudi时,必须开启checkpoint,至少有5次checkpoint后才能看到对应hudi中的数据

    作者: Lansonli
    发表时间: 2022-06-03 15:21:35
    696
    0
  • 数据Kudu(八):Kudu与Impala整合

    ​Kudu与Impala整合 Impala是cloudera提供的一款高效率的sql查询工具,使用内存进行计算提供实时的SQL查询,impala强依赖于Hive 的MetaStore,直接使用hive的元数据,意味着impala元数据都存储在hive的MetaStore当中,并且impala

    作者: Lansonli
    发表时间: 2022-12-21 01:58:34
    208
    0
  • SpringBoot整合数据源xml方式

    项目中遇到需要连接多个数据库,本来使用SpringBoot默认配置连接是非常简单的,但是由于涉及多个数据

    作者: 西魏陶渊明
    发表时间: 2022-09-24 20:14:03
    87
    0
  • SpringBoot整合数据源xml方式

    项目中遇到需要连接多个数据库,本来使用SpringBoot默认配置连接是非常简单的,但是由于涉及多个数据库,不得不再自定义配置了,一次性整明白,下次就之间copy使用。

    作者: 西魏陶渊明
    发表时间: 2022-09-24 19:45:50
    167
    0
  • 数据湖(十七):Flink与Iceberg整合DataStream API操作

    Flink1.14.x版本与Iceberg0.12.1版本能整合但是有一些小bug,例如实时读取Iceberg中的数据有bug。 以下Flink与Iceberg整合使用的Flink版本为1.13.5,Iceberg版本为0.12.1版本。

    作者: Lansonli
    发表时间: 2022-07-15 00:33:14
    1217
    0
  • 在线学习用于(单细胞多数据整合),无需从头开始计算

    该算法将对整合不断增长规模的单细胞多组数据集越来越有用。

    作者: QGS
    863
    2
  • 数据清洗 Chapter01 | 数据清洗概况

    )所导致 要获得高质量的数据集,需要把控好数据收集,数据录入的源头 2、一致性 考察数据是否符合统一规范,数据记录是否保持统一格式 数据一致性问题通常存在于数据整合阶段: 来自不同数据源的数据汇总在一起,特征的表述不相同 相同的特征名称在不同的数据源中代表不同的含义

    作者: 不温卜火
    发表时间: 2020-12-02 15:26:32
    2420
    0
  • 2021年大数据Flink(三十八):​​​​​​​Table与SQL ​​​​​​案例五 FlinkSQL整合Hive

    目前,一些比较常见的大数据处理引擎,都无一例外兼容Hive。Flink从1.9开始支持集成Hive,不过1.9版本为beta版,不推荐在生产环境中使用。在Flink1.10版本中,标志着对 Blink的整合宣告完成,对 Hive 的集成也达到了生产级别的要求。

    作者: Lansonli
    发表时间: 2021-09-28 14:57:06
    1167
    0
  • ExportData 导出数据 - API

    该API属于DLI服务,描述: 该API用于将数据导出到文件。支持数据从DLI表中导出到文件。接口URL: "/v1.0/{project_id}/jobs/export-table"

  • ImportData 导入数据 - API

    该API属于DLI服务,描述: 该API用于将数据从文件导入DLI或OBS表,目前仅支持将OBS上的数据导入DLI或OBS中。接口URL: "/v1.0/{project_id}/jobs/import-table"

  • ImportDatabaseData 导入数据 - API

    该API属于eiHealth服务,描述: 导入数据接口URL: "/v1/{project_id}/eihealth-projects/{eihealth_project_id}/databases/{database_id}/data"

  • ListDatabaseData 查询数据 - API

    该API属于eiHealth服务,描述: 查询数据接口URL: "/v1/{project_id}/eihealth-projects/{eihealth_project_id}/databases/{database_id}/data"

  • RunCheckData 检查数据 - API

    该API属于ImageSearch服务,描述: 检查指定服务实例中的对应数据,支持指定ID检查和条件检查。接口URL: "/v2/{project_id}/mms/{service_name}/data/check"

  • importDataUsingPOST 导入数据 - API

    该API属于APIHub22050服务,描述: 导入数据接口URL: "/ec/companyoutput/importData"