内容选择
全部
内容选择
内容分类
  • 学堂
  • 博客
  • 论坛
  • 开发服务
  • 开发工具
  • 直播
  • 视频
  • 用户
时间
  • 一周
  • 一个月
  • 三个月
  • python爬虫信息技术实践之Sqlite数据存储

    、2、3、4、6或8个字节的形式存储。REAL,该值是个浮点值,存储为8个字节的IEEE浮点数。TEXT,该值是个文本字符串,使用数据库编码(UTF-8、UTF-16BE或UTF-16LE)存储。BLOB,该值是数据的二进制大对象,以原始形式存储。 有一个名为id的列,为其分配了INTEGER

    作者: tea_year
    发表时间: 2024-06-20 12:00:23
    33
    0
  • 数据技术学习——Oozie

    WebApp(Oozie):即Oozie Server,接收来自客户端的请求并转发给Oozie-core执行。 Database:PG数据库,用于存储作业信息。支持多个OozieServer实例对接同一个数据库。 Hadoop组件:底层执行工作流的各个组件。 Oozie-core:核心模块,主要用于实现工作流任

    作者: Eric Shi
    发表时间: 2023-03-02 03:51:05
    1646
    0
  • 数据存储

    Notebook停止或者重启后,“/cache”下的文件还存在么?如何避免重启?

    作者: chenjinge
    34
    2
  • 数据库涉及到哪些技术

    L 语言和数据库访问接口。数据库系统数据库系统主要有以下 3 个组成部分:数据库:用于存储数据的地方。数据库管理系统:用于管理数据库的软件。数据库应用程序:为了提高数据库系统的处理能力所使用的管理数据库库的软件补充。数据库管理系统(Database Management Syst

    作者: 运气男孩
    1040
    0
  • 数据库涉及到的技术

    数据库系统由硬件和软件共同构成,硬件主要用于存储数据库中的数据,包括计算机、存储设备等。软件部分则主要包括 DBMS、支持 DBMS 运行的操作系统,以及支持多种语言进行应用开发的访问技术等。本节主要介绍数据库涉及到的技术,包括数据库系统、SQL 语言和数据库访问接口。数据库系统数据库系统主要有以下

    作者: 运气男孩
    1137
    0
  • 云化数据中心技术系列(一)初识数据中心

    署一数据中心,下级单位建立二数据中心、***数据中心等。多级数据中心则多为大型企业、科研机构等。 根据服务对象的不同,将数据中心分为企业数据中心和互联网数据中心。企业数据中心是由企业或组织自行构建,为企业内部员工、关联客户、合作伙伴提供数据处理、数据访问等信息服务,它可以是单

    作者: 芙泡小超人
    发表时间: 2019-09-12 18:21:37
    6826
    0
  • 数据分析处理基本流程

    数据存储:批处理的数据一般存储在分布式文件存储系统中,该存储系统可以存放各种格式的文件。用于实现此存储的选项包括Hadoop分布式文件存储系统hdfs和华为云的对象存储系统OBS。hadoop系统提供了分布式存储,计算和资源调度引擎,用于大规模数据处理和分析。

  • 数据技术学习——YARN

    RUNNING:表示AM已向RM注册成功,任务运行中。 FINAL_SAVING:表示正在保存RMAppImpl到存储器。 FINISHING:表示RM上相应的应用状态已经完成存储工作。 FINISHED:状态机RMAppImpl正常结束状态。 FAILED:处于FINAL_SAVING的RMAppImpl遇到

    作者: Eric Shi
    发表时间: 2023-02-13 08:10:00
    55
    0
  • 【华为云•微话题】扒一扒数据库分页查询技术

  • 数据技术学习——ClickHouse

    一张表完整的物理结构包括表目录、分区目录及数据文件组成。数据文件如下: txt:校验文件完整性和准确性 txt:存储表的列字段信息(字段名称、字段类型) txt:存储当前分区目录下数据行数 idx:一索引文件,仅存储主键 <col name>.bin:列存压缩文件,存放某列的数据 <col

    作者: Eric Shi
    发表时间: 2023-03-02 03:22:16
    1653
    0
  • 数据湖(八):Iceberg数据存储格式

    ​Iceberg数据存储格式 一、​​​​​​​Iceberg术语 data files(数据文件): 数据文件是Apache Iceberg表真实存储数据的文件,一般是在表的数据存储目录的data目录下,如果我们的文件格式选择的是parquet,那么文件是以“.

    作者: Lansonli
    发表时间: 2022-06-19 01:51:45
    749
    0
  • 数据中台建设(二):数据中台简单介绍

    点击并拖拽以移动 关于数据中台有以下几个功能特点:  1)数据中台具备数据汇聚整合、数据提纯加工、数据服务可视化、数据价值变现核心能力。 2)数据中台的核心就是实现公共计算逻辑下沉,实现数据复用,提供给接口使用。 3)数据中台不是某一个单一的产品或者某个技术。本质上讲数据中台就是从数据中发现价值,赋能业务数据管理机制。

    作者: Lansonli
    发表时间: 2022-05-02 03:07:37
    2151
    0
  • 车间内部的技术——物联数据

    物联数据的管理方法。车间物联网是一个非常繁琐的数据系统,它涉及数据管理的方方面面,包括数据存储和分析、复杂事件处理、数据集成和融合、数据质量控制以及安全访问机制等。数据存储和分析很好理解,就是利用大型服务器或者云服务器将数据保存下来,然后利用云计算进行分析和处理。此外,其他四个

    作者: 极客潇
    1298
    6
  • 使用DAS连接GaussDB(DWS)【玩转PB级数仓GaussDB(DWS)】

    Processing)大规模并行处理引擎,由众多拥有独立且互不共享的CPU、内存、存储等系统资源的逻辑节点组成。在这样的系统架构中,业务数据被分散存储在多个节点上,数据分析任务被推送到数据所在位置就近执行,并行地完成大规模的数据处理工作,实现对数据处理的快速响应。 一、开通服务 1.访问GaussDB(

    作者: 清雨小竹
    发表时间: 2023-02-17 08:22:49
    276
    0
  • 物联网中的数据加密技术

    施。加密技术的应用场景:在物联网领域,数据加密技术广泛应用于设备身份验证、数据传输、数据存储和远程访问控制等方面。例如,在智能家居系统中,用户的数据通信需要经过加密以保护个人隐私;在工业物联网中,生产数据的加密传输可避免敏感信息的泄露。加密技术的挑战与对策:随着物联网技术的快速发

    作者: Jack20
    15
    0
  • 数据通用技术概述

    数据技术应用于大数据系统端到端的各个环节,包括数据接入、数据预处理、数据存储数据处理、数据可视化、数据治理,以及安全和隐私保护等。 (1)数据接入。大数据系统需要从不同应用和数据源(如互联网、物联网等)进行离线或实时的数据采集、传输、分发。为了支持多种应用和数据类型,大数据

    作者: 涂小航说智能
    发表时间: 2021-08-18 06:31:14
    868
    0
  • MySQL数据技术与应用:数据查询

    数据查询    数据查询是数据库系统应用的主要内容,也是用户对数据库最频繁、最常见的基本操作请求。数据查询可以根据用户提供的限定条件,从已存在的数据表中检索用户需要的数据。MySQL使用SELECT语句从数据库中检索数据,并将结果集以表格的形式返回给用户。SELECT查询的基本语

    作者: 运气男孩
    2241
    1
  • 【转载】图数据库的技术发展

    系模型之上。关系型数据库和图数据库的主要差异是数据存储的方式,关系型数据天然就是表格式的,因此存储数据表的行和列中。数据表可以彼此关联协作存储,也很容易提取数据,尤其在查找某个区间内的数据组很有优势,但是却无法清晰直观地体现出数据之间包含的潜在关系。关系型数据库是以实体建模这一

    作者: 无双
    3344
    0
  • 深度数据包检测 (DPI) 技术   精准数据获取

    深度数据包检测 (DPI) 技术是一种能够深入分析和控制网络流量的技术,其检测粒度达到应用层,可以识别和控制各种应用协议,如HTTP、FTP、DNS等。DPI技术广泛应用于网络安全、网络优化、业务运营等领域,能够帮助企业提高网络性能、保障网络安全、提升用户体验。 DPI技术的工作

    作者: kx99954
    108
    5
  • 畅想数据存储未来十年创新技术数据存储2030》 | | 云享·书库No.82期推荐

    点击文末附件下载《数据存储2030》 《数据存储2030》白皮书,携手学术界畅想数据存储未来十年创新技术。 据预测,到2030年,全球每年产生的数据总量将达1YB,相比2020年增长23倍,人类将迎来YB数据时代。未来数据存储将在先进介质应用、以数据为中心的体系架构、数据存储原生安全、

    作者: 云享·书库小助手
    发表时间: 2023-08-23 15:48:28
    50
    0