已找到以下 10000 条记录

    • RedHat 6.1中安装JDK

      以前一直使用Ubuntu做Hadoop的学习，最近需要部署生产环境，服务器改为RedHat，也记录一下在RedHat 6.1中安装JDK，与之前写过在Ubuntu 14.04 安装 JDK 8做一下比较。 下载JDK 可以通过访问Or

      开发者  >  博客
      作者： 看山
      发表时间： 2021-09-28 16:22:29
      940
      0

    • OBS大数据解决方案开篇

          随着企业数据资产的增加，如何能可靠安全的存储这些数据，以及如何能高效处理这些数据成为了大数据技术的起点，以hadoop为代表的开源技术大肆兴起，随后大数据技术栈如雨后春笋般的涌现，hive，spark，impala，presto，flink。。。几乎每隔一两年就会有新的大数据处理框架出现，同时也出现了HDP

      开发者  >  博客
      作者： 万广平
      发表时间： 2020-08-08 16:11:47
      10373
      0

    • 【大数据系列】不care工具，在大数据平台中Hive能自动处理SQL

      得到了Hadoop大数据仓库Hive。但是想到将两种技术嫁接到一起，却是极具创新性的，通过嫁接产生出的Hive极大降低大数据的应用门槛，也使Hadoop得到普及。 >参考 - https://learning.oreilly.com/library/view/hadoop-the

      开发者  >  其他
      作者： 双倍芝士。
      460
      0

    • Hive调优参数篇

      bytes.per.reducer=536870912; # 输入合并 set hive.input.format=org.apache.hadoop.hive.ql.io.CombineHiveInputFormat; # 在Map-only的任务结束时合并小文件 set hive

      开发者  >  博客
      作者： 百忍成金的虚竹
      发表时间： 2021-05-19 19:11:51
      1551
      0

    • Linux安装Hive并测试

      3、Node1添加环境变量 在hive-env.sh中添加hadoop的目录 [root@node1 conf]# vi hive-env.sh 在首行添加 HADOOP_HOME=/opt/bigdata/hadoop-3.0.0 123 4、Node1创建hive-site

      开发者  >  博客
      作者： 指剑
      发表时间： 2022-09-02 16:56:59
      103
      0

    • 大数据生态圈常用组件（一）：数据库、查询引擎、ETL工具、调度工具等

      存储系统 问世灵感：Google论文Bigtable基于zookerper，hadoop，适合于非结构化数据存储的数据库适用超大数据存储，准实时查询； bitmap存储软件开源 低硬件成本（hadoop）ES分布式全文搜索引擎ES自动可以将海量数据分散到多台服务器上去存储和检索，

      开发者  >  博客
      作者： 不吃西红柿
      发表时间： 2021-07-14 15:57:03
      3307
      0

    • 使用Apache IoTDB进行IoT相关开发的架构设计与功能实现(1)

      步到HDFS，从而在Hadoop或Spark数据处理平台上实现异常检测、机器学习等数据处理任务。对于写入HDFS或本地TsFile的数据，用户可以使用TsFile-Hadoop-Connector或TsFile-Spark-Connector来允许Hadoop或Spark处理数据

      开发者  >  博客
      作者： 云言·云议
      发表时间： 2022-12-14 16:48:29
      274
      0

    • Linux系列：shell编程之运算符

      str2 操作如下： 结果如下： [hadoop@image shell]$ . three.sh 666 888 变量b:888大 5）字符串运算符 常用字符运算符如下： 操作如下： 结果如下： [hadoop@image shell]$ . str.sh

      开发者  >  博客
      作者： 数据分析与统计学之美
      发表时间： 2021-09-27 12:59:20
      1239
      0

    • 什么是 Apache Spark，为什么它用于数据处理？

      管理器（如 Hadoop YARN、Apache Mesos 或 Kubernetes）集成，以提供资源管理和任务调度服务。 生态系统：Spark 拥有一个丰富的生态系统，提供了广泛的工具和库，以支持数据处理、数据分析和机器学习。Spark 的生态系统与 Hadoop 紧密集成，允许用户无缝地在

      开发者  >  博客
      作者： wljslmz
      发表时间： 2024-08-13 23:40:32
      2
      0

    • 搭建流程 - 数字化营销

      明确双方责任人、需求 资料收集（1个工作日） 企业管理员需配合提供系统装填的物料 打通平台（1-3个工作日） 注册微信服务号、小程序，并关联认证 认证费用300元/次，审核时间1-3个工作日 独立小程序授权（5-7个工作日） 配置独立小程序、测试、上线、发版 系统配置（1个工作日） 客

      帮助中心 > 数字化营销 > 加推企业AIGC营销系统解决方案 > 实施步骤

    • 鉴权 - IoT物联网

      第三方应用首次访问物联网平台的开放API时，需调用此接口完成接入认证；第三方应用在物联网平台的认证过期后，需调用此接口重新进行认证，才能继续访问物联网平台的开放API。 接口功能 支持第三方应用在首次访问物联网平台的开放API之前，完成在物联网平台的接入认证。 注意事项 鉴权接口是调用其他API的前提

      帮助中心 > IoT物联网 > SDK参考 > 应用侧JAVA SDK API参考（联通用户专用） > 应用安全接入

    • 绑定域名 - 应用与数据集成平台 ROMA Connect

      绑定域名 概述 在开放API前，您需要为API分组绑定独立域名，用户通过独立域名访问分组内的API。 独立域名可分为内网域名和公网域名两种： 内网域名：部署在云服务平台内的业务系统，可以使用内网域名访问API。 公网域名：部署在云服务平台外的业务系统，可以使用公网域名访问API。

      帮助中心 > 应用与数据集成平台 ROMA Connect > 用户指南 > 服务集成指导（旧版界面） > 创建并开放数据API

    • 网信办云计算服务安全评估

      网信办云计算服务安全评估 针对向党政机关、关键信息基础设施运营者提供服务的云平台开展的安全评估 有关网信办云计算服务安全评估的常见问题 有关网信办云计算服务安全评估的常见问题 网信办云计算服务安全评估是什么？ 为提高党政机关、关键信息基础设施运营者采购使用云计算服务的安全可控水平

      其他

    • java在访问https资源时，忽略证书信任问题

      传输协议。HTTPS 经由 HTTP 进行通信，但利用 SSL/TLS 来加密数据包。HTTPS 开发的主要目的，是提供对网站服务器的身份认证，保护交换数据的隐私与完整性。 HTTPS 默认工作在 TCP 协议443端口，它的工作流程一般如以下方式： 1、TCP 三次同步握手 2、客户端验证服务器数字证书

      开发者  >  博客
      作者： 加油O幸福
      发表时间： 2021-11-18 06:27:20
      3880
      0

    • gRPC技术优势在哪里？有什么缺点和应对策略？

      亦然。 【认证】gRPC支持使用TLS和基于令牌的认证。与Google服务的连接必须使用TLS。 gRPC设计的初衷是可以与各种认证机制一起工作，从而可以很容易地通过gRPC与其他系统对话。 gRPC还提供了一个简单的认证API，让您在创建通道或调用时提供所有必要的认证信息作为凭

      开发者  >  博客
      作者： Jet Ding
      发表时间： 2020-09-30 15:31:38
      13210
      0

    • 调用说明 - 数据治理中心 DataArts Studio

      entational State Transfer）风格API，支持您通过HTTPS请求调用。 调用方法请参见如何调用API。 构造请求 认证鉴权 返回结果 父主题： 使用前必读

      帮助中心 > 数据治理中心 DataArts Studio > API参考 > 使用前必读

    • 什么是国密改造？国密SSL证书起什么作用？

      沃通国密SSL证书采用国家密码管理局公布的SM2算法体系，支持国产密码算法及国密SSL安全协议，实现国密HTTPS加密通信以及服务器身份认证。工作机制和RSA算法的SSL证书一样，但遵循国家的标准规范和监管体系，依赖支持国密算法的软件应用环境。 沃通CA提供的成熟实践方案，面向

      开发者  >  博客
      作者： 沃通WoTrus
      发表时间： 2023-02-15 08:13:41
      105
      0

    • 为什么我要选择 Spark on K8s？

      务方案、商业策略，并进行精准推送。目前大部分数据分析都在 Hadoop 生态中进行，Hadoop 也凭借其完善的生态，备受用户欢迎，成为主流的开源大数据平台，也成为了大数据的代名词。然而，从 2006 第一个 Hadoop 版本发布算起的话，大数据的发展也经历了至少 13 个年头

      开发者  >  博客
      作者： 鲲鹏小玩家
      发表时间： 2020-02-12 10:09:01
      10349
      0

    • 华为云开发者学堂2023年1月刊

      Connect业务流Low Code设计与编排实践 微认证 云原生基础设施之容器入门 云原生基础设施之容器进阶 开发者认证 人工智能工作级开发者认证 查看更多 收起 热门活动 学技能，赢奖品，欢乐上云享不停！ 华为云HCSD开发者认证冬令营 面向国内院校计算机、开发类专业学生或从业者

      其他

    • HBase日志介绍 - MapReduce服务 MRS

      09:42:55,371 | INFO | main | loaded properties from hadoop-metrics2.properties | org.apache.hadoop.metrics2.impl.MetricsConfig.loadFirst(MetricsConfig

      帮助中心 > MapReduce服务 MRS > 组件操作指南（LTS版） > 使用HBase > HBase运维管理
    总条数： 10000
    点击加载更多