内容选择
    内容分类
    学堂 博客 论坛 开发服务 开发工具 直播 视频 用户
    时间
    一周 一个月 三个月
    内容选择
    全部
    内容选择
    内容分类
    • 学堂
    • 博客
    • 论坛
    • 开发服务
    • 开发工具
    • 直播
    • 视频
    • 用户
    时间
    • 一周
    • 一个月
    • 三个月
    重置 确定

    • Hadoop数据仓库之数据治理

      数据治理的内容这一部分，我将从六个方面来讲解数据治理的内容。2.1 数据标准定义数据维度及指标需要清晰的、统一的、标准的定义。（这里的部分参考Hadoop数仓建设之指标管理的文章，我这里列举一些例子）维护业务术语库：要做到见名知义，同名同义、不同名不同义，公司命名尽量统一。表命名规范：数

      开发者  >  其他
      作者： 旧时光里的温柔
      1276
      2

    • Hadoop Yarn RPC未授权访问漏洞

      /tmp/success" 🔑漏洞修复 （临时修复建议） Apache Hadoop官方建议用户开启Kerberos认证。 设置 Hadoop RPC服务所在端口仅对可信地址开放。 建议升级并启用Kerberos的认证功能，阻止未经授权的访问。

      开发者  >  博客
      作者： 新网工李白
      发表时间： 2021-11-25 08:03:24
      2710
      0

    • 《Hadoop权威指南：大数据的存储与分析》—3.4 Hadoop文件系统

      3.4 Hadoop文件系统Hadoop有一个抽象的文件系统概念，HDFS只是其中的一个实现。Java抽象类 org.apache.hadoop.fs.FileSystem定义了Hadoop 中一个文件系统的客户端接口，并且该抽象类有几个具体实现，其中和Hadoop紧密相关的见表3-1。表3-1

      开发者  >  博客
      作者： 清华大学出版社
      发表时间： 2019-10-12 13:52:02
      5297
      0

    • hadoop的 hdfs分级存储效果简单测试

      1、常用分级存储简介：hadoop HDFS可以使用高速介质对hdfs进行分级存储，热数据的副本放置在nvme/sata SSD上，提升任务执行效率分级存储的策略可以设置：ALLSSD：热数据的所有副本都放置在SSD上，性能最好，但成本高ONESSD: 这种策略是将多副本的其中一个放置在

      开发者  >  其他
      作者： eter
      2328
      0

    • Hadoop02【架构分析】

      hadoop1.0   Hadoop1.0即第一代Hadoop，指的是版本为Apache Hadoop 0.20.x、1.x或者CDH3系列的Hadoop，内核主要由HDFS和MapReduce两个系统组成，其中Ma

      开发者  >  博客
      作者： 波波烤鸭
      发表时间： 2022-03-29 16:15:44
      429
      0

    • HCIA-IoT认证课程课后习题参考答案

      一、物联网发展简史与概述 1. 什么是物联网？ 物联网(IoT:Internetof Things)就是物物相连的互联网。这有两层意思：其一，物联网的核心和基础仍然是互联网，是在互联网基础上的延伸和扩展的网络；其二，其用户端延伸和扩展到了任何物品与物品之间，进行信息交换和通信，也就是物物相息。

      开发者  >  博客
      作者： 苌奥林
      发表时间： 2021-11-24 11:01:35
      3424
      0

    • hadoop学习-Netflix电影推荐系统

      1、推荐系统概述 电子商务网站是推荐系统应用的重要领域之一，当当网的图书推荐，大众点评的美食推荐，QQ好友推荐等等，推荐无处不在。 从企业角度，推荐系统的应用可以增加销售额等等，对于用户而言，系统仿佛知道我们的喜好并给出推荐也是非常美妙的事情。

      开发者  >  博客
      作者： 格图洛书
      发表时间： 2021-12-31 14:12:09
      927
      0

    • HDP hadoop-3.1.1.3.1.4.0-315移植指导书

      confldconfig hadoop-dist/target/hadoop-3.1.1.3.1.4.0-315/bin/hadoop checknative 3      RPM移植3.1      RPM移植清单以下rpm需要手工替换：hadoop_3_1_4_0_315-3

      开发者  >  其他
      作者： 黄龙吐翠
      2753
      1

    • 《从零开始学Hadoop大数据分析（视频教学版）》 —2.7.3 修改/etc/hadoop/hadoop-env.sh

      2.7.3 修改/etc/hadoop/hadoop-env.sh　　接着需要在etc/hadoop/hadoop-env.sh 中配置JAVA_HOME，否则调用start-dfs.sh启动时会报错（Error: JAVA_HOME is not set and could not

      开发者  >  博客
      作者： 华章计算机
      发表时间： 2019-12-14 21:04:27
      5421
      0

    • hadoop分布式集群

      -version出来的是一个openJdk，建议删除掉，使用我们现在的路径。 5． 配置HADOOP_HOME PATH=$PATH:$JAVA_HOME/bin:$HADOOP_HOME/bin:$HADOOP_HOME/sbin: 这个下面是hadoop执行的一些命令可执行文件的存在，和jdk的bin一样。

      开发者  >  博客
      作者： tea_year
      发表时间： 2024-02-11 08:55:11
      198
      0

    • Hadoop 3.3.0 单机环境配置

      使用如下命令可以查看可用demo cd ${HADOOP} hadoop jar ./share/hadoop/mapreduce/hadoop-mapreduce-examples-3.3.0.jar 可以看到 hadoop 自带了很多 example An example

      开发者  >  博客
      作者： 福州司马懿
      发表时间： 2021-11-29 14:55:51
      2240
      0

    • hadoop2.5.3迁移指南-cenos7.6

      一 介绍Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和存储。Hadoop实现了一个分布式文件系统（Hadoop Distributed File System），简称HDF

      开发者  >  其他
      作者： 阿刚
      2572
      1

    • Hadoop集群搭建配置教程

      注意：以下步骤均在hadoop1节点上进行操作，特殊说明除外！ 1、下载hadoop-3.1.3.tar.gz hadoop官网下载：https://www.apache.org/dyn/closer.cgi/hadoop/common/hadoop-3.1.3/hadoop-3.1

      开发者  >  博客
      作者： 笑看风云路
      发表时间： 2023-06-16 16:02:10
      4
      0

    • Hadoop 文件系统操作

      本文介绍Hadoop 文件系统的基本操作，主要涉及 往Hadoop大数据集群拷文件，下载文件到本地，文件查看，创建等。当前华为云集群 hadoop 命令存在于目录 /opt/Bigdata/hadoop/hadoop/bin/hadoop 1. 查看帮助hadoop fs -help2

      开发者  >  博客
      作者： 老板上茶
      发表时间： 2020-05-28 10:42:02
      9629
      0

    • Hadoop集群的搭建教程

      把words文件上传到分布式文件系统中 4./home/hadoop/hadoop-2.9.2/bin/hadoop jar /home/hadoop/hadoop-2.9.2/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.9.2

      开发者  >  博客
      作者： tea_year
      发表时间： 2024-02-11 08:57:26
      72
      0

    • 【Hadoop】【Yarn】Yarn命令实现

      application, yarn applicationattempt以及yarn container命令就會調用org.apache.hadoop.yarn.client.cli.ApplicationCLI应用。 该应用类的实现如下，下面主要以yarn application -kill

      开发者  >  博客
      作者： 沙漠里的果果酱
      发表时间： 2023-08-10 15:17:54
      28
      0

    • MRS HADOOP/SPARK 代码访问OBS方式介绍

      MRS样例代码没有介绍如何访问OBS，在默认情况下使用的文件系统都是HDFS；如果访问OBS需要添加一些配置，代码使用过程中也有一些需要注意的地方详情请点击博文链接：https://bbs.huaweicloud.com/blogs/169323

      开发者  >  其他
      作者： AI资讯
      2886
      1

    • 翻译练习：Hadoop概述

      G = f(x) x: big data f: cloud computing G: goal

      开发者  >  博客
      作者： howard2005
      发表时间： 2021-12-29 18:26:46
      690
      0

    • Hadoop基础技术-Kerberos and LDAP

      大数据开源技术的深入发展离不开Hadoop等底层平台技术的支持。华为大数据平台实现了一种基于LDAP和Kerberos技术的高可靠集群安全模式，提供一体化安全认证功能。

      开发者  >  开发者学堂

    • Hadoop应用实战100讲（三）-Hadoop分布式文件系统

      HDFS中的数据是分布存储的，默认块的大小为128MB(Hadoop低版本默认为64MB,这个值可以在配置文件中更改）但是如何修改呢？ 在hdfs-site.xml文件进行修改，如果在修改的时候，需要停掉HADOOP的运行进程，修改完毕后，重新启动。 分块处理的好处是可以增

      开发者  >  博客
      作者： 格图洛书
      发表时间： 2021-11-18 16:53:07
      774
      0
    总条数： 10000
    点击加载更多