内容选择
    内容分类
    学堂 博客 论坛 开发服务 开发工具 直播 视频 用户
    时间
    一周 一个月 三个月
    内容选择
    全部
    内容选择
    内容分类
    • 学堂
    • 博客
    • 论坛
    • 开发服务
    • 开发工具
    • 直播
    • 视频
    • 用户
    时间
    • 一周
    • 一个月
    • 三个月
    重置 确定

    • Hadoop学习--Hive安装与配置

      最近在学习Hive的安装与使用，第一次使用还是遇到了很多问题。下面介绍下具体的过程。 开发环境： ubuntu10.04  jdk:1.7.0_40 Hadoop:1.2.1 1、下载安装包 首先从http://hive.apache.org/downloads.html下载并解压到一个目录下，笔者是/root/hive。

      开发者  >  博客
      作者： 格图洛书
      发表时间： 2021-12-30 14:37:16
      742
      0

    • 基于Docker搭建Hadoop集群

      基于Docker搭建Hadoop集群将Hadoop打包到Docker镜像中，就可以快速的在单个机器上搭建Hadoop集群，这样可以方便新手测试和学习。Hadoop的master和slave分别运行在不同的Docker容器中，其中NameNode、ResourceManager运行

      开发者  >  博客
      作者： jimmybhb
      发表时间： 2019-10-29 17:11:33
      6611
      1

    • Hadoop CDH部署指南

      limits for Hadoop #############* soft nproc 131072* hard nproc 131072* soft nofile 655360* hard nofile 655360########### limits for Hadoop #############

      开发者  >  博客
      作者： Ben_5003
      发表时间： 2019-05-17 13:56:59
      9829
      1

    • Hadoop01【介绍】

      什么是Hadoop 官网:http://hadoop.apache.org/ HADOOP是apache旗下的一套开源软件平台,HADOOP提供的功能：利用服务器集群，根据用户的自定义业务逻辑，对海量数据进行分布式处理 HADOOP的核心组件有: HDFS

      开发者  >  博客
      作者： 波波烤鸭
      发表时间： 2022-03-29 18:15:11
      430
      0

    • Hadoop 3.1.1 移植指南（CentOS 7.4）

      简介Hadoop是一个开源的分布式存储及计算框架，被广泛用于海量数据的存储及处理，可以以可靠、高效、可伸缩的方式进行数据处理。关于Hadoop的更多信息请访问https://hadoop.apache.org/docs/r3.1.1。1.环境要求2.配置编译环境    a.安装OpenJDK    b

      开发者  >  其他
      作者： ryazsua
      13594
      8

    • Hadoop 2.7.5编译指导for Centos 7.6 ★★★

      地仓库中。4 Hadoop编译4.1 下载源码下载代码并解压：wget https://archive.apache.org/dist/hadoop/core/hadoop-2.7.5/hadoop-2.7.5-src.tar.gztar -zxvf hadoop-2.7.5-src

      开发者  >  其他
      作者： 皮卡皮卡@银河护卫队
      2204
      0

    • Apache-Hadoop-3.1.1移植指南

      7执行移植分析1、使用devkit进行扫描分析，如有依赖需要先编译相关依赖。4 编译hadoop下载Hadoop源码包：wget https://archive.apache.org/dist/hadoop/common/hadoop-3.1.1/hadoop-3.1.1-src.tar.gz 2、解压后进入目录，修改pom

      开发者  >  其他
      作者： ron_kk
      771
      0

    • 分享MRS和自建Hadoop相比优势（2）

      的统一的用户登录能力，MRS Manager自带用户认证环节，用户只有通过MRS Manager认证才能正常访问集群。MRS支持数据存储加密，所有用户账号密码加密存储，数据通道加密传输，服务模块跨信任区的数据访问支持双向证书认证等能力。MRS大数据集群提供了完整的企业级大数据多租

      开发者  >  其他
      作者： 初学者7000
      743
      4

    • HiBench7.0 编译支持 hadoop3（hadoop.mr2.version=3.x.x） ★☆☆

      hadoop.fs.Path,org.apache.hadoop.fs.FileSystem,org.apache.hadoop.fs.Path,boolean,org.apache.hadoop.conf.Configuration,<nulltype>)  location: class

      开发者  >  其他
      作者： eter
      2455
      1

    • 鲲鹏软件调优 微认证通过了

              通过两天的学习，今天通过了华为 “鲲鹏软件调优”微认证 中级，总结经验是要仔细听课程文件并实践，过程中做好笔记，明天开始学习职业认证HCIA.给自己加油。

      开发者  >  博客
      作者： 鲲鹏展翅，心飞翔
      发表时间： 2020-05-15 18:56:46
      4157
      0

    • 华为云个人实名认证

      华为云个人实名认证可通过个人银行卡认证， 通过扫码认证，通过个人证件认证，三种方式来进行实名认证。上一篇文章介绍了通过银行卡实名认证。下一篇文章介绍通过通过个人证件认证。本文介绍通过扫码认证进行实名认证的流程（扫码认证是最简单，并且速度最快的认证方式）华为云扫码认证进行实名认证的流程华

      开发者  >  博客
      作者： 云服务器知识
      发表时间： 2020-08-18 10:00:04
      10102
      0

    • 【技术干货】Hadoop体系架构概述

      列表。YARNApache YARN（Yet Another Resource Negotiator的缩写）是Hadoop的集群资源管理系统。YARN被引入Hadoop 2，最初是为了改善Map Reduce的实现，但他具有足够的通用性，、同样可以支持其他的分布式计算模式。YARN

      开发者  >  其他
      作者： scu-w
      678
      0

    • hadoop web server跨网段访问小技巧及history配置[开源apache hadoop] ★☆☆

      web server 登录小技巧：      hadoop的各种web server，例如historyserver是个很有用的web服务，可以方便查看历史job数据，方便调优和定位。      但是配置上一般会把hadoop的各种服务的ip和端口配置到业务10GE网络上，10GE业务网络一般情况下不和管理计算机PC

      开发者  >  其他
      作者： eter
      3176
      0

    • Hadoop 集群搭建

      /home/modules/hadoop-2.8.3/etc/hadoop/slaves （6）配置hadoop环境变量 node-0001节点执行下列命令： vim /home/modules/hadoop-2.8.3/etc/hadoop/hadoop-env.sh （7）配置jar包

      开发者  >  博客
      作者： yd_296539687
      发表时间： 2023-11-23 21:46:25
      79
      0

    • 搭建Hadoop集群

      Hadoop作为一种开源的分布式计算框架，其发展历程可以追溯到2004年。随着大数据时代的来临，Hadoop逐渐成为处理海量数据的首选技术之一。从最早的Hadoop 0.1版本到如今的Hadoop 3.x版本，Hadoop不断发展壮大，架构和功能也日趋完善。 Hadoop的核心架构包括以下几个部分：

      开发者  >  博客
      作者： i-WIFI
      发表时间： 2024-09-24 15:40:17
      110
      0

    • 【云计算 Hadoop】Hadoop 版本 生态圈 MapReduce模型

      功能; (3) Cloudera Hadoop对应Apache Hadoop版本 . 2. Hadoop生态圈 Apache支持 : Hadoop的核心项目都受Apache支持的, 除了Hadoop之外, 还有下面几个项目, 也是Hadoop不可或缺的一部分; -- HDFS

      开发者  >  博客
      作者： 韩曙亮
      发表时间： 2022-01-10 16:05:42
      750
      0

    • 微认证：鲲鹏软件迁移实践 —— 鲲鹏软件迁移概述

      性能调优&mdash;&mdash;利用五步法优化软件性能 性能指标测试 性能优化 测试与认证&mdash;&mdash;保障商用上线，共建鲲鹏生态 压力测试 长稳测试 规模商用/鲲鹏展翅认证 3. 典型案例 华为内部项目：大型平台软件历时4个月完成 规模商用在这里插入图片描述

      开发者  >  博客
      作者： ruochen
      发表时间： 2021-02-23 09:48:57
      4803
      0

    • Hadoop-2.2.0学习之一Hadoop-2.2.0变化简介

      Hadoop-2.2.0在Hadoop-1.x的基础上进行了重大改进，主要体现在HDFS和MapReduce上。下面大体介绍HDFS和MapReduce改进的地方。 首先是HDFS联合。众所周知，在Hadoop-1.x版本中，集群中只有一个Na

      开发者  >  博客
      作者： 格图洛书
      发表时间： 2021-12-29 17:58:07
      698
      0

    • 【转】MRS与自建Hadoop对比优势

      MRS支持基于WebUI的统一的用户登录能力，Manager自带用户认证环节，用户只有通过Manager认证才能正常访问集群。 MRS支持数据存储加密，所有用户账号密码加密存储，数据通道加密传输，服务模块跨信任区的数据访问支持双向证书认证等能力。 MRS大数据集群提供了完整的企业级大数据多租户

      开发者  >  博客
      作者： FI小粉丝
      发表时间： 2021-06-24 06:50:39
      1949
      0

    • WLAN基础与简单认证

      WLAN基础与认证（拓扑如下）       只是介绍一下命令行相关配置       1、sn认证       2、隧道转发       3、wpa2-psk 认证1604583256341092528.png相关命令：交换机SW2system-viewDhcp enablevlan

      开发者  >  博客
      作者： 不理不理右卫门
      发表时间： 2020-11-05 21:36:41
      8546
      0
    总条数： 10000
    点击加载更多