内容选择
    内容分类
    学堂 博客 论坛 开发服务 开发工具 直播 视频 用户
    时间
    一周 一个月 三个月
    内容选择
    全部
    内容选择
    内容分类
    • 学堂
    • 博客
    • 论坛
    • 开发服务
    • 开发工具
    • 直播
    • 视频
    • 用户
    时间
    • 一周
    • 一个月
    • 三个月
    重置 确定

    • 基于openEuler-20.03-LTS-SP1安装部署Apache Hadoop 3.3.1

      tar.gz创建软链接ln -sv hadoop-3.3.1 hadoop7、配置Hadoop环境变量vim /etc/profile添加以下内容# Hadoop HADOOP_HOME=/usr/local/hadoop PATH=$HADOOP_HOME/bin:$PATH export

      开发者  >  其他
      作者： jhon-hsu
      1055
      0

    • 十一、Hadoop完全分布式的搭建详情

      hadoop完全分布式安装与配置         在Hadoop集群模式的安装与配置中，Hadoop集群架构如图所示。 准备：共三台虚拟机，分别为

      开发者  >  博客
      作者： 托马斯-酷涛
      发表时间： 2022-05-25 16:47:44
      319
      0

    • 基于openEuler-20.03-LTS-SP1安装部署Apache Hadoop 2.9.2

      hadoop PATH=$HADOOP_HOME/bin:$PATH export HADOOP_HOME PATH刷新配置文件，查看Hadoop版本source /etc/profile hadoop version修改/usr/local/hadoop的属主和属组为hadoopchown

      开发者  >  其他
      作者： jhon-hsu
      1098
      0

    • 如何理解数据仓库和Hadoop大数据平台的差别?

      通过UDF支持事务支持有限完整数据仓库和Hadoop平台互为补充，立足于满足客户在不同使用场景下的业务需求。公有云数据仓库服务GaussDB(DWS) 能够无缝地接入到公有云Hadoop平台MRS服务上，支持SQL-over-Hadoop的这个特性，提供跨平台， 跨服务的数据共享

      开发者  >  其他
      作者： 建赟
      1471
      2

    • SpringSecurity实现数据库认证

        上篇文章我们介绍了SpringSecurity系统认证的流程，我们发现系统认证其实是通过一个UserDetailService的实现类来实现的，所以我们就可以使用相同的方式将认证的业务改成和数据库的对比。此案例持久层我们通过Mybatis来实现 一、mybatis准备

      开发者  >  博客
      作者： 波波烤鸭
      发表时间： 2022-03-30 16:33:57
      372
      0

    • 使用华为云ECS部署Hadoop、Spark并运行样例

      /usr/local/hadoop/share/hadoop/mapreduce/hadoop-mapreduce-examples-x.x.x.jar wordcount/input/output 运行 Hadoop 自带的 wordcount样例（注意自己部署的hadoop 版本）。执行

      开发者  >  其他
      作者： Yezichun
      53
      0

    • 【Hadoop】【Yarn】查看Yarn作业日志的方法

      通过配置项：yarn.nodemanager.log-dirs进行配置。华为云MRS服务中，默认的路径为/srv/Bigdata/hadoop/data1/nm/containerlogs中。 如果开启了日志归集特性，那么在作业结束之后，nodemanager会将contai

      开发者  >  博客
      作者： mxg
      发表时间： 2021-05-28 18:01:22
      3055
      0

    • 在本地利用虚拟机搭建Hadoop大数据平台

      DK# 配置依赖环境cd /root/apps/hadoop-2.7.7/etc/Hadoop vim hadoop-env.sh# 配置文件目录存放位置vim /root/apps/hadoop-2.7.7/etc/hadoop/core-site.xml<configuration>

      开发者  >  其他
      作者： Jack20
      1528
      3

    • 开源大数据平台Hadoop和Spark对接OBS操作指南

      2        增加hadoop-huaweicloud的jar包1、  将hadoop-huaweicloud的jar包拷贝到如下各个目录中（/home/modules/hadoop-2.8.3/share/hadoop/common/lib；/home/modules/hadoop-2.8

      开发者  >  其他
      作者： lanxinliuli
      6538
      0

    • 云脉远程实名认证方案助力远程养老金领取认证！

      体检测、视频检测、手机验证码等技术协助用户完成远程实名认证。认证者只需通过网络或手机客户端将自拍照发到认证平台，通过系统认证与平台中预存照片为同一人即可，极大的降低了远程办事所花的人工成本并大大提升了办事的效率。以远程实名认证助力养老金在线领取为例，用户只需要通过智能手机，上传身

      开发者  >  博客
      作者： 云脉OCR
      发表时间： 2020-02-19 16:19:37
      5221
      0

    • hadoop2.2.0安装，完全分布式安装

      第一部分 Hadoop 2.2 下载 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; Hadoop我们从Apache官方网站直接下载最新版本Hadoop2.2。官方目前是提供了linux32位系统可执行文件，所以如

      开发者  >  博客
      作者： 格图洛书
      发表时间： 2021-12-29 17:25:12
      593
      0

    • 【Hadoop】【Yarn】NodeManager启动源码分析

      NodeManager.main()---NodeManager.initAndStartNodeManager()------NodeManager.init()------NodeManager.start() NodeManager作为一个service，自然少不了所有Se

      开发者  >  博客
      作者： 沙漠里的果果酱
      发表时间： 2023-08-10 11:20:19
      24
      0

    • Hive Tez 0.10.0版本编译安装 适配3.1以上的hadoop

      /value> </property> </configuration>修改hadoop-env.sh所有节点都需要替换cd /usr/local/hadoop/etc/hadoop vim hadoop-env.shexport TEZ_CONF_DIR=/usr/local/tez/conf/tez-site

      开发者  >  其他
      作者： yd_264646152
      1087
      0

    • 如何查看用户下的创建的sql on hadoop 数据源

      方法1：select * from pg_foreign_server;方法2：\dest+

      开发者  >  其他
      作者： dual
      2549
      1

    • 【mongodb】 启用身份认证

      默认的mongodb服务没有设置身份认证，默认所有人都可以连接到数据库，因此需要开启身份认证 实验环境：fedora 35 ARM，mongodb 5.0，mongosh 1.3 1.启动数据库服务 方式一：前端启动数据库服务 此命令会在前端启动mongodb服务，所以其他操作需要新建一个shell连接

      开发者  >  博客
      作者： HW小龙
      发表时间： 2022-04-06 09:46:07
      770
      0

    • 【HCIA-IoT职业认证训练营FAQ】10个思考题解答（1）

      课程学完了。从第一章开始把思考题做一下。 思考题一：1. （问答）什么是物联网？ 分析答案：概念性的理论，视频中都有讲到。 物联网（Internet of Things）简称：IoT，是新一代信息技术的重要组成部分，也是&ldquo;信息化&rdquo;时代的重要发展阶段。物联网

      开发者  >  博客
      作者： 花溪
      发表时间： 2021-03-22 05:23:54
      10486
      0

    • Seatunnel 2.3.0集群搭建（结合Hadoop+Flink）

      apache.org/dist/hadoop/common/hadoop-3.2.4/hadoop-3.2.4.tar.gz 输入如下命令，解压 hadoop 组件 tar -zxvf hadoop-3.2.4.tar.gz 修改 hadoop 配置文件。 配置文件位于/usr/local/hadoop-3

      开发者  >  博客
      作者： ludihu
      发表时间： 2023-02-20 02:57:22
      242
      0

    • 【我与华为云认证】微认证历程

      较好的地方：    1、职业认证：是先学习、实验，然后报名交钱考试的，这样想学的就是随意获取，但又设置了门槛，相当于是宽进严出    2、考试次数：微认证的考试次数会有5次，我采用的一版策略是学习之前先做一遍，看看自己的实力到底到什么程度，然后结合认证视频再好好学一遍，学完再考一

      开发者  >  其他
      作者： 悟钧
      10670
      2

    • 什么是 Hadoop？它如何解决大数据问题？

      来优化计算性能。 Hadoop Common： 基础库：Hadoop Common 是一组共享的库和工具，支持 Hadoop 的其他组件。它包括文件系统、序列化库、网络通信和数据传输等基础功能。 Hadoop 解决的大数据问题 Hadoop 主要通过以下几种方式解决大数据处理中的问题：

      开发者  >  博客
      作者： wljslmz
      发表时间： 2024-08-12 23:45:04
      11
      0

    • Eclipse搭建hadoop开发环境

      ount的项目，然后配置Hadoop安装目录。因为Hadoop-Eclipse插件一边连接着Eclipse，另一边连接着Hadoop，所以还要在Eclipse中对Hadoop进行相关的配置。（6）配置Hadoop安装目录。 需要把下载到本地的hadoop安装包解压（就是提前下载到

      开发者  >  博客
      作者： Smy1121
      发表时间： 2019-06-20 11:03:23
      5869
      1
    总条数： 10000
    点击加载更多