内容选择
全部
内容选择
内容分类
  • 学堂
  • 博客
  • 论坛
  • 开发服务
  • 开发工具
  • 直播
  • 视频
  • 用户
时间
  • 一周
  • 一个月
  • 三个月
  • 开源Hive部署指导书

    s://archive.apache.org/dist/hive/hive-1.2.1/apache-hive-1.2.1-bin.tar.gz](https://archive.apache.org/dist/hive/hive-1.2.1/apache-hive-1.2.1-bin

    作者: 真我Realme
    10278
    0
  • 华为FusionInsight MRS Flink客户端配置

    /opt/hadoopclient/Flink/flink/bin 执行: sh generate_keystore.sh 密码可填:123456 上述该步骤会在/opt/hadoopclient/Flink/flink/conf路径中生成配置文件flink.keystore以及flink.truststore

    作者: 晋红轻
    发表时间: 2021-12-29 03:06:52
    1579
    0
  • Flink原理、实战与性能优化》 —3.4 Flink数据类型

    的字段类型必须是Flink支持的。代码清单3-2 Java POJOs数据类型定义定义好POJOs Class后,就可以在Flink环境中使用了,如下代码所示,使用fromElements接口构建Person类的数据集。POJOs类仅支持字段名称指定字段,如代码中通过Person

    作者: 华章计算机
    发表时间: 2020-02-17 14:21:26
    3513
    0
  • Flink Table/SQL自定义Sources和Sinks全解析(附代码

    动态表是Flink Table和SQL API处理有界和无界数据的核心概念。 在Flink中,动态表只是逻辑概念,其本身并不存储数据,而是表的具体数据存储在外部系统(比如说数据库、键值对存储系统、消息队列)或者文件中。 动态源和动态写可以从外部系统读写数据。在下面的描述中,动态

    作者: 从大数据到人工智能
    发表时间: 2022-01-20 18:08:46
    2335
    0
  • 大数据Flink进阶(十三):Flink 任务提交模式

    Per-Job模式通过客户端提交Flink任务,每个Flink任务对应一个Flink集群,每个任务有很好的资源隔离性; Application模式是在JobManager上执行main方法,为每个Flink的Application创建一个Flink集群,如果该Applicatio

    作者: Lansonli
    发表时间: 2023-04-09 22:31:48
    129
    0
  • Flink Standalone运行模式

    另外,Fink可以处理后的数据,输出到第三方应用系统、事件日志、数据库系统、文件系统以及键值对存储系统中。由于Flink程序主要由Java语言或Scala语言开发,另外还支持Python语言。但底层组件和Flink运行时(runtime)是运行在JVM上,因此,Flink程序可以运行

    作者: jackwangcumt
    发表时间: 2021-11-24 23:55:35
    2643
    0
  • Flink Scala项目快速入门

    xml给出了一些核心依赖库,其中${flink.version}是一个变量,代表Flink版本,这样在升级时,只需要在定义${flink.version}的地方进行一处修改即可,即<flink.version>1.12.0</flink.version>。同理,${scala

    作者: jackwangcumt
    发表时间: 2021-11-25 00:16:14
    3057
    0
  • Flink不同版本API变化很大,华为云的数据湖是通过Flink SQL,支持所有版本的Flink(包括最新版)吗?

    作者: 林欣
    147
    2
  • Hive概述

    1.     Hive介绍Hive是基于Hadoop的一个数据仓库工具,可以结构化的数据文件映射为一张数据库表,并提供类SQL的查询功能。Hive基本原理是HQL语句自动转换成可以在计算引擎上执行的任务。Hive 在加载数据过程中不会对数据进行任何的修改,只是数据移动到HDFS

    作者: IisAf1sh
    发表时间: 2020-05-20 11:20:35
    9398
    0
  • IDEA上运行Flink任务

    设置: 下载flink-1.9.2安装包,这里面有flink网页服务用到的一个jar,地址是:https://www-eu.apache.org/dist/flink/flink-1.9.2/flink-1.9.2-bin-scala_2.11.tgz flink-1.9.2-bin-scala_2

    作者: 程序员欣宸
    发表时间: 2022-12-10 15:41:54
    173
    0
  • IDEA上运行Flink任务

    设置: 下载flink-1.9.2安装包,这里面有flink网页服务用到的一个jar,地址是:https://www-eu.apache.org/dist/flink/flink-1.9.2/flink-1.9.2-bin-scala_2.11.tgz flink-1.9.2-bin-scala_2

    作者: 程序员欣宸
    发表时间: 2022-04-01 06:24:36
    801
    0
  • [ERROR] Flink SQL Client JAR file 'flink-sql-client*.jar'这个报错是?

     FusionInsight/client/Flink的版本[ERROR] Flink SQL Client JAR file 'flink-sql-client*.jar'这个报错是?./bin/sql-client.sh embedded[ERROR] Flink SQL Client JAR

    作者: 黄金振
    5221
    4
  • Flink入门学习笔记

    本文为初入Flink的学习笔记,是在学习过程中对Flink基础知识的整理,具体学习内容包括尚硅谷Flink大数据从入门到精通、Flink官方文档以及[白话解析] Flink的Watermark机制等多个博客。Flink是什么              Flink是一个框架和分布式

    作者: 潇湘暮雨
    发表时间: 2020-08-11 15:10:45
    7285
    0
  • 高可用Flink集群和DLI的flink版本问题

    华为云上搭建的高可用Flink集群最新版本是 flink1.18.0,jdk是21DLI山的最新flink只是 flink1.15,jdk每看到这两个有啥区别吗?DLI的flink版本为什么不和flink集群的保持一致呢?那我在本地基于flink1.18开发的程序,打包后是不是就不能提交到DLI上执行了?

    作者: yd_293942010
    39
    4
  • pyspark读写Hive案例

    写入Hive写入Hive有两种方式,创建如下python文件,例如文件名为test_hive.py使用spark-submit提交任务spark-submit --master yarn --deploy-mode client  --keytab ./user.keytab -

    作者: suwei
    1261
    1
  • flink读取kafka导入css

    flink读取kafka导入css 编辑 日期:2021-04-26 21:03浏览:1回复:02026-04-26 失效 运行环境: flink(mrs3.0.1)+kafka(mrs3.0.5)+css7.9.3 后台执行: flink run -m

    作者: 王伟康
    发表时间: 2021-04-27 01:38:26
    2051
    0
  • Flink on Yarn三部曲之三:提交Flink任务[转载]

    置;现在Flink、Yarn、HDFS都就绪了,接下来实践提交Flink任务到Yarn执行;两种Flink on YARN模式实践之前,对Flink on YARN先简单了解一下,如下图所示,Flink on Yarn在使用的时候分为两种模式,Job Mode和Session Mode:Session

    作者: 泽宇-Li
    271
    0
  • flink 读写 hudi

    请问MRS8.1.0.1 版本 flink可以读写hudi文件吗? 

    作者: yumingde
    3013
    2
  • Flink POC功能测试用例(MRS)

    com说明:l  test1:场景1样例代码l  --topic mzks:使用的topic位mzksl  /opt/fwc/flink/flinktest.jar:工程打包生成flinktest.jar上传到flink客户端所在节点任意目录/opt/fwc/flink/ 3.5.2       

    作者: 萧凡依云
    2320
    0
  • Flink原理、实战与性能优化》 —1.4 Flink基本架构

    1.4 Flink基本架构1.4.1 基本组件栈在Flink整个软件架构体系中,同样遵循着分层的架构设计理念,在降低系统耦合度的同时,也为上层用户构建Flink应用提供了丰富且友好的接口。从图1-5中可以看出整个Flink的架构体系基本上可以分为三层,由上往下依次是 API &

    作者: 华章计算机
    发表时间: 2020-02-17 13:02:21
    3230
    0