MAPREDUCE服务 MRS-通过Spark Streaming作业消费Kafka数据:步骤3:上传jar包及源数据

时间:2024-08-05 16:12:35

步骤3:上传jar包及源数据

  1. 准备向Kafka发送的源数据,例如如下的“input_data.txt”文件,将该文件上传到客户端节点的“/home/data”目录下。

    ZhangSan
    LiSi
    WangwWU
    Tom
    Jemmmy
    LinDa

  2. 将编译后的jar包上传到客户端节点,例如上传到“/opt”目录。

    如果本地网络无法直接连接客户端节点上传文件,可先将jar文件或者源数据上传至OBS文件系统中,然后通过 MRS 管理控制台集群内的“文件管理”页面导入HDFS中,再通过HDFS客户端使用hdfs dfs -get命令下载到客户端节点本地。

support.huaweicloud.com/bestpractice-mrs/mrs_05_0050.html