已找到以下 10000 条记录
  • 大数据学习笔记21:MR案例——分区全排序

    文章目录 一、提出任务 二、准备工作 1、启动hadoop服务

    作者: howard2005
    发表时间: 2021-11-18 19:05:39
    803
    0
  • 大数据Flink进阶(五):Flink开发环境准备

    Flink开发环境准备 学习一门新的编程语言时,往往会从"hello world"程序开始,而接触一套新的大数据计算框架时,则一般会从WordCount案例入手,下面以大数据中最经典入门案例WordCount为例,来编写Flink代码,Flink底层源码是基于Java代码进行开发

    作者: Lansonli
    发表时间: 2023-03-19 03:54:33
    401
    0
  • 大数据必学Java基础(九十八):JDBC API总结

    JDBC API总结 一、Connection接口 作用:代表数据库连接 方法摘要 void close () 立即释放此 Connection 对象的数据库和 JDBC 资源,而不是等待它们被自动释放。 void

    作者: Lansonli
    发表时间: 2022-12-16 02:16:25
    108
    0
  • 大数据解决方案:解决T+0问题

    Server等)通常是将远程数据库的数据拉到本地,再在本地完成包括过滤在内的大部分计算,整个过程十分低效。不仅如此,这种方式还存在数据传输不稳定、不支持对象操作、可扩展性低等很多不足。 除了数据库自身的跨库查询能力,使用高级语言硬编码也可以完成跨库查询,毕竟没有什么问题不是硬编码解决不了的。

    作者: 小虚竹
    发表时间: 2022-10-25 04:49:16
    606
    0
  • 大数据必学Java基础(四十四):接口讲解

    接口讲解 一、接口声明格式 [访问修饰符] interface 接口名 [extends 父接口1,父接口2…] { 常量定义; 方法定义; } 二、案例代码 package com.lanson.test04; /** * 1.类是类,接口是接口,它们是同一层次的概念。

    作者: Lansonli
    发表时间: 2022-08-04 17:03:54
    189
    0
  • 轻量级云原生大数据平台"CloudEon"正式开源

    随着云原生技术的发展,越来越多的业务场景需要使用容器来部署和管理应用程序,而Kubernetes作为容器编排平台的事实标准,自然也受到了越来越多的关注和使用。但是如果想在Kubernetes上部署和运维大数据服务是有比较高的学习成本,需要专业的运维人员来进行管理和维护,在这种

    作者: yd_260573190
    发表时间: 2023-04-30 16:04:20
    53
    0
  • 大数据必学Java基础(九十三):JDBC完成CURD

    ​JDBC完成CURD 一、删除和修改部门信息 package com.lanson.test1; import java.sql.Connection; import java.sql.DriverManager; import java.sql.SQLException; import

    作者: Lansonli
    发表时间: 2022-12-15 07:44:23
    153
    0
  • 大数据必学Java基础(二十二):循环结构

    ​循环结构 一、while 1、语法结构 while (布尔表达式) { 循环体; } 在循环刚开始时,会计算一次“布尔表达式”的值,若条件为真,执行循环体。而对于后来每一次额外的循环,都会在开始前重新计算一次。 语句中应有使循环趋向于结束的语句,否则会出

    作者: Lansonli
    发表时间: 2022-07-19 02:06:54
    188
    0
  • 萌新带你入门大数据之Hadoop源码编译

    一、前期准备工作 1、准备一台CentOS虚拟机,虚拟机需要能够联网,采用root角色编译 2、准备以下安装包(hadoop源码、JDK8、maven、ant、protobuf),分别从各自的官网下载即可 hadoop-2.10.1-src.tar.gz jdk-8u281-linux-x64

    作者: lwq1228
    发表时间: 2021-11-17 13:51:06
    2065
    0
  • 大数据实战【千亿级数仓】阶段五

            本篇博客

    作者: 大数据梦想家
    发表时间: 2021-09-28 17:02:37
    813
    0
  • 大数据处理框架的类型、比较和选择

    oogle的MapReduce和GFS的开源实现(另一宝BigTable的开源实现是同样大名鼎鼎的HBase)。自此,大数据处理框架的历史幕正式的缓缓拉开。 一、基础 1. 大数据的定义 “大数据”一词的确切定义其实是很难给出的,因为不同的人(供应商、从业者、商业公司等)对它的

    作者: wilsonfu
    发表时间: 2018-12-22 23:43:33
    12525
    0
  • 大数据:为公共安全管理创造新模式

    3.0除了应对恶性安全威胁事件之外,大数据在公共安全领域的其它应用也有很广泛的前景,比如消防管理,纽约市消防局的FireCast 3.0数据系统就是很好的案例。纽约市消防局总部的超级计算机每天都会分析市内所有建筑物里通过传感器等渠道采集的数据,并将之与过去3年的历史数据结合,

    作者: ICT新视界
    发表时间: 2016-12-20 14:21:37
    7493
    0
  • 大数据量下的存储设计模式探索

    立专门的管理团队进行数据存储模式管理。 开发团队往往是按照业务模块来划分的,核心表被各个业务模块使用,但没有专人管理核心表。几乎伴随每一次的业务升级,核心表都会被添加字段,少则几个,多则十几个。表面上,添加的字段节省了某个业务的关联查询的时间,但其恶果是核心表的过度膨胀和关系型

    作者: 费德勒
    发表时间: 2017-04-27 14:56:40
    10154
    0
  • 依托云计算,挖据大数据背后的价值

    的产业规模预计可达7500~10000亿元人民币。目前,全球各大IT厂商正竞相进入云计算领域,以占据新一代信息技术的制高点。云计算需避免两误区在政府和业界的双重推动下,云计算已经变得炙手可热,成为新兴产业中最热门的领域。这说明云计算已经从“不知所云”到深入人心,同时也存在隐忧和

    作者: ICT新视界
    发表时间: 2016-12-16 14:43:23
    6457
    0
  • 【大数据技术基础 | 实验三】HDFS实验:部署HDFS

    一、实验目的 理解HDFS存在的原因; 理解HDFS体系架构; 理解master/slave架构; 理解为何配置文件里只需指定主服务、无需指定从服务; 理解为何需要客户端节点; 学会逐一启动HDFS和统一启动HDFS; 学会在HDFS中上传文件。 二、实验要求 要求实验结束时,已构建出以下HDFS集群:

    作者: Francek Chen
    发表时间: 2024-11-11 19:24:23
    15
    0
  • 大数据开发技术之Scala编程技术01

    Scala第一章节 章节目标 理解Scala的相关概述 掌握Scala的环境搭建 掌握Scala小案例: 做最好的自己 1. Scala简介 1.1 概述 Scala(斯嘎拉)这个名字来源于"Scalable Language(可伸缩的语言)", 它是一门基于JVM的多范式编程语言

    作者: tea_year
    发表时间: 2025-02-09 08:41:06
    0
    0
  • 江苏南通:“数字底座”构建南通新局面

    体系建设。同时,围绕南通支柱产业和战略新兴产业,在信息产业创新发展、“互联网+”特色产业科技创新基地建设、对接服务上海等方面全方位展开深度合作,推动“数字南通”建设发展。         在南

    作者: 城市云
    发表时间: 2023-04-14 15:34:41
    195
    0
  • OpenStack基础知识(一)

    了云园区网络,云广域网络,数通网络开放可编程,超融合数据中心网络,数通网络设备开放社区共五个场景。为了响应广大开发者需求,还提供了开发者交流、API 体验中心、多媒体课件、SDK工具包、开发者工具以及远程实验室共六工具,让开发者轻松开发。欢迎各位前来体验。 >>戳我了解更多<<

    作者: 不吃鱼的猫猫
    发表时间: 2022-07-11 01:59:25
    393
    0
  • 华为云城市峰会2019即将开幕!4月28日,与你不见不散

    早也是最早开始研发智能汽车的车企,一汽与华为云进行深度合作,利用华为云在全球云服务、车联网、高性能计算(HPC)、企业智能(EI)能力、数据中心、企业通信等ICT等基础设施方面的能力,走出了自己的数字化之路。2018年4月,中国一汽与华为签署战略合作协议,助力一汽实现数字化转型,

    作者: 云小宅
    发表时间: 2019-07-04 18:21:35
    7217
    0
  • 慧天卓特:2024年8月中国及周边部分亚洲国家干旱情况的监测统计分析

    出现了较为严重的干旱,华东的浙江、上海以及华中湖南等地也依然处于持续干旱中。对比7月份,本月我国北方内蒙古地区的旱情有所减轻,但西部地区出现了明显的大面积干旱。 本月初,我国北方的内蒙古、河北、山西、宁夏等地仍处于持续严重干旱中,华东的浙江、上海、安徽以及华中的湖北湖南,西南的云

    作者: 此星光明
    发表时间: 2024-09-11 17:20:55
    369
    0