Hadoop大数据平台搭建(超详细步骤)

1、在原来虚拟机的基础上再克隆两台虚拟机 (1)右键点击虚拟机,点击管理,点击克隆,此步骤重复两次(2)检查克隆机的ip地址是否与原虚拟机不同,若不同则要修改,我这里在克隆的时候就自动变化了ip地址,故不需要修改2、修改机器名 (1)在...

   数栈君  发表于2023-07-18 11:55  196  0

《Java SE》网络编程基础知识归纳

一、网络基本介绍1、什么是网络通信? 两台设备之间通过网络实现数据传输,将数据通过网络从一台设备传輸到另一台设备。在java.net包下提供了一系列的类或接口,供程序员使用,完成网络通信。2、网络 概念: 两台或多台设备通过一定物理...

   数栈君  发表于2023-07-18 11:55  141  0

Flink cdc 介绍及使用 FlinkCDC读取mysql 及 jdbc 连接参数配置

1. Flink cdc 介绍CDC 的全称是 Change Data Capture ,在广义的概念上,只要是能捕获数据变更的技术,我们都可以称之为 CDC。目前通常描述的 CDC 技术主要面向数据库的变更,是一种用于捕获数据库中数据变更的技术。CDC 技术...

   数栈君  发表于2023-07-18 11:54  1294  0

一文读懂数据要素

最近数据要素这个词不断出现在大数据圈里也同时出现在公众视野。各个研究机构,政府部门都在重点关注数据要素及其作用及发展,并提供各类政策性的指引,那么什么是数据要素呢? 本文将综合目前主流的研究进行归纳整理,从数据要素的定义、政策、发展趋势、困难挑战以及地方...

   数栈君  发表于2023-07-18 11:54  239  0

failed to authenticate user [elastic] 问题解决

1. 问题elasticsearch 突然出现问题Authentication of [elastic] was terminated by realm [reserved] -failed to authenticate user [elastic]2. 网...

   数栈君  发表于2023-07-18 11:53  634  0

Java 17 VS Java 8: 新旧对决,这些Java 17新特性你不容错过

一、Java 17与Java 8的对比Java 17与Java 8是Java版本中的两个重要里程碑。Java 8是Java版本中的一次重大更新,于2014年发布,引入了很多新的特性和功能,包括Lambda表达式、Stream API、函数式接口等。Java 1...

   数栈君  发表于2023-07-17 14:31  338  0

基于Hadoop的豆瓣电影的数据抓取、数据清洗、大数据分析

本研究旨在利用Python的网络爬虫技术对豆瓣电影网站进行数据抓取,并通过合理的数据分析和清洗,将非结构化的数据转化为结构化的数据,以便于后续的大数据分析。具体而言,我们通过分析豆瓣网站的网页结构,设计出规则来获取电影数据的JSON数据包,并采用正态分布的延时...

   数栈君  发表于2023-07-17 14:30  330  0

数据仓库性能测试方法论与工具集

数据仓库 v.s. 传统数据库随着 5G 网络和 IoT 技术的兴起,以及越来越复杂多变的企业经营环境,都在促使着包括工业制造、能源、交通、教育和医疗在内的传统行业纷纷开启了数字化转型之路。由于长尾效应的存在,千行百业的数字化转型过程中必然会释放出比以往任何时...

   数栈君  发表于2023-07-17 14:29  191  0

Spark入门(一篇就够了)

Spark 是一种快速、通用、可扩展的大数据分析引擎,2009 年诞生于加州大 学伯克利分校 AMPLab,2010 年开源,2013 年 6 月成为 Apache 孵化项目,2014 年 2 月成为 Apache 顶级项目。目前,Spark 生态系统已经发展...

   数栈君  发表于2023-07-17 14:29  156  0

数据迁移工具,用这8种就够了

最近有些小伙伴问我,ETL数据迁移工具该用哪些。ETL(是Extract-Transform-Load的缩写,即数据抽取、转换、装载的过程),对于企业应用来说,我们经常会遇到各种数据的处理、转换、迁移的场景。今天特地给大家汇总了一些目前市面上比较常用的ETL数...

   数栈君  发表于2023-07-17 14:28  201  0
1720条数据,每页显示10条
社区公告
  • 大数据领域最专业的产品&技术交流社区,专注于探讨与分享大数据领域有趣又火热的信息,专业又专注的数据人园地

最新活动更多
微信扫码获取数字化转型资料
钉钉扫码加入技术交流群