hadoop共16篇
安装 Hadoop:设置单节点 Hadoop 集群-卡咪卡咪哈-一个博客

安装 Hadoop:设置单节点 Hadoop 集群

安装 Hadoop:设置单节点 Hadoop 集群 你一定对Hadoop,HDFS及其架构有一个理论概念。 但是要获得Hadoop认证,您需要良好的实践知识。我希望你会喜欢我们之前关于HDFS架构的博客,现在我将...
kmhmha的头像-卡咪卡咪哈-一个博客kmhmha1年前
01887
SPARK+HADOOP大数据实验环境配置-卡咪卡咪哈-一个博客

SPARK+HADOOP大数据实验环境配置

最近在上大数据实验的,整理一下配置环境的过程。本文主要包括所需安装包,通用配置、hadoop配置和spark配置。一.实验环境:使用虚拟机软件:VMware Workstation Pro操作系统:Ubuntu 18.04 (mas...
虾画怪谈的头像-卡咪卡咪哈-一个博客虾画怪谈1年前
01235
Hadoop系列4--HDFS集群搭建实战之HDFS系统部署-卡咪卡咪哈-一个博客

Hadoop系列4–HDFS集群搭建实战之HDFS系统部署

2.2 HDFS系统部署2.2.1 HDFS集群简介一个典型的HDFS集群通常由一个NameNode节点,一个Secondary NameNode节点,和若干个DataNode节点组成。本集群搭建案例,以5个节点为例进行搭建,节点部署规...
虾画怪谈的头像-卡咪卡咪哈-一个博客虾画怪谈1年前
09913
史上最详细、最全面的Hadoop环境搭建-卡咪卡咪哈-一个博客

史上最详细、最全面的Hadoop环境搭建

前言 这是一篇入门文章,Hadoop的学习方法很多,网上也有很多学习路线图。本文的思路是:以安装部署Apache Hadoop2.x版本为主线,来介绍Hadoop2.x的架构组成、各模块协同工作原理、技术细节。安...
虾画怪谈的头像-卡咪卡咪哈-一个博客虾画怪谈1年前
09614
Hadoop整合分布式文件系统上数据,保证分析和处理数据高效?-卡咪卡咪哈-一个博客

Hadoop整合分布式文件系统上数据,保证分析和处理数据高效?

 谈到对Hadoop分布式文件系统(HDFS)数据整合与分析处理,首先要说到的就是存储模式了:(一)HDFS的存储模式不同于关系型或文档型数据库,它没有索引,由于索引的目的是方便随机读写,每次读...
虾画怪谈的头像-卡咪卡咪哈-一个博客虾画怪谈1年前
08915
零基础入门hadoop大数据三—linux基础环境配置-卡咪卡咪哈-一个博客

零基础入门hadoop大数据三—linux基础环境配置

~~~~~~~~~~~~~~~~~~~~~~~~~更新~~~~~~~~~~~~~~~~~~~~~~~~~~~本专题教程最终会以搭建4台机器(节点)的集群为教学目的,但会经历单机版(只有一台机器)、伪分布式(还是只有一台机器)、完全分...
虾画怪谈的头像-卡咪卡咪哈-一个博客虾画怪谈1年前
0887