hadoop共16篇 第2页
排序
零基础入门hadoop大数据三—linux基础环境配置
~~~~~~~~~~~~~~~~~~~~~~~~~更新~~~~~~~~~~~~~~~~~~~~~~~~~~~本专题教程最终会以搭建4台机器（节点）的集群为教学目的，但会经历单机版（只有一台机器）、伪分布式（还是只有一台机器）、完全分...
1年前
linux下Hadoop安装与环境配置
注：本文采用的Linux环境为deepin 15.11系统（是由武汉深之度科技有限公司开发的颜值极高的Linux发行版），以下命令经测试Ubuntu18.04版本同样适用。linux安装可采用虚拟机安装、单系统安装、双...
1年前
SPARK+HADOOP大数据实验环境配置
最近在上大数据实验的，整理一下配置环境的过程。本文主要包括所需安装包，通用配置、hadoop配置和spark配置。一.实验环境:使用虚拟机软件：VMware Workstation Pro操作系统：Ubuntu 18.04 (mas...
1年前
史上最详细、最全面的Hadoop环境搭建
前言 这是一篇入门文章，Hadoop的学习方法很多，网上也有很多学习路线图。本文的思路是：以安装部署Apache Hadoop2.x版本为主线，来介绍Hadoop2.x的架构组成、各模块协同工作原理、技术细节。安...
1年前
B站基于缓存优化 PRESTO 集群查询性能
导读本次分享主题为 B 站 Presto 集群查询性能的优化，首先会简单介绍 Presto以及 B 站内部 Presto 集群的架构。接下来讲解针对 Presto 做的改造，主要是 Presto 搭配 Alluxio 和 Presto 搭配 A...
1年前
什么是瞬态集群？解读火山引擎EMR Stateless 的创新理念以及应用
作者 | 火山引擎EMR团队 众所周知，基于 Hadoop 的 EMR 体系发展到现在，经历了很多个阶段。从基于 IDC 机房通过 CDH 去部署的 1. 0 阶段，演进到在公有云上面按照存算分离的办法去进行的 2. 0 ...
1年前我的面板
看一看
Python推荐算法学习1
1.闵可夫斯基距离：计算用户相似度 闵可夫斯基距离可以概括曼哈顿距离与欧几里得距离。 其中r越大，单个维度差值大小会对整体产生更大的影响。这个很好理解，假设当r=2时一个正方形对角线长度，...
1年前
报名 | 联邦学习进阶最后一课：联邦学习推荐算法及其应用
3 月 24 日，机器之心联合微众银行开设的公开课《联邦学习 FATE 入门与应用实战》 第五讲结课，微众银行人工智能部系统架构师曾纪策为大家介绍了 FATE 的整体架构、系统关键数据流以及如何实践...
1年前
Kubernetes入门到进阶实战，系统性掌握K8s生产实践
Kubernetes入门到进阶实战，系统性掌握K8s生产实践 通常web应用获取用户客户端的真实ip一个很常见的需求，例如将用户真实ip取到之后对用户做白名单访问限制、将用户ip记录到数据库日志中对用户...
1年前
unityvr开发教程（unity ar ui）精通篇-Unity AR和VR开发
Unity是一个支持AR（增强现实）和VR（虚拟现实）开发的平台，可以创建交互式的增强现实和虚拟现实应用程序。在Unity中，AR和VR的开发都涉及到三个核心方面：视觉呈现、用户输入和场景管理。1.视...
1年前
Stable Diffusion 关键词tag语法教程
Stable Diffusion 关键词tag语法教程 AI绘图在线体验 二次元绘图 在线体验地址:http://acg.aiartwork.online/模型包括：NovelAI，NovelAI的模型训练使用了数千个网站的数十亿张图片，包括 Pixiv...
1年前
Three.js系列: 在元宇宙看电影，享受 VR 视觉盛宴
本文 gihtub 地址: https://github.com/hua1995116/Fly-Three.js 最近元宇宙的概念很火，并且受到疫情的影响，我们的出行总是受限，电影院也总是关门，但是在家里又没有看大片的氛围，这个时候...
1年前
