大数据共370篇 第58页
大数据,离线计算,实时计算,流处理引擎,数仓技术
Hadoop入门教程之HDFS架构-卡咪卡咪哈-一个博客

Hadoop入门教程之HDFS架构

为什么要用Hadoop? 1.源码开源 2.社区活跃,参与者很多 3.涉及到分布式存储和计算的方方面面: Flume进行数据采集 Spark/MR/Hive等进行数据处理 HDFS/HBase进行数据存储 4.已经得到企业界的验...
虾画怪谈的头像-卡咪卡咪哈-一个博客虾画怪谈2年前
0775
为什么大型工程团队要在 Kubernetes 上进行测试?-卡咪卡咪哈-一个博客

为什么大型工程团队要在 Kubernetes 上进行测试?

原标题:为什么大型工程团队要在 Kubernetes 上进行测试? 将来,开发人员应该如何处理生产应用程序呢?是应该将本地的生产环境复制到云,还是应该直接在云环境中编写和运行所有代码,或者采用...
虾画怪谈的头像-卡咪卡咪哈-一个博客虾画怪谈2年前
0455
超详细,Windows系统搭建Flink官方练习环境-卡咪卡咪哈-一个博客

超详细,Windows系统搭建Flink官方练习环境

如何快速的投入到Flink的学习当中,很多人在搭建环境过程中浪费了太多的时间。一套一劳永逸的本机Flink开发环境可以让我们快速的投入到Flink的学习中去,将精力用在Flink的原理,实战。这也对于...
虾画怪谈的头像-卡咪卡咪哈-一个博客虾画怪谈2年前
01065
通俗易懂的快速排序算法-go语言实现-卡咪卡咪哈-一个博客

通俗易懂的快速排序算法-go语言实现

基本原理 核心思想 每次排序都会选一个基准数,小于基准数的放在左子序列,大于等于基准数的放在右子序列。 原始序列:{13, 15, 8, 54, 23} step1:随机选一个基准数15,则其左子序列{13, 8},...
虾画怪谈的头像-卡咪卡咪哈-一个博客虾画怪谈2年前
0845
小伙!Kubernetes 部署如此简单,你看完全明白了-卡咪卡咪哈-一个博客

小伙!Kubernetes 部署如此简单,你看完全明白了

将项目迁移到k8s平台是怎样实现的?制作镜像控制器管理PodPod数据持久化暴露应用对外发布应用日志/监控 1、制作镜像分为三步第一基础镜像,是基于哪个操作系统,比如Centos7或者其他的第二步中间...
虾画怪谈的头像-卡咪卡咪哈-一个博客虾画怪谈2年前
0675
Hive数据的导入与导出-卡咪卡咪哈-一个博客

Hive数据的导入与导出

首先开启Hadoop服务,然后开启Hive服务: [wzq@hadoop102 hive-3.1.2]$ myhadoop.sh start [wzq@hadoop102 hive-3.1.2]$ hiveservices.sh start [wzq@hadoop102 hive-3.1.2]$ hive hive (defaul...
虾画怪谈的头像-卡咪卡咪哈-一个博客虾画怪谈2年前
0615