flink共63篇 第10页
Flink架构详解-卡咪卡咪哈-一个博客

Flink架构详解

Flink 是一个分布式系统,需要有效分配和管理计算资源才能执行流应用程序。它集成了所有常见的集群资源管理器,例如Hadoop YARN,但也可以设置作为独立集群甚至库运行。 本节概述了 Flink 架构...
虾画怪谈的头像-卡咪卡咪哈-一个博客虾画怪谈1年前
04315
Flink详解系列(一)--flink架构-卡咪卡咪哈-一个博客

Flink详解系列(一)–flink架构

近段时间,由于公司项目的相关需求,需要对Flink做详细的梳理,我把学习过程整理成Flink详解系列的10篇左右的总结,供大家参考。 大数据计算引擎的发展 近年来随着大数据的发展,涌现出了一大批...
虾画怪谈的头像-卡咪卡咪哈-一个博客虾画怪谈1年前
0528
大数据之--flink原理-卡咪卡咪哈-一个博客

大数据之–flink原理

一、flink特点 事件驱动:有状态应用,从事件中提取数据,触发计算,状态更新等 被动触发 流与批的世界观:批处理:有界、持久、大量 离线统计流处理:无界、实时 实时统计spark :一切都是批次 ...
虾画怪谈的头像-卡咪卡咪哈-一个博客虾画怪谈1年前
027414
看不懂你打我,最全面的Flink架构-卡咪卡咪哈-一个博客

看不懂你打我,最全面的Flink架构

Flink由四部分组成JobManager,作业管理器TaskManager,任务管理器Resource Manager,资源管理器Dispacher,分发器一、JobManager(作业管理器) 作用:控制一个应用程序执行的主进程,也就是说...
虾画怪谈的头像-卡咪卡咪哈-一个博客虾画怪谈1年前
01208
Flink简介及任务调度原理与资源分配-卡咪卡咪哈-一个博客

Flink简介及任务调度原理与资源分配

本课目标安装Flink集群 理解Flink的基本原理 掌握Flink的编程模型 掌握Flink的资源管理 广告 点击链接加入群聊【大数据开发学习分享群】 Flink简介Apache Flink 是一个分布式处理引擎框架,用于...
虾画怪谈的头像-卡咪卡咪哈-一个博客虾画怪谈1年前
07014
Flink(一)-基本概念-卡咪卡咪哈-一个博客

Flink(一)-基本概念

前言:前段时间因为项目需求,需要开发一个实时采集分析日志的任务,最后选择的计算框架是Flink。项目完成后,基本上就没再接触。但总觉得既然用过了,不了解,不清楚,日后又需要还得重新看,...
虾画怪谈的头像-卡咪卡咪哈-一个博客虾画怪谈1年前
08313