大数据共370篇 第8页
大数据，离线计算，实时计算，流处理引擎，数仓技术
排序
大数据之–flink原理
一、flink特点 事件驱动：有状态应用，从事件中提取数据，触发计算，状态更新等 被动触发 流与批的世界观：批处理：有界、持久、大量 离线统计流处理：无界、实时 实时统计spark :一切都是批次 ...
1年前
谷歌承认Kubernetes太复杂，于是开启了容器界的Autopilot
试问上手Kubernetes有多难？有时候真得会让你怀疑人生。 过去几年，就连互联网大厂的技术砖家也得细细捋。 “尽管我们过去几年看到越来越多的企业开始拥抱Kubernetes，但是随后就陷入了困境。”...
1年前
Spark性能优化实战手册
三万字长文 | Spark性能优化实战手册 本文分为四个部分，基本涵盖了所有Spark优化的点，面试和实际工作中必备。 《Spark性能优化：开发调优篇》《Spark性能优化：资源调优篇》《Spark性能优化：...
1年前
史上最详细、最全面的Hadoop环境搭建
前言 这是一篇入门文章，Hadoop的学习方法很多，网上也有很多学习路线图。本文的思路是：以安装部署Apache Hadoop2.x版本为主线，来介绍Hadoop2.x的架构组成、各模块协同工作原理、技术细节。安...
1年前
CNCF公布中国云原生调查报告：49%使用容器技术，Kubernetes 应用率达 72%
近日，云原生计算基金会（Cloud Native Computing Foundation，CNCF）发布了第三次中国云原生调查报告（2019年）。此次调查基于 300 名受访对象，其中 97％ 来自亚洲（主要是中国）。报告显示49...
1年前
解决两大难题，TDengine 助力亿咖通打造自动驾驶技术典范
小 T 导读：在安全解决方案 SuperCloud 中，亿咖通面临着磁盘占用量大、车辆最新状态实时查询难以实现两个核心问题。最终，他们选择了让 TDengine 承担数据中台的重要角色，负责车辆实时数据的...
1年前我的面板
看一看
WordPress使用jsDelivr+Github实现免费全球CDN加速
简介相信很多开发者对jsDelivr和GitHub并不陌生，对于能把静态资源通过jsDelivr对其实现免费的CDN加速场景，有很多WordPress站长可能不知道如何对其进行使用，那么今天辉哥就教大家WordPress使...
1年前
大数据开发 | SPARK ON YARN运行模式
原标题：大数据开发 | SPARK ON YARN运行模式 面试过程中经常被问到spark on yarn的运行模式及区别，接下来我们从多方面展开阐述。 一、YARN介绍 Yarn 的全称是 Yet Anther Resource Negotiator...
1年前
ISOBUS标准通讯协议在智慧农业发展中的重要作用
农民、驾驶员、农机具供应商、种肥供应商和服务供应商之间的沟通效率对于农业生产力来说至关重要。不同品牌、型号的农机具和车载智能软硬件之间可以用“同一种语言”进行通信，去除冗余的操作步...
1年前
机器学习之模型参数调节篇
前言 同特征工程一样，模型参数调节也是一项非常繁琐但又非常重要的工作。当建模进入到调参阶段，意味着工作也即将进入尾声。通常我们会运用Scikit-Learn来构建传统机器学习模型，那么这里我就...
1年前
物联网三大关键技术
物联网三大关键技术 针对互联网的特性，总结了物联网应用中的三项关键技术： 1、传感器技术：这也是计算机应用中的关键技术。到目前为止，绝大部分计算机处理的都是数字信号。自从有计算机以来...
1年前
比GPT-3参数少效果还优秀，不愧是Meta AI的大语言模型OPT-175B
要说大语言模型，GPT-3绝对算得上重量级的翘楚佼佼者。锋芒一出，无AI出其右。这货不仅大，能力强，而且很迷，由于种种原因，太过扭捏不够开放，机智客觉得GPT这货（其实不仅是3了），可谓创造...
1年前
