大数据共370篇 第2页
大数据，离线计算，实时计算，流处理引擎，数仓技术
排序
与 Hadoop 对比，如何看待 Spark 技术？
Hadoop 首先看一下Hadoop解决了什么问题，Hadoop就是解决了大数据（大到一台计算机无法进行存储，一台计算机无法在要求的时间内进行处理）的可靠存储和处理。HDFS，在由普通PC组成的集群上提供...
1年前
Spark 凭什么成为最火的大数据计算引擎？| 极客时间
原标题：Spark 凭什么成为最火的大数据计算引擎？| 极客时间 现在，几乎所有公司都离不开推荐、广告、搜索这 3 类业务场景，因此 Spark 也相应成了大多数互联网公司的标配： 美团在 2014 年就引...
1年前
Spark计算引擎：Spark数据处理模式详解
Spark作为大数据领域受到广泛青睐的一代框架，一方面是相比前代框架Hadoop在计算性能上有了明显的提升，另一方面则是来自于Spark在数据处理上，同时支持批处理与流处理，能够满足更多场景下的需...
1年前
最详细的雪花算法，附上详细go语言实现
前言“ 嗨，everybody，我是asong，这是我的第十二篇文章，今天给大家介绍一下雪花算法。介绍雪花算法是次要的，因为大家都太熟悉了，主要目的是推荐一下我的新系列。今天，我突发奇想，想创建...
1年前
基于python实现的电影推荐系统
摘 要 本文设计了一个个性化电影推荐系统。众所周知，现在电影资源是网络资源的重要组成部分，随着网络上电影资源的数量越来越庞大，设计电影个性化推荐系统迫在眉睫。所以本文旨在为每一个用户...
1年前
Hadoop 2.x 中的多节点集群部署
Hadoop 2.x 中的多节点群集 从我们之前的Hadoop教程系列博客中，我们学习了如何设置 Hadoop单节点集群。现在，我将展示如何设置Hadoop多节点集群。Hadoop 中的多节点集群在分布式 Hadoop ...
1年前我的面板
看一看
物联网的3大关键技术详解，你真的知道吗？
物联网是什么 物联网一词已经渗透到我们生活的方方面面。事实上，物联网技术的原理就是在计算机互联网的基础上，利用RFID、无线数据通信等技术，构建覆盖全球上千栋建筑的“物联网”。在这个网...
1年前
为什么大型工程团队要在 Kubernetes 上进行测试？59岁大妈整容成“少女”，嫁给27岁小鲜肉，现在他们过得如何？
将来，开发人员应该如何处理生产应用程序呢？是应该将本地的生产环境复制到云，还是应该直接在云环境中编写和运行所有代码，或者采用介于二者之间的某种方式？ 原文链接：https://www.signadot....
1年前
Lidar Studio点云处理与分析软件
Lidar Studio V1.3正式发布 新增功能航带平差模块：自动进行航带平差、计算安置误差，支持SBET格式的航迹文件视图模块：每个点云单独进行渲染设置（按高程渲染等）Lidar Studio V1.2正式发布 新...
1年前
买卖 DALL·E、GPT-3 提示词赚钱，结果还是要被 AI “抢饭碗”？
近来，一位借用 AI 绘画工具拿下美术大赛第一的人引起了 AI 圈和艺术圈内的广泛讨论，DALL·E 和 Midjourney 等 AI 绘画工具也一度成为热议焦点。 在多数人将重点放在“AI 生成的作品究竟算不算...
1年前
Stable Diffusion能不能训练
Stable Diffusion是一种非常有潜力的模型，可以在文本到图像的生成方面发挥重要作用。本文将介绍如何使用Dreambooth项目进行Stable Diffusion模型的训练，从数据准备到模型优化，帮助读者了解和...
1年前
区块链技术是什么？有哪些应用场景？
现在很多人多少有点把区块链技术神话了！认为区块链是一种万能的技术，无所不能！在区块链技术的定义上，美国学者梅兰妮⋅斯万在其著作《区块链：新经济蓝图及导读》定义区块链技术是一种公开透...
1年前
