spark共74篇 第11页
排序
spark性能优化（一）
本文内容说明初始化配置给rdd和dataframe带来的影响repartition的相关说明cache&persist的相关说明性能优化的说明建议以及实例配置说明 spark：2.4.0 服务器：5台（8核32G） 初始化配置项 %...
1年前
Spark流式数据处理——Spark Streaming
Spark Streaming简介 Spark Streaming是Spark核心API的一个扩展，可以实现实时数据的可拓展，高吞吐量，容错机制的实时流处理框架。 Spark Streaming 支持的数据输入源很多，例如：Kafka、 Flum...
1年前
大数据人才需求怎么样 Spark技术是怎么回事
大数据人才需求怎么样？Spark技术是怎么回事？Spark是基于内存的迭代计算框架，适用于需要多次操作特定数据集的应用场合。需要反复操作的次数越多，所需读取的数据量越大，受益越大，数据量小但...
1年前
大数据分析技术与实战之 Spark Streaming
Spark是基于内存的大数据综合处理引擎，具有优秀的作业调度机制和快速的分布式计算能力，使其能够更加高效地进行迭代计算，因此Spark能够在一定程度上实现大数据的流式处理。 随着信息技术的迅...
1年前
大数据框架Hadoop PK Spark，赢家是？
全文共2601字，预计学习时长5分钟 打开凤凰新闻，查看更多高清图片 图片来源：unsplash.com/@gferla 当下，数字宇宙正以飞快的速度追赶着物理宇宙，每两年，全球数据量就会翻一番。据估计，到20...
1年前
解读大数据应用潜力，医疗大数据的实践又有哪些？
消费者数据将在未来两到三年内导致最大竞争差异。谁能打开海量数据并有策略地加以利用，谁就是赢家。 对于公司来说，数据的重要性并不陌生。谷歌的执行主席说过这样一个事实:从文明的黎明到2003...
1年前我的面板
看一看
AI作画离线版V4.2，自动写描述、二次元TAG解析、图片视频上色功能来啦！
本周V4.2带来了非常多的功能，主要是AI自动写描述、二次元TAG解析、图片视频上色功能。 V4.2版本：2022-11-11 1、加入DeepDanbooru解析功能，参数设置下方点击对应按钮，导入图片即可解析背后的...
1年前
高效低成本构建元宇宙场景：NeRF神经辐射场
文/VR陀螺冉启行 NeRF 技术可以加速元宇宙的发展，为 VR 和 AR 硬件设备提供独特的三维内容。 在 VR 游戏和虚拟世界（如《地平线山之呼唤》）中展示的3D 图形通常由数百万个相互连接的多边形组...
1年前
ChatGPT之后 标贝科技关于如何为预训练大语言模型提供终身学习语料的探索
近日，在火爆全球的AI聊天机器人ChatGPT上线四个月后，OpenAI又发布了ChatGPT-4。从OpenAI的官网可以了解到，与上一个版本相比，GPT-4 拥有了更广的知识面和更强的解决问题能力，在创意、视觉输...
1年前
全球50%家庭知道ChatGPT 德银：若到100% AI股将涨成什么样？金卡戴珊海滩大片！穿连体泳衣秀身材，极致臀腰比，湿发太迷人
财联社6月11日讯（编辑 潇湘）本周，标普500指数从10月低点以来的反弹幅度终于超过了20%，正式迈入了技术性牛市的区域。截至本周收盘，标普500指数今年以来已累计上涨了12%。 尽管目前不少大型...
1年前
爆肝整理！AI绘画关键词分享（包括关键词结构与具体案例）
一、常用绘画AI网站https://beta.dreamstudio.aihttps://huggingface.co/spaces/stabilityai/stable-diffusionhttps://huggingface.co/spaces/BAAI/bilingual_stable_diffusion(支持中英双语关...
1年前
对话360集团CEO创始人周鸿祎：做大语言模型比做光刻机简单多了“肯德基吸管”事件遭群嘲，把当代社会的又一病态现象暴露无遗
本文是5月31日品玩举办的“模型思辨——国内大模型生态研讨会”上，品玩创始人、CEO骆轶航与360集团创始人、CEO周鸿祎的对话实录，经整理编辑发布。访谈人：骆轶航受访人：周鸿祎 大模型确实要...
1年前
