spark共74篇 第2页
排序
大数据开发-Spark调优常用手段
Spark调优 spark调优常见手段，在生产中常常会遇到各种各样的问题，有事前原因，有事中原因，也有不规范原因，spark调优总结下来可以从下面几个点来调优。 1. 分配更多的资源 分配更多的资源： ...
1年前
spark知识点总结
说明：这篇文章是我的一位师兄写的，放上来只为了自己学习时参考，谢谢！ 一、性能调优 1、分配资源 a、在我们在生产环境中，提交spark作业时，用的spark-submit shell脚本，里面调整对应的参数...
1年前
Spark性能优化实战手册
三万字长文 | Spark性能优化实战手册 本文分为四个部分，基本涵盖了所有Spark优化的点，面试和实际工作中必备。 《Spark性能优化：开发调优篇》《Spark性能优化：资源调优篇》《Spark性能优化：...
1年前
解读大数据应用潜力，医疗大数据的实践又有哪些？
消费者数据将在未来两到三年内导致最大竞争差异。谁能打开海量数据并有策略地加以利用，谁就是赢家。 对于公司来说，数据的重要性并不陌生。谷歌的执行主席说过这样一个事实:从文明的黎明到2003...
1年前
Hadoop + Spark 完全分布式学习环境搭建（Docker版）
计算机中所有程序都要寄托一个环境运行，环境可以理解为一个程序运行所需要的条件的集合；如果只是为了写一个Java程序，它是单进程的，那么我们配置jdk、jre就可以了；如果写一个网站，有前后端...
1年前
7个简单的Java性能调优技巧
大多数开发人员都认为性能优化是一个复杂的主题，需要大量的经验和知识。优化应用程序以获得最佳性能并非易事。有几个易于遵循的建议和最佳实践可帮助你创建性能良好的应用程序，这些建议中的大...
1年前我的面板
看一看
问道山城｜ChatGPT走向智能汽车：人工智能掀起新一轮产业革命陈小芸身材有多好？因“太丰满”无缘国家游泳队，如今又美又欲
21世纪经济报道记者 杜巧梅 重庆报道 “ChatGPT的出现标志着人工智能进行到中级水平，标志着新一轮产业革命的开始。”6月9日，麦格纳亚洲区市场与传播总监于洪波在2023中国汽车重庆论坛上表示。...
1年前
复旦团队发布国内首个类 ChatGPT 模型 MOSS，将为国内大语言模型的探索和应用带来哪些影响?
复旦放大招：国内首个类ChatGPT来了，名字叫“MOSS”！邀公众参与内测 2023年开年，ChatGPT迅速火遍全球，短短两个月时间月活突破一亿，成为被载入史册的应用之一。 ChatGPT的大火引发了全球科...
1年前
京东：Flink SQL 优化实战
本文作者为京东算法服务部的张颖和段学浩，并由 Apache Hive PMC，阿里巴巴技术专家李锐帮忙校对。主要内容为： 1.背景 2.Flink SQL 的优化3.总结一、背景 目前，京东搜索推荐的数据处理流程如...
1年前
微美全息开发基于图像、点云融合的三维重建算法系统，塑造真实数字世界
随着计算机视觉和空间信息技术的不断发展，三维场景重建是获取空间信息的重要途径。三维场景重建所涉及的领域有计算机科学、数据融合、图像处理等多个学科，且多学科之间相互交叉。目前，三维场...
1年前Kubernetes Pod DNS 解析优化
引言 群脉 SRE 运维 Kubernetes 集群时发现在高并发的情况下，业务中的网络请求（API 调用）会有大量 DNS 解析失败的情况出现，比如 PHP 业务（使用的 cURL）会报 Resolving timed out after xx...
1年前
什么是物联网开发？物联网开发关键技术有哪些？
物联网开发是指在实现物联网（IoT）应用场景时所需要的技术开发。物联网是指通过互联网将一切物品互相连接起来的网络。物联网开发涵盖了物联网硬件开发、传输协议开发、数据存储和处理、应用开...
1年前
