超越ImageNet预训练，Meta AI提出SplitMask，小数据集也能自监督预训练
编辑：陈萍 大规模数据集对自监督预训练是必要的吗？Meta AI 认为，小数据集也能自监督预训练，效果还不错。 目前，计算机视觉神经网络被大量参数化：它们通常有数千万或数亿个参数，这是它们成...
5300亿参数的「威震天-图灵」，微软、英伟达合力造出超大语言模型
在微软和英伟达的共同努力下， Turing NLG 17B 和 Megatron-LM 模型的继承者诞生了：5300 亿参数，天生强大，它的名字叫做「Megatron-Turing」。机器之心报道，编辑：蛋酱、小舟。 刚刚，微软和...
加速3.47倍！火山引擎助力AIGC突破性能瓶颈法国第一夫人有多美？看看她与9岁马克龙跳舞的照片，你就知道了
AIGC（AI-Generated Content 人工智能生成内容）一经推出火爆全网，各种画风和产品形态频频出现且快速演进。以Stable Diffusion模型为例，一次完整的预训练大约需要在128张A100计算卡上运行25天...
AI21 Labs构建1780亿参数大语言模型，耗资或达2亿美元，被认为是OpenAI最有力竞争者
目前，大量资金正在流入语言模型开发领域。语言模型是一种能够理解和生成文本的 AI 系统。近几年，该类模型是各大公司的一个关注焦点。像知名 AI 公司 OpenAI 研发的大语言模型 GPT-3 正被成千...
硬件预算降至1/46！低成本上手AIGC千亿大模型，一行代码自动并行那个高考故意考0分，写8000字抨击高考制度的蒋多多，现在怎样？
明敏 发自 凹非寺 量子位 | 公众号 QbitAI 从AI画画到NLP大模型，AIGC的落地成本被一次性打下来了！ 话不多说，直接看结果：Stable Diffusion 2.0训练/微调/推理，显存消耗最多可节省5.6倍，使...
AI画画模型成本被打下来了！预训练成本降85%，单张RTX 2070可微调明明长相“普通”，却被粉丝吹上天，这几位男星脸不红么？
明敏 发自 凹非寺 量子位 | 公众号 QbitAI 火爆全球的Stable Diffusion，预训练和微调成本，正式被打下来了！ 现在，预训练的速度被提升到6.5倍，成本直降85%； 微调只需RTX 2070/3050即可搞定...
