llama 8B模型靠15TB的data量效果超过GPT3.5，可以宣布端侧AI的时代毫无悬念的要到来了明显比我想象的要快得多不由得想起了那句话，模型的行为可能并非由架构，超参数或者优化器决定，更多取决于数据集，其他一切不过是将计算资源高效用于逼近数据集的一种手段罢了

发布时间: 2024-05-02 14:50:25

1分

数据加载中

关注推特

收听电报

llama 8B模型靠15TB的data量效果超过GPT3.5，可以宣布端侧AI的时代毫无悬念的要到来了
明显比我想象的要快得多
不由得想起了那句话，模型的行为可能并非由架构，超参数或者优化器决定，更多取决于数据集，其他一切不过是将计算资源高效用于逼近数据集的一种手段罢了
IT技术
( twitter.com )

7个月前由 fin 提交

点击图片查看原图

Markdown支持

评论加载中...

您可能感兴趣的：更多

30分钟完成 Llama3 8B 的微调：
Llama 3的微调成本已经非常低，我用LLaMA-Factory 这个项目在Colab 上用一张 T4 的卡微调了 Llama-3 中文对话模型，只需要30 多分钟就可以微调完。附上完整可以运行的 Colab地址：
时政
( colab.research.google.com)

7个月前 • Leo Xiang • -- 点击 0 评论

据报道，Meta 准备推出自己的代码生成人工智能模型，名为 Code LLaMa，作为 OpenAI、谷歌和其他公司专有软件的开源替代品。据称，新模型可与 OpenAI 的 Codex 模型相媲美，并建立在 Meta 最近发布的 LLaMa 2 之上，LLaMa 2 是一种能够理解和生成会话文本的大型语言模型。

IT技术
( the-decoder.com)

1年前 • 宝玉 • -- 点击 0 评论

Meta AI 发布 Llama 3.2 多模态AI模型
性能与GPT4o-mini 相当能够在边缘设备上高效运行
Llama 3.2包括适用于边缘和移动设备的小型和中型视觉大语言模型（11B 和 90B）以及轻量文本模型（1B 和 3B）。
LLaMA 3.2支持同时处理文本、图像和视频，能够理解并生成跨媒体内容。
时政
( twitter.com)

2个月前 • 小互 • -- 点击 • 下载视频 0 评论

00:00:38

Meta推出用于支持聊天机器人的最新人工智能模型Llama 3
大陆资讯
( www.nbd.com.cn)

7个月前 • 猪八戒 • -- 点击 0 评论

闪电预览

如果想体验刚发布的 Llama 3.1 405B，这几个地方可以免费体验：官网：
Huggingface chat：
Groq（暂时不支持 405B，但是支持Llama3.1 8B和70B）：
IT技术
( twitter.com)

4个月前 • 宝玉 • -- 点击 0 评论

推荐张俊林写的这篇LLama 3.1技术报告的分析
链接：
以下内容为转发其微博内容：
***
LLama 3 405B模型效果已经赶上目前最好的闭源模型比如GPT 4o和Claude 3.5，这算是开源届的大事，技术报告接近100页，信息很丰富，粗略看了一下，很有启发。这里就LLaMA
IT技术
( www.weibo.com)

4个月前 • 宝玉 • -- 点击 0 评论

NotebookLlama: 来自 Meta AI 的开源版 NotebookLM, 将 PDF 文档转换为有声播客, 实现从文本到音频的完整转换链路。
工作流程分为四个主要步骤:
- 步骤1: 使用 Llama-3.2-1B-Instruct 预处理 PDF 文件
- 步骤2: 用 Llama-3.1-70B-Instruct 生成播客文稿
- 步骤3: 使用 Llama-3.1-8B-Instruct
时政
( twitter.com)

1个月前 • meng shao • -- 点击 0 评论

Google刚刚发布了开源大语言模型 Gemma，这是对标 LLAMA 2 的开源大语言模型。
Gemma是一系列基于创建Gemini模型所使用的相同技术与研究的、在其领域内技术领先的轻量级开源模型。…
IT技术
( twitter.com)

9个月前 • 宝玉 • -- 点击 0 评论

又写了一篇万字文章，Meta 这篇文论太顶了。

LLaMA 2：免费可商用的开源大语言模型

IT技术
( mp.weixin.qq.com)

1年前 • lencx • -- 点击 0 评论

闪电预览

IT技术

时政

IT技术

时政

Meta推出用于支持聊天机器人的最新人工智能模型Llama 3 大陆资讯 ( www.nbd.com.cn)

大陆资讯

如果想体验刚发布的 Llama 3.1 405B，这几个地方可以免费体验： 官网： Huggingface chat： Groq（暂时不支持 405B，但是支持Llama3.1 8B和70B）： IT技术 ( twitter.com)

IT技术

IT技术

时政

Google刚刚发布了开源大语言模型 Gemma，这是对标 LLAMA 2 的开源大语言模型。 Gemma是一系列基于创建Gemini模型所使用的相同技术与研究的、在其领域内技术领先的轻量级开源模型。… IT技术 ( twitter.com)

IT技术

又写了一篇万字文章，Meta 这篇文论太顶了。 LLaMA 2：免费可商用的开源大语言模型 IT技术 ( mp.weixin.qq.com)

IT技术

创建一个新帐户

登录

Meta推出用于支持聊天机器人的最新人工智能模型Llama 3
大陆资讯
( www.nbd.com.cn)

如果想体验刚发布的 Llama 3.1 405B，这几个地方可以免费体验：官网：
Huggingface chat：
Groq（暂时不支持 405B，但是支持Llama3.1 8B和70B）：
IT技术
( twitter.com)

Google刚刚发布了开源大语言模型 Gemma，这是对标 LLAMA 2 的开源大语言模型。
Gemma是一系列基于创建Gemini模型所使用的相同技术与研究的、在其领域内技术领先的轻量级开源模型。…
IT技术
( twitter.com)

又写了一篇万字文章，Meta 这篇文论太顶了。

LLaMA 2：免费可商用的开源大语言模型

IT技术
( mp.weixin.qq.com)