"网传 GPT-4 模型架构等信息被泄露，真实性如何？会造成哪些影响？"結論還是，方向知道，但要踩多少坑不知道 XDDD

发布时间: 2023-07-16 14:01:01

1分

数据加载中

关注推特

收听电报

2

1

0

"网传 GPT-4 模型架构等信息被泄露，真实性如何？会造成哪些影响？"

結論還是，方向知道，但要踩多少坑不知道 XDDD
时政
( twitter.com )

1年前由 fox hsiao 提交

点击图片查看原图

Markdown支持

评论加载中...

您可能感兴趣的：更多

1

1

0

0

终极「揭秘」：GPT-4模型架构、训练成本、数据集信息都被扒出来了
大陆资讯
( www.jiqizhixin.com)

1年前 • 观光团 • -- 点击 0 评论

2

3

2

2

昨晚圈子被一个叫MoE 8x7B模型刷屏了，这应该是第个一个开源权重的MoE架构LLM。
在HF排行榜上这个7B模型击败了很多70B和34B的模型。之前猜测GPT-4的架构的时候很多人就觉得GPT-4用了MoEt架构。
MoE可以与使用两倍FLOPs的密集模型相媲美。例如，使用相同的数据和 FLOP，LLaMA 7B 的 MoE 版本应该与…
IT技术
( twitter.com)

11个月前 • 歸藏 • -- 点击 0 评论

3

2

1

1

【大模型物种进化图，原来BERT后代已绝种】根据论文，大模型发展主要可以分为两类，作者们将它命名为“BERT派”和“GPT派”：“BERT派”的特征是模型中有编码器架构，具体分为“编解码器”和“只有编码器”两类架构；“GPT派”则主张扔掉编码器，架构中“只有解码器”。
大陆资讯
( www.qbitai.com)

1年前 • 拉拉么 • -- 点击 0 评论

4

2

1

1

ChatGPT 摘要助手

免费Chrome 浏览器扩展程序，AI总结和处理任何网页文章内容，支持GPT 3.5、GPT-4等模型。
支持 40 种语言，一键复制结果，多模型自由切换，…
推特中文圈
( twitter.com)

1年前 • 章工GPT • -- 点击 0 评论

5

2

1

1

非常好的一个演示视频，通过可视化清晰的介绍了 LLM 的核心 Transformer 架构的原理。
包括词嵌入、自注意力机制等关键技术。对了解GPT-3等大型语言模型的内部结构很有帮助。
👇下面是文字版本：
GPT的全称及其含义
GPT是Generative Pre-trained…
IT技术
( twitter.com)

8个月前 • 歸藏 • -- 点击 • 下载视频 0 评论

00:27:13

6

2

1

1

网页版的是GPT-4模型，支持更长的tokens，能用插件，但是有25messages/3hours的限制，iOS版是GPT-4(Mobile V2)模型，调用的api，有更严格的tokens长度限制，但是没有任何messages…
IT技术
( twitter.com)

1年前 • AlexZ 🦀 • -- 点击 0 评论

7

2

1

1

从下面文章里，GPT-4的细节已经大量泄露

GPT-4架构、基础设施、训练数据集、成本、愿景和MoE
揭秘GPT-4：OpenAI在其架构方面做出的工程权衡。

英文可以参考：

下面情况具体的细节：
IT技术
( semianalysis.com)

1年前 • Jeffery Kaneda　金田達也 • -- 点击 0 评论

8

2

1

1

哈佛CS50课程节选：如何构建基于GPT-4的应用

上一节介绍了什么是GPT-4，这一节则是基于GPT-4可以构建什么样的应用，以及如何构建。

这部分课程介绍了GPT-4可以构建的各种类型的应用，包括不限于：

-……
IT技术
( twitter.com)

1年前 • 宝玉 • -- 点击 0 评论

9

2

1

1

Gemini VS GPT-4，当前两大顶级AI模型实测
大陆资讯
( wallstreetcn.com)

9个月前 • 全国花样撸管大赛冠军 • -- 点击 0 评论

0.10087 Second , Gzip Enable.本网所有言论均来自网络，不代表本网站立场。联系方式: [email protected]

©2012.11.21 bad.news All rights reserved. 社区自动运营第 -- 年零 -- 天
This site is protected by reCAPTCHA and the Google Privacy Policy and Terms of Service apply.

关注推特