个人快速评测大模型的3个提问：编码：不使用搜索和工具，设计并使用Python实现流式的JSON解码器，只能使用标准库，代码结构良好。指令遵循：使用中文以及JSON 格式输出中国城市和主要景点的对应关系，城市为key，景点为列表。输出五个城市，第一个城市一个景点，以此类推。…

发布时间: 2024-04-19 23:40:28

1分

数据加载中

关注推特

收听电报

2

1

0

个人快速评测大模型的3个提问：
编码：不使用搜索和工具，设计并使用Python实现流式的JSON解码器，只能使用标准库，代码结构良好。
指令遵循：使用中文以及JSON 格式输出中国城市和主要景点的对应关系，城市为key，景点为列表。输出五个城市，第一个城市一个景点，以此类推。…
时政
( twitter.com )

7个月前由九原客提交

个人快速评测大模型的3个提问：

编码：不使用搜索和工具，设计并使用Python实现流式的JSON解码器，只能使用标准库，代码结构良好。

指令遵循：使用中文以及JSON 格式输出中国城市和主要景点的对应关系，城市为key，景点为列表。输出五个城市，第一个城市一个景点，以此类推。

逻辑推理：不使用搜索和工具，使用万有引力定律反推出开普勒三定律，给出完整严谨的证明过程。

模型效果：
kimi：0、0、0
GPT4: 1、1、0.5 ，最后一个问题有少量省略。
llama3: 1、1、0

Markdown支持

评论加载中...

您可能感兴趣的：更多

1

2

1

1

快速测试了chrome 内置大模型的总结和翻译能力，基本没太大问题，而且速度确实快。应对日常的翻译、总结工作够用了。期待大家更详细的测试。
时政
( twitter.com)

5个月前 • Leo Xiang • -- 点击 0 评论

2

2

1

1

这个鬼东西真厉害
速度真快哈哈哈哈
接近500 token/s的输出速度...模型是Mixtral 8X7B
Llama 2 7B 是750 tokens/s
快是真快，无人能敌，但是准确性还不怎么样...
可以体验下：
他们还提供API，你可以自己弄个测试：
IT技术
( twitter.com)

9个月前 • 小互 • -- 点击 • 下载视频 0 评论

00:00:46

3

2

1

1

谁在评价大模型？AI大模型评测榜单乱象调查
大陆资讯
( www.jiemian.com)

1年前 • 牛郎侄女 • -- 点击 0 评论

4

2

1

1

微软推出了一个专门用于评估大语言模型的整合性工具库：PromptBench
提供了一系列工具，包括创建不同类型的提示、进行数据集和模型加载、执行对抗性提示攻击（即测试模型对恶意输入的抵抗力）等。
以支持研究人员从不同方面对LLMs进行评估和分析。
主要特点和功能：…
IT技术
( twitter.com)

11个月前 • 小互 • -- 点击 0 评论

5

2

1

1

从考公、写周报到下厨指南，我们评测了18个大模型
大陆资讯
( www.latepost.com)

7个月前 • 猪是的念过来倒 • -- 点击 0 评论

6

2

1

1

【大模型物种进化图，原来BERT后代已绝种】根据论文，大模型发展主要可以分为两类，作者们将它命名为“BERT派”和“GPT派”：“BERT派”的特征是模型中有编码器架构，具体分为“编解码器”和“只有编码器”两类架构；“GPT派”则主张扔掉编码器，架构中“只有解码器”。
大陆资讯
( www.qbitai.com)

1年前 • 拉拉么 • -- 点击 0 评论

7

2

1

1

Open AI 最近被喷麻了，总算开源了点东西出来，Transformer Debugger 一个用于分析Transformer内部结构的工具。
这个系统融合了自动解释功能和稀疏自动编码技术（Sparse Autoencoders），使得用户在无需编写代码的情况下就能快速探索和理解各种模型。…
IT技术
( twitter.com)

8个月前 • 歸藏 • -- 点击 0 评论

8

2

1

1

Stability AI正式发布了DeepFloyd IF图像生成模型，这是一个有文本编码器和三个级联的diffusion模块组合的模型。这个模型的效率要比原有的satble diffusion效率要高很多。
我尝试了一下，看起…
推特中文圈
( twitter.com)

1年前 • 歸藏 • -- 点击 0 评论

9

2

1

1

发现一个装修 GitHub 个人资料的 README 代码生成器，可以快速生成一个漂亮的 README 文件，无需编写任何代码。
在线使用
Github
IT技术
( twitter.com)

10个月前 • Geek • -- 点击 0 评论

0.13916 Second , Gzip Enable.本网所有言论均来自网络，不代表本网站立场。联系方式: [email protected]

©2012.11.21 bad.news All rights reserved. 社区自动运营第 -- 年零 -- 天
This site is protected by reCAPTCHA and the Google Privacy Policy and Terms of Service apply.

关注推特