使用弱智吧数据训练的大模型，跑分超过百科、知乎、豆瓣、小红书等平台，甚至是研究团队精心挑选的数据集。这件事让人深思，什么才是中文优质数据集？ Reddit 也是优质测试集。是不是在真正有交流和碰撞的社区，才能激发逻辑思考能力？想起了天涯社区，不知道有没有人试过

sign_in_with_google

分享一个链接

发表一篇文章

任何有趣的，图片，热点新闻，视频，文字...

37959 位用户此时在线

24小时点击排行 Top 10：

2024-6-26 今日热点汇总：16诺贝尔经济学奖得主：特朗普当选将加剧通胀；加拿大计划对华电动车征税；纽约时报：韩国电池工厂起火，为何死者多为中国劳工；中国总理李强称用中医理论挽救经济网友：没救了！外交部回应日本校车遇袭案：偶发事件，中国最安全；北京老人强迫年轻女生让座用拐棍扒拉女生大腿内侧；胡锡进 A 股一周年，亏损总亏损 74597 元；余承东称主动安全是华为提出来的，网友：汽车是华为发明；OpenAI 重大调整，禁止中国使用其 API

人贩子太可恨了司机师傅你真是积德啊！

6月25日，湖南永州水情。

大粪坑底层充满戾气大粪坑顶层充满杀气 …… 合在一起就形成了： “洋溢着乐观向上的氛围”

🔥 博士后的大学老师夫妻，创业卖煎饼，讲人生意义的看法，这样简单生活，自己喜欢就好，比较轻松，没有压力！

网友投稿广东深圳，交警埋伏围捕电动车

6月25日，广州。一男子带自己发烧到39℃的孩子前往医院，遭遇交警扣车不让走。

6月26日，广东深圳。因秘鲁总统到访导致后海人行天桥突然禁止通行，引起众多市民不满。另一位市民反映，滨河大道往西方向限制车辆出行，一分钟才有两辆车通行。

脚本写得有点意思…… 视频【街头采访：看起来是国货，实际上是外国的牌子有哪些？】

6月26日，山东济宁。一名环卫工因天气热在树下歇息被领导骂，躺在地上大哭。网友呼吁：工会在哪里？

6月26日，海银暴雷投资者前往上海市公安局维权。多人被警察带走。

国务院总理李强25日在大连出席2024年夏季达沃斯论坛开幕式上指出：我们如果不顾及他人利益，甚至不惜开历史倒车，搞“脱钩断链”“小院高墙”，只会抬高全社会，全球的经济运行成本，激化矛盾和纷争。

中国急了……

美丽的以色列，中东经济的奇迹，阿拉伯国家的妒嫉。哈吗斯治理加沙17年，除了配合中共帮忙挖的一堆地道，啥都没干出来。

偶像成木偶……李云迪这是怎么了？ •视频【任正非携手钢琴家李云迪现身东莞松山湖基地，参加HDC开发者大会，这次跨界合作究竟有何深意？】 •视频【李云迪请你自觉矜贵】

特色慈善事业…… 视频【泰国警方抓获一名诈骗和贩卖人体器官的组织者】将这名组织者交给中国警方后，大家都大吃一惊。这个人就是慈善家佘智江……

6月24日(发布) 河南许昌。一男子发视频称，他全款买了金科鹿鸣帝景的房子，结果开发商要求买车位才能交房，可即使买了车位，开发商也不一定交房。不仅如此业主代表也因维权被拘留。业主去北京上访，接着又会被驳回到许昌归属地。男子表示，希望国家更高层次的人能出面救黎明于水火。

专业的事情很扯淡，扯淡的事情很专业! 继派人值守大桥后，为了防止农民烧桔梗，现在中共又派人值守田间地头，每人每天的补贴350元，一次餐费35元。

6月25日，广东佛山禅城区。一女子在保卫自己的电动车时击打了一名未穿制服的执法人员，随后遭遇对方挥拳。

6月25日晚，河南洛阳。李楼村拆迁九年，至今安置房仍未动工，数百户村民们聚集在李城大桥维权。现场有大量警察维稳。

GDP能注水，但税收没法撒谎，看完各地数据，我很心惊｜原文作者马江博真实逻辑其实很容易发现，就看你是否擅长发现。比如GDP的数据能注水，但税收没法撒谎啊。所以一个城市的真实实力究竟如何，还得看税收。而看完了各个城市去年的税收数据，我还是有点心惊。

芝加哥警方周一逮捕了一名非法移民，案件迅速升级。该非法移民奋力反抗，于是三名警察试图将他强行塞进警车。非法移民大声尖叫，随后一群暴徒开始围住警察并威胁他们。现在大规模驱逐出境！

看這架式，年輕的黄之鋒从香港牢獄里活著走出來的可能性都不大！27岁的政治犯在香港一百多年殖民历史中绝无仅有！

6月25日，广东。有网友拍到一怀孕女子摆摊卖小吃，被执法人员劝离，女子委屈的坐在车上，一手捂着肚子，一边流眼泪。

本站自动实时分享网络热点
24小时实时更新
所有言论不代表本站态度
欢迎对信息踊跃评论评分
评分越高，信息越新，排列越靠前

2

1

0

使用弱智吧数据训练的大模型，跑分超过百科、知乎、豆瓣、小红书等平台，甚至是研究团队精心挑选的数据集。
这件事让人深思，什么才是中文优质数据集？
Reddit 也是优质测试集。
是不是在真正有交流和碰撞的社区，才能激发逻辑思考能力？
想起了天涯社区，不知道有没有人试过
IT技术
( mp.weixin.qq.com )

2个月前由 orange.ai 提交

点击图片查看原图

1周内 1个月内 1年内全部时间

1
2
3
4
5
6
...
400
下一页

1

2

1

1

【“弱智吧”帖子训练AI效果遥遥领先？研究人员回应：网上宣传过分夸大】“许多读者误以为我们使用‘弱智吧’网友的评论训练大模型就可以达到很好的效果，事实上，我们仅保留了弱智吧帖子的标题。”白岳霖说：“实验结果并不能代表弱智吧，因为数据实际上相当于多方（网友、作者们和大模型系统）协同构造的。”
大陆资讯
( i.ifeng.com)

2个月前 • 舔你妹 • -- 点击 0 评论

2

2

1

1

弱智吧竟成最佳中文AI训练数据？中科院等：8 项测试第一，远超知乎豆瓣小红书
大陆资讯
( www.qbitai.com)

2个月前 • 猪八戒 • -- 点击 0 评论

3

2

1

1

在线编程平台Replit近期发布了一篇关于《如何训练你自己的大型语言模型》的博客文章，分享了他们在训练自家编程大型语言模型（LLM）过程中的经验和教训。

他们把整个过程分成了三个阶段：数据管道、模型训练、推理

他们的主要数据来…
推特中文圈
( twitter.com)

1年前 • 宝玉 • -- 点击 0 评论

4

2

1

1

找到一个弱智吧的数据集：
看来以后训模型要加一些这些题目了～
时政
( github.com)

2个月前 • 九原客 • -- 点击 0 评论

5

2

1

1

话说，百度的大模型文心一言，是不是把百度弱智吧的数据都导进去进行训练了？
但是有一说一啊，看这个回答就知道，文心一言是绝对的原创大模型，绝对不可能抄袭ChatGPT或者好像李开复老师那样用LLAMA去改名字。
IT技术
( twitter.com)

7个月前 • 零零發 • -- 点击 0 评论

6

2

1

1

政协委员，央视副召集人张勤提案大模型训练: 如果我们训练的大模型持续用西方价值观数据、西方应用场景来训练中国大模型，中国式的认知将被湮没。…
IT技术
( twitter.com)

3个月前 • 宝玉 • -- 点击 0 评论

7

2

1

1

根据英伟达的幻灯片显示，GPT-4 是 1.8T 参数的混合专家模型。现在用 Blackwell 系统实际上可以在大约十天内训练一个像 GPT-4 这样拥有 1.8 万亿参数的大模型，而在两年前 Hopper 世代开始时，即使是几百亿参数的模型也很难在几个月内完成训练。
IT技术
( baoyu.io)

22天前 • 宝玉 • -- 点击 0 评论

8

3

2

2

开源之光:RedPajama重塑大语言模型的未来
LLaMA最强平替，超12万亿训练数据，全开源
1. 开源12万亿训练数据，参考LLaMA数据集配比。
2. 模型马上开源
*标题由Claude生成…
推特中文圈

开源推荐
( twitter.com)

1年前 • nash_su • -- 点击 0 评论

9

2

1

1

看论文看到哈哈大笑，用「弱智吧」标题+GPT-4回答微调后的Yi-34B模型评估结果超过了精心收集的 SFT 指令集数据，安全性评估也是第二名。
弱智吧就是百度弱智吧，里面的帖子是这种画风：「既然监狱里全是罪犯，👮♀️为什么不去监狱里抓人？」
论文：
时政
( arxiv.org)

2个月前 • 九原客 • -- 点击 0 评论

10

2

1

1

今天有跟Nvidia 研发中心的一位技术负责人聊，他们这有六十多块A100。之前帮一团队训练模型，用8块A100训练，训练效率大概每秒10w Token。无锡超算那边基本上大部分都是国产化设备，训练模型的效率大概是每秒9w Token。在模型训练上，仅用8块A100就能抵过一个超算中心了。
时政
( twitter.com)

11个月前 • Shawn Xie • -- 点击 0 评论

11

2

1

1

金融专用大模型：BloombergGPT
500亿参数，训练成本超过1300万，用AWS64台8xA100训练53天完成核心模型训练。
主要实现问答、新闻头条编写、生成BQL等
按青云相同配置价格粗略计算训练成本1300W+
然而…
推特中文圈
( twitter.com)

1年前 • nash_su • -- 点击 0 评论

12

2

1

1

我用两万条B站评论训练AI，大战弱智吧！
时政
( twitter.com)

1个月前 • 林亦LYi • -- 点击 • 下载视频 0 评论

00:15:33

13

2

1

1

我用两万条B站评论训练AI，大战弱智吧！
时政
( twitter.com)

1个月前 • 林亦LYi • -- 点击 • 下载视频 0 评论

00:15:33

14

2

1

1

我用两万条B站评论训练AI，大战弱智吧！
时政
( twitter.com)

1个月前 • 林亦LYi • -- 点击 • 下载视频 0 评论

00:15:33

15

2

1

1

毫不怀疑快手是用自己的数据集训练的可灵模型😀
IT技术
( twitter.com)

18天前 • 宝玉 • -- 点击 • 下载视频 0 评论

00:00:05

16

2

1

1

手把手教你训练你自己的AI歌手，最重要的一步来了。如何训练歌手的模型。这一步主要由两部分组成数据处理和模型训练。
这个林俊杰是我自己训练的4800步的模型，对比一下上一篇教程里的孙燕姿模型有两万多步，数据的质量也很重要。
感谢各位…
IT技术
( twitter.com)

1年前 • 歸藏 • -- 点击 0 评论

17

2

1

1

清华大学首创分布式广度光计算架构，研制大规模干涉-衍射异构集成芯片太极（Taichi），实现160 TOPS/W的通用智能计算。计算能效超现有智能芯片2—3个数量级，将可为百亿像素大场景光速智能分析、百亿参数大模型训练推理、毫瓦级低功耗自主智能无人系统提供算力支撑。…
时政
( twitter.com)

2个月前 • 外汇交易员 • -- 点击 0 评论

18

2

1

1

2024 年第一个模型，基于gemma-2b和 Linux 中国文章数据训练的科技文章标题生成模型。这个模型解决了我写文章起什么标题的难题🤣。然后这个模型我开放了训练期间所有的中间模型，供大家参考。我个人倾向于用2000 step 的这个。
时政
( huggingface.co)

3个月前 • GanymedeNil • -- 点击 0 评论

19

2

1

1

答应大家的AI歌手教程来了，手把手教你训练你自己的AI歌手，主要分为使用模型和训练模型两部分，这里是第一部分如何使用模型生成音乐的部分，主要介绍了音源的处理，模型的使用和后期音轨的合成。
看在藏师傅生病肝教程的份上希望各位多多支持…
IT技术
( twitter.com)

1年前 • 歸藏 • -- 点击 0 评论

20

3

2

2

AI是怎么变聪明的？难道就是跑个超级大模型就行了？其实根本不是。让一个AI模型真正聪明起来的重要因素就是人工训练，用最天才的头脑，进行海量的知识问答训练，才能让AI掌握顶尖的人类智慧。中国有能够训练AI的人吗？你能指望一帮奴才能训练出一个乔布斯的思维模型？…
时政
( twitter.com)

3个月前 • Lei’s Talk • -- 点击 0 评论

21

2

1

1

【Adobe宣称Firefly是没有原罪的AI模型】Firefly 发布的另一个焦点是 Adobe 宣称自己没有盗用艺术家的作品来训练模型。自己用于训练模型的数据要么是版权过期的，要么有许可，要么是Adobe Stock图库中的。
大陆资讯
( mp.weixin.qq.com)

1年前 • 猪八戒 • -- 点击 0 评论

22

2

1

1

可商用！复旦大学开源了160B参数的大模型MOSS
MOSS是一个支持中英双语和多种插件的对话语言模型，基座模型在约七千亿中英文以及代码单词上预训练得到。具备多轮对话能力及使用多种插件的能力
很多训练语料都使用ChatGPT AP…
推特中文圈
( twitter.com)

1年前 • nash_su • -- 点击 0 评论

23

2

1

1

张勤：如果我们训练大模型持续用西方价值观数据，那么中国式的认知将会湮没。
时政
( twitter.com)

3个月前 • 小径残雪 • -- 点击 0 评论

24

2

1

1

大模型训练超参可视化出现“分形”效果！
有人将神经网络训练中超参数（学习率）和收敛的关系进行了可视化，发现了神奇的分形效果，不得不感叹规律和数学之美无处不在啊。
本质上分形就是重复调用同一个方法，这跟模型训练本质是类似的，这也可能是出现“分形”的原因。
原文：
时政
( sohl-dickstein.github.io)

4个月前 • nash_su - e/acc • -- 点击 • 下载视频 0 评论

00:01:12

1
2
3
4
5
6
...
400
下一页