推荐阅读：文本分割的五个层次我们知道，做 RAG 的时候，文本分块分割相当关键，如何合理的分割文本看似简单，实则细节很多，怎么把相关的信息尽可能保留在一起很重要。 Greg Kamradt 最近有个视频，详细讲解了文本分割的细节，并且他还整理了一个 Jupyter…

分享一个链接

发表一篇文章

任何有趣的，图片，热点新闻，视频，文字...

1530 位用户此时在线

24小时点击排行 Top 10：

4月1日，成都比亚迪罢工潮仍在继续，工人们要求比亚迪妥善解决员工安置问题。工厂领导表示人太多了，可以派10人组成的代表沟通，遭到员工拒绝。现场还有警察维持秩序。

昨日黄土陇头送白骨，今宵红灯帐底卧鸳鸯。金满箱，银满箱，转眼乞丐人皆谤。正叹他人命不长，那知自己归来丧！因嫌纱帽小，致使锁枷扛，昨怜破袄寒，今嫌紫蟒长。乱烘烘你方唱罢我登场，反认他乡是故乡。甚荒唐，到头来都是为他人作嫁衣裳！

台湾军方最新宣传片

4月1日，一名自称是小米su7事故事件死者的家属称：外甥女是29日晚上十点多出事，自己是早上六点多得知此事“事发时车门锁死打不开，前面两个女子都是被活活烧死的，后座的女孩被救出来后，在送医途中死亡的”“就是全部烧没了，骨头警察也不让看”

3月30日，山东。一名男子身穿迷彩服肩扛红旗，在大街上表示：“愿台湾早日回归祖国大陆，当台湾回归时，说明中国人民强大” “我最大的心愿和梦想就是台湾回归祖国大陆”说到这里，男子哭了起来。

“进逼”

中國小孩在賞花的地方到處摘花，結果被旁邊的路人制止後，小孩家長就暴怒了。中國式教育。

29日晚，一辆小米SU7在高速行驶过程中发生事故，车上三名女子被活活烧死。受害者家属称，事故发生后至今未收到小米任何慰问。此外，有湖北记者向家属透露，他们写完了稿子，“但上面有禁令，发不出来。我们是湖北媒体，而这几名学生也是湖北的，雷军也是湖北的，所以上面施压了”

近日，连云港日报发视频歌颂胡塞武装，视频还配文：“血火誓言！胡塞武装跪拜明志，向美西方亮剑抗争，尽现胡塞男儿不屈血性” 随后被律师举报“美化恐怖组织，宣扬恐怖主义” 目前，连云港日报已删除该视频。

三立新闻：由于小微逾期未回国，今早一名大叔在移民署怒骂官员：有没有罚款？有没有先抓起来关？人呢？“你是台湾的移民署还是中共的移民署啦？”

友好的中国人。😂

陆配小微被要求限期离台后表示：我在中国大陆长大，我不爱国难道爱你吗？你们应该提前警告我，告诉我不能在台湾这片土地上发这些作品，那我不说就行了。小微还表示自己爱台湾这座城，并没有危害和恐吓台湾。

【泰国彻查地震倒塌高楼事件】泰国媒体引述工业部长助理的话说，当局在现场拿走部分钢筋检验，在三个钢材样本中，有一个不符合标准。未完工的泰国国家审计署大楼是曼谷唯一在上周缅甸7.7大地震中倒塌的高层建筑，由中国铁路工程集团等公司负责建设。据报道，有人呼吁调查中铁参与的高铁工程。

又来了，《工作细胞》真人版。日本人太有创意了，小朋友一看就懂。

今天上午，陆配小微抵达松山机场，移民署决议强制出境下午遣送，小微身穿黑色衣服，头戴鸭舌帽，她在机场大喊：“我爱党爱国有错吗？”

要实现中国梦了！

哈哈😄 ！现在的国民党如此舔共，国民党老人都看不下去了！

3月30日，浙江嘉兴。一名女子站在桥边欲跳桥，并拍视频称：“爹妈，我这辈子投胎投错了，我知道你们恨我不是男孩子，怪我没出息，怪我买不起车买不起房，我对不起你们，我现在把命还给你们” 女子将视频发给父亲，结果还遭到父亲指责：“你死就死啊，你以为谁会留你吗？你死了也没多大事”

3月31日，香港城市大学的早餐时间段，一名男子在食堂内操着普通话玩手机，并播放音乐太大声，引发周围人不满，39岁的黄女士上前劝他调低音量，反遭该男子殴打，随后警察赶到现场，由于该男子身形健硕，孔武有力，期间还把一名警员摔倒在地，然后再箍住另一个人，警员最终使用胡椒喷雾将该男子制服。

一名网友质疑：“大佬在群里吐槽，雷军秒回复道歉上热搜，高速三条人命，全网删除捂人嘴”

活久见了

科學家沒搞清楚的問題被他搞定！聽了半天也不知道他說什麼，只聽到他說，毛澤東用自己的小球撬他老婆的大球，然後變成乒乓球。真够扯的。

29日晚，一辆小米su7在高速上发生碰撞后起火，造成3名女子被活活烧死。4月1日，其家属发文质疑，事发至今小米方面都没人和自己取得联系，甚至连一个慰问电话都没有。家属质疑：“为什么车撞到护栏后会自燃？为什么车门会锁？”

4月1日，一名男子用英国法定最低时薪11.44英镑，在英国当地一家平价超市购买了一瓶牛奶、一袋菠菜、一颗生菜、5根香蕉、一盒提子、800克面包、6个鸡蛋、一盒鸡腿。 3月30日，广东东莞。一名男子用当地肯德基13.3元人民币时薪，在一家平价超市购买了一颗上海青，一斤鸡蛋，0.26公斤猪肉。

烏克蘭空軍蘇-27 搭載 GBU62 導彈轟炸俄羅斯別爾哥羅德地區俄軍

本站自动实时分享网络热点
24小时实时更新
所有言论不代表本站态度
欢迎对信息踊跃评论评分
评分越高，信息越新，排列越靠前

2

1

0

推荐阅读：文本分割的五个层次
我们知道，做 RAG 的时候，文本分块分割相当关键，如何合理的分割文本看似简单，实则细节很多，怎么把相关的信息尽可能保留在一起很重要。
Greg Kamradt 最近有个视频，详细讲解了文本分割的细节，并且他还整理了一个 Jupyter…
IT技术
( twitter.com )

1年前由宝玉提交

推荐阅读：文本分割的五个层次

我们知道，做 RAG 的时候，文本分块分割相当关键，如何合理的分割文本看似简单，实则细节很多，怎么把相关的信息尽可能保留在一起很重要。

Greg Kamradt 最近有个视频，详细讲解了文本分割的细节，并且他还整理了一个 Jupyter Notebook，配有代码示例和配图，很是浅显易懂。他把文本分割分成五个层次：

第 1 层：字符分割 - 对数据进行简单的静态字符划分。
第 2 层：递归字符文本分割 - 基于分隔符列表的递归式分块。
第 3 层：文档特定分割 - 针对不同类型文档（如 PDF、Python、Markdown）的特定分块方法。
第 4 层：语义分割 - 基于嵌入式路径的分块方法。
第 5 层：智能体式分割 - 使用类似智能体的系统来分割文本的实验性方法，适用于你认为 Token 成本接近免费的情况。

具体建议您阅读原文或者看视频！

视频：https://t.co/HC4v7lG1FC
Notebook：https://t.co/6rwWYm8Rd6
译文：https://t.co/CDLd2qJWbK

1周内 1个月内 1年内全部时间

1
2
3
4
5
6
...
400
下一页

1

2

1

1

刘润老师的文章《上海难题》，分析十分透彻，推荐阅读。

时政
( mp.weixin.qq.com)

3年前 • 微信公众号 • -- 点击 0 评论

2

2

1

1

读完了李翊云的 The Vagrants，我会推荐给每一个愿意读英文书的朋友阅读。
图片
( twitter.com)

4年前 • twitter机器人 • -- 点击 0 评论

3

2

1

1

推荐阅读：纽约时报中文网《我们为什么钦佩泽伦斯基》

海外华文
( cn.nytimes.com)

2年前 • 纽约时报 • -- 点击 0 评论

4

2

1

1

精彩的故事，推荐全文阅读
时政
( twitter.com)

2年前 • 李老师不是你老师 • -- 点击 0 评论

5

3

2

2

今天，我和孩子从图书馆借回了《1984》，孩子上初二，说文学老师让大家阅读这本书。突然想到：美国初二文学老师推荐孩子阅读《1984》，中国初二语文老师推荐孩子阅读《红岩》——这就是差距。
时政
( twitter.com)

7个月前 • 李幺傻 • -- 点击 0 评论

6

2

1

1

推荐阅读：一文看Sora技术推演
IT技术
( mp.weixin.qq.com)

1年前 • 宝玉 • -- 点击 0 评论

7

2

1

1

周末推荐闲书“深阅读：信息爆炸时代我们如何读书”，作者是日本知名学者

别被翻译的书名误导，原著叫“阅读的力量”，作者从为什么要阅读、读什么、怎么读入手，教你在焦虑、快节奏、无法静心阅读的大环境下，学会阅读、爱上阅读

作者说：读…
推特中文圈
( twitter.com)

4年前 • twitter机器人 • -- 点击 0 评论

8

2

1

1

有推友向我推荐这篇推文。为便于推友们阅读，我会紧接着贴出这篇劝退请愿书的全文。敬请关注。
时政
( twitter.com)

2年前 • twitter机器人 • -- 点击 0 评论

9

2

1

1

推荐大家读这本书，可以系统性的知道中国是怎么渗透的美国精英阶层
时政
( twitter.com)

3年前 • twitter机器人 • -- 点击 0 评论

10

2

1

1

非常有见地的长推文，推荐大家阅读、关注
时政
( twitter.com)

2年前 • twitter机器人 • -- 点击 0 评论

11

4

3

3

两个阅读群，一人推荐一本书，提及最多的20本书如下。
IT技术
( twitter.com)

3个月前 • 向阳乔木 • -- 点击 1 评论

12

2

1

1

1/ 看到推友的推荐，尝试了Medium，比推特更适合发长文，也更适合读者阅读长文，阅读体验远在推特之上。在Medium的帐号增加20-30篇文章之后，将会向推友公布链接，希望能为有阅读品味的读者提供一个简陋但有质量的阅读角落。
推特中文圈
( twitter.com)

3年前 • twitter机器人 • -- 点击 0 评论

13

2

1

1

推荐阅读两篇文章：
1、余华的：
2、何伟的：
时政
( twitter.com)

1年前 • 雨夜漫步大祭司 • -- 点击 0 评论

14

2

1

1

推荐阅读，如果英文阅读有困难的话，可以用Chrome的自带翻译。确实值得读一下。

推特中文圈
( cryptohayes.medium.com)

3年前 • twitter机器人 • -- 点击 0 评论

15

2

1

1

#议报刚刚刊发了上海一个普通高中生对党国抗疫的自白和发问，文章展现这个少年的认知水准和道德勇气，推荐阅读：

图片
( yibaochina.com)

3年前 • twitter机器人 • -- 点击 0 评论

16

4

3

3

推荐阅读
海外华文
( mp.weixin.qq.com)

3年前 • 微信公众号 • -- 点击 0 评论

17

2

1

1

世界读书日推荐教你高效阅读的“深度阅读”，作者是日本知名学者

书面上有各种教人阅读的书籍，本书侧重于让读书这个越来越困难的行为保持高效，让阅读的产出更有价值

按作者自己的话概括，本书教你“如何比别人读得更多、比别人读得更精、读…
推特中文圈
( twitter.com)

2年前 • twitter机器人 • -- 点击 0 评论

18

2

1

1

【专访苏静:你想知道的日本,你不知道的《知日》】从最初的奈良美智到如今的漫画特集,@知日ZHIJAPAN 让我们深度了解到日本国所不为人知的一面。在本次尾巴访谈中,创始人@苏静johnnysu 便与我们分享了许多有关知日、有关阅读、有关日本文化、有关他自己的事儿。
大陆资讯
( www.dgtle.com)

11年前 • 和谐大帝 • -- 点击 0 评论

19

2

1

1

参考大家一个上午的热情推荐，初版五本书清单如下：

「读了这五本书，再弱智的初中生也能上推键政骂别人读书少」

《三体》
《乌合之众》
《资本论》
《极简欧洲史》
《货币战争》

然后我再推荐三本初中毕业升高中小将文爱扩展读物：…
推特中文圈
( twitter.com)

3年前 • twitter机器人 • -- 点击 0 评论

20

2

1

1

8/27/24: 有一位非常普通的白人男子，他列出了无法投票支持特朗普的原因。他的关注者不多，但他昨天发布的推文被 750 万次阅读，获得了5.4万点赞
强烈推荐你阅读他下面的推文。为了方便中文读者，我将他的推文翻译如下:
--------
时政
( twitter.com)

7个月前 • John Zhang🇺🇸🇺🇦 • -- 点击 0 评论

21

6

5

5

英文原版阅读有哪些入门书籍推荐？这个答主堪称鬼才
图片

5年前 • 开的拉客 • -- 点击 0 评论

22

2

1

1

推荐每个人都仔细阅读一下.

币圈
( mirror.xyz)

2年前 • twitter机器人 • -- 点击 0 评论

23

2

1

1

X的阅读推荐，绝了…
时政
( twitter.com)

1年前 • 朱峰 • -- 点击 0 评论

24

2

1

1

虽然之前推荐过，但是还要再推荐一下
mitmproxy 我觉得值得所有对 Python 以及对应用层网络编程感兴趣的朋友仔细阅读
设计非常棒，代码质量，文档覆盖也很全
每次看一些都有新的收获
推特中文圈
( github.com)

2年前 • twitter机器人 • -- 点击 0 评论

1
2
3
4
5
6
...
400
下一页

0.37144 Second , Gzip Enable.本网所有言论均来自网络，不代表本网站立场。联系方式: [email protected]

©2012.11.21 bad.news All rights reserved. 社区自动运营第 -- 年零 -- 天
This site is protected by reCAPTCHA and the Google Privacy Policy and Terms of Service apply.

关注推特