Chonky：一个完全基于神经网络的文本分块工具
业界
作者：牟慧敏
2025-05-03 19:20:29
阅读：385
Chonky：一个完全基于神经网络的文本分块工具。它能将文本智能分割成有意义的语义块，帮助你更高效地处理和理解长文本。
亮点：
使用Transformer模型，精准分块；支持RAG系统，拓展应用范围；一行代码即可完成安装，简单易用。
参考文献：[1] https://github.com/mirth/chonky[2] https://huggingface.co/mirth/chonky_distilbert_base_uncased_1
*文章为作者独立观点，不代表 免费SSL 立场
本文由
牟慧敏 发表，转载此文章须经作者同意，并请附上出处(免费SSL )及本页链接。
原文链接 https://www.51uos.com/news/industry/9550.html
