提取不同单词
粘贴文本,每个单词只保留一次,同时保持首次出现的顺序。
Unicode 字母和数字会被分词;标点与空白只用于分隔词项。
使用步骤
如何使用
- 粘贴最多 100,000 个字符。
- 选择是否区分大小写。
- 提取并复制按首次出现排列的结果。
单词分词规则
浏览器支持时使用 Intl.Segmenter 的单词粒度,并保留标记为类似单词的分段。回退逻辑保留连续的 Unicode 字母和数字。标点、符号和空白只作为分隔符。
大小写与顺序
区分大小写模式比较原始词项;忽略大小写模式使用 Unicode toLocaleLowerCase 映射比较,同时保留第一次出现的写法。结果始终按首次出现顺序排列。
Unicode 与空白
Unicode 字母和数字由浏览器分词器支持。空格、制表符、换行和其他分隔符只用于分开词项,不会出现在结果中。
常见问题
你可能还想知道
结果会按字母排序吗?
不会,每个不同词保留其首次出现的位置。
大小写会影响结果吗?
默认会。开启“忽略大小写”后,Unicode 小写形式相同的词会合并。
文本会上传吗?
不会,提取在浏览器本地完成。