go top

经过分词

网络释义

  Tokenizer

不同语种的分词组件(Tokenizer),都有自己的停词(stop word)集合。经过分词(Tokenizer)后得到的结果称为词汇单元(Token)。

基于1个网页-相关网页

有道翻译

经过分词

After word segmentation

以上为机器翻译结果,长、整句建议使用 人工翻译

双语例句

  • 经过分处理大型汉语语料库进行语言学计算语言学研究重要资源

    The large scale word segmented corpus is an important resource for the study of both linguistics and computational linguistics.

    youdao

  • 筛选出的文本中,经过分词、去除处理后,选取二元作为特征

    In those texts, we select bigram as feature after Chinese word segmentation, deleting stop word and other process.

    youdao

更多双语例句
$firstVoiceSent
- 来自原声例句
小调查
请问您想要如何调整此模块?

感谢您的反馈,我们会尽快进行适当修改!
进来说说原因吧 确定
小调查
请问您想要如何调整此模块?

感谢您的反馈,我们会尽快进行适当修改!
进来说说原因吧 确定