今天在 GDD 听了 tf.text 主题演讲,演讲者在 demo 中使用 Unicode 分字,把中文句子分成单字。而我和同事在过去多用词典法分词。想要讨论下分字和词典法分词两个效果有什么差异,结果一直没能堵到演讲者 😂。不知道各位在应用过程中有没有对这方面做过评估。
此内容由惯性聚合(RSS阅读器)自动聚合整理,仅供阅读参考。 原文来自 — 版权归原作者所有。