惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

钛媒体:引领未来商业与生活新知
钛媒体:引领未来商业与生活新知
酷 壳 – CoolShell
酷 壳 – CoolShell
博客园_首页
Engineering at Meta
Engineering at Meta
量子位
A
About on SuperTechFans
阮一峰的网络日志
阮一峰的网络日志
Recent Announcements
Recent Announcements
博客园 - 司徒正美
V
Visual Studio Blog
H
Hackread – Cybersecurity News, Data Breaches, AI and More
The GitHub Blog
The GitHub Blog
freeCodeCamp Programming Tutorials: Python, JavaScript, Git & More
F
Fortinet All Blogs
Martin Fowler
Martin Fowler
腾讯CDC
Jina AI
Jina AI
C
Check Point Blog
H
Help Net Security
罗磊的独立博客
OSCHINA 社区最新新闻
OSCHINA 社区最新新闻
V
V2EX
爱范儿
爱范儿
I
InfoQ

博客园 - 田野的羽毛

重新捡起手中的笔 又回来了,南京! 一切还算顺利,远方的你还好吗? 好累,真的好累! A new world, a new life! 还在深圳! 明天就要走了... 毕业典礼7.1 想离去? 未登录词识别方法研究--公布硕士论文最新进展五(2007.4.26) 对于切分歧义以及识别未登录词的随想--公布硕士论文最新进展四(2007.4.13) 盖茨VS.乔布斯:左脑和右脑模式的PK(转) 2006中国大学生最佳雇主TOP50排行榜(转) 公布硕士论文最新进展三(2007.3.26) 突然让我想起了以前的面试(转http://blog.163.com/lzy_1920116/blog/) 公布硕士论文最新进展一(2007.3.6) 千万不要死于无知—几条健康忠告(二) 千万不要死于无知—几条健康忠告(一) Google China, Baidu or MSRA STC?(zz:http://bbs.telreading.com/)
公布硕士论文最新进展二(2007.3.19)
田野的羽毛 · 2007-03-19 · via 博客园 - 田野的羽毛

我作的论文主要是信息检索用汉语分词算法研究以及实现汉语分词系统。
    最近几天主要工作及进展:
        浏览大量的期刊论文以及硕博士论文   60%
        对自适应汉语分词算法进行相关的改进 80%
        分词系统的整体设计                 30%
        硕士论文撰写                       1% 

        总体进度                           20%

近两个星期主要完成自适应分词算法的改进,改进后的效果还是鼓舞人心的:
1)分词的准确率:由于算法结构已框定,只能着重去考虑在此结构下,如何能解决识别未登录词与分词歧义伴生的这对矛盾体,即在能够尽量准确地识别未登录词的同时,避免由此产生的切分歧义;或是由切分歧义造成的错误识别未登录词。
2)分词的速率:由于开发语言为C#,效率上相比较C++吃了不少的亏。但是在算法的很多细节上的改进,还是可以给效率带来飞跃,尤其是在改善词表结构后,速率已基本能达到实用水平(50Kb/s左右)。
3)分词词典的重构:除了对分词速率的提升,对于词典本身的更新维护也至为重要。
4)分词模块的扩展性以及可移植性;(还在进行中)

体会到两点:
1)一个实用的分词模块在分词算法以及整个模块的算法结构的考量上至关重要。
2)很多的基础以及基础实验工作还是必要的,有付出必有回报。