惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

V
Visual Studio Blog
Google DeepMind News
Google DeepMind News
V
V2EX
B
Blog RSS Feed
有赞技术团队
有赞技术团队
博客园 - Franky
美团技术团队
月光博客
月光博客
酷 壳 – CoolShell
酷 壳 – CoolShell
奇客Solidot–传递最新科技情报
奇客Solidot–传递最新科技情报
腾讯CDC
云风的 BLOG
云风的 BLOG
L
LangChain Blog
GbyAI
GbyAI
The Cloudflare Blog
CTFtime.org: upcoming CTF events
CTFtime.org: upcoming CTF events
C
Check Point Blog
让小产品的独立变现更简单 - ezindie.com
让小产品的独立变现更简单 - ezindie.com
Stack Overflow Blog
Stack Overflow Blog
博客园 - 【当耐特】
The Register - Security
The Register - Security
大猫的无限游戏
大猫的无限游戏
D
Docker
Vercel News
Vercel News
Blog — PlanetScale
Blog — PlanetScale
OSCHINA 社区最新新闻
OSCHINA 社区最新新闻
博客园 - 司徒正美
人人都是产品经理
人人都是产品经理
雷峰网
雷峰网
阮一峰的网络日志
阮一峰的网络日志
P
Proofpoint News Feed
N
Netflix TechBlog - Medium
博客园_首页
A
About on SuperTechFans
J
Java Code Geeks
量子位
freeCodeCamp Programming Tutorials: Python, JavaScript, Git & More
MongoDB | Blog
MongoDB | Blog
Recent Announcements
Recent Announcements
G
Google Developers Blog
小众软件
小众软件
博客园 - 叶小钗
WordPress大学
WordPress大学
博客园 - 聂微东
钛媒体:引领未来商业与生活新知
钛媒体:引领未来商业与生活新知
Martin Fowler
Martin Fowler
S
SegmentFault 最新的问题
F
Full Disclosure
Jina AI
Jina AI
H
Help Net Security

博客园 - Tachikoma

用Ruby实现 Web Service Server ,并用Ruby发送 HTTP请求 Web Service Android 使用 Ksoap2 出现的低级错误... - Tachikoma Cygwin中通过RJB在Ruby下调用ICTCLAS(JAVA) ICTCLAS4J 的编译脚本 Ruby Sandbox 实现运行客户代码 - Tachikoma Ruby在使用MongoDB时,对Cursor的重新包装 RJB 在windows下的一些安装事项 Ruby手工测试正确,rcov测试失败的解决 在dell dimension 5150 上安装 leopard 手记 Rails测试中清空数据表/载入空fixtures RDoc 解决同名module 与 Class的问题 C 实用的 e-editor 的bundle Best of Ruby Quiz - Animal Quiz Best of Ruby Quiz - GEDCOM Parser Best of Ruby Quiz - MadLib - Tachikoma 使用selenium-on-rails的一些讨论 3]assertXpathCount的使用 使用selenium-on-rails的一些讨论 2]清理缓存 - Tachikoma - 博客园 使用selenium-on-rails的一些讨论 [0,1] 关于 rails ActiveRecord 属性 以及 foreign_key 不直接用数据库项目 时的一些讨论
ruby 下使用 ICTCLAS(JAVA)
Tachikoma · 2010-01-30 · via 博客园 - Tachikoma

ICTCLAS并没有RUBY开发版本,RUBY可以使用C版本和JAVA版本的ICTCLAS来做分词

RUBY用C的代码,涉及到重写接口和包装的问题,比较麻烦

在此讨论RUBY用JAVA版本的ICTCLAS实现分词

总体思想:RJB是个很精彩的库

1. 下载ICTCLAS4j

2. 目录结构

=
==ICTCLAS.rb
==ICTCLAS(ICTCLAS4j的源文件)
==DATA(复制ICTCLAS4j的源文件中的DATA文件夹,为什么复制在此我们稍后讨论)

3. 环境

  Windows 7

  Ruby 1.8.6

  rjb-1.2.0-x86-mswin32-60

4. 安装RJB

  http://www.cnblogs.com/Tachikoma/archive/2010/01/28/1658261.html

  这是我写的 RJB 在windows下的一些安装事项

5.  ICTCLAS.rb 的源代码

#代码用UTF-8格式保存
require "rubygems"
require "rjb"

require "iconv"

class ICTCLAS
	def self.fenci(input)
		output = ""
			Rjb::load(classpath="ICTCLAS/bin")
			segtag_class = Rjb::import('org.ictclas4j.segment.SegTag')
			string_class = Rjb::import('java.lang.String')
			input = string_class.new_with_sig("Ljava.lang.String;" , input)
			segtag = segtag_class.new_with_sig("I",1)
			seg_res = segtag.split(input)
			output = seg_res.getFinalResult()
		output
	end
end

output = ICTCLAS.fenci("这篇文章摘自Tachikoma的乱七八糟")
puts Iconv.iconv("GBK","utf-8",output) #转换码制以便输出

6. 在我们代码的根目录下(这点很重要,稍后讨论),运行

ruby ICTCLAS.rb

可以看到结果

这/r 篇/q 文章/n 摘自/v Tachikoma/nx 的/b 乱七八糟/i

讨论:

1. 路径问题

  前面提到过两个问题

    1] 将ICTCLAS4j 的 DATA 文件夹 复制到代码根目录下

    2] 必须从代码根目录启动程序

  否则易出现以下错误

in `method_missing': unknown exception (NullPointerException)

  其原因就是 ICTCLAS4j 源代码中,org.ictclas4j.bean.Dictionary中load方法使用相对路径读取字典文件(位于DATA文件夹),就要求DATA文件夹位于程序启动目录下

  这个可以认为是ICTCLAS4j的一个BUG吧

  P.S. 当然也自然有以下两种思路来解决这个问题

    1] 修改源代码,重新编译ICTCLAS4j,使用绝对路径

    2] 使用jvm启动参数 user.dir,但是经过多次尝试,失败

  问题解决:

    重新修改ICTCLAS.rb

require "rubygems"
require "rjb"

require "iconv"

class ICTCLAS
	def self.fenci(input)
		root_path = "#{File.dirname(__FILE__)}/ICTCLAS"
		output = ""
		Dir.chdir(root_path) do |path|		
			Rjb::load(classpath="bin")
			segtag_class = Rjb::import('org.ictclas4j.segment.SegTag')
			string_class = Rjb::import('java.lang.String')
			input = string_class.new_with_sig("Ljava.lang.String;" , input)
			segtag = segtag_class.new_with_sig("I",1)
			seg_res = segtag.split(input)
			output = seg_res.getFinalResult()
		end
		output
	end
end

     这样就可以从任意位置调用 ICTCLAS.fenci 方法 , DATA文件夹也可以放在ICTCLAS4j文件夹下