[B! 形態素解析] hiroyuki1983のブックマーク

hiroyuki1983 id:hiroyuki1983

形態素解析に関するhiroyuki1983のブックマーク (6)

井手上:ツール紹介 - 長岡技科大自然言語処理研究室
形態素解析日本語 Juman 京都大学黒橋研究室で開発された。辞書を自由に定義でき、代表表記によって表記のゆれを吸収できる。 [1] ChaSen 茶筅ではなく茶筌。奈良先端科学技術大学院大学松本研究室で開発された。 [2] MeCab 和布蕪。工藤拓氏によって開発された。高速高精度。 [3] KAKASI "kanji kana simple inverter" [[4]] Igo JAVA で実装された形態素解析器 [[5]] その他 Rosette 日本語形態素解析システム [6] マリモ [7] 言語郎 [8] 英語 Brill Tagger 文の単語に品詞(Part of Speech)情報を与えるシステム。精度が高い。 Brill Tagger TreeTagger 英語、フランス語、イタリア語、ドイツ語、スペイン語などの１２の言語を解析する
hiroyuki1983 2011/04/28
形態素解析
リンク
Google App Engine Java で形態素解析器の比較 | Altus-Five Labs
以前、Google App Engine Java で形態素解析器を作成しました。以前の記事はこちら。今回は、これに改良を加えました。改良前に使用していた辞書は、IPAdic でしたが、これを NAIST-jdic に入れ替えてみました。そして、せっかくなので、IPAdic と NAIST-jdic の違いを見てみようと、両方の辞書で解析して、結果を並べて表示するようにして、それをやるなら、ついでに、Yahoo!JAPAN WEB API の日本語形態素解析の解析結果も並べて表示できるようにしました。ご興味のある方、試してみてください。 http://agolabs.appspot.com/ * IPAdic と NAIST-jdic の違いで、一番わかりやすいのはアルファベットです。 ◇ 辞書について形態素解析器といえば、ChaSen や Mecab ですが、これらのエンジ
hiroyuki1983 2011/01/19
GAE

形態素解析

sen

Java
リンク
GAE/J で GoSen を動かして形態素解析 | Altus-Five Labs
Google App Engine Java のアプリを作ってみました。ちょっと前に検索エンジンの開発に触れる機会があったので、今回の手習いは、形態素解析器を GAE/J で動かすことをテーマにしました。まずは、下記ページに書かれている「Eclipse を使用して（または使用せずに）App Engine Java プロジェクトを作成する方法」にしたがって開発環境を作成します。 http://code.google.com/intl/ja/appengine/docs/java/gettingstarted/introduction.html そして、ひと通りチュートリアルを試して、開発環境に慣れてしまいます。実は、最初はチュートリアルは試さないで、他に GAE/J を紹介している記事を参考にして、必要なことだけをやろうとしたんですけど、後から考えると、先にチュートリアルを通し
hiroyuki1983 2011/01/19
形態素解析

Java

sen

Google App Engine
リンク
大規模テキスト処理を支える形態素解析技術（工藤拓氏・Google） - Cafe Babe
第80回知識ベースシステム研究会を開催したが，二日間で58名の方々に参加して頂き，積極的に議論に加わって頂いた．この場を借りて，参加してくれた方々に感謝したい．大変遅くなった（爆）が，Googleの工藤拓氏による招待講演「大規模テキスト処理を支える形態素解析技術」の概要を，このブログで報告しておきたい．工藤氏の専門分野は統計的自然言語処理と機械学習であるが，日本語形態素解析エンジンMeCabの開発者であり，他にも自然言語処理関連の有益なツールや，Webベースの日本語入力を可能にするAjax IMEのようなユニークなサービスを提供しているなど，時代をリードする研究開発者の一人である．彼の活動に興味があれば，彼のブログ「きまぐれ日記」は必見だろう．なお，当日は弊社側の不手際で，予定していた工藤氏の重要なデモをおこなうことができなかった．弊社はネットワーク会社であるにもかかわらず，ネットワーク
hiroyuki1983 2011/01/19
形態素解析

自然言語処理
リンク
形態素解析エンジンSenを使う - 不可視点
ゼミ用資料　関係のない方はスルーしてくださいグーグル様に聞けばすばらしい資料がいっぱい出ますが、とりあえず出たやつをまとめました。無料のものから商用向けまで非常に多くの形態素解析エンジンが開発されている。形態素解析とは？対象言語の文法の知識（文法のルールの集まり）や辞書（品詞等の情報付きの単語リスト）を情報源として用い、自然言語で書かれた文を形態素（Morpheme, おおまかにいえば、言語で意味を持つ最小単位）の列に分割し、それぞれの品詞を判別する作業を指す。自然言語で書かれた文を、形態素（言語で意味を持つ最小単位）に分割する技術です。この際、辞書 (「品詞」などの情報つきの単語リスト)中の情報を参照することで、「品詞」、「活用形」、「読み」等の情報を得ることが可能です。工藤拓[MeCab 汎用日本語形態素解析エンジン]http://www.jtpa.org/files/M
hiroyuki1983 2011/01/09
形態素解析

JAVA

sen

自然言語処理
リンク
Sen - 日本語形態素解析システム
Sen は Java で書かれた日本語形態素解析システム。 C++ で開発されている MeCab を Java に移植したもの。辞書は MeCab、茶筌と同じIPAの辞書を利用。 Sen配布ページ辞書の構築に Apache Ant が必要。このページは Sen version 1.2.2.1 用である。インストール Apache Antのインストール Sen は辞書を構築するのに Apache Ant というビルドツールを使う。これをあらかじめインストールしておく必要がある。 Apache Ant のインストール SenのインストールパッケージはSen配布ページから sen-1.2.2.1.zip をダウンロードしておく(mirror)。以下では ~学籍番号/Desktop/ にダウンロードしたものとして話を進める。展開 /usr/local に展開し、ディレクトリ名を se
hiroyuki1983 2011/01/09
MeCabのJava実装

Java

自然言語処理

形態素解析
リンク
1