Free/Open/Libre Software and data Memo

２０１０年の上半期に、国際化の開発に協力したOSSプロダクトのひとつに、nixnote(旧Nevernote)がある。

Evernoteクライアントのフリークローンで、Java＋QtJambiで書かれていて、プラットホームニュートラルに動く。そのころ、KoedoLUGで、紹介したことがあった。しばらく、開発協力した本人も使うことが無くなっていたのだが、KoedoLUG主宰のはとちゃんが地道に使い続けてくれていることが判明、ちゃんとみないと遺憾な、とgit repositoryをおいかけ直すことに。

ところで、この手のドキュメント管理ソフトウエアでは、全文検索のできがとても重要である。nixnoteは、データ保管には、H2 Database を使っている。H2は、Javaで実装されたオープンソースのDBMSである。

さて、nixnoteでは、設定可能な正規表現　[,\\s]+　で単語を切り分けて、インデックスを作成している。ご多分にもれず、これでは日本語の検索ができない。日本語などCJK言語の単語切り分けは、正規表現では表現できず、形態素解析を必要とするからだ。

さて、H2データベースには、内蔵の全文検索が2タイプあり、ネイティブとLucineによるものがある。Apache Lucineは有名な全文検索エンジンで、これを使うように改良できれば、nixnoteの機能も向上させられそうだ。そこで、H2データベースのLucineによるCJK全文検索をしらべると、H2追っかける日記にて全文検索を使う話が掲載されていた。

ということで、nixnoteのこの部分を改良する人、募集中なのである。（自分でやれ？）はとちゃんが、がんばれ！?

BigBlueButtonは、APIを持っており、CMSなどと連携させることができる。

デフォルトでは、APIのデモページがあり、JSPによる具体的な利用方法を理解することができる。

人気のあるCMSといえば、Joomla!やDrupalがあるし、BBBは教育用途を意図して作られているところもあるので、Moodleも考慮に値するだろう。

このページでは、MoodleとDrupalについて、連携方法を示している。

Drupalとの連携については、
http://drupal.org/project/bbbで、すでにモジュールも用意されている。

Moodleの連携については、　http://www.dualcode.com/bigbluebutton/に、プラグインが提供されている。

活用してみようと思う。

世の中には、OSSの、LGPLでライセンスされたTV会議ソフトウエアというものが存在する。これは、アーキテクチャ的には、他のOSSに大きく依存している。たとえば、Ubuntu, Tomcat6, Ngidx, ghostscript, OpenOffice.org, swftools, MySql, Astariskなどだ。このソフトウエア・プロジェクトの名前は、BigBlueButtonという。

実に、素晴らしいソフトウエアで、ローカライズもすごく頑張っている。インターフェースもクールだ。複数名の同時カンファレンスができる。開発者のブログによれば、１９３同時ユーザの会議をホストできたようだ。WebCamによるテレビ会議も２０人までいけたようだ。 Asteriskを使っているのは、普通の電話からも会議に入れるように。この１９３同時ユーザの実験でも、４５人は電話からはいったようだ。

さて、自分の利用を用意にするため、そしてみなさんの実験をするのを容易にできるよう、Ａｍａｚｏｎ　EC2にイメージを作ってみた。

AMI ID: ami-58b7c90a
Name: bbb-0.71-Ubuntu-10.04-64
Description: BigBlueButton 0.71 on Ubuntu 10.04LTS(64bit)
Owner: 457068382909

そして、その取り扱いを容易にするスクリプトも書いてみた。

ubuntuなどのAmazon EC2に対応したLinuxディストリビューションで
apt-get install ec2-api-tools
として必要なツールを導入し、
以下のスクリプトをbbb.shというファイル名で保存しているとすると、

./bbb.sh run

で、EC2上でUbuntu Linuxが起動し、

./bbb.sh status

として起動したことを確認したあとに

./bbb.sh start

とするとサーバが立ち上がり、必要なIP設定を自動でおこないます。

./bbb.sh login

とすると立ち上がったサーバにログインできて、

./bbb.sh stop

とすると終了するはず。
スクリプトは、適宜、Amazon EC2の登録情報を書き換えて欲しい。また、自分がオーナーではないイメージからの起動については実験していないので、うまく動かす方法をしっていたら、教えて欲しい。

Gnucashという会計ソフトがあり、複式簿記ができる。Windowsのバイナリもあり、sqlite3やmysql, PostgresQLもバックエンドに使えるようになってきているんで、共同作業にも使えるようになっている。

メッセージの日本語化も進んでいるので、いろいろ使えると思うが、入力メソッドを使ったときに、変換候補がインラインで表示されない、という仕様になっている。

これは、GTKのインライン要素を不可視にした上で、入力内容をパースして、セルに記入するという動作をしているためである。

gnucashのシートイメージは、gnome officeのひとつ、gnumericのシートのコードが祖先になっているようだ。gnumericのほうでは、入力メソッドを使ったときの動作は改良されているので、同じような改良をgnucashに行う必要がある。

ソースは以下から入手可能
http://svn.gnucash.org/repo/gnucash/trunk

問題のコードは、
gnucash/src/register/register-gnome/gnucash-sheet.c
とおもわれる。

修正内容は、IM Contextの使い方を参照すると酔い。

OpenStreetMap Japanでは、MAPコンシュルジュのご協力で、OSM Japan寄付付きi-gotU　GPXトラッカーの販売を行っていただいたことがある。当初は、Windowsのみの対応だったが、OpenStreetMap JapanのMLでご紹介したように、igotu2gpxというLinuxのクライアントが開発されていた。

最近、みたところ、大変な進化を遂げている。

• GUIが追加された

• 設定ができるようになった
• Windows/Macにも対応するようになった。

わかりやすいところで、GUIを見ていただきたい

起動時画面

地図をズームアップ、メニュー表示

これらのメッセージが日本語なのは、さっき翻訳したから。いずれ、取り込んでもらいます。地図は、もちろんOSMの成果を使っています。

xsane (SANEというスキャナーフレームワークのフロントエンドの一つ）が、SegFaultでおちる。落ちる原因は、Atok3 のiiimp.soだったりする。
env GTK_IM_MODULE= xsane とすると、落ちない。

このリンクにあるように、dell miniのubuntuでは、アーキテクチャがlpia となっていて、i386用パッケージは、アーキテクチャが違うから使えない、とでる。しかし、強制的にインストールすれば使える。というのはとくにアーキテクチャが違うわけでもないから。

でも、強制するのは気分わるいので、パッケージを変換してエラーでないように使用という話。
Ubuntuフォーラムの説明では、１このパッケージを処理するにはいいが、たくさんあるときには、面倒である。たとえば、　ATOKX3を入れたいときとか。

ということで、スクリプトを書いてみた。repack-deb.sh

usage: repack-deb.sh [-t target directory] debian packages..

使い方はこんな感じで、i386用パッケージを複数指定すると、/tmpディレクトリに作業ディレクトリを作成して、元の投稿にあるような処理を自動的におこなう。結果は、実行したカレントディレクトリにパッケージを作成する。また、 -tオプションでディレクトリを指定すると、そのディレクトリに作成したパッケージをおいてくれる。使い方は、-hオプションをつけてみてください。

このスクリプトを使えば、UbuntuのリポジトリにないskypeやATOKなどを容易に導入することができる。

会社にあるDesktopPCには、悲しいかな規定によりMicrosoft Windows XPが搭載されている。普段、Oki mini keyboard (US)を使ってまあまあ快適に仕事をしているが、規定により専用端末よりリモートからデスクトップに安全に接続すると、キーボード設定が日本語１０６キーボードになってしまった。

英語キーボード搭載なのに「地域と言語の設定」が [EN] と [JP] の 2種類存在し、[JP] を選ぶと配列が日本語106キー配列(例えばShift+2が@でなく")になってしまう。[EN] で使うと英語キー配列だが MSIME が利用できない。ドライバは101英語キーボードになっているのだが。これはキーボードを途中で日本語106から英語101に変更したときによく出会う状況だ。

ということだが、rdesktopで日本語キーボードのクライアントから接続するときは、同じ目に遭うことに気がついた方がいい。
実際には、とあるWindows Server 2003 ターミナルサーバから、デスクトップにremote desktop接続したのである。

新年、自分の端末で、Ctrl-Plusが打てない、括弧が逆、とか、いろいろストレスであったが、yooseeさんのおかげで、助かった。

HKEY_LOCAL_MACHINE\SYSTEM\CurrentControlSet\Control\Keyboard Layouts\E0010411\Layout File を見てみると、案の定 KBDJPN.DLL だったので、KBDUS.DLL に変更して再起動

おなじように見てみたら、この項目が案の定の設定になっていたので、アドバイス通りに直して再起動した。もう一つのほうは、従前よりkbd101.dllの設定であった。
もう一つのストレスは、MSIME を殺してATOKを使っているのに、勝手にMSIMEがゾンビのように復活することだ。本当にいらいらする。

最近のiiimf関係の活動は、放置気味で、かつdebian packageのメンテナーであるRoger Soとの連絡もうまくいっていない。（連絡のほうは別件であるが）

しかも、iiimfのメジャーバージョンアップに伴う構成変更でATOKとの相性（？）がとても悪い。

とおもったら、iiimf-client-elも直さないと行けないことが判明して、これは僕の仕事だな。
週末に最新状況をキャッチアップすべく、動きます。

入力周りが(フリーもビジネスも）もっとすっきりするといいんだが...sigh

tachさんのブログでは以下のように記されている

最新の iiimf 関連のパッケージのできがよくなくて，libgtk のアップグレードにともない，gtk immodule が使えなくなってしまった．しばらく xim（iiimf-client-xim）を使っていたんだけど，これが超不安定．ときどき入力が変になることがあって，復旧させるにはアプリの再起動しかない（結局，X のログインセッションからやりなおしたりとか…）．

なので，この不安定さに嫌気が差して，scim-anthy を使っていたんだけど…．これは自分の使い方ではストレスがたくさんたまってしまう…．助詞立ち上がりとかをよく使うので，最初の候補が悲惨な変換になってしまう．しばらく学習させればいけるかなと思ったけど，そう言うレベルではなさそう．なので，強引に問題を解決させて，ATOK を使うことにした．

最新の iiimf deb package で atokx2 を使うには以下の問題がある．

1. iiimf-client-gtk がインストールできない（Bug#419307）
2. iiimf-client-el でつなぐと iiimd が落ちる
3. XIM を立ち上げても，ATOKX のツールバーが出ない

２年前にATOK for Linuxがアップデートしていたことに気がつかず。
IIIMFにも、２行ほどパッチが増えていた。

ということで、Debianパッケージを再構成した。ATOKX2パッケージは
対応しているのだろうか。

ATOK同梱相当のIIIMFのdebianパッケージは、後ほどアップロード予定。

Debian Upgrade

Debian sargeからetchへアップデートを行ったところ、次のようなエラーでログインできんかったり、ターミナルがひらかなくなったりした。


/etc/gdm/Xsession: Beginning session setup...
Setting IM through im-switch for locale=ja_JP.
Start IM through /etc/X11/xinit/xinput.d/ja_JP linked to /etc/X11/xinit/xinput.d/iiimf_atokx2.
PRNG is not seeded


このPRNG is not seededというエラーは、


/dev/urandom
/dev/random


のパーミッションが不正であったために発生。
どうように、ターミナルエミュレータが開けないのは、/dev/ptyのパーミッションが不正になったためだった。

実は、アップグレードしたときに、/etc/udev/permissions.rulesファイルを置き換えるか聞かれたはず。
今回、自前で設定をもっていたので、アップグレードしなかった。
udevシステムのファイル書式が変更になったために、発生していたのだった。

以前は、 KERNEL="misc", MODE="0666"のような設定書式だったのが、代入と条件判断の書式を分離し、ACTION=="add", KERNEL=="misc", MODE="0666"のようになったのだ。

そのほかにも
IM-switchの設定関係が増えている。


/etc/alternatives/xinput-ja_JP
/etc/alternatives/xinput-all_ALL


あたりでシステムデフォルトのIM関係環境変数の設定がされるようになった。
ちなみに、iiimfでATOKを使うには、
/etc/X11/xinit/xinput.d/iiimf_atokx2
を準備し、xinput-ja_JPへとリンクされるようにすればよい。


XIM=htt
XIM_PROGRAM=/usr/bin/httx
XIM_ARGS="-if atokx2 -xim htt_xbe"
XIM_PROGRAM_XTRA=

GTK_IM_MODULE=iiim
QT_IM_MODULE=iiim

DEPENDS=atokx2

HTT_DISABLE_STATUS_WINDOW=t
HTT_GENERATES_KANAKEY=t
HTT_USES_LINUX_XKEYSYM=t
export HTT_DISABLE_STATUS_WINDOW
export HTT_GENERATES_KANAKEY
export HTT_USES_LINUX_XKEYSYM


のようにすればよい。

家族のDebianマシンにもATOKを入れた。手順は確立していたはずなのだが、いくつかTipsがあることに気がついたので、記録を残したいと思う。

apt lineを追加後のインストール方法。
ATOKのCDをマウント後、

#apt-get install iiimf-htt-xbe iiimf-htt-server \
iiimgcf iiimf-client-el atokx2

とする。

.xsessionの記述

続きを読む »

田畑さんから、

自然言語処理の教科書を適当に見ていただければ(内容がわからなかったら、基本的な項目の年代を見てください)読み取れると思います。

というアドバイスがあった。実際、文字検索関係では、Boyer-Moore法やKnuth-Morris-Pratt法あたりを20年くらいまえに月刊アスキーの１９８６年くらいのやつのByte誌あたりの翻訳記事で勉強した覚えがあるが、さすがに中身までは覚えていない。ちなみに、ASCII Vol10,#12 Dec. 1986に掲載された「インタープリタの設計と構築」の記事をスキャンしたのが手元にあったりして、昔はよい記事を保管するのも大変だった。いまは、PDF化されて再利用できて、便利になったものだ。

で、改めて自然言語処理の書籍を探してみた。

続きを読む »

田畑さんのコメントへの私信

コードを見ていただいてCanna, FreeWnnに対してAnthy以降の変換エンジンのアーキテクチャががらりと変わってることに気付いていただければ幸いです。

特許周辺では、重要なアルゴリズムは80年代のAIブーム以前に開発されており、AIブームが冷めて以降に応用が発展したというのが現状のようです。自然言語処理の教科書を適当に見ていただければ(内容がわからなかったら、基本的な項目の年代を見てください)読み取れると思います。

CannaとAnthyを読み比べてみています。パトリシア・トライについて調べてみるか、という気になります。：）

まだまだ見始めですから、まだまだ何もいえません。

続きを読む »

Just SystemsのATOK for X2を買ってきて、Debian GNU/Linux(sarge)に入れると、実は、うまく動かなくて身もだえすることになる。

というのは、Debianに入っているatokx2パッケージは、iiimfパッケージの面倒まで全部見てくれるようになっていないから。そして、Debianに標準で入っているiiimfのバージョンがAtokX2には古いから。ATOKXは動くと思う。

また、Emacs用のクライアントの開発が最近までとまっていたので、AtokX2のＣＤに添付されているiiimfであってもEmacsでは動かない、ということが起こる。

続きを読む »

先日のCodeFestでの私の収穫をまとめておく。
収穫

IIIMF Documentation project
IIIMF document about interface and protocol is quite obsolete. I have tried to update protocol document.

• Internet/Intranet Input Method Protocol Ver.3 RC1
• add 7 functions and remove 1 function
• add 3 general description.

Linux ACPI Hotkey/Video Driver hack
Dacrot Bruno のACPI Videoドライバにより、レッツノート制御可能な手法を開発した。

# echo 4 > /proc/acpi/vide/GRFX/DOS 
# i810switch init 

ただし、i810switchは独自修正必要。

いよいよCodeFestに参加している。

今回は、まず第一にIIIMFのプロジェクトで、アップデートされていないドキュメントを更新するハックだ。OSSのプロジェクトは、ドキュメントを作って更新するというのが非常に重要である。多数の人がコラボレーションするとき、文書がプログラミングやユーザの利用を円滑にする効果がある。

続きを読む »

今日から、IIIMFのヘッドブランチのDebian パッケージのテストを開始。
IIIMECFの動作が変なので、困ってしまった。GTKクライアントは無事動いている。XIMブリッジはまだ動作確認できず。XMODIFIERSの値が変わったのかな。

IIIMECF

IIIMECFのUNIXドメインソケットサポートパッチを１２月ころに作りました。メインストリームに入りました。