2011-02-04

俺とPHP

php

なんか知らないうちにPHPを全然書いたことがないという噂が広まっていて心外すぎるので弁明しておく。長くなるかもしれない。

PHPを使い始めたのはちょうど10年くらい前のことだと思う。4.0.3　あたりが出た頃だ。当時友人たちとシラバスの情報を共有するサイトをつくろうとしていて、PHP を紹介された。データベースに接続してデータの出し入れをするような仕掛けを簡単に作れるという。

それまでは web で何か作るといったら Perl だったし、テンプレートエンジンとかマルチパートパーサとかをまとめたオレオレ web アプリケーションフレームワークを作ってお茶を濁していた。Perl はかなり好きだった。それでも、PHP の手軽さは輝いて見えた。コードをそのまま HTML に埋め込めることでさえ、「poor-man's ASP」だと思って感激していた。マニュアルを見れば、答えが書いてあったから、動くものをあっという間につくり上げることができた。のめり込んでいった。

友人のひとりから、Web 制作会社でのバイトの口を紹介された。PHP で携帯メールを活用したゲームをつくるという。当時は、なぜか頑なに海外からの情報源のみに頼っていたので、mbstring の存在を知らず、iconv 拡張モジュールのみを利用してメール送信を行うプログラムを書くなどした。iconv 関数にバグがあるのを発見して、バグ報告した。はじめてオープンソースのプロダクトに対してパッチを書いた。パッチが採用されて、コミッターにならないかと誘われた。少し迷ったが、断る理由もなかったのでそのとおりにした。

無事ゲームもリリースされ、バイトを辞めることになり、コミッターとして活動する時間を長くとれるようになった。しかし、コミッターとして何をやったらいいのか、見当もつかなかった。そこで、悉にメーリングリストの発言やバグ報告を観察した。やがて、他のコミッターの役割や力関係のようなものが分かってきた。また、プロジェクトとしての目下の問題もわかってきた。バグ報告を処理するところに人手が足りていないようだった。

新しく登録されるバグ報告にひと通り目を通し、自分で処理可能なものは率先して処理することにした。これによって、コミッターとしてのプレゼンスを高めることができ、修正内容によって実力が認められれば、信頼を得られるはずだと思った。そして、その通りになった *1。他の開発者から意見さえ求められるようになった*2。バグ報告者に感謝される喜びが乗じて、さらに作業にのめり込んでいた。今思えば、だいぶ空回りしていたように思う。世界で大勢の人たちが使うプロダクトの品質を、日本の片隅でひとりの人間が日々向上しているのだと思うと、わくわくが止まらなかった。もともとあまり顔を出していなかった大学から、また足が遠のいた。

面白いことばかりでもなかった。PHP のコミッターの一部からは、いい印象を持たれなかったようだ。IRC のコミッターが常駐するチャンネルに出入りするなどして、コミュニケーションの機会を増やすことで理解を得ようとした。ついに、このようなことが発生し、大きくモチベーションを削がれた。大学を卒業することにも力を注がなくてはならなかった。結果、開発からは足が遠のいた。PHP 自体の未来の方向性に対する疑念が生じたというのもあった。

mbstring 拡張モジュールのメンテナンスは長らく廣川さんが行っていたが、多忙のために、廣川さんに代わってバグ報告を処理する機会が多くなった。mbstring が広く使われているということは認識していたので、日常的な開発からは離れたあとも、これだけはコミットメントだと思い、続けた。ある日突然 Facebook の OSS チームから GitHub のクーポンが送られてきた。Facebook も mbstring を利用しているらしく、メンテナンスに感謝したいとのことだった。すこし報われた気がした *3

(※続きを読んだらおっぱいおっぱいと書き込んでください)

*1:phpcredits()で Quality Assurance Team に名前があるのはそのため

*2:このときの議論がPHP stream filterの実装に反映している

*3:以前 id:IwamotoTakashi さんにはてなスターを頂いたのが 7 年間活動してきた中での最初の報酬です。大切に使わせてもらっています。

2011-02-02

なんで PHP をつかいつづけるのか

php

PHP を使い続けたいと思うように PHP 自体を変えていくという発想が必要です。
http://wiki.php.net/rfc/builtinwebserver

2010-12-21

pixiv Tech Meeting #1 にて発表してきました。

pixiv php javascript

ひょんなことで pixiv といろいろ縁があったので発表に至りました。
PHP を JS に変換する「Phjosh (仮)」についてです。

誰にも聞かれなかったのであえて書くと、Phjoshの開発者の脳内発音は「fjosh」みたいな感じです。

Phjosh(仮)プロジェクト

View more presentations from Moriyoshi Koizumi.

GitHubでソースは公開しています。
まだできないことの方が多いので、暇を見て作り込んでいきます。

http://github.com/moriyoshi/phjosh

12/22 追記:
PHP/Parser/Base.php がないと言われますが、これは

kmyacc-forked をインストールして、
http://github.com/moriyoshi/kmyacc-forked

phjosh のディレクトリで make を実行すると生成されます。

2010-12-07

java-ja.js #2 で『AAなゲームをJSで』を発表しました

java-ja javascript

Aaなゲームをjsで

View more presentations from Moriyoshi Koizumi.

動画をAAに変換するデモは以下で観れます。 (動画がTheoraなのでSafariは非対応)

http://dl.dropbox.com/u/673207/aalibtest/index.html

紹介したサンプルコードその1:

<html>
<body>
<pre id="screen" style="width:80ex; height:25em; line-height:100%; color:white; background-color:black"></pre>
<script type="text/javascript">
function repeat(c, n) { return new Array(n+1).join(c); }
var scr = document.getElementById("screen");
var lines = new Array(25);
var lineChars = repeat(" ", 80);
for (var i = 0; i < lines.length; i++) {
    var line = document.createTextNode(lineChars);
    lines[i] = line;
    scr.appendChild(line);
    scr.appendChild(document.createTextNode("\r\n"));
}
function update(x, y, c) {
    var line = lines[y];
    line.nodeValue = line.nodeValue.substring(0, x) + c + line.nodeValue.substring(x + c.length);
}

var x = 0, y = 0;
update(x, y, "*");
setInterval(function() {
    if (x < 80) {
        update(x, y, " ");
        x++;
        update(x, y, "*");
    }
}, 500);
</script>
</body>
</html>

サンプルコードその2:

<html>
<head>
<meta http-equiv="Content-Type" content="text/html; charset=UTF-8" />
</head>
<body>
<pre id="screen" style="width:80ex; height:25em; line-height:100%; color:white; background-color:black; font-family: Osaka, MS Gothic"></pre>
<script type="text/javascript">
function repeat(c, n) { return new Array(n+1).join(c); }
var scr = document.getElementById("screen");
var lines = new Array(25);
var lineChars = repeat("　", 40);
for (var i = 0; i < lines.length; i++) {
    var line = document.createTextNode(lineChars);
    lines[i] = line;
    scr.appendChild(line);
    scr.appendChild(document.createTextNode("\r\n"));
}
function update(x, y, c) {
    var line = lines[y];
    line.nodeValue = line.nodeValue.substring(0, x) + c + line.nodeValue.substring(x + c.length);
}

function updateMultiple(x, y, c) {
    for (var i = 0; i < c.length; i++)
        update(x, y + i, c[i]);
}

var characterE = [
    "　　　　　　　",
    "　　　　　　　",
    "　　　　　　　",
    "　　　　　　　",
    "　　　　　　　"
];

var character = [
    "　＼　｜　／　",
    "　　／￣＼　　",
    "─（゜∀゜）─",
    "　　＼＿／　　",
    "　／　｜　＼　"
];

var x = 0, y = 0;
updateMultiple(x, y, character);
setInterval(function() {
    if (x < 40 - 7) {
        updateMultiple(x, y, characterE);
        x++;
        updateMultiple(x, y, character);
    }
}, 200);
</script>
</body>
</html>

サンプルコードその3:

<html>
<head>
<meta http-equiv="Content-Type" content="text/html; charset=UTF-8" />
</head>
<body>
<pre id="screen" style="width:80ex; height:25em; line-height:100%; color:white; background-color:black; font-family: Osaka, MS Gothic"></pre>
<script type="text/javascript">
function repeat(c, n) { return new Array(n+1).join(c); }
var scr = document.getElementById("screen");
var lines = new Array(25);
var lineChars = repeat("　", 40);
for (var i = 0; i < lines.length; i++) {
    var line = document.createTextNode(lineChars);
    lines[i] = line;
    scr.appendChild(line);
    scr.appendChild(document.createTextNode("\r\n"));
}
function update(x, y, c) {
    var line = lines[y];
    line.nodeValue = line.nodeValue.substring(0, x) + c + line.nodeValue.substring(x + c.length);
}

function updateMultiple(x, y, c) {
    for (var i = 0; i < c.length; i++)
        update(x, y + i, c[i]);
}

var characterE = [
    "　　　　　　　",
    "　　　　　　　",
    "　　　　　　　",
    "　　　　　　　",
    "　　　　　　　"
];

var character = [
    "　＼　｜　／　",
    "　　／￣＼　　",
    "─（゜∀゜）─",
    "　　＼＿／　　",
    "　／　｜　＼　"
];

var c = [];
for (var i = 10; --i >= 0;) {
    var e = { x: Math.random() * (40 - 7) | 0, y: Math.random() * (25 - 5) | 0 }
    c.push(e);
    updateMultiple(e.x, e.y, character);
}
setInterval(function() {
    for (var i = c.length; --i >= 0; )
        updateMultiple(c[i].x, c[i].y, characterE);
    for (var i = c.length; --i >= 0; ) {
        c[i].x++;
        updateMultiple(c[i].x, c[i].y, character);
    }
}, 200);
</script>
</body>
</html>

2010-11-13

Python Hack-a-thon で発表してきました!!

python c ctypes

今回は資料の作成が後手に回ってしまい、運営の方々や発表者の皆様には大変迷惑をおかけしました。

さて、今回は ctypes 拡張モジュールに関する内容を発表させていただきました。

ctypes拡張モジュール

View more presentations from Moriyoshi Koizumi.

php-in-python の使い方

PHP-in-Pythonには、まだドキュメントがありません。インストール方法を簡潔に説明します。

a. Windowsの場合

windows.php.netよりThread-safe版のPHPのバイナリをダウンロードします。
ダウンロードしたアーカイブを適当なディレクトリに展開します。
展開された中身に含まれているphp5ts.dllの場所がPATH環境変数に含まれるようにします。

b. Linux等Free Unixの場合

php.netよりPHPのソースコードをダウンロードします。
ソースコードを configure に --enable-maintainer-zts および --enable-embed=shared を渡す形でビルドします。
make install します。
インストールされた ${PREFIX}/lib/libphp5.so が共有ライブラリとして読み込めるように、${PREFIX}/lib が LD_LIBRARY_PATH に含まれるようにします。

以上の手順を踏んだ後で、

import php
print php.eval("1 + 2")

のようにすると、1 + 2 が PHP のインタプリタで評価され、その結果が Python に返されます。

import php
print php.run("test.php")

のようにすると、test.php が実行されます。

リクエストパラメータを PHP の実行環境に渡したい場合は

import php
php.eval("var_dump($_GET['aaa'], $_POST['bbb']);", query_string="aaa=GET", content_type="application/x-www-form-urlencoded", post_data="bbb=POST")

のようにします。

おまけ

Mac OS X 上で、ctypes拡張モジュールを使ってダイアログボックスを出すコード。

import ctypes

kCFUserNotificationStopAlertLevel = 0
kCFUserNotificationNoteAlertLevel = 1
kCFUserNotificationCautionAlertLevel = 2
kCFUserNotificationPlainAlertLevel= 3
kCFUserNotificationNoDefaultButtonFlag = (1 << 5)
kCFUserNotificationUseRadioButtonsFlag = (1 << 6)
kCFStringEncodingUTF8 = 0x08000100

dll = ctypes.CDLL('/System/Library/Frameworks/CoreFoundation.framework/CoreFoundation')

dll.CFStringCreateWithCString.restype = ctypes.c_void_p
dll.CFStringCreateWithCString.argtypes = (
    ctypes.c_void_p,
    ctypes.c_char_p,
    ctypes.c_int)

dll.CFRelease.argtypes = (ctypes.c_void_p,)

dll.CFUserNotificationDisplayNotice.argstype = (
    ctypes.c_double,
    ctypes.c_ulong,
    ctypes.c_void_p,
    ctypes.c_void_p,
    ctypes.c_void_p,
    ctypes.c_void_p,
    ctypes.c_void_p,
    ctypes.c_void_p)

dll.CFStringCreateWithCString.restype = ctypes.POINTER(ctypes.c_int)
title = dll.CFStringCreateWithCString(None, 'Hey', kCFStringEncodingUTF8)
message = dll.CFStringCreateWithCString(None, 'Hello, binary world.', kCFStringEncodingUTF8)

try:
    dll.CFUserNotificationDisplayNotice(
        ctypes.c_double(0.), kCFUserNotificationNoteAlertLevel,
        None, None, None, title, message, None)
finally:
    dll.CFRelease(title)
    dll.CFRelease(message)

2010-11-13

■

http://d.hatena.ne.jp/moriyoshi/20101113/1289663233

2010-09-26

Linux上で動くSkype用のbotを作る方法

はじめに

以前、知人のやっているBeProudという会社を手伝ったのですが、BeProudでは、エンジニアの主要なコミュニケーション手段としてSkypeが使われていました。当時、趣味でたまたまSkypeのAPIについて調べていたので、悪戯っ気を出して、開発環境に即席でSkype APIを使ったbotを設置してみたところ、思いのほか好評を博し、いまやインフラと言っても過言ではない存在 *1 *2と化したようです。

まあそんな状況を眺めつつ、自宅のサーバにSkype botを設置して、お気に入りのSkypeチャットにもbotを加えてみたところ、これも結構好評だったので、興味ありそうな人向けに作成方法をまとめることにします。

Skype Public API

Skype Public APIとは、Skypeを外部からコントロールするためのインターフェイスです。

Skype Public APIをLinux上で簡単に利用するには、スクリプト言語バインディングであるSkype4PyかPHP Skype API wrapperがおすすめですが、ここでは準公式な位置付けでAPIが充実しているSkype4Pyを使います。

Skype4Pyのインストール

Ubuntuであれば、multiverseに「python-skype」というパッケージ名で収録されているので、aptitude一発でインストールできます。OpenSUSEにも「python-Skype4Py」というパッケージがあるようです。

他のディストリビューションでも、setuptools経由で簡単にインストールできます。

$ easy_install Skype4Py

Skype4Pyを試す

最初は肩ならしにPythonのインタラクティブモードでSkype4Pyを使ってみることにします。

手元にまずXが立ち上がっていてSkypeが使える環境を用意してください。また、必要に応じてbot用のアカウントも取得しておきます。

Skypeを起動し、ユーザ名パスワードを入力して、サインインしたところで、ターミナルを開き、Pythonを立ち上げます。

Python 2.6.5 (r265:79063, Apr 16 2010, 13:57:41) 
[GCC 4.4.3] on linux2
Type "help", "copyright", "credits" or "license" for more information.
>>>

Skype4Pyをインポートして、Skypeオブジェクトを生成し、Attach()メソッドを呼びます。

>>> import Skype4Py
>>> skype = Skype4Py.Skype()
>>> skype.Attach()

最初にこの操作を行うとき、SkypeはAPIを利用するアプリケーションを信用してもよいかを確認するプロンプトを出し、APIの呼び出し側はこのプロンプトに対して選択が行われるまでブロックします。ここでは、もちろん[はい]を選択します。

選択が終わると、再びPythonのインタラクティブモードに処理が戻ります。

手始めにコンタクト一覧を取得し、その名前を表示してみましょう。

>>> skype.Friends
(<Skype4Py.user.IUser object at 0x7f6cb3876890 with Handle=u'echo123'>, <Skype4Py.user.IUser object at 0x7f6cb38766d0 with Handle=u'moriyoshi_koizumi_2nd'>)
>>> for user in skype.Friends: print user.Handle, user.FullName
... 
echo123 Skype Test Call
moriyoshi_koizumi_2nd moriyoshi

次に、Skype Test User (echo123) に向かって何かメッセージを送信してみましょう。

>>> chat = skype.CreateChatWith("echo123")
>>> chat.SendMessage("test")
<Skype4Py.chat.IChatMessage object at 0x7f67bde5c690 with Id=82>
>>> chat.SendMessage(u"テスト")
<Skype4Py.chat.IChatMessage object at 0x7f67bde5c950 with Id=85>

チャットウィンドウを開くと、echo123に対してメッセージが送られ、同じ内容がecho123によってエコーバックされていることが確認できると思います。

では、メッセージ受信などのイベントが発生したときに特定の処理を行うイベントハンドラを試してみます。

>>> def handler(msg, event):
...     print event
... 
>>> skype.OnMessageStatus = handler
>>> chat.SendMessage("???")
<Skype4Py.chat.IChatMessage object at 0x7f67bde5c890 with Id=125>
>>> SENDING
SENT
RECEIVED
>>> def handler(msg, event):
...     if event == u"RECEIVED":
...         print msg.Body
...
>>> skype.OnMessageStatus = handler
>>> chat.SendMessage(u"＼(^o^)／")
<Skype4Py.chat.IChatMessage object at 0x7f67bc484190 with Id=138>
>>> tof-bot 2010.09.26 02:33:10 ＼(^o^)／

以上を踏まえて、「やっぱり」というメッセージを受信すると「猫が好き」と返すbotを書いてみましょう。

# encoding: utf-8

import Skype4Py
import time

def handler(msg, event):
    if event == u"RECEIVED":
        if msg.Body == u"やっぱり":
            msg.Chat.SendMessage(u"猫が好き")

def main():
    skype = Skype4Py.Skype()
    skype.OnMessageStatus = handler
    skype.Attach()
    # イベントハンドラは別スレッドにて実行されるので、
    # 本スレッドではひたすらsleepしてスクリプトが終了しないようにしておく。
    while True:
        time.sleep(1) 

if __name__ == "__main__":
    main()

これを

$ python yappari.py

のように起動して、別マシンから「やっぱり」を送信してみましょう。次のスクリーンショットのようになれば成功です。

例がすみませんね昭和で。

と、まあ、どうでしょう、たったこれだけのAPIを覚えれば、botが作れてしまうということがわかったのではないかと思います。

Skypeをデーモン化する

と、これまでSkypeが予め立ち上げられたGUI環境上でSkype Public APIを利用する方法を説明しましたが、これではサーバに設置するのがやや面倒です。非GUI環境でSkypeを起動し、それを利用してbotを書くことはできないものでしょうか。そのような時に威力を発揮するのがXvfbです。Xvfbとは、その名前のvfbがvirtual framebufferから由来していることからもわかるように、フレームバッファ (画面への出力内容を蓄えておくメモリ) として、ビデオカードを使うのではなく、RAM上に確保した仮想フレームバッファを使うというXの実装です。これを使うことで、CUI環境下でXサーバを簡便に扱うことができます。

Xvfbの起動方法は簡単で、Xのディスプレイ番号を引数に与えるだけです。

$ Xvfb :20

デフォルトではスクリーンサイズが1280x1024でピクセルの深さが24となります。これを変更するときは

$ Xvfb :20 -screen 0 800x600x8

のように-screenオプションを指定します。一般に、画面サイズが小さければ小さいほど、ピクセルの深さが小さければ小さいほど、必要なフレームバッファのサイズが小さくなり、省メモリとなります。Skypeはかろうじて画面サイズ800x600、ピクセルの深さ8で動作させることができます。

Xvfb上で動くアプリケーションを外部から操作するには、VNCを利用します。VNCサーバの実装はいろいろありますが、コマンドラインから手軽に使える、各種ディストリビューションでパッケージが用意されているという点でx11vncをおすすめします。

x11vnc の利用方法も簡単で、

$ x11vnc -display :20

のようにXのディスプレイ番号を与えるだけです。デフォルトの接続ポート番号は5900番ですが、これを変更するには-rfbportオプションを指定します。

と、能書きはここまでにして、CentOSなどRedHat系のディストリビューションやDebian系のディストリビューションで動くinitスクリプトをとりあえず貼ります。sudoを使っているので、デフォルトでインストールされていない環境にはあらかじめインストールしておいてください。

このスクリプトはDAEMON_USERで指定されたユーザでXvfbおよびskypeを起動または停止します。/etc/init.d以下にinitスクリプトとして設置して以下のように使います。

起動

$ /etc/init.d/launch-skype.sh start

停止

$ /etc/init.d/launch-skype.sh stop

initスクリプトがOS起動時に自動的に呼び出されるように設定する方法は、各ディストリビューションのドキュメントを参照してください。

起動ログは/var/log/skype以下に、xauth cookieは/var/run/skype以下に保存するので、あらかじめこれらのディレクトリをDAEMON_USERで読み書きできるように作成しておく必要があります。
Skypeでサインインするユーザ名とパスワードはそれぞれUSERNAMEとPASSWORDで指定しますので、ここを適宜編集してください。
XSERVERNUMはXvfbのディスプレイ番号を指定します。
DBPATHはSkypeが設定情報などを書き込む先のディレクトリです。これもDAEMON_USERで読み書きできるようにしておいてください。

このスクリプトで起動されたskypeの環境にx11vncでアクセスするには、次のようにします。

$ sudo -u skype x11vnc -xauth /var/run/skype/Xauthority

初期起動時の設定

初期起動時、VNCクライアントで接続すると次のような画面となっているはずです。

ここで[I agree]を選択すると、自動的にログインが開始されます。

次に、Skype4Pyをインタラクティブモードで起動して、Skype Public APIへのアクセス許可を設定します。
x11vncの起動で指定したように、envコマンドなどでDISPLAY環境変数とXAUTHORITY環境変数をあらかじめ設定した状態でpythonを起動する必要があります。

$ env DISPLAY=:20 XAUTHORITY=/var/run/skype/Xauthority python
Python 2.6.5 (r265:79063, Apr 16 2010, 13:57:41) 
[GCC 4.4.3] on linux2
Type "help", "copyright", "credits" or "license" for more information.
>>> import Skype4Py
>>> skype = Skype4Py.Skype()
>>> skype.Attach()

前節で説明したように一旦Attach()でブロックした状態になりますので、ここでVNCを使ってプロンプトを操作します。

必ず[Remember this selection]にチェックを入れてから[Yes]を選択してください。でないと、botを起動するたび、毎度この操作をVNCから行わなくてはならなくなってしまいます。

以上で初期起動時の設定は完了です。

botを動かす

上の初期起動時の設定に出てきたコマンドラインをそのまま利用します。

$ env DISPLAY=:20 XAUTHORITY=/var/run/skype/Xauthority python bot.py

のようにして起動してください。

おわりに

Skype public APIやその利用方法について解説している日本語の情報があまりないため、敷居が高くなっていた印象を受けますが、この記事が少しでも足しになれば幸いです。

注意点として、Skypeは基本的にP2Pアプリケーションなので、一般的なチャットクライアントとは違い、勝手にさまざまなノードと接続を開始してしまいます。サーバで運用するときは、そのサーバの属するネットワークの管理者に管理ポリシーなどを確認したほうがよいでしょう。

ちなみに、今のところ、さくらのVPS、EC2でSkypeを動かすことができています。

あわせて読みたい:
「PythonでSkypeにロギングする」

*1:http://twitter.com/shin_no_suke/status/25658845058

*2:http://www.slideshare.net/bpstudy/bpstudy36-beproudbot-5319457