huginn
履歴閲覧: 最新 2016/05/12 2015/10/25 2015/10/24 2015/10/23 2015/10/23 2015/10/22 2015/10/22 2015/08/08 2015/05/01 2015/04/26 2015/04/19 2015/01/07 2014/10/17 2014/05/25 2014/04/09 2013/11/21 2013/11/21 2013/11/20 2013/11/20 2013/11/20 2013/11/19 2013/11/05 2012/10/11 2012/08/16 2012/08/16 2012/07/09 2009/06/03 2009/06/02 2007/01/04 2006/05/16 2005/09/24 2005/02/20 2004/04/08 2004/03/15 2004/03/15 2004/01/05 2004/01/02 {2003/09/12[差分表示]}
huginn(フギン)は、perl汎用のWorld Wide Web更新時刻取得システムです。
実行環境.
- perlのバージョン5以降が必要です。
- jcode.plが必要です。一次配布元(ftp://ftp.iij.ad.jp/pub/IIJ/dist/utashiro/perl/)などから取得してください。
- 動作には、設定ファイルの準備が必要です。
動作サンプル.
http://ynwhite.dyndns.org/~white/ にて、サンプルが動いてます。
最新版ダウンロード.
2.04版 tar.gz形式
内容物.
- libhuginn.pm:ライブラリ
- DateCheck?.pl:時刻取得スクリプトサンプル
- huginn.conf:設定ファイル1
- dot.huginnrc:設定ファイル2
- huginn_testmacro.pl:マクロ確認用スクリプト
BBS.
使い方.
- アーカイブを取得し、適当な場所で解凍。
- libhuginn,pm、huginn.confを、perl5のライブラリ読み取りパスに入れる。(PERL5LIB環境変数で設定する、適当なsite-perlディレクトリに入れる、スクリプト実行時に@INCで設定する、など)
- huginn.confを適当に書き変える。$resulthtmlとか$gzipとかがわりと重要。
- huginn.confで設定した場所に、'dot.huginnrc'を'.huginnrc'に改名して入れる。
- .huginnrcに、取得したいページのエントリを記述する。
- DateCheck?.plを動かします。ネットワークにガシガシと負荷をかけながら、huginn.confで設定したいろんなファイルがごそごそと作られます。
- ちゃんと動作しているようなら、cronでぶん回すなり、定期的に手動で動かすなり、お好みに合わせて環境構築してください。
なんかめんどくさいと思ったら、.huginnrcだけホームディレクトリに置いて、他は全部同じディレクトリに放りこんでください。たぶんなんとかなります。
設定ファイルの記述方法については、サンプルをみて根性入れてください。あるいは、dot.huginnrcとかを見てもよいかと思います。よーわからんかったら質問してください。そうするとドキュメントが増えて幸せになれます。
書こうとするマクロが正しいもんかどうかは、huginn_testmacro.plでテストできます。% ./huginn_testmacro.pl 'マクロ'とかやってください。
取得方法.
以下の順で更新時刻情報の取得を試します。
- リモート情報(hina.di、hina.txt、LIRS)
- HEADリクエストで取れる最終更新時刻
- GETリクエストで取得した本文中の、それっぽい文字列
- GETリクエストで取得した本文の長さの変化量
バカスカ出力が変わる困ったちゃんなiswebやらgeocitiesのためにそれ用のフィルタもあったりします。動作はあんまり保証しません。使い方は適当にどうぞ。
今後の予定.
- hina.diとか吐くようにする(書きかけで止まってる)。
- 設定ファイルを一つにまとめる。
- ドキュメントを書く。
- コードを整理する。
- メタ情報流通系での思考の結果を反映させて、メタ情報流通・交換系に育てるかも。大改造っていうか別物になると思うけど。
- その他なんぞあるならこちらに書きこむとよろし。
開発状況.
- 2003.09.11 2.04 URLに"?"が入っている場合のタイムスタンプの付け方を変更
- 2003.06.11 2.03 完全スペルのアルファベット月表記に対応
- 2003.05.08 2.02 notimestampオプションの追加 , slashcodeフィルタの追加
- 2002.10.02 2.01a7 huginnDBのインポート機能を追加。
- 2002.08.03 2.01a6 取得時メタ情報優先順位を変更。
- 2002.07.23 2.01a5 取得設定にnoremoteオプションを追加
- 2002.03.08 2.01a4 マクロに"%0d"を追加。
- 2002.02.28 2.01a3 内容物にhuginn_testmacro.plを追加。マクロ処理を少しだけマシに。
- 2002.02.18 2.01a2 クロスサイトスクリプティング脆弱性対策版2.01a2
- 2002.01.29 2.01a1 こっそり開発していた2.01a1版を公開。
- ???? 1.20版: 時刻取得スクリプト本体、実行用ライブラリ、設定ファイルサンプル
名前の由来.
huginnは、北欧神話の神オーディン(Odin)の持つ二羽のカラスの片割れで、「思考」を象徴するものです。
権利表示.
huginn の改造・利用は基本的に自由です。ただし、改造の有無に関わらず、再配布の際には、取得者になんらかの形で原情報所在地へのポインタ(2003年9月12日現在:http://white.niu.ne.jp/yapw/yapw.cgi/huginn)を明示してください。