Kaz Muzik Blog

all blog entries fetched with curl

2009-05-28T17:30:37Z

1年前には、Nutch (0.9) を利用して、このブログのエントリをすべて fetch して、以降は、同様に差分だけを fetch して、これらの HTML をコンバートして、kazmuzik.net/lj を作成していました。しかし、各エントリのページだけならよいのですが、Tag のページや最新の 20エントリを含むページなども、その都度、fetch してコンバートしていたので、かなり無駄な作業をしていました。効率化する構想はずっとあったのですが、つい延ばし延ばしになっていました。今回は、web hosting service を利用し始めたので、本格的にブログを移行するため、本格的に手を入れることにしました。

まずは、各エントリページの fetch の部分を curl を用いることにしました。以前は Nutch を使っていたものの、depth=1 で、seeds のページだけを fetch していたので、crawler としては活用していませんでしたし、Hadoop ファイルシステムにデータがあったので、扱いが面倒になっていました。今回は curl によるシンプルな fetch として、各エントリごとに、ひとつのファイルとします。

その前に、自分のエントリの ID をすべて得ておく必要があります。これには、月ごとのページを利用することにします。例えば、今月のページは、http://kazuomik.livejournal.com/2009/05/ ですが、これから今月のエントリの ID をすべて得ることができます。このブログは 2006年から始めたので、それ以降の月のページをすべて curl で fetch します。

$ curl http://kazuomik.livejournal.com/[2006-2009]/[01-12]/ -o "#1-#2.html"
$ ls
2006-01.html	2006-11.html	2007-09.html	2008-07.html	2009-05.html
2006-02.html	2006-12.html	2007-10.html	2008-08.html	2009-06.html
2006-03.html	2007-01.html	2007-11.html	2008-09.html	2009-07.html
2006-04.html	2007-02.html	2007-12.html	2008-10.html	2009-08.html
2006-05.html	2007-03.html	2008-01.html	2008-11.html	2009-09.html
2006-06.html	2007-04.html	2008-02.html	2008-12.html	2009-10.html
2006-07.html	2007-05.html	2008-03.html	2009-01.html	2009-11.html
2006-08.html	2007-06.html	2008-04.html	2009-02.html	2009-12.html
2006-09.html	2007-07.html	2008-05.html	2009-03.html
2006-10.html	2007-08.html	2008-06.html	2009-04.html
$

一部、不要な月もありますが、データはないので気にする必要はありません。

次に、これらの HTML のパターンを解析して、ID を抽出します。

$ cat *.html | grep 'm:  <a href="http://kazuomik.livejournal.com/' \
| sed -e 's/^.*livejournal\.com\///' -e 's/\.html\">.*$//' \
| sort -k1nr \
> id.txt
$ cat id.txt
341891
341649
341249
341145
340856
340482
340465
340137
339949
339476
...
2603
2409
2080
1960
1598
1332
1120
1008
722
495
$ wc -l id.txt
    1335 id.txt
$

1,335 のエントリがありました。

あとは、各エントリのページをひとつずつ fetch します。

$ cat curl-all.sh
#!/bin/sh
for N in `cat id.txt`
do
  curl http://kazuomik.livejournal.com/${N}.html -o ${N}.html
done
$ sh curl-all.sh
  % Total    % Received % Xferd  Average Speed   Time    Time     Time  Current
                                 Dload  Upload   Total   Spent    Left  Speed
100 55323  100 55323    0     0   124k      0 --:--:-- --:--:-- --:--:--  630k

...
  % Total    % Received % Xferd  Average Speed   Time    Time     Time  Current
                                 Dload  Upload   Total   Spent    Left  Speed
100 52824  100 52824    0     0  78390      0 --:--:-- --:--:-- --:--:--  142k
$

25分程度で、1,335 すべてのエントリが fetch できました。

tags changed

2009-05-28T14:04:28Z

ブログの移行に伴い、簡単なプログラムを Java で書いていましが、Tag の扱いを簡単にするために、Tag の管理で、いくつか rename しました。

まず、"music technology" のように空白が含まれているものは、アンダーバーで置き換えて、"music_technology" としました。また、"recycle / rebate" の "/" も扱いが厄介なので、"and" に置き換えました。

日本語の tag をどうするかは悩みましたが、英語にすることにしました。「日本語」-> "japanese", 「アメリカ生活」-> "american_life", 「アメリカでの転職」-> "jobs_in_america" としました。

simple script for Twitter API (#5)

2009-05-12T12:59:00Z

Twitter REST API では、1回の API call で、200個までの updates しかとれないので、今までは、2回 call して、手作業で、ひとつのファイルにまとめていました。そこで、簡単な shell script を書きました。

#!/bin/sh

name="kazmuzik"
date=`date +"%Y%m%d"`
tmpfile="tmp-${date}.xml"
xmlfile="${name}-${date}.xml"
url="http://twitter.com/statuses/user_timeline.xml"

curl "${url}?screen_name=${name}&count=200&page=1" > $tmpfile
n=`cat $tmpfile | wc -l`
n=`expr $n - 1`
head -$n $tmpfile > $xmlfile
rm -f $tmpfile

curl "${url}?screen_name=${name}&count=200&page=2" | tail +3 >> $xmlfile

かなり手抜きしたので、400個を超えたら、また修正する必要があります。しかし、その頃には別の方法を試していると思うので、今のところこのままにしておきます。

net.kazmuzik.twitter package : XML to HTML (#4)

2009-05-10T16:40:45Z

Twitter でのつぶやき(update)を、REST API Timeline Method を用いて、ひとつの XML ファイルにしましたが、ここでは、それを HTML に変換して、このブログに取り込みやすいようにします。本来ならば、JAXP などの XML ライブラリを用いるべきですが、ある事情で、最近は、シンプルな String クラスのみを用いて、parser をがりがり書くことが多いので、手っ取り早く、そちらで強引にやってしまいました。また、一部、手抜きをしているところもあります。

まずは、ひとつの status に対応するオブジェクトですが、とりあえず create_at (time) と text が最低限必要です。また、今後の拡張を考慮して、それに id (long) を加えておきました。

package net.kazmuzik.twitter;

import java.io.Serializable;
import java.util.Date;

public class TwitterStatus implements Serializable {
  private Date time;
  private long id;
  private String text;

  public TwitterStatus() {
  }

  public Date getTime() {
    return time;
  }

  public long getId() {
    return id;
  }

  public String getText() {
    return text;
  }

  public void setTime(Date time) {
    this.time = time;
  }

  public void setId(long id) {
    this.id = id;
  }

  public void setText(String text) {
    this.text = text;
  }
}

次は、XML ファイルを読み込んで、上記のオブジェクトを返す Reader (parser) です。

package net.kazmuzik.twitter;

import java.io.BufferedReader;
import java.io.IOException;
import java.io.InputStream;
import java.io.InputStreamReader;
import java.io.OutputStreamWriter;
import java.io.PrintWriter;
import java.io.Reader;
import java.util.Date;

public class TwitterXMLReader extends BufferedReader {
  private static final boolean debug = false;

  private static final String tag0 = "<created_at>";
  private static final String tag1 = "<id>";
  private static final String tag2 = "<text>";
  private static final String tag3 = "</status>";
  private static final int tag0len = tag0.length();
  private static final int tag1len = tag1.length();
  private static final int tag2len = tag2.length();

  public TwitterXMLReader(Reader in) throws IOException {
    super(in);
  }

  public TwitterXMLReader(InputStream in) throws IOException {
    super(new InputStreamReader(in, "UTF-8"));
  }

  public TwitterStatus readStatus() throws IOException {
    TwitterStatus status = new TwitterStatus();
    int tag = 0;
    while (true) {
      String line = readLine();
      if (line == null) {
        return null;
      }
      if (debug) {
        System.err.printf("%d: %s%n", tag, line.trim());
      }
      if (tag == 0) {
        int n = line.indexOf(tag0);
        if (n < 0) {
          continue;
        }
        n += tag0len;
        int m = line.indexOf('<', n);
        if (m < 0) {
          return null;
        }
        Date time = parseTime(line.substring(n,m));
        status.setTime(time);
        if (debug) {
          System.err.printf("#: time=%TF %TT%n", time, time);
        }
        tag = 1;
        continue;
      }
      else if (tag == 1) {
        int n = line.indexOf(tag1);
        if (n < 0) {
          continue;
        }
        n += tag1len;
        int m = line.indexOf('<', n);
        if (m < 0) {
          return null;
        }
        long id = Long.parseLong(line.substring(n,m));
        status.setId(id);
        if (debug) {
          System.err.printf("#: id=%d%n", id);
        }
        tag = 2;
        continue;
      }
      else if (tag == 2) {
        int n = line.indexOf(tag2);
        if (n < 0) {
          continue;
        }
        n += tag2len;
        int m = line.indexOf('<', n);
        if (m < 0) {
          return null;
        }
        String text = convertEntities(line.substring(n,m));
        status.setText(text);
        if (debug) {
          System.err.printf("#: text=%s%n", text);
        }
        tag = 3;
        continue;
      }
      else if (tag == 3) {
        int n = line.indexOf(tag3);
        if (n < 0) {
          continue;
        }
        return status;
      }
    }
  }

  private static String convertEntities(String text) {
    StringBuilder sb = new StringBuilder();
    int n = 0;
    int x = 0;
    for (char c : text.toCharArray()) {
      if (n == 0) {
        if (c == '&') {
          n = 1;
        }
        else {
          sb.append(c);
        }
        continue;
      }
      else if (n == 1) {
        if (c == '#') {
          n = 2;
          x = 0;
        }
        else {
          sb.append('&');
          sb.append(c);
          n = 0;
        }
        continue;
      }
      else if (n == 2) {
        if (c == ';') {
          sb.append((char)x);
          n = 0;
        }
        else if (c < '0' || c > '9') {
          sb.append(c);
          n = 0;
        }
        else {
          x *= 10;
          x += (c - '0');
        }
        continue;
      }
    }
    return sb.toString();
  }

  private static Date parseTime(String s) {
    return new Date(s);
  }
}

あとは、これを用いて、適当な HTML に変換してやります。

import java.io.InputStream;
import java.io.FileInputStream;
import java.io.OutputStreamWriter;
import java.io.PrintWriter;
import java.util.Date;
import net.kazmuzik.twitter.TwitterStatus;
import net.kazmuzik.twitter.TwitterXMLReader;

public class TwitterXMLConverter {
  public static void main(String[] args) throws Exception {
    InputStream is = System.in;
    if (args.length > 0) {
      is = new FileInputStream(args[0]);
    }
    TwitterXMLReader in = new TwitterXMLReader(is);
    PrintWriter out = new PrintWriter(new OutputStreamWriter(System.out, "UTF-8"));
    out.println("<html><head>");
    out.println("<meta http-equiv=\"Content-Type\" content=\"text/html; charset=utf-8\" />");
    out.println("</head><body>");
    out.println("<ul>");
    Date prevTime = null;
    while (true) {
      TwitterStatus status = in.readStatus();
      if (status == null) {
        break;
      }
      Date time = status.getTime();
      String text = addATag(status.getText());
      if (prevTime != null) {
        if (time.getDay() != prevTime.getDay()) {
          out.println("</ul>");
          out.println("<ul>");
        }
      }
      out.printf("<li><i><font color=#0000cc>%TF %TT</font> "
               + "<a href=\"http://twitter.com/kazmuzik\">"
               + "<font color=#00cc00>#%d</font></a></i><br>",
                 time, time, status.getId());
      out.printf("%s<br>&nbsp;</li>%n", text);
      prevTime = time;
    }
    out.println("</ul>");
    out.println("</body></html>");
    out.flush();
    out.close();
  }

  private static String addATag(String text) {
    StringBuilder sb = new StringBuilder();
    int n = 0;
    while (true) {
      int m = text.indexOf("http://", n);
      if (m < 0) {
        sb.append(text.substring(n));
        break;
      }
      sb.append(text.substring(n,m));
      n = text.indexOf(' ', m);
      String url = null;
      if (n < 0) {
        url = text.substring(m);
      }
      else {
        url = text.substring(m, n);
      }
      sb.append("<a href=\"");
      sb.append(url);
      sb.append("\">");
      sb.append(url);
      sb.append("</a>");
      if (n < 0) {
        break;
      }
    }
    return sb.toString();
  }
}

これを実行して、HTML ファイルを作ります。

$ mkdir classes
$ javac -d classes *.java
$ java -classpath classes TwitterXMLConverter kazmuzik.xml > kazmuzik.html
$

これを、一日分ずつ、cut & paste で、ブログのエントリに貼付けていきました。5/8/2009 のサンプルです。とりあえず、5月分だけ、作成しました。

せっかくなので、復習もかねて、JAXP でも使えば良かったかな、と反省しています。

2009-05-11 update
Header に UTF-8 を指定しておきました。

Twitter REST API (#3)

2009-05-10T16:05:00Z

4月は、このブログを更新する時間もありませんでしたが、その分、なるべく Twitter でつぶいていました。そこで、Twitter API を用いて、なるべく簡単にこのブログに取り込んでみることを考えてみました。

Twitter API は、HTTP ベースで、Search API と REST API があります。今回は、REST API Timeline method の statuses/user_timeline を用います。HTTP ベースなので、curl コマンドで簡単にテストできます。

$ curl 'http://twitter.com/statuses/user_timeline.xml?screen_name=kazmuzik&count=200' > kazmuzik.xml
  % Total    % Received % Xferd  Average Speed   Time    Time     Time  Current
                                 Dload  Upload   Total   Spent    Left  Speed
100  414k  100  414k    0     0   603k      0 --:--:-- --:--:-- --:--:--  809k
$ cat kazmuzik.xml
<?xml version="1.0" encoding="UTF-8"?>
<statuses type="array">
<status>
  <created_at>Sun May 10 15:38:12 +0000 2009</created_at>
  <id>1755243926</id>
  <text>140&#25991;&#23383;&#12391;&#34920;&#29694;&#12391;&#12365;&#12427;&#20869;&#23481;&#12391;&#12377;\
&#12364;&#12289;&#33521;&#35486;&#12384;&#12392;&#26085;&#26412;&#35486;&#12398;&#21322;&#20998;&#20197;\
&#19979;&#12395;&#12394;&#12387;&#12390;&#12375;&#12414;&#12356;&#12414;&#12377;&#12290;&#12354;&#12427;\
&#31243;&#24230;&#12289;&#20013;&#36523;&#12364;&#12354;&#12427;&#22580;&#21512;&#12399;&#12289;&#26085;\
&#26412;&#35486;&#12364;&#22311;&#20498;&#30340;&#12395;&#26377;&#21033;&#12391;&#12377;&#12290;&#12371;\
&#12428;&#12418;&#12289;Unicode&#12364;&#26222;&#21450;&#12375;&#12390;&#12365;&#12383;&#12362;&#12363;\
&#12370;&#12391;&#12377;&#12290;</text>
  <source>web</source>
  <truncated>false</truncated>
  <in_reply_to_status_id></in_reply_to_status_id>
  <in_reply_to_user_id></in_reply_to_user_id>
  <favorited>false</favorited>
  <in_reply_to_screen_name></in_reply_to_screen_name>
  <user>
    <id>26517941</id>
    <name>Kaz Muzik</name>
...
    <statuses_count>204</statuses_count>
    <notifications></notifications>
    <following></following>
  </user>
</status>
</statuses>
$

1回の API call で取得できる上限は 200個です。現在のところ、すでにその上限を超えているので、2ページ目も取得して、concatenate してから、つなぎの 3行をマニュアルで削除して、ひとつの XML ファイルにしました。

$ curl 'http://twitter.com/statuses/user_timeline.xml?screen_name=kazmuzik&count=200&page=2' >> kazmuzik.xml
$ vi kazmuzik.xml
$

これで、自分の今までのつぶやきがすべてひとつの XML ファイルに収まりました。ただし、上記の例のように、このままでは、扱いに不便なので、次は、これを加工してみます。

Twitter 2009-05-07

2009-05-10T04:01:12Z

2009-05-07 17:48:23 #1732840190
先ほど、USPS (郵便局)へ行きましたが、5/11/2009に再び料金が値上げされるようです。しかし、ここのところの度重なる値上げにも関わらず、サービスの質は落ちているように思います。日本に Priority Mailを送ったところ、確か以前は trackingできたはずが..
2009-05-07 07:11:57 #1727345534
Mixerはラックに組み込んであるので、手元に volumeや muteなどを手っ取り早くコントロールできる小型のシンプルな mixerが欲しいところです。BEHRINGER XYNIX 502 http://tr.im/kJHd あたりがちょうど良さそう...
2009-05-07 06:50:04 #1727170568
massey pluginsの L2007 http://tr.im/kJzV を購入しました。今までは、(freeになった)Maximや、L2007のデモを使っていましたが、プロジェクトが本格的になってきたので、購入を決定しました。DTM(Drum To MIDI)もおまけ..

Twitter #2

2009-05-01T17:00:53Z

Twitter のエントリには、140文字という制限がありますが、日本語の場合、漢字も1文字で、さらに日本語は単語の間にスペースが不要なので、英語よりもたくさんの情報を含めることができます。

4月は、このブログもなかなか更新できませんでしたが、そのかわり、Twitter では、なるべくつぶやくようにしていました。140文字のエントリですが、上記のように、そこそこの情報は含めることができるので、過去のつぶやきを、このブログに取り込んでみようと考えています(*)。

2009-05-10 update
(*) -> Twitter REST API (#3)

今日から 5月、ブログを再開します

2009-05-01T15:04:04Z

時が経つのははやいもので、今年も、もう 5月になってしまいました。

4月は、引越に加え、レコーディングセッションや重要な手続きなどがあり、このブログを書いている余裕もありませんでしたが、今週になり、やっと少しずつ catch up できてきました。

このブログも、ぼちぼち再開していこうと考えています。

apache project list, thanks to shinsuke

2009-04-07T14:37:25Z

最近は、複雑なロジックを Java (まれに C++) で、スクラッチから、しこしこ書くことが多くなって、framework 的なものには疎くなりつつありますが、それでも、ちょくちょく必要になるときがあります。そういうときには、代表的な Apache.org などを見たりしますが、ものすごい数のプロジェクトがあり、ひとつひとつ見て行くと、結構、時間がかかってしまいます。

最近、shinsuke さんが、Apacheプロジェクト超一覧として、日本語でまとめてくれたので、紹介しておきます。

Twitter

2009-03-27T14:47:00Z

Twitter に登録しようと思い、今年になって、何度か、アクセスしてみましたが、over capacity と表示され、なかなかできませんでしたが、今朝、なんとか registration することができました。使い方次第では、なかな便利なツールというか、ビジネス的にも、いろいろな分野で応用できそうなサービスです。

-> twitter.com/kazmuzik

SMC8014-CCR - internet connection upgrade project #12

2009-03-08T15:58:41Z

Comcast の cable modem (router) は、SMC8014-CCR ですが、SMC Networks のサイトを調べても、SMC8014 シリーズはいくつかありますが、CCR というのはありません。多分、Comcast Cable R(Residential ?) という特別バージョンと思われます。SMC8014 には、Residential では、W-G, WG-SI, WN-RES, Commercial では、BIZ, TES, WG-BIZ とありますが、W は Wireless なので、Wilress 機能のない CCR は、BIZ か TES あたりになりますが、TES は L2TPv3 をサポートしているので、SMC8014-BIZ が一番近いようです。(写真の色では、SMC8014-TES の濃い色が近いようですが)

SMC8014-CCR にログインして、HELP のドキュメントを読むと、SMC8014WG と記述してありますが、CCR にない VPN や Wireless の機能も説明してあるので、どちらにしても、SMC8014 シリーズの VPN (L2TPv3) や Wireless をサポートしていない一番 basic なタイプのようです。なお、4ポートある LAN は、10M/100Mbps で Gigabit には対応していないようです。

試しに、3.2GB ある Solaris Express Community Edition Build 109 の DVD ISO イメージをダウンロードしてみたところ、常時 2MB/sec 前後で、30分未満で完了しました。今までは、半日程度かかっていたので、ISO イメージなどの大きなファイルのダウンロード時間は、かなり改善されます。また 2MB/sec = 16Mbps なので、ほぼ spec 通りです。

しかし、Comcast の Residential の方では、Business Preferred (16M/2M, $90) よりも高速な Blast! (20M/4M) が $50, Ultra (30M/5M) が $60 と、より安い値段で提供されています。また、$140 と高くなりますが、Extreme (50M/10M) という plan もあります。Residential の場合は、static IP address が option でもないので、Business Class にするしかありませんが、Business Class の方でも、reasonable な値段で、Ultra (30M/5M) 程度にしてもらいたいものです(＊)。

ちなみに、今朝は、7am になっても暗いな、と思っていたら、壁掛け時計の時刻が 1時間遅れていて、今日から daylight savings time になっていたことに気がつきました。3月の第2日曜日から夏時間になるのは、今年が 3年目です。

2009-03-11 update
(＊) 3/10 に Comcast Business Class の sales 担当者にメールしたところ、Extreme 相当の 50M/10M が、月額 $190 で提供できる、とのことでした。しかし、そこまでの予算はないので、Ultra 相当の 30M/5M はどうか尋ねてみましたが、Business Class での提供はない、とのことでした。いずれは upgrade されると思いますが、それまでは、現行の Preferred Plan 16M/2M で使用することになります。

GoDaddy Total DNS - internet connection upgrade project #11

2009-03-08T14:11:26Z

来週早々には、Comcast で static IP address が assign されるので、DNS を update する必要があります。現在のところ、Internet に公開している name server としては、NeuStar UltraDNS (secondary.com) と EveryDNS をメインで使っていますが、ひとつだけ、GoDaddy の name server (domaincontrol.com) をそのまま使っている domain がありました。先日、その domain で、Google Apps を使うのに、DNS の設定をする必要があったので、GoDaddy の Total DNS という web ベースのツールを使ってみましたが、なかなか便利でした。このため、もうすぐ無料で使える期間が終了する UltraDNS でサービスしている domain を、GoDaddy の name server に移行しました。これで、DNS に関しては、GoDaddy だけで、設定から secondary server まで、まかなえることになり、自分で named をメンテナンスする必要がなくなりました。残りの EveryDNS でサービスしている domain も、Comcast で static IP address が使えるようになったら、GoDaddy の name server に切り替える予定です。

iMac++ for my wife #5 - wired connection

2009-03-08T05:31:53Z

妻の iMac++ のネットワークは、AWLH6070 (AirLink101 150N PCI) で、AR690W (AirLink101 300N router) に接続していますが、これは wired の接続がうまくいかないためです。妻の bedroom から、living room の router までは、長い ethernet cable がありますが、長過ぎるため、router のところでは、巻いてありました。ところが、昨日、適当な長さの ethernet cable を自作したときに、このケーブルを切断して作成しました。このため、妻の bedroom から、living room までのケーブル長は、短くなって、両端のコネクタも新しくなりました。そこで、ノートPC で試したところ、ちゃんと通信できたので、今朝、iMac++ でも onboard の VIA の 8111B のポートを使って、Comcast の router に接続したところ、問題なく使えました(＊)。このため、AWLH6070 の方は off にして、wired で使うことにしました。

しかし、LAN は、wired, WAN は cable と、改善しましたが、妻としては、今のところ、あまり改善したという実感はないようです。そんなもんかのぅ。

2009-03-08 update
(＊) このケーブルは、Category 5 だったためかもしれません。今まで、あまり注意していなかったのですが、Cat 5 は、ANSI/TIA/EIA-568-A で定義されているため、終端の 8P8C modular plug は、T568A wiring となっていて、Cat 5e は、TIA/EIA-568-B で定められているので、T568B となっているようです。また、Ethernet の 8-pin の modular plug は、ずっと RJ-45 だと思っていましたが、正しくは、8P8C (8 position 8 contact) と言うようです。たかが、Twisted Pair Calbe と考えていましたが、なかなか奥が深いです。
-> TRENDnet 24-Port Rack Mount Patch Panel & Paradin Tools - rackmount project #11

Adobe Reader 9 and GIMP - N-400 #6

2009-02-23T06:29:02Z

今日は、Presidents Day で、私が約 8年前に U.S. へ来てからは、ずっと Bush が大統領でしたが、去年、めでたく、Obama が勝利して、先月、正式に大統領になりました。本当は、去年の選挙で vote したかったのですが、INS / USCIS の悪質な processing delay のため green card の取得が大幅に遅れ、今月、やっと N-400 をファイルできるところまで、きました。N-400 をファイルして、U.S.Citizen になるのが、Bush の時ではなく、Obama の時で、良かった、と思うことにしておきます。

N-400 は、まだ eFile できないので、記入して郵送することになりますが、PDF ファイルは form になっていて、自分のコンピュウータでタイプして、プリントできるようになっています。先週、保険関係の申請の PDF では、Mac OS X 付属の Preview でもできたのですが、N-400 は最新のバージョンを使っているようで、Adobe Reader 9 を使う必要がありました。

また、30日以内に撮影した photo も必要ですが、妻に digital camera で撮影してもらいました。iMaC#m7 で編集するので、USB ケーブルで接続しました。今回、初めてでしたが、自動的に iPhoto が立ち上がってきて、簡単に取り込むことができました。その後、2"x2" の正方形のイメージを作成するところまでは iPhoto で簡単に出来たのですが、それを、2x3 に並べて、4"x6" のイメージを作成することが出来ず、結局、GIMP を使うことにしました。ただし、今までは、Linux (Fedora) で使っていたので、install されているか、yum で簡単に install できたのですが、今回は Mac OS X なので、Mac OS X 用の GIMP を install しなければいけません。まずは、MacPorts を試してみようと思いましたが、先週、DarwinPorts をインストールしたので、それを使って port install gimp とやりましたが、すぐに止まってしまいます。ただし、CPU は消費しているようですが、ディスクやネットワークにアクセスしている気配もありません。そこで、GIMP on OS X をダウンロードして、インストールしました。こちらの方は X11 の上で、正常に立ち上がってきました。ただし、以前 Linux で使った時とは、若干、操作が異なるところがあり、戸惑うことが何度かありました。また、マウスの移動にカーソルの追従がかなり遅れる場合もありました。しかし、なんとか目的のイメージを作成することができ、Walgreens.com でオーダーしました。今日は、19¢+tax=21¢でした。

field office processing time - N-400 #4

2009-02-13T13:18:11Z

2007年夏の申請料の大幅な値上げの前に、駆け込みの申請が殺到して、膨大な backlog を抱えていた USCIS ですが、一応、ここ 1年でだいぶん改善してきているようです。2/4/2009 に update されている USCIS Processing Times Progressing Toward FY 2009 Goals によると、N-400 に関しては、値上げ前の goal は、7ヶ月だったところ、FY2009 の終わり(9/30/2009)には、5ヶ月を goal に設定しているようで、現状は 7.6ヶ月とあります。

実際に、Processing Times のページから、いくつかの field office を調べてみると、1/23/2009 に post されたデータで、11/30/2008 現在での processing date は、San Jose で　4/24/2009 (7ヶ月), San Francisco で 6/8/2008 (6ヶ月), Los Angeles で 9/3/2007 (14ヶ月) などとなっています。このあたり(Silicon Valley 近辺)では、順調に推移してきているようですが、Latino の多い大都会である Los Angeles では遅れているようです。

ちなみに、現在の申請料は、N-400 で $595 に、biometrics の費用 $80 を加えて、$675 となっています。

New Naturalization Test - N-400 #5

2009-02-13T12:46:57Z

Naturalization における English and civics test について、2/3 には、実際あまり影響のない、年齢に関する取り扱いについて書きましたが、最近、新しいテストが導入されたようで、10/1/2008 以降にファイルした人は、必ず、新しいテストで受けなければいけないようです。従来のテストは、10/1/2009 まで継続するようで、10/1/2008 以前にファイルした人は、それまでの間、どちらか選択できるようです。

Study Materials をさっと見る限りでは、極端に難しくなったという印象はありませんが、interview が近くなったら、まじめに勉強しておいた方が良さそうです。

Pro Tools LE 8 and Windows 7 on iMaC#m7

2009-01-18T20:32:53Z

昨日は、Windows 7 での Pro Tools LE 8 の評価には成功したものの、Vista でも発生していた interrupt による error -6086 や音切れの問題に悩まされました。今朝、DUC での同様の報告に関するスレッドや、Digidesign による正式なドキュメントなどを参考に、さらに試してみましたが、やはり解決はしませんでした。

nVidia の chipset + AMD の CPU という組み合わせが悪い可能性もあるので、hard disk drive だけを外して、iMaC#m7 (GA-EP45-UD3P + Q6600) で試してみました。BIOS で SATA のモードを変更してやるだけで、Windows 7 が立ち上がってきたので、そのまま Pro Tools LE 8 を立ち上げたところ、iLok の問題も発生せず、session の再生でも error で止まることなく、Mac OS X の時と、ほぼ同等の安定した CPU 使用率で、動きました。最近では、Mac OS X の key binding に慣れているので、少し戸惑いましたが、Core 2 Quad となると、Mac OS X でも、Windows でも、気持ちよく操作することができます。

iMaC#m7 の Windows 7 Performance Index ですが、Processor: 6.9 (Q6600), Memory (RAM): 6.9 (DDR2-800 4-4-4-12 2x2GB dual channel), Graphics: 7.9, Gaming graphics: 5.9 (GeForce 9800 DDR3 512MB), Primary hard disk: 3.0 (Seagate SATA2 320GB) と、3つの項目で Windows 7 から導入された 6.0 以上となり、Graphics は最高値の 7.9 となりました。

なお、iMaC#m7 のメモリは、現在 6GB ですが、8GB とするために、去年のうちに、Patriot Viper PC2-6400 4-4-4-12 2x2GB kit (PVS24G6400LLK) を 2つ買ってありました。Windows 7 Beta 32-bit を試すため、4GB とするのに、まだ未使用だったこのメモリを使ってみましたが、1組は不良品で、どちらを挿しても、起動しなくなりました。別の PC で試してみましたが、間違いありません。幸い、Fry's で購入してから、1ヶ月以内なので、交換しに行く必要があります。もう 1組の方は、どちらも大丈夫でした。

desktop machines reconfiguration project #2 - for Windows 7 Beta

2009-01-18T06:07:52Z

先週末に、Server を Rack に組み込んだ後、desktop machine(s) reconfiguration project を始めましたが、iMac++ と iMaC#m7 を入れ換えただけとなっていました。今週末は、このプロジェクトに、本格的に、手をつけることにしました。

まずは、Windows 7 Beta マシンを用意することにして、11月下旬に壊れた、以前に妻が使っていた PC の筐体に、元 Linux サーバーのパーツを組み込むことにしまいた。そこで、壊れた PC から、マザーボードを取り外すと、CPU クーラーがぐらついていました。特に、外した覚えはないので、チェックすると、マザーボードについている、CPU クーラーの金具を受け止める、プラスチック製のパーツの、video card に近い方のほんの一部が壊れていて、CPU クーラーの金具が外れていました。このため、電源を入れてすぐに、CPU の温度が異常に高くなり、ブートしなくなったものと思われます。12/14/2008 には、壊れたのは、マザーボードの ECS NFORCE6M-A だと書きましたが、正確には、そのプラスチックのパーツだったわけです。しかし、これを修理する余裕はないので、予定通り、Linux サーバーのマザーボード NFORCE4M-A (v3.0) を使うことにしました。ただし、こちらの CPU は、AMD Athlon 64 X2 4200+ だったので、元-妻のPC から AMD Athlon 64 X2 6000+ と CPUクーラーを外して、入れ換えました。当面は、Winodws 7 Beta 32-bit を予定しているので、メモリはそのまま DDR2-800 2x2GB (4GB) です。また、video card は、GeForce 8600 GT DDR3 512MB, network は、いつもの AirLink101 gigabit ethernet adapter です。Hard disk は、Seagate SATA2 320GB で、DVD-ROM は、元々、ケースについていた IDE のものをそのまま使うことにしました。

これに、電源は、たぶん Linux サーバーで使っていた(?)と思われる、RAIDMAX 450W を付けました。組み立てが完了したので、monitor, keyboard, mouse, network ケーブルを接続し、さらに電源ケーブルを入れて、Power Supply Unit のスイッチを入れると、バチッというような音がしたような気がして、なんとなく焦げ臭いような気がしました。急いで、power cable を外しましたが、やはり、電源ユニットから焦げ臭い匂いがしています。そこで、RAIDMAX 450W を取り外して、ThermalTake 430W に置き換えました。今度は、無事に立ち上がってきました。壊れたのは、電源ユニットだけで、すんだようです。

USB Flash Memory からブートして、BIOS をアップデートしてから、Windows ... をインストールしました。

Pro Tools LE 8 - 003 Factory Bundle iLok license issue

2009-01-11T01:47:22Z

1/2/2009 には、003 Factory Bundle をインストールしましたが、Pro Tools LE 8 の起動時に、authorize に失敗しているのに、気がつきました。なんとなく、DUC (Digidesign User Conference) で読んだような記憶があったので、調べてみると、12/19/2008 付けで、Digidesign Announcements の Pro Tools 8 Information のスレッドに、workaround が記述してありました。これによると、iLok のライセンスの description に変更があり、従来からのライセンスの iLok では、Optinal Factory Bundle Installers のページから、v8.0 用ではなく、v7.x 用をダウンロードする必要があるとのことです。

しかし、Mac OS X Leopard 用の v7.4.2 installer は、D-Fi と Maxim も含んでいるとの記述があります。これらは、Pro Tools LE 8 では、factory bundle 扱いではなく、Pro Tools LE 8 本体の installer でインストールされ、iLok なしで使えます。しかし、v7.4.2 の D-Fi と Maxim をインストールすると、iLok が必要になるはずです。また、Digidesign のページには明記されていませんでしたが、SansAmp PSA-1 も同じはずです。

そこで、D-Fi 関連の 4つの dpm (LoFi.dpm, RectiFi.dpm, SciFi.dpm, VariFi.dpm) と、Maxim.dpm, SansAmp PSA-1.dpm の 6つを、Plug-Ins フォルダから移動しておいてから、v7.4.2 の 003 Factory Bundle plug-ins をインストールしました。このままで、iLok のライセンスが必要になるので、6つの dpm を削除して、退避しておいた v8 の dpm を戻してやれば、OK です。

従来のライセンスのある iLok を常に挿している場合は、このような作業は不要ですが、せっかくライセンスなしで使えるので、別の iLok に移動しておいて、main の iLok をきれいに整理しておきたいですし、なんらかの事情で iLok が使えない場合でも、上記のようにしておけば大丈夫なので、安心です。

これを考慮して、1/2/2009 のエントリにあるPlug-In のリストを、若干、整理しておきました。

Waves Berklee/Certification/Educational Bundle #3

2009-01-11T01:06:46Z

1/7/2009 に、Waves Berklee Bundle をインストールしましたが、起動時に、S1 Stereo Imager のライセンスがないという警告が出ます。もともと、iLok のライセンスはないはずなので、インストールされたフォルダを調べてみました。

Waves の個々の Plug-in(s) は、/Applications/Waves/Waves Plug-Ins/ に、C1.bundles などとインストールされます。/Library/Application Supports/Digidesign/Plug-Ins/ には、WaveShell-DAE 6.0.6.dpm という plug-in がひとつだけインストールされ、これが Waves Plug-Ins フォルダにある実際の Plug-in と仲介して動作するようです。

Waves Plug-Ins フォルダを調べると、問題の S1.bundle がありました。これを削除したところ、起動時の警告は出なくなりました。ところが、そのフォルダを確認すると、SuperTap の bundle がありません。どうも、V6 Complete installer が、SuperTap のかわりに、S1 をインストールしたようです。このため、再び、V6 installer を起動して、個別の plug-in のリストから、SuperTap だけ選択して、インストールしました。これで、iLok にある Waves Certification Bundle の 6個の plug-in(s)がすべて使えるようになりました。

Waves Plug-Ins : /Applications/Waves/Waves Plug-ins
File	Name	Version	Identifier	Bundle Info
C1.bundle	C1 6.0.5	6.0.5	com.WavesAudio.C1.6.0.5.1
DLA.bundle	DLA 6.0.5	6.0.5	com.WavesAudio.DLA.6.0.5.1
IDR.bundle	IDR 6.0.5	6.0.5	com.WavesAudio.IDR.6.0.5.1
RComp.bundle	RComp 6.0.5	6.0.5	com.WavesAudio.RComp.6.0.5.1
REQ.bundle	REQ 6.0.5	6.0.5	com.WavesAudio.REQ.6.0.5.1
RVerb.bundle	RVerb 6.0.5	6.0.5	com.WavesAudio.RVerb.6.0.5.1
SuperTap.bundle	SuperTap 6.0.5	6.0.5	com.WavesAudio.SuperTap.6.0.5.1

JSPWiki #2 - MediaWikiTemplate - Solaris ZFS+VM Server Project #16

2009-01-05T01:30:08Z

昨日は個人用の Wiki を Fedora 10 VM に移行しましたが、JSPWiki の default template では、やはり感じがでないばかりか、使い勝手も悪いような気がします。そこで、MediaWikiTemplate をインストールすることにしました。3年ぶりなので、ほとんど忘れていましたが、手順通りに行ったところ、わりとすんなりと setup することができました。

$ cd /tmp
$ curl -O -L -R http://www.jspwiki.org/attach/MediaWikiTemplate/MediaWiki-2_4_0-compatible.zip
$ cd /opt/tomcat/webapps/KazMuzikWiki/templates
$ unzip /tmp/MediaWiki-2_4_0-compatible.zip
$ cp MediaWiki/*.txt /wiki/KazMuzikWiki-data
$ cp MediaWiki/*.jar ../WEB-INF/lib
$ cd ../WEB-INF
$ vi jspwiki.properties
...
jspwiki.templateDir =MediaWiki
...
jspwiki.auth.useOldAuth=true
jspwiki.useContainerAuth=false
jspwiki.authenticator = FileAuthenticator
jspwiki.fileAuthenticator.fileName = /tmp/passwords.txt
$ vi /tmp/passwords.txt
kazmuzik = *****
$ cd /opt/tomcat/webapps/KazMuzikWiki/templates/MediaWiki
$ cp /tmp/kazmuzik.png logo.png
$ vi jspwiki.css
...
#p-logo {
        z-index: 3000;
        position: absolute;
        overflow: hidden;
        top: 0;
        left: 0;
        margin-top: 20px;
        margin-left: 20px;
}
...
$ /opt/tomcat/bin/shutdown.sh
$ /opt/tomcat/bin/startup.sh
$

Authentication まわりは、前回(3年前)と違うような気がしますが、今回は、あまり詳しくみてる暇はありませんでした。

JSPWiki には Lucene の index を作成したり、ブログに便利な機能があったりするようなので、おいおい利用していきたいと思います。

TurboTax Deluxe 2008

2009-01-03T17:43:18Z

TurboTax Deluxe 2008 (CD)を、online でオーダーしました。去年は、Home & Business を購入しましたが、今年は、Deluxe で十分(なはず)です。TurboTax には、Federal, State, eFile の組み合わせがいろいろあって、ややこしいのですが、私が購入したのは、Deluxe Federal + State + Federal eFile で、State eFile は、追加で $17.95 必要になる見込みです。また、今回は、Mac OS X で行う予定です。

去年の反省を踏まえて、Amazon.com から、$33 〜 $34 + $4 (shipping) のところでオーダーしようと思いましたが、一応、PriceGrabber.com を見たところ、Amazon.com　にも上位にリストされていて、また、consumer questions に timely にきちんと答えていて、信用できそうな SCE, Inc. が、$25.95 + $8 (USPS Priority Mail) と、条件も良かったので、ここでオーダーしました。ちなみに、PriceGrabber.com では、$15 の deductible があるものの $500 まで保証してくれる Member Protection があります。

$68.31 - Google AdSense total earnings in 2008

2009-01-03T16:05:24Z

去年の3月に Google AdSenseを始め、W-9 を提出したりしましたが、2008年の total earnings は、$68.31 と、目標の $100 には及ばず、実際の収入には至っていません。

今年は、ad もクリックしてもらえるように、kazmuzik.net の内容も充実させていきたいと思います。

AR430W firmware v1.02 .. still port forwarding issue

2009-01-03T14:06:17Z

うちのネットワークでは、大活躍の AirLink101 ですが、AR430W の AirLink101 純正の firmware では、port forwarding が機能しません。9/29/20080 に、v1.02 の firmware がリリースされていたので、ダウンロードして、flash してみましたが、これでも fix していませんでした。管理用の web UI は、AR690W のものとほとんど同じで、AR690W では port forwarding がちゃんと機能するので、これは AR430W だけの問題です。

このため、AR430W で port forwarding を利用するには、DD-WRT を flash する必要がありそうです。Stable な最新バージョンは、まだ v24 SP1 でした。

AirLink101 AWLL6090 Wireless 300N USB Adapter and Ralink RT2870 for Mac OS X

2009-01-03T07:24:13Z

昨日(1/1)、あまり深く考えず、勢いで購入した AirLink101 AWLL6090 Wireless 300N USB Adapter ですが、これは、AR690W と違い、USB で接続する PC がサポートしなければ使えません。AirLink101 のウェブサイトを見ると、OS Compatibility として、Windows 2000 / XP / Vista しかリストされていません。また、ウェブ検索してみても、Mac OS X の情報は、出てきません。これは早まったかな、と思いましたが、一応、iMac++ に挿してみたところ、AirPort のデバイスとしては認識されませんでしたが、System Profiler の USB には、"802.11 n WLAN" として、Manufacturer: Ralink となっていました。

Ralink といえば、iBook G4 で使っていた D-Link DWL G122 の chipset が Ralink RT2500 で、Ralink から、Mac OS X 用のソフトウェアが提供されていました。一応、アクセスしてみると、12/04/2008 に、RT2870 と RT257x/RT2671 のソフトウェアがリリースされていて、10.5 (Leopard) もサポートされています。ただし、AWILL6090 の chipset が何かわからず、最悪、どちらでもない可能性もあります(＊)。

まずは、RT2870 用のソフトウェアをインストールしてみました。OS の再起動が必要で、Mac OS X が立ち上がってきてから、Ralink の USB Wireless Utility を走らせてみましたが、no device となっていました。次に、RT257x/2671 用をインストールしてみましたが、今度は、USB Wireless Utility も起動しなくなりました。ここで、いったんあきらめかけましたが、一応、uninstall してから、ひとつずつ install してみたりしましたが、やはり同じ結果でした。試しに、DWL G122 を挿したところ、network の新しいデバイスがみつかった、というようなメッセージが出て、System Preferences の Network が立ち上がってきて、新しい Ethernet が追加されていました。このときは、よくわからずに、いろいろいじっているうちに、再び、認識されなくなってしまいました。しかし、RT2870 の USB Wireless Utility を上げたまま、DWL G122 から、AWILL6090 に差し換えると、Site Survey に、Wireless Access Point のリストが出てきました。AR690W のものを選択して、connect すると、接続されたようで、Sytem Preferences の Network で、IP Address などの設定をすると、使えるようになりました。念のため、wired のデバイスを off にしたところ、wireless でネットワークに接続されていることが確認できました。

ということで、結果的に、Mac OS X でも使えることがわかりました。ただし、AirPort ではなく、Ralink の USB Wireless Utility で connect する必要があり、その後は、Ethernet のデバイスとして、System Preferences の Network に現れます。妻の PC をセットアップして、wireless で使用する場合には、これで 802.11n 300N で接続できます。

2009-01-02 update
(＊) Ralink に、RT2800 というドキュメントがあり、この chipset family が 802.11n をサポートしていることがわかります。