BLOGKID

今回で２回目です。
北京オリンピックイヤーということでホリデーロゴが通常とは違います。

詳しくは、
　Googleライクなオープンソースインフラストラクチャ「Hadoopプロジェクト」が弾みをつける

本家
　http://hadoop.apache.org/core/

・・・遊んでみよう！

=============================
インストール＆設定

Hadoop構成：
　

　server1 : JobTracker + NameNode
　server2 : SecondaryNameNode
　server3 : TaskTracker + DataNode
　server4 : TaskTracker + DataNode

環境：
　Java
　　　　/usr/local/java
  実行ユーザ： hadoop
　Hadoopインストールルートディレクトリー
　　　　・・・ http://hadoop.apache.org/core/ よりダウンロード（Ver 0.16.1）
　　　　/home/hadoop/hadoop
  Hadoopファイルシステム
　　　　/home/hadoop/filesystem

　各サーバ間でSSH接続が出来る事。

環境構築：
　server1 で パスフレーズなしのキーペアを作成。
　% ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa

　生成されたid_dsaファイルを名前を変えてserver2 からserver4へコピー
　コピー先：/home/hadoop/.ssh/authorized_keys
  $ chmod 600 ~/.ssh/authorized_keys　　　←パーミッションを変更

設定ファイル：
　ファイル：/home/hadoop/hadoop/conf/hadoop-env.sh
　内容：JAVA_HOMEを設定

　　export JAVA_HOME=/usr/local/java

設定ファイル：
　ファイル：/home/hadoop/hadoop/conf/hadoop-site.xml
　内容： sever1,2,3,4共通

<?xml version="1.0"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
<configuration>
        <property>
                <name>fs.default.name</name>
                <value>server1:9000</value>
        </property>
        <property>
                <name>mapred.job.tracker</name>
                <value>server1:9001</value>
        </property>
        <property>
                <name>dfs.name.dir</name>
                <value>/home/hadoop/filesystem/dfs/name</value>
        </property>
        <property>
                <name>dfs.data.dir</name>
                <value>/home/hadoop/filesystem/dfs/data</value>
        </property>
        <property>
                <name>mapred.system.dir</name>
                <value>/home/hadoop/filesystem/mapred/system</value>
        </property>
        <property>
                <name>mapred.local.dir</name>
                <value>/home/hadoop/filesystem/mapred/local</value>
        </property>
        <property>
                <name>dfs.replication</name>
                <value>1</value>
        </property>
</configuration>

　ファイル：/home/hadoop/hadoop/conf/masters
  内容： server1のみ

server2

　ファイル：/home/hadoop/hadoop/conf/slaves
  内容： server1のみ

server3
server4 

ファイルシステムを構築：
　＃server1 上で実行　

$ cd /home/hadoop/hadoop
$ bin/hadoop namenode -format

　　※ /home/hadoop/filesystem　配下にHadoopのファイルシステムが構築

起動：
　＃server1 上で起動させる。
　$ cd /home/hadoop/hadoop
　$ ./bin/start-all.sh　　　　　（停止は、stop-all.sh） 

　各サーバ上で確認（Javaのjpsコマンドで確認。jps自体も表示されるが省略）
　server1 :
　　　% jps
　　　7808 NameNode
　　　7942 JobTracker 

　server2 :
　　　% jps
　　　8255 SecondaryNameNode

　server3,4
　　　4328 DataNode
　　　4414 TaskTracker

=============================
ファイルを格納：

例としてインストールした hadoopを格納（hadoop_putという名前で格納）
　$ cd /home/hadoop
  $ ./hadoop/bin/hadoop dfs -put hadoop hadoop_put

　確認
  $ ./hadoop/bin/hadoop dfs -ls
　Found 1 items
　/user/hadoop/hadoop_put      <dir>           2008-03-25 17:47

　取り出し（hadoop_getという名前で取り出し）
　$ ./hadoop/bin/hadoop dfs -put hadoop_put hadoop_get

ファイルシステム（NameNode ）の状況を確認：
　　　WEBブラウザより確認（server1のポート50070 へアクセス）
　　　http://server1:50070

 =============================
Jobを投入：

宮内庁のWEBページの検索エンジンがNamazuだったので他の内閣はどんなエンジンを使っているか調べてみた。

Namazu（ふーん）
　宮内庁：http://www.kunaicho.go.jp/
　人事院：http://www.jinji.go.jp/
　総務省：http://www.soumu.go.jp/
　法務省：http://www.moj.go.jp/
　経済産業省：http://www.meti.go.jp/
　防衛省：http://www.mod.go.jp/

Google アプアライアンス（たぶん・・・）
　農林水産省：http://www.maff.go.jp/

・・・以下不明な検索エンジン（Inktomiかと思ったり思わなかったり・・・）

不明ソフトウェアの検索エンジンその１
　内閣官房：http://www.cas.go.jp/
　文部科学省：http://www.mext.go.jp/
　外務省：http://www.mofa.go.jp/mofaj/

不明ソフトウェアの検索エンジンその２
　内閣法制局：http://www.clb.go.jp/
　内閣府：http://www.cao.go.jp/
　公正取引委員会：http://www.jftc.go.jp/
　金融庁：http://www.fsa.go.jp/
　環境省：http://www.env.go.jp/

不明ソフトウェアの検索エンジンその３（Javaベース）
　国家公安委員会：http://www.npsc.go.jp/
　警察庁：http://www.npa.go.jp/

不明ソフトウェアの検索エンジンその４（PHPベース）
　財務省：http://www.mof.go.jp/

不明ソフトウェアの検索エンジンその５
　厚生労働省：http://www.mhlw.go.jp/

不明ソフトウェアの検索エンジンその６
　国土交通省：http://www.mlit.go.jp/

・・・
※参考までに、このサイトで横断的に検索出来ます。

　家のMac+FireFoxでGoogleの検索に「新デザインに切り替える」ボタンがついた。　このボタンを押すとデザインが変わったので、会社で普通にMacユーザと話したところあまり信じてもらえなかったので、画像をアップロード！　もちろんiGoogleではないし、Google関係の拡張機能といえばToolbarを入れているぐらい。　あまり良く調べていませんが新デザインのテスト中かな？

「新デザインに切り替える」ボタンがある。

新デザインの画面。　タブでメニューが見やすくなっている。

久しぶりに一人になる時間が出来たので、ＨＥＲＯとレミーのおいしいレストランを観てきた。
　
HERO はドラマも全て観ていたのとストーリーのテンポが好きだったので映画版も観にいきましたが、感想は懐かしかったものの松たか子の髪型が変わってしまった事 が非常に気になった。　当初のテレビ版でも昨年のスペシャルでも変えていなかったのに何故劇場版ではばっさりと切ってしまったのだろうか？　一応楽しめた ものの個人的にはスペシャル版が一番好きです。

この日は１本だけ見ようと思い行きましたが都合により時間が空いてしまったので、もう１本レミーのおいしいレストランも見ましたが案の定子供だらけ。　そこへおじさんが一 人で、、、怪しいと思われても仕方ないと思いましたが最後まで鑑賞しました。　見た感想ですがコンピュータ感を感じさせず、もはやCGとは思わせないピク サーの技術に関心し、内容も大人ながらに感動し非常に良かったです。　家に帰ってから奥さんに話したところ是非見たいと言っていたので年末にはDVDで販 売されるとの事なので買ってやろうと思いました。

面白かったのでエントリー
Purple Include Test of Blogger Integration

<span
href="http://www.blogkid.com/weblog/archives/001498.html#xpath(//h1[1])"
></span>

Introducing the YUI Compressor のツールで prototype.js （ 96311 バイト）を圧縮すると。

% java -jar yuicompressor-1.0.jar prototype.js

jscsscomp というツールも試してみましたが、私の環境では、prototype.js の圧縮でエラーになった。　しかしこのツール本来であれば複数のCSSやJavaScriptを１つにまとめる事も出来るのでなかなか面白い。

　奥さんのPCが７年目に入りかなりガタがきていたのでVISTAが動くPCを検討していましたが、Windowsに飽きたり友達でMacユーザが多い事等に影響されMacBook Proを購入しました。　本当は新型のiMacも勧めましたがリビングには大きすぎるという事で結局ノート型になりました。　しかし奥様のパソコンとはいえ当面は私が毎日遊びます。

アップル、MacBook Proをアップデート

８月８日にシックス・アパートからリリースされました、MovableType4 へバージョンアップへバージョンアップしました。
Movable Type 4 を出荷開始します

バージョンアップはダウンロードから２分程度で完了し、デザインはVOXにあるデザインを使えますがいろいろと、ごにょごにょすること３０分、悩む事もなく簡単に３列デザインへ変更できました。

使ってみての感想ですが操作性が非常に良くWYSIWYGはもちろん、テンプレートを個別での管理やインクルードしているテンプレートの視覚化とリンクなど・・・ＭＴ３から大幅に変更されましたが違和感なく使えました。

稀に聞かれるのでメモ・・・

cfengineで/etc/hostsファイルを１時間毎に同期させる手順。

○環境例

* cfengineのサーバホスト名　　　　：cfserver
* cfengineのクライアントホスト名　： cfclient
* ネットワークセグメント　　　　　　　： 192.168.0.0/24