unoh.github.com

こんにちは、五十川です。

RjDjというiPhoneアプリをご存知でしょうか。既によく知られたアプリですが、音声入力やタッチパネル、加速度センサーなど、iPhoneのデバイスインタフェースを使って、ユニークな音響をインタラクティブに作り出すことができるアプリです。と言っても、RjDj自体はその上で動作するアプリケーションのプラットフォームであり、さまざまなアプリケーションをインストールすることで、それぞれに異なるサウンドが体験できます。

RjDj上で動作するアプリケーションは「シーン」と呼ばれます。

以下のビデオの冒頭で流れる映像の音声は、Eargasmというシーンによる録音で、緩やかに流れる背景音に、深いエコーがかかった子供の声が重なり、なんだか夢の中にでも迷い込んだかのような雰囲気が醸し出されます。このシーンは、iPhoneのマイクが拾った音をリアルタイムに加工しており、それを加速度センサーがさらに変化させています。

http://www.youtube.com/watch?v=Q5Oa61KIBvs

以下のビデオはStrike（ストライキ）というシーンのデモンストレーションです。このシーンはビデオでご覧の通り、iPhoneのタッチパネルと加速度センサーの操作によって、さまざまな音が鳴り出し、それが次々と変化して複雑なビートが形成されていきます。

http://www.youtube.com/watch?v=g8PiKnEioTA

以下のオーディオはDoppelganger（ドッペルゲンガー）というシーンを渋谷駅で録音したものです。iPhoneのマイクが拾った構内アナウンスや列車の入線音などが強烈に加工され、カオスな音響が生み出されています。

http://rjdj.me/user/ucb/recording/22348/

以下のオーディオはTimeというシーンによる録音で、女声のインプロビゼーションがタッチパネル操作でランダムに再生され、幾重にも折り重なっていきます。波のような音は加速度センサーに反応して再生されています。

http://rjdj.me/user/ucb/recording/22351/

RjDjは、現在はiPhone（およびマイクを繋いだiPod touch）のみに提供されていますが、他のデバイスへの提供やプラットフォームのオープンソース化が表明されています。

RjDjとPure Data（PD）

RjDjのコアは、マルチメディア向けのビジュアルプログラミング言語であるPure Data（PD）のランタイムをiPhoneにインプリメントしたものです。PDは、同種の商用ソフトウェアであるMax/MSPのもともとの開発者ミラー・パケットさんが、オリジナルのMaxを再設計して作りあげたフリーソフトウェアです。
PDのプログラムは「パッチ」と呼ばれますが、RjDjのアプリケーションであるシーンは、このPDのパッチで構成されます。

PDは、Max/MSPと異なりフリーソフトウェアであるため、誰でも手軽にRjDjのシーン開発を始められます。また、テキストベースのプログラミング言語では複雑になりがちな音声処理プログラムを、VPLならではのグラフィカルな操作によって、比較的容易に開発することができます。

開発したシーンは、デベロッパー登録もジェイルブレイクも必要なしにiPhoneにインストールでき、また、RjDjのウェブサイトRjDj.meでシーンを公開することも可能で、現在では有料での配信も可能になっています。

シーン開発の準備

RjDjのシーンを開発するには、なにはともあれPDが必要です。
ミラー・パケットさんによるオリジナルのPD（PDバニラ）は以下から入手できます。

http://crca.ucsd.edu/~msp/software.html

PDをインストールしたら、ひとまずオーディオ出力を確認しておくとよいでしょう。PDを起動して、Media→Test Audio and MIDIメニューを選択すると以下のようなウィンドウが表示されます。左上にある「TEST TONES」のdB値（OFF/60/80）のボックスをクリックして音が再生されることを確認してください。コンピュータにマイクが接続されていれば、中央の「monitor-inputs」をチェックすればマイクが拾った音が再生される筈です。

次いで、RjDjのシーン開発者向けに用意されている、シーンのテンプレートやユーティリティ、サンプルのシーンなどをまとめたComposer's Packを以下から入手します。

http://trac.rjdj.me/wiki/ComposersPack

Composer's Packは任意のディレクトリに配置できますが、シーンの開発を行うには、Composer's Pack内のpdディレクトリを、PDの検索パスに設定しておく必要があります。PDの検索パスは、Windows版ではFile→Pathメニュー、Mac OS X版ではPreferences→Pathメニューから設定できます。これによりsoudinput/soundoutputなど、pdディレクトリ内にあるRjDj固有のアブストラクションが、PDで利用できるようになります。

以下はRjDjのSubversionリポジトリにあるNoble Choirというシーンの_main.pdです。緑色でvolumeと表示されているオブジェクト（アブストラクション）がsoudinput/soundoutputですが、検索パスが正しく設定されていれば、soudinput/soundoutputオブジェクトはこのように表示される筈です。

iPhoneへのシーンのインストール

Composer's Packのexample_scenesディレクトリ内にはサンプルのシーンがいくつかあります。これをiPhoneにインストールしてみましょう。これにはComposer's Packに付属する、rjzserverというウェブサーバプログラムを使用します。また、iPhoneは、rjzserverを起動するコンピュータと同じWi-Fiネットワークに接続されている必要があります。

シーンは、本来はRjDj.meからダウンロードされるわけですが、iPhoneのHTTPプロキシにrjzserverを設定し、すべてのHTTPリクエストをrjzserverに処理させることで、rjzserverを実行しているコンピュータにあるシーンを、iPhoneでダウンロードできるようになります。

rjzserverはPythonプログラムで、Windows版とMac OS X版にはそれぞれのプラットフォーム用のアプリケーションバイナリが付属しています。例えばWindowsでは、Composer's Packのrjzserver.win/rjzserver.exeを起動します。

rjzserverを起動したら、iPhoneにインストールするシーンのディレクトリを設定します。
サンプルのシーンはComposer's Packのexample_scenesディレクトリ内にあり、名前が「.rj」で終わるディレクトリが各シーンです。rjzserverのFile→Set scene directoryメニューを選択して表示されるファイルオープンダイアログで、example_scenesディレクトリを選択します（各シーンごとのディレクトリではなく、その1ヶ上の階層を指定する点に注意してください）。

rjzserverを起動すると http://192.168.x.x:8314/ のようなURLが表示されます。このIPアドレスとポート番号を、iPhoneのWi-FiネットワークのHTTPプロキシに設定します。

iPhoneのWi-Fi設定で、接続するWi-Fiネットワーク名の右側にある矢印をタップし、Wi-Fiネットワークの設定画面を表示します。設定画面の一番下にある「HTTPプロキシ」を「手動」に変更して、rjzserverが表示しているURLのIPアドレス（192.168.x.x）を「サーバ」に、ポート番号（8314）を「ポート」に設定します。

iPhoneのモバイルSafariで http://rjdj.me/ にアクセスします。HTTPプロキシがrjzserverに設定されているので、本来のRjDj.meではなく、rjzserverの画面が表示されます。

rjzserverの画面にはインストール可能なシーンの一覧が表示されます。シーン名は各シーンのディレクトリ名ですが、名前の末尾の「.rj」が「.rjz」に変わっています。この画面でシーン名のリンクを開くと、RjDjが起動しシーンのインストールが行われます。

なお、作業が完了した後でiPhoneのHTTPプロキシの設定を元に戻すのを忘れないでくださいね。

Subversionリポジトリ

Composer's Packに付属のサンプルシーンはプログラミングの参考となることを意図しているので、概ねシンプルで数も限られていますが、シーンのSubversionリポジトリでは、アプリにバンドルされているものやRjDj.meで配信されているシーンを確認することができます。

svn co http://svn.rjdj.me/scenes/trunk/rjdj_scenes

現時点ではこのリポジトリには50ヶ弱のシーンがあり、これらは上述のサンプルシーンと同様の手順で、iPhoneのRjDjに実際にインストールすることができます。

テンプレート

新たにシーンを開発する際は、Composer's PackにあるシーンのテンプレートであるSceneTemplate.rjをコピーし、これを変更していきます。

テンプレートは以下のファイルとディレクトリで構成されています。

• _main.pd
• Info.plist
• image.jpg
• rj/

_main.pdは、名前の通りメインのパッチです。

Info.plistはお馴染みのplistファイルで、ここにはシーンのメタデータを記述します。

image.jpgはRjDjでのシーンの再生時に表示される画像です。

プログラミングの詳細はここでは触れませんが、サンプルのシーンを参考にすれば、簡単なパッチはすぐに作成できるでしょう。特にモジュラーシンセサイザーの仕組みをご存知なら、PDの理解は速いと思います。RjDj/PDのプログラミングに興味を持たれたかたは是非以下をご覧になってください。

• #001 RjDj(Single Album) | My Codex Leicester

  「オトカメラ」などのiPhoneアプリの作者で、iPhone x Music -iPhoneが予言するいつか音楽と呼ばれるものの著者のひとり、永野哲久さんによる記事です。

• Make: Online : How-to: Hacking RjDj with PD

  RjDjのシーン開発の、具体的かつ詳細な解説です。

RjDj.meのドキュメントはもちろん必読です。

• RjDj Developer Wiki
• RjDj » How to create RjDj scenes
• RjDj » Blog Archive » Editing Drum Patterns in RjDj

PD関連のリソースはWikipediaにまとめられています。

• Pure Data - Wikipedia

RjDjの開発スタッフは各地でSprintと呼ばれるシーン開発のワークショップを開催しており、2009年9月10日と翌11日（つまり今週！）には日本で初めてのSprintが開催されます（残念ながら既に定員に達しているようですが）。

• RjDj Sprint Tokyo
• RjDj Sprints

RjDj/Trippy/Shakeについて

現時点でApp Storeで「RjDj」を検索すると、115円のRjDjと、それぞれ350円のTrippyとShakeという、3ヶのアプリが検索されます。

もともとRjDjは、無料の「シングル」と有料の「アルバム」というラインアップでした。シングルはシーンがひとつだけ付属する、デモ版的位置付けのもので、その他のシーンはアルバムとして有料で販売されるというビジネスモデルだったわけです。しかしiPhone OS 3.0がもたらしたアプリ内課金によって、各シーンを個別に販売することが可能になったため、このラインアップは一新されました。

115円のRjDjがかつてのシングルですが、その位置付けはもはやアルバムのデモ版であるより、アプリ内課金のプラットフォームである点に重きが置かれています。なお、無料であったシングルが有料化されたのは、アップルが無料アプリのアプリ内課金を認めていないためです。

紛らわしいことに、RjDjより高価なTrippy/Shakeにはシーンのダウンロード機能がなく、従ってアプリ内課金にも対応していません。これは、今後のアルバムのリリースはアーティスト単位のものが中心になる予定で（Kids on DSPのアルバムが近日リリース予定だそうです）、アーティストのアルバムに、ダウンロードによって別のアーティストのシーンが混入してしまうのは好ましくないためであると説明されています。なおアルバムの購入者は、RjDjを持っていれば、購入したアルバムに収録のシーンをRjDjに無料でダウンロードできます。

なお、これまでは3ヶのアプリにはいずれも「RjDj」という名前が冠されていました。App Storeで「RjDj」を検索すると、3ヶのアプリがすべて検索されるのはこのためですが、区別を明確にするためにTrippyとshakeは、名前から「RjDj」が除かれました。

Jasuto

最後にもうひとつ別のiPhoneアプリを紹介します。RjDjやPDに興味を持たれたかたには、Jasutoというアプリも興味深いと思います。これはモジュラーシンセサイザーに分類されるアプリですが、そのコンセプトやインタフェースは、PDやMax/MSPのものに極めて近く、それをもう少しわかりやすく、ポップなインタフェースを持たせたものといった印象です。

http://www.youtube.com/watch?v=uHlrzIrimO4

Jasutoでも音声入力や加速度センサーなどが利用できるため、RjDjのシーンのような音響を作り出すことが可能です。なによりJasutoの画期的な点は、VPL的音響プログラミングがiPhone上で直接行えるということです。実際iPhoneのようなタッチパネルインタフェースは、VPLプログラミングには最適なわけで、Jasutoはそれを実感できるアプリでもあります。

最後に

先述の通り、来週いよいよRjDj Sprint Tokyoが開催されます。RjDj自体はよく知られていますが、そのシーン開発についての記事は、前提知識を持たない初心者にとっては少々敷居の高いものが多いように思えたので、日本初のSprint開催を記念して、初歩的なことがらを解説しみました。

RjDjの醍醐味のひとつは、手軽にシーンの開発が行える点にあると思います。RjDjのシーン開発ならObjective-Cもデベロッパー登録も必要なく、iPhoneのサウンドプログラミングが手軽に行えます（WindowsやLinuxでもできます！）。RjDjを楽しまれているかたは、是非オリジナルのシーン開発にも挑戦してみてください。

iPhone×Music iPhoneが予言する「いつか音楽と呼ばれるもの」

posted with amazlet at 09.09.06

徳井 直生 永野 哲久 金子 智太郎
翔泳社
売り上げランキング: 98313

おすすめ度の平均:

iPhoneは音楽を変えるの？

Amazon.co.jp で詳細を見る