ヒトとコンピュータとのあいだの図式的知覚を精査して，真正的［リテラル］知覚を把握していくこと

4/11/2011

http://fuckyeahalbuquerque.tumblr.com/post/3990382105

コンピュータを介して出来上がってきているヒトの身体感覚．身体全てはいらない，一部でいい．いや，そこに想像力がはたらくから，一部の方がいいのかもしれない．

J.J.ギブソンの『視覚ワールドの知覚』に，「図式的知覚」と「真正的[literal]知覚」という言葉が出てくる．

５．視覚ワールドをどのように知覚しているかという問題は，ふたつに分けて別々に考えることができる，ひとつは，実質的あるいは空間的な世界の知覚の問題である．もうひとつは，われわれが通常，注意を向ける有用で意義のある知覚である．最初の世界は，色，きめ，面，縁，傾斜，形，隙間の世界である．第２の世界は，われわれがふだん関心をむける馴染み深い世界であり，物，場所，人々，信号，書かれたシンボルの世界である．前者では，程度の差はあれ，われわれが体験する背景は一定であり，姿勢の維持と移動のための支えがある．ところが後者では，そのとき何をしているかによって刻一刻と変わる．意義のあるものを含んだ世界は，一度にすべてに注意を向けるには複雑すぎるので，その知覚は選択的である．ある種の特徴は著しく目立ち，その他の特徴は無視される．この事実のため，われわれの知覚は歪められ，欺かれると言われることがある．この種の知覚を図式的 schematic とよぼう．これに対して，最初に挙げた種類の知覚は真正的 literal とよべるだろう．

図式的知覚を完全に理解するに先だって，真正的知覚を理解しなければならない．なぜなら真正的知覚は，すべての体験に対する基本的な印象のレパートリーを提供するからである．(p.12)

視覚ワールドの知覚，J.J.ギブソン

今までヒトは図式的にコンピュータを理解しようというか，使いこなそうとしてきたのではないだろうか．なるべく馴染み深い世界をコンピュータに持ち込むという発想，デスクトップ・メタファー．しかし，近頃はコンピュータをより真正的［リテラル］に把握しようという動きがあるように思われる．

先にヒトの身体を一部だけコンピュータに映したほうが，想像力がはたらくからいいのではないかと書いた．けれども，そこでは想像力がはたらいているのではないのかもしれない．ヒトとコンピュータとの関係の中で，上のイメージの「手」の形をしたアイコンまたはカーソルは，ヒトが行為していくために必要な基本的なレパートリーを示しているだけなのかもしれない．想像力以前の，シンボル以前のイメージ．ヒトとコンピュータとのあいだの図式的知覚を精査して，真正的［リテラル］知覚を把握していくこと．これが今のメディアアートで求められていることなのではないだろうか．

このブログの人気の投稿

マジックマウスの慣性スクロール．iPhone でもできてしかも気持ちいいけど．マジックマウスの慣性スクロールも気持ちいい．同じ慣性スクロールなので，やっている行為，指の動きは同じで，ディスプレイ上のイメージの動きも同じ．でもなんか違う．iPhone は，とても滑りのいいガラスの上を指がすいすいと動いて，その指にイメージが反応している感じ．ガラスの滑らかさとイメージの指への吸い付き．マジックマウスは，すこし滑りがわるいプラスチックの表面なんだけど，緩やかな傾斜がついているので，指をその傾斜に沿わして動かしている感じ．指にイメージが反応しているのは一緒だけど，プラスチックも指に吸い付くし，イメージも吸い付く感じ．プラスチックの表面に指が物理的にくっつくことが少し気になる．でも，一番の違いは，iPhone は直接的にイメージに触れているように見えているのに対して，マジックマウスは，指とイメージとが離れているということなのでしょうか．最初は，マジックマウスの傾斜が重要かなとも思ったんですが…．でも，この傾斜は人差し指で行ったり来たりするときに，私にとってはとても気持ちいい．どちらにしても，この慣性スクロールは，私たちの物理的世界の慣性をコンピュータの論理世界に入れてしまったわけです，でも，それも論理で実現されているわけです．まわりまわって，いつも私たちが体験していることが，ディスプレイ上のイメージで表現されるとなんか気持ちよさを感じてしまう．少し違うか．慣性というものだけが，ディスプレイ上のイメージに入り込んでいるから気持ちいいのか？　世界の物理法則の一部を切り取って，イメージに入れ込む．それも，私たちの行為にピタリと合った形で．そうすると，実現しているのは物理世界で起こっていることなんだけれど，体感としては何か新しいことが起こっているように感じてしまっているのか？　この新しく感じてしまう慣性スクロールとそれを行う表面の形状の関係について，最初に考えたのは，マジックマウスの緩やかな傾斜は，傾斜に対して私たちは日頃昇るときも勢いをつけるし，下るときは自然と勢いがついてしまうことと関係しているのではということでした．それが，プラスチックの表面という滑りの悪さを補うのかと．でも，私たちの物理世界から慣性だけを切り取って，それを指の

デスクトップ・メタファーと「ディスプレイ行為」　

3/12/2010

ここで，デスクトップ・メタファーが生み出されたパロアルト研究所に考察の対象を移したい．なぜなら，この研究所において，ディスプレイ上の対象物を指さすための道具であったマウスに，次々に新たな行為が付け加えられることになるからである．パロアルト研究所では，1973年に，アルト（図4-4）と呼ばれるシステムが開発された．アルトは，アラン・ケイや，バトラー・ランプソン，チャールズ・サッカーが中心となって開発された実験的なワークステーションであり，その大きな特徴は，ディスプレイ上のピクセルがメインメモリのビットに対応するビットマップ方式を採用していたことである．この決定は，ヒトが環境の情報を最も捉えることができる視覚を重視したインターフェイスを提供することが，マシンとソフトウェアの最大の目的であるという開発者たちの認識から導かれたものであった．そして，アルトのインターフェイスでもうひとつ重要なことは，ポインティング・デバイスとして，マウスが採用されたことである．当時，マウスは，入力デバイスとしては馴染みの薄いものであったが，スチュワート・カードによる実験によって，マウスが，ディスプレイ上の対象を指示するのに最も適したデバイスということになり，標準装備されることになった．4-42) 視覚重視の考えと，ヒトの手の原初的な感覚をコンピュータに持ち込むマウスという道具が，アルトというワークステーションで出会うことになる．図4-4 ゼロックス社アルト視覚重視のアルトは，ディスプレイ上のイメージを自由に表示することができた．このことは，ディスプレイ上のイメージが示すアフォーダンスの直接的な知覚に基づく指さし選択行為とマウスとの関係に影響を与えた．エンゲルバートのシステムでは，マウス・カーソルのイメージは，単なる点であった．しかし，アルトでは，カーソルの形は，矢印（→）になる．カーソルの形が，矢印ではなく点であっても，ディスプレイ上のイメージを指さす選択行為を遂行することはできる．では，なぜ形が変わったのか．それは，ディスプレイ上のイメージを自由に表示できるようになっために，指さし選択行為の遂行に，より適したアフォーダンスを示すイメージを表示するようになったと考えることができる．ここでは，身体的行為を導くアフォーダンスとディスプレイ上のイメージが導くアフォーダ

画面分割と認知に関するメモ

2/05/2011

画面分割についてのスライドを作っていて，アメリカのドラマ「24」が初期のころはよく画面分割を使って緊迫感をだしていたのに，その手法が徐々に使われなくなっていたことを Wikipedia で知る．なぜだろうと思いつつ，マイク・フィグスの「時代×４ [About Time 2] 」を見る．これは４分割された画面で同時に物語が進んでいく短編映画で，「 10 Minutes Older 」というオムニバスの映画のひとつである．画面を４分割して，物語で進んでいくと，段々のそこで起こっていること全てを認知することが難しくなり，認知限界を超えることを実感した．「24」は，リアルタイムという軸があるから，ために画面が分割されても，それは空間的に離れているところで「同時に」物事が起こっていることを示すために有効だが，そこで「リアルタイム」という軸が外れてしまうと，見ているヒトは分割された画面の関係性が分からなくなってしまうのではないだろうか．そこで，「24」で画面分割が使われなくなったことには，認知限界が関係しているのではということを考えた． 24 時代×４[About Time 2] レフ・マノヴィッチが画面分割はユーザ・インターフェイスの「GUI」からの影響であると指摘している．「ひとつのスクリーンにひとつのイメージ」というのが画面構成の論理であったが， GUI を構成する要素であるビットマップ方式のディスプレイがこの論理を破綻させたと，マノヴィッチは考えている．ビットマップ以前に，映画では電話をかける場面などで画面分割を行っていたが，大々的には行われていなかったとはいえるので，マノヴィッチの指摘には賛成である．そして，画面分割を「空間的モンタージュ」と呼び，これまでの「時間的モンタージュ」に変わるものだとし，「空間的モンタージュ」は，GUI の画面を占拠して，そこでは何も消えることがない「記憶」の場として機能していると，マノビッチは考える． my desktop マルチウィンドウシステムにもつながる，パーソナル・コンピュータの大元のアイデアであるヴァネバー・ブッシュのメメックスは２画面を備えた装置として描かれている．メメックスは増大する情報量に対処するために作られた装置であった．ブッシュは膨大な情報に対するヒトの認知限界を考え，メメックスを開発

矢印の自立

1/29/2010

The World's Biggest Signpost from adghost on Vimeo . ノキアのナビゲーションサービスのプロモーションのためにつくられた巨大な矢印．携帯から位置情報を送ると，矢印が動いてその方向を指すもの．情報を送った人は，矢印の先に何があるかも想像することができるので何を指しているかわかるけれども，多くの人は，そこに流れるメッセージを読んだとしてもこの矢印の先にあるモノを想像できないなのではないだろうか．でも，矢印の方向に私たちの注意は向いてしまう．矢印の先に注意を向けるということを，私たちはごく自然に行っているが実はそれはつい最近になって生まれた行為らしい．矢印は，長い間，「モノの動く方向を示す」という意味しかもっていなかったが，今世紀に入って，矢印が示す意味が多様化してきてると，以下のように書かれている．矢印の意味をほんの少し調べただけでも，現在の記号的な教えを示す矢印のなかから，たちどころに７種類もの違う意味で使われている矢印を見つけることができる．１．動きの向き物体の動きであったり，動かす必要がある物理的な動きの向きを示す．２．物理的な変化，変容ある状態や状況に置かれているところから別のものに変化，変容することを示す．３．ディメンションの提示通例としては距離を示したり，数量，重量，時間といったいろいろな寸法とともに使われる．距離を表したり，重量を示す．４．連結関係を示す例えば組み合わせにすべき部品と部品を示す矢印．この場合，昔の医学書や科学書で見られるものと同じく，結合線（破線）と同一の意味を持つ．この矢印は，現在使われている矢印と同じくさまざまな起源から生まれてきたことを示す．５．注意を喚起どこを見るべきか，図版の特定の場所を示すために使われる．６．連続性を示す現代の科学技術では，機能を使ったり，ある要素と要素を組み合わせるには，多くの手順を経る必要がある．そうした一連の手順において，矢印で次にするべき段階を示す．７．特定の意味を持つ矢印が教え示す意味は，必ずしもいつも明確とは限らない．また仮に明確でなくとも，意味は持っている．例えば「電気」や「リサイクル」に使われている記号がそれにあたる．(pp.19-20) 矢印の起源と多様化 in 矢印の力：その先にあるモ

『［クリティカル・ワード］メディア論──理論と歴史から〈いま〉が学べる』への寄稿

2/21/2021

門林岳史・増田展大編『クリティカル・ワードメディア論理論と歴史から〈いま〉が学べる』の「触覚メディア」の項目を執筆しました．キーワードは以下のようになっています．タッチスクリーン，ハプティック、インターフェイス，グラフィカル・ユーザー・インターフェイス(GUI)，ダグラス・エンゲルバート，アラン・ケイ，オブジェクト指向プログラミング言語，スキューモーフィズム，マテリアルデザインキーワードからわかるように「インターフェイス」について書きました．「インターフェイスが触覚メディアなのか❓」ということは，読んでみてください🙇‍♂️ MASSAGE の連載「サーフェイスから透かし見る👓👀🤳」でカバーイラストを提供してもらっているカワイハルナさんのイラストレーションが表紙になっていて，とてもいい感じです．よろしくお願いします☺️ -- 目次はじめに　門林岳史・増田展大第1部　理論編──メディア理論の現在　1　身体　門林岳史・増田展大　2　知能　原島大輔　3　遊び／ゲーム　吉田寛　4　ニューメディア／ソフトウェア　堀潤之　5　アーカイヴ　大久保遼　6　メディアエコロジー　門林岳史　7　プラットフォーム　増田展大　8　政治とメディア　清水知子　9　資本とメディア　水嶋一憲　10　ポストヒューマン　飯田麻結第2部　系譜編──メディア思想の潮流　1　フランクフルト学派　竹峰義和　2　マクルーハンとトロント学派　門林岳史　3　ドイツのメディア哲学　鈴木恒平　4　カルチュラル・スタディーズとメディア論　毛利嘉孝　5　ジェンダーとメディア　田中洋美　6　ポストメディア　門林岳史　7　アートとメディア　馬定延第3部　歴史編──メディア考古学の実践　1　複製メディア　増田展大　2　出版メディア　門林岳史　3　画像メディア　増田展大　4　聴覚メディア　福田貴成　5　音声メディア　秋吉康晴　6　触覚メディア　水野勝仁　7　没入メディア　岩城覚久　8　憑依メディア　浜野志保　9　ヴァナキュラー・メディア　前川修　10　スクリーン・メディア　大久保遼　11　インターネット・メディア　喜多千草　12　モバイル・メディア　光岡寿郎　13　観光メディア　佐藤守弘　14　物流メディア　遠藤英樹　15　通信メ

マウスとカーソル：カーソルによる選択行為

3/11/2010

コンピュータのディスプレイで表現されている世界は，現実の世界ではないという単純な事実を考えなければならない．そこは，もともと，コンピュータが複雑な論理計算を瞬時に行って表示しているものにすぎない論理の世界であったはずである．そして，論理の世界は，ヒトの身体を排除しているものとして，レイコフとジョンソンが批判したものである．4-21) この事実は，コンピュータによって作り出されるディスプレイ世界には，元来，メタファーの基盤となるヒトの身体が存在していなかったことを示しているのではないか．しかし，レイコフとジョンソン，楠見，久保田の説明では，コンピュータの論理の世界に，いつ，どのようにして，私たちの身体が入り込んでいったのかということは考えられていない．ここから，ヒトの身体が，コンピュータとのコミュニケーションに入り込んでいくプロセスを詳しくみていく必要がでてくる．そして，そこには論理の世界にメタファーが立ち上がっていく様を捉えるという興味深い問題がでてくるはずである．メタファー形成の基盤となるイメージ・スキーマは，基本レベルの行為の繰り返しによって生じるものであるから，身体経験の基本レベルとコンピュータとの関係から考察していかなければならない．よって，私たちが，デスクトップ・メタファーについて，はじめに考えるべきことは，このメタファーが生み出される前に，ヒトの身体経験がその基本レベルで．コンピュータの論理世界に何らかのかたちで入り込んでいたのではないか，ということになる．この問題への手がかりを，シェリー・タークルは与えてくれる．彼女は，デスクトップ・メタファーを一般化したマッキントッシュのインターフェイスについて，次のように書いている．マッキントッシュのインターフェイス──実際はその画面──は，実物の机をシミュレートしている．私のアップルⅡの CP/M システム4-22) のような，論理的コマンドで操作される論理的インターフェイスではなく，たとえ二次元とはいえ，ヴァーチャル・リアリティだったのだ．この世界では，空間を進むのと同じように情報の中を進む．実際，マウスを手にして平面上で動かせば，その物理的な動きが，通常は矢印か指の形である指示アイコンによって，画面に反映されるのがわかるだろう．4-23) このタークルの記述には，「論理的コマンドで操作される論理的イ

ヌケメさんとのトークメモ

12/11/2015

《Old School》について家にある《Old School》を90度回転して置いてみたら，とてもびっくりしました．Windowsのアイコンが突如，モノ化した感じがしたのです．木にプリントされた時点で，ディスプレイの光の集まりであるアイコンはモノ化しているわけですが，この段階ではまだ木の表面にプリントされたイメージという感じがあります．ヌケメさんはそれを彫ります．そうすると表面に凸凹が生じます．そこで更にモノ感が増すわけですが，一番上の画像のように置かれるとどこかまだイメージな感じがします．それはプリントがパソコンのディスプレイと同じように垂直に提示されているからかもしれません．垂直だった彫られたプリントを水平に置いてみると，木片の凸凹が影で強調され，モノらしさが前面にでてきたのです．これを新鮮な驚きでした．これはアメリカの美術史家レオ・スタインバーグが提起した概念「フラットベット絵画」とも通じるところがあるかもしれないと考えています（→参照：アザー・クライテリア）．ヌケメさんの《Old School》は水平と垂直がこじれている感じがします．また，《Old School》を考えるためにもうひとつ参照したいのが，マイクロソフト社の「Windows 8.1　ユーザーエクスペリエンスガイドライン」で示した「"真のデジタル化" とは、アプリが画面上のピクセルにすぎないという事実を踏まえる」ということです．影がない光のみのピクセルを物理世界に引っ張りだすと，そこには影が必ず生じます．ヌケメさんの木を彫るという行為は影がない世界から持ちだした画像に「影のパラメータ」を付与して，操作することなのかもしれません．影の視点から今回のあたらしいバージョンの《Old School》の木の厚みを見てみるとおもしろいです．新作は薄くなっていて，木片というよりは板になっています．木片の正面にプリントされて彫られたアイコンよりも，板にアイコンの方が角度をつけて展示されることで，影がよりはっきり見えてきます．板という薄いものを掘って，切り口に影が生まれて，それがモノの感じを醸し出す．なので，あたらしいバージョンの《Old School》のほうが，立体感が強かった気がします．それは周りをグルっと回って作品

2046年の携帯電話と2007年のスマートフォンのあいだにある変化（１）

7/07/2015

2046年の携帯電話新海誠監督のSFアニメ「ほしのこえ」を「インターフェイス」の観点から見ると何が見えてくるでしょうか．「SF」というジャンルには近未来を予測した様々な「インターフェイス」がでてきますが，「ほしのこえ」では主にミカコとノボルをつなぐ「携帯電話」を扱いたいと思います．ノボルとミカコの物語は2046年が舞台です．2046年の中学生3年生がもっている携帯電話は，大きな液晶タッチパネルで操作するスマートフォンとは異なり，小さな液晶ディスプレイと多くのボタンを備えたものです．2046年という未来であるにもかかわらず，「ガラケー」とも呼ばれる古いかたちの携帯電話を持っているのはおかしいと思う人もいるでしょう．しかし，現在のスマートフォンのかたちを決定づけたアップル社のiPhoneが発表されたのは2007年ですから，「ほしのこえ」が発表された2002年には液晶タッチパネルを備えた携帯電話は一般的ではなかったことになります．2002年にはiPhoneがまだ存在していなかったけれど，今（2015年）では携帯通信機器の主流は，ノボルとミカコがもつような携帯電話からタッチ型インターフェイスのスマートフォンへとシフトしました．この事実は「ほしのこえ」を考察する上で重要な意味を持ちます．「ほしのこえ」はSFなので，iPhoneのようなタッチ型インターフェイスの携帯電話の登場を正確に予測する必要はありません．なぜなら，SFは「サイエンス」という言葉がついていても，あくまで「フィクション」なので，現実的な未来の予測に囚われる必要はないからです．しかし，SFは現実世界の正確な予測ではないけれど，単なる絵空事でもありません．SFと現実とのあいだには独特なつながりがあります．例えば，『SF映画で学ぶインタフェースデザイン』には携帯電話に関する例が挙げられています． SFに見られるフィクションの技術によって，ファンは来るべき刺激的な何かを期待します．顕著な例は，『宇宙大作戦』の通信機です．1960年代後半，一般的な通信機といえば，トランシーバーないしは壁にコードにつながっているお姫様型電話だったころ，『宇宙大作戦』に登場した通信機によってモバイル電話の期待が高まりました．その使い方は電話というよりもややトランシーバー寄りではありましたが，初期の

このブログを検索

touch-touch-touch