<p>皆様を最初にエントランスでお迎えしたのが約2m×2m のFLIP-DOTSです。FLIP-DOTSとは、磁気で反転する複数のドットで構成されたアナログ感覚のディスプレイデバイス。複数のユニットで使用することで、一般的なディスプレイでは味わえない、音と視覚効果を作り出すことができます。<br>今回は『IDEATIONS Vol.1』のために作成したアニメーションにて展示いたしました。</p>

<p>「PIC」は、実空間の色データを取り込みリアルタイムにWeb上に反映させるAR体験ができるプロトタイプです。tensorflow.jsによる機械学習物体検出と8thWallによるWebARの技術を使っています。実空間に存在する色情報をAR上のキャラクターが読み込み、その色に合わせて変化する、リアルとバーチャルを連動させたAR体験が可能です。<br>今回はAR上のバーチャルキャラクター「PIC」と、実空間に「PIC」のお皿のオブジェクトを用意し、そこに載せた果物の色に合わせて「PIC」の体の色が変化するという演出をお愉しみいただけます。スポイトで吸い取った物体の陰影も細かく読み取ることが可能。また専用のアプリは不要でWeb上でARを体験することができます。<br>このプロトタイプはデザイナーが新しいキャラクター「PIC」を制作したことをきっかけに、エンジニアとアイデアを出し合い、キャラクターの特性を活かした表現の探究と、社会実装に向けたプロセスの中でWebARの作品として昇華させました。</p><p></p>

<p>VPS（Visual Positioning System）ARを用いたデジタルツイン表現のモデルケースを実装しました。VPS ARとは、従来のようなマーカーに追従する形でサインやオブジェクトを表示させるものではなく、マーカーは不要、平面ではなく立体的に空間を認識することが可能です。Ground Surfacer for VPS ARでは、カメラからの画像情報とGPSを利用した位置特定から、現実空間に重なったミラーワールドをスキャンして認識するARを体験できます。<br>社内で行われたハッカソンにて、XR領域のなかでもVPS ARについて世間的にもまだ理解しづらいもので、どうにかわかりやすい表現や体験にできないか？という技術起点で開発が始まりました。<br>デジタルツイン表現と現実空間を馴染ませられるよう、UIデザインも工夫し視認性を担保。スキャンの操作性や気持ちよさの表現も工夫しました。実際に展示会場では皆さまにスキャンの体験をしていただきました。</p><figure><img src="https://images.microcms-assets.io/assets/6bbe0606a45c4e2db0a6877aa613e213/70212c23d9da4f48b27f775eea86bfc6/04.jpg" alt="Ground Surfacer for VPS ARの体験で使用されたスマホを撮影した画像／スマホ内に表示された演出の画像" width="1920" height="540"></figure><div style="left: 0; width: 100%; height: 0; position: relative; padding-bottom: 56.25%;"><iframe src="https://www.youtube.com/embed/KEuymmnuARg?rel=0" style="top: 0; left: 0; width: 100%; height: 100%; position: absolute; border: 0;" allowfullscreen scrolling="no" allow="accelerometer *; clipboard-write *; encrypted-media *; gyroscope *; picture-in-picture *; web-share *;"></iframe></div>

FLIP-DOTS

Wipe Fake

KOTOBARA

Ground Surfacer for VPS AR

<p>処分がしづらく、処分することに罪悪感を持ってしまいがちな「手紙」。捨てにくい手紙に新しい価値を与えることで、ネガティブな行動や感情をポジティブなものに昇華できないか？という、私たちが生きている中で感じる些細な行動や感情に着目し、感情起点から生まれたアイデアです。手紙をシュレッダーに入れると、言葉が瞬時にアーカイブしてビジュアライズされます。今回は処分して無くなってしまう物が新たな命となり生まれ変わることを、裁断された紙は土に、言葉はきのこの胞子に変化することで表現しました。<br>手書き文字の検出にはIntelが提供する高性能のAIツールキット「OpenVINO™」を活用。文字位置検出・文字認識・形態素解析・ポジネガ判定をおこなっており、ポジネガの判定により演出を変えています。</p><figure><img src="https://images.microcms-assets.io/assets/6bbe0606a45c4e2db0a6877aa613e213/060720dc99ed4ff4a39a2376a6390af3/03.jpg" alt="KOTOBARAを体験中に手紙を機材の上から投函している様子の画像／体験中のKOTOBARAに表示されるビジュアライゼーションを撮影した画像" width="1920" height="540"></figure><div style="left: 0; width: 100%; height: 0; position: relative; padding-bottom: 56.25%;"><iframe src="https://www.youtube.com/embed/VBBhk15Pc9s?rel=0" style="top: 0; left: 0; width: 100%; height: 100%; position: absolute; border: 0;" allowfullscreen scrolling="no" allow="accelerometer *; clipboard-write *; encrypted-media *; gyroscope *; picture-in-picture *; web-share *;"></iframe></div>

<p>「結露した窓をガラスに指で落書きをする」といった誰もがやったことのある体験を、透明ディスプレイを使って疑似体験ができるプロトタイプ。IMG SRCのR&amp;D活動「μProto」の透明ディスプレイを使ったハッカソンをきっかけに生まれたアイデアです。<br>結露した窓に落書きをしてはいけない・指が濡れてしまうというネガティブな要素を、デジタル表現によりポジティブな体験へと変えています。デバイスは、透明ディスプレイ「SURU」と赤外線タッチボックスを使用。リアルな表現にこだわった水滴の滲み方や雫の垂れ方は、Unity Shaderを用いて制作しています。透明ディスプレイを複数つなげての演出も可能で、ご来場いただいたお客様とこんな施設や場所に置いてあると面白いのではないか？とアイデアをお話する場面もありました。</p><figure><img src="https://images.microcms-assets.io/assets/6bbe0606a45c4e2db0a6877aa613e213/1ac455b19a2d47f39a1edff6e5477323/02.jpg" alt="Wipe Fakeの全体像／Aipe Fake体験している人の手のアップ画像" width="1920" height="540"></figure><div style="left: 0; width: 100%; height: 0; position: relative; padding-bottom: 56.25%;"><iframe src="https://www.youtube.com/embed/qnk_tns7vjU?rel=0" style="top: 0; left: 0; width: 100%; height: 100%; position: absolute; border: 0;" allowfullscreen scrolling="no" allow="accelerometer *; clipboard-write *; encrypted-media *; gyroscope *; picture-in-picture *; web-share *;"></iframe></div><p></p>

FLIP-DOTS

SHARE

OTHER PROTOTYPING

PIC

Ground Surfacer for VPS AR

KOTOBARA

Wipe Fake