情報処理学会 インタラクション 2024
IPSJ Interaction 2024

INT24003
2024/2/28

ShadoCookies: 視点位置に依存して情報切り替え可能なクッキー製造手法
山本 匠1,a)Biyon Fernando2

雨坂宇宙1

Anusha Withana2

杉浦裕太1

概要：本稿は，クッキー上に視点位置に依存して情報切り替え可能な見た目を作り出す手法を提案する．
クッキー生地上に斜めから穴を空けることで，特定の角度からしか見えない影が生じる．これによってユーザの視点位置に応じて異なる見た目を作ることができる．システムはユーザが提示する画像を入力するソフトウェアと，実際にクッキー生地上に物理的に穴を空けるハードウェアから構成される．実験として，焼き時間や穴の深さ，方位角の変化によって調査した．さらに，実際に製作したクッキーとその使用例を示す．

1. はじめに庭で使用するのは実用的ではない．一方で，CNC [12] や

3D フードプリンタ [13], [14] などで食品自体に加工を施す

食は人間にとって必要不可欠なものである．社会的・文アプローチも提案されている．このアプローチは，家庭で化的な慣習と関わりが深く，人間の喜びの一つになっての調理中，または食品の加工フェーズで使用することで，いる [1]．HCI 研究領域では食べ物に関する研究が多数行

食事中においてはデバイスフリーでの提示が可能である．

われ、Human Food Interaction(HFI) [2] と呼ばれている．

本研究では，視点位置に依存して提示する視覚情報の切HFI 研究領域の中では電気を用いた味覚提示 [3]，食べ物

り替えが可能なクッキー製造手法を提案する．クッキー表を通したコミュニケーション [4]，子供の食事のモチベー面において，斜めに向いた穴を空けることで，穴内部に特ションを上げるためのゲーム [5] など，様々な側面から研定の視点位置のみから見える影が生じる．これにより，視究が行われている．

点の方位角位置に応じて選択的に提示情報を切り替えるこ

HFI の中で視覚的な要素を提示する研究は数多く行われとが可能である．システムは，画像を入力してパターンをており，視覚的な要素の提示により食体験を拡張することデザインするソフトウェアと，クッキー生地上に穴を形成ができる．例えば，食品の見た目 [6] や形状 [7] を変化させする 2D プロッタをベースとしたハードウェアから構成さることで味覚に影響を与えることができ，この関係は感覚れる．クッキー生地に対して穴を空け，その後焼くことに間相互作用 [8] と呼ばれている．また，食品の見た目を介

よってクッキーが得られる．本稿ではこのシステムによっして印象的な方法でデータを可視化することで，楽しみをて得られた結果に加えて，出力したクッキーの使用例 (1)与えることもできる [9]．このような研究は，エクササイ

について述べる．

ズや食事のモチベーションの向上 [9], [10]，ユーザの行動

本研究の貢献を以下に示す．

変容への応用 [11] などが期待されている．

• クッキー上に視点依存の見た目を作り出すクッキー製

視覚提示をする手法としては，いくつかのアプローチが造手法を提案した．

提案されている。まず，視覚的な情報を後から CG で足す• クッキー上に表示するパターンをデザインするデザイアプローチである．HMD [10] やプロジェクタ [11] を用い

ンツールと，クッキー表面に穴を空けるハードウェアて提示を行い，ユーザに対して効果を与えることができを実装した．

る．しかし，HMD を用いたシステムでは HMD を食事中に着用する必要がある．さらにプロジェクタを用いた手法
では，食卓におけるプロジェクタの設置が必要があり，家• 提案手法を用いた結果と利用例を示した．

2. 関連研究2.1 デジタルフードファブリケーション

1
2
a)

慶應義塾大学
The University of Sydney
imuka06x17@keio.jp© 2024 Information Processing Society of Japan

3D プリンタやレーザカッターなどの技術を食品に導入する技術であるフードファブリケーション技術の研究は21情報処理学会 インタラクション 2024
IPSJ Interaction 2024

図 1

INT24003
2024/2/28

本研究の応用例． (a) 二人の人がクッキーを左右から見ており、一人の視点だけのみからハートを提示する．(b) ボキャブラリーカード (c）片側からしか見えない QR コード．

(d) 視点によってうさぎの表情を変えることができる．

数多く行われている．まず，近年発展が進む 3D フードプ

チキュラレンズを有する 3D オブジェクトを出力する手

リンタを用いて食品をデザインする研究がある．宮武らは法 [30], [31] も提案されている．一方で，CG 領域ではレン3D フードプリンタを用いてホイップクリームでケーキをチキュラレンズの原理とは異なる原理で視点位置性を持つ

デコレーション [15]，およびフラワーゼリーを出力する技

見た目を出力する手法が提案されている．櫻井ら [32] は，術 [14] を提案した．Foodfab [13] はクッキーの充填率を変UV プリンタを用いた反射板を形成する手法を提案した．

化させること満足感を制御する 3D フードプリント技術でPjanic ら [33] は，ハーフトーン印刷を用いて金属に対しある．Interiqr [16] は，クッキー内部に目立たないタグをて異方性を有する見た目を生成する手法を提案した．Shen

埋め込む技術である．上記のような 3D フードプリント技

ら [34] は，金属に傷をつけることで反射アートを出力す術を用いて，出力後に形状を変化させるプリント技術である手法を提案している．その他の手法として影を用いる手る 4D フードプリント技術の研究 [17], [18], [19] も行われ法も提案されている．SHADOWPIX [35] は，凹凸形状をている．また，3D フードプリンタだけではなく，レーザ

3D プリントすることで影を用いて光源位置に依存して提

カッター [20], [21] や CNC 工作機 [12] を用いる手法，ユー

示画像を切り替える手法である．Peng ら [36] は影を用いザが手作業で食品を作ることを支援する手法 [22], [23], [24]てディレクショナルライトを点灯させたときに出力されるも提案されている．

3D オブジェクトの出力技術を提案した．このようなオブ視点に応じて異なる見た目を有する食品を作る手法も提案されている．視点依存の見た目を作り出す原理として有ジェクト自身に投影される影を用いてパターンを生成する
手法は “self-shadowing” と呼ばれている [37].

名なレンチキュラレンズの原理を，透過性の高い食品であ

本手法では，クッキー上に視点依存の見た目を出力する寒天 [25] やキャンディ [26] に適用する手法が提案される手法を提案する．影を用いて切り替えを行う点で “self-ている．これらは視点に応じて選択的に見た目を変更する

shadowing” のアプローチであると考えられるが，上記とことが可能であるが，透過性の低い食品に適用することは比べて食品に対して影を用いて情報を提示するという点が困難である．一方，山田 [27] は回折格子フィルムとレーザ

異なる．

カッタを用いて構造色を有する食品を出力する手法を提案した．この手法は透過性の低い食品への適用が可能であるが，選択的に発色の有無を変化させることはできないため，提示する情報を変更することは困難である．

2.3 実物体を用いた視覚情報提示
泡 [38], [39], [40] や水 [41], [42]，木の板 [43]，砂 [44]，植物 [45], [46], [47] など，実世界上の物体を用いた情報提示

本研究では，透過性の低いクッキー表面上において視点手法が提案されている，このような実世界上の素材の中に位置に応じて異なる情報提示が可能な手法を提案する．本は，芝生や毛を有する布など，視点や光源に依存して濃淡が手法では，山田らの手法では困難であった，選択的に情報変化する異方性を有する素材が存在しており，この性質をを切り替えて提示することが可能である．

用いて情報提示する手法が提案されている [48], [49], [50].
視点に依存した見た目を作る例としては，山本と杉浦 [49]2.2 視点依存性を有する見た目の生成
実世界上に視点依存性を有する物体を出力する手法はは，カーペットを用いた視点位置や光源位置に応じて提示
画像を切り替える手法を提案した．

古くから行われてきた．最も有名なものは凸レンズを用

本研究はクッキー上に視点に依存して異なる情報を提示いることで視点に応じて異なる見た目を出力するレンチする手法を提案する．これらの手法とは実世界上の実物体

キュラレンズを用いる手法である．2D プリント技術の発を用いるという点で共通している．

展 [28], [29] に加え，最近では 3D プリンタを用いてレン© 2024 Information Processing Society of Japan22

情報処理学会 インタラクション 2024
IPSJ Interaction 2024

図 2

INT24003
2024/2/28(a) 視点に依存した見た目を作り出す原理 (b) システムの概要.

パターンの入力は描画キャンバス上での描画，または既存

3. 提案手法
3.1 原理本研究では，視点に依存した見た目を作り出すために，クッキー上に穴構造を生成する手法を提案する．この原理について図 2 (a) に示す．クッキー生地表面上に斜めに向いた穴を空ける．視点 1 から見ると穴の中から影が見える
が，視点 2 から見えると影は見えない．こうして視点位置に応じて情報を切り替えることができる．

3.2 食品の種類の選定
本研究では，手始めにクッキー生地だけではなく，ケー
キや焼菓子，アイスクリームなど多様な素材へこの技術を適応することを試みた．多様な食品を調査する中で，他のHCI 研究 [13], [16], [51] でよく使用されており比較的簡素な手順で作成可能なクッキーの生地を用いることで，この手法が容易に実施できることが分かった．実世界上の食品
は素材や粘性などの物理特性が多様であり，食品に対して穴を空けることで情報提示する手法を確立するには，初期の調査としては食品は統一するべきだと考え，本研究で扱う食品としてクッキーに着目する．以下、本研究で用いられるクッキーの生地は，小麦粉 240g ，卵 50g，砂糖 80g，
バター 100g を混ぜることで作成された．

3.3 システム
本研究で提案するクッキーの製造プロセスを図 2 (b) に示す．システムは見た目をデザインするデザインツールと，生地に対して針を刺し穴を形成するハードウェアデバ
イスから構成される．クッキー生地はハードウェアデバイ
ス上に設置する前に，事前に厚さ 5mm に均一に広げられている．生地に対して穴を形成した後は，170 度に予熱されたオーブンを用いて加熱された．以下ではデザインツー
ルとハードウェアデバイスそれぞれについて詳説する．

3.3.1 デザインツール
デザインツール（図 3）は Processing を用いて実装された．はじめにユーザは切り替える画像の数（1，2，4 枚のいずれか）と，それぞれの画像の解像度を入力する (図 3(a))．次にユーザは指定して枚数のパターンを入力する．

© 2024 Information Processing Society of Japanの画像を入力することによって行う (図 3 (b)). ユーザは入力した画像の修正や確認が可能である．画像を入力した
後は図 3 (c) に示すような確認画面が表示される．カメラのアイコンをクリックすることでそれぞれの視点からの見え方が再現できる．最後に送信ボタンをクリックすること
で，画像データに応じたプロッタ位置の情報がハードウェ
アデバイスに送信できる．
本研究の原理では視点に応じて異なる画像を提示するために，クッキー表面上に視点位置に応じた向きの穴を，穴同士の重なりがないように空ける必要がある．クッキー上の穴の配置に関しては，2 枚の画像を提示する際は，1 枚目の画像のピクセルは奇数列，2 枚目の画像のピクセルは偶数列に配置される．アスペクト比を保つために，穴は行方向に対して奇数行のみに配置した．2 枚目の画像に対応する穴は 1 枚目の画像に対応する穴に対して 180 度回転した向きになっている．4 枚の画像を提示する際は，1 枚目の画
像は奇数行奇数列，2 枚目の画像は偶数行奇数列，3 枚目の画像は偶数行偶数列，4 枚目の画像は奇数行偶数列に格納される．それぞれの穴は 90 度回転した向きで配置される．

3.3.2 ハードウェアデバイス
図 4 (a) に示す通り，ハードウェアデバイスは 2D プ
ロッタをベースとして構成される．Makeblock XY Plotter

robot kit をベースに作成し，Makeblock Orion と呼ばれる
マイクロコントローラで制御される．このデバイスは，390

mm × 310 mm の範囲の任意の 2 次元平面上の位置に描画部を制御することができる．図 4 (b) に示す通り，プロッタデバイスの描画部はサーボモータとステッピングモータから構成される機構 (図 4 (c)) が付けられている．ステッピングモータは Z 軸周りにサーボモータと針から構成される機構を回転させる．この機構は，ラックピニオンの構造をしており，サーボモータの回転運動をバーの線形運動に変換させる．バーの先端には 0.6mm の針が付いており，この針をクッキー生地に挿すことで穴を形成する．針の地面に対する角度は 30 度に固定されている．
マイクロコントローラはソフトウェアツールから送信された位置を受け取り，描画部を所望の位置に動かし，サー
ボモータの回転によって穴を形成する．一枚目の画像に対23情報処理学会 インタラクション 2024
IPSJ Interaction 2024

図 3

INT24003
2024/2/28

ソフトウェアツール．(a) 画像の枚数と解像度を入力する画面． (b) 画像を描画ツール，
または既存の画像入力によって入力する画面． (c) 確認画面．ボタンを押すことでそれぞれの視点に対応した画像を確認できる．

図 4

ハードウェアデバイス． (a) デバイスの外観． (b) 描画部． (c) 穴を形成する機構．

応する穴が形成した後，ステッピングモータを回転させる

め，穴の深さの変化の影響について調査する．

ことで針の方向を変えて二枚目の画像に対応する穴を形成• 視点の方位角: 視点位置と光源位置を決定するパラ

する．これによって視点位置に依存した見た目を形成する．

メータは 4 変数あるが，これらの組み合わせを全て調また本システムには食品の高さを調整する機能はない．

査することは労力が大きい．本研究では，視点の方位針が食品に 90 度で接触するように食品の高さを手動で調角変化によって画像を切り替えるため，最も重要なパ整した後にシステムを使用している．

ラメータである視点の方位角について調査する．

4. 実験
本章では，見た目に影響を及ぼすパラメータの影響を調• 焼き時間: 本研究で対象としたクッキーは焼き時間は
見え方に影響を及ぼす．そこで焼き時間の影響について調査する．

査した．これらのパラメータは以下の通りである．

• 穴の構造: 穴の構造を決めるパラメータは，穴の地面に対する角度，穴の直径，形状，深さである．

• 視点位置と光源位置: 光源位置の方位角と仰角，視点位置の方位角と仰角の 4 変数である．

• 食べ物の種類: 色や粘度に代表される食べ物の物理的な特性は穴の見え方に影響を与える．本研究では，先述の通りクッキー生地に焦点を当てる．

4.1 実験環境・手順
以下で示す 3 つの実験は，写真を撮影し，その写真から
穴と穴以外の領域の輝度を計測し，そのコントラスト比を計算することで評価を行う．

4.1.1 撮影
実験を通して，クッキーのサイズは 5cm × 5cm，厚みは 5mm に固定した．撮影は暗室環境（図 5 (a)）で実施• 焼き時間（クッキーについて）: 本研究では，クッキーされた．暗室中にはクッキーの真上に LED ライトを設置

生地に穴を空けて食べる前に焼く．焼くことによってした．LED 光源が点灯していないときは 0.0lux，点灯しクッキーの生地の膨らみ方や色の変化が生じる．特にているときは 64.5lux である．カメラとクッキーとの距離

焼き時間によってクッキーの生地の膨らみ方や色の変は約 40cm，クッキーと光源との距離は約 70cm に固定し化が変わると考えられる．

た．カメラの仰角は地面に対して 30 度に固定した．カメ

本研究では以下のパラメータに焦点を当てて 3 種類の実験

ラとクッキーの穴と光の関係を図 5 (b) に示す．カメラのを行う．

方位角は 0 度で穴の方を向いている．実験 1 と 2 ではカメ

• 穴の深さ: 穴の構造を決めるパラメータの中で穴の地

ラの方位角は 0 度に固定され，実験 3 ではカメラの方位角面に対する角度，形状，直径はハードウェアデバイスが移動した．撮影には Canon EOS Kiss X9i を使用した．

の制約上固定されている．本研究では穴の深さはサー

ハレーション防止のためカメラと LED 光源に PL フィル

ボモータの角度によって変化させることができるた

ターを装着した．撮影パラメータは，シャッタースピード© 2024 Information Processing Society of Japan24

情報処理学会 インタラクション 2024
IPSJ Interaction 2024

図 5

INT24003
2024/2/28(a) 撮影環境. (b) 光源位置，カメラ位置，クッキーの穴の方向の座標系

が 2，F8.0，ISO100 に設定し，画像は RAW データとしての目的は，穴の深さがコントラスト比にどのような影響を記録した．

及ぼすのかを調査することである．

4.1.2 コントラスト比の抽出

ハードウェアデバイスを用いることで，サーボモータの

画像撮影後は PhotoShop 2023 に画像を取り込み，手動

回転によって駆動する線形運動によって針をクッキー生地

で穴領域と，穴領域以外のクッキー領域をクロップした．

に挿すことができる．そのため，穴の深さはサーボモータ

輝度はクロップした領域の輝度を，Photoshop 内蔵の機能の回転角度に依存する．最初に生地の高さはサーボモータ

によって計測した．それぞれの輝度に対してクッキー上のが 90 度の際に針と生地が接触するように事前にキャリブ

非穴領域の輝度をクッキー上の穴領域の輝度で除算するこレーションされる．この時の回転角度を 0 度として，0 度とでコントラスト比を抽出した．

から 90 度の範囲で針を動かした．穴は 0 度，15 度，30 度，

45 度，60 度，75 度，90 度にサーボモータを回転させて形4.2 実験 1: 焼き時間
実験 1 では焼き時間の影響について調査した．この実験の目的は，焼き時間が穴のコントラストに対してどのような影響を与えるのかを調査することである．

成した．各クッキーで 3 つの穴を空けそれぞれのコントラストを導出した．焼き時間は 12 分に固定した．
焼く前の生地に形成された穴を図 7 (a)，焼いた後の生地に形成された穴を図 7 (b) に示す．穴の深さが大きいほシステムを用いて，9 つの穴をクッキー生地上に形成しど，穴が鮮明に見えるのが分かる．図 7 (c) に導出したコ

た．針が生地に接地した状態から 45 度サーボモータを回ントラスト比を示す．２次の多項式によるフィッティング

転させることで穴を形成した．穴を形成した後，170 度にを行ったところ，決定係数は 0.8811 であった．深さが大き予熱されたオーブンで焼き時間を 10, 11, 12, 13, 14 分と変

くなるにつれてコントラスト比は大きくなる傾向にあるこえて焼いた．下限を 10 分，上限を 14 分としたのは，我々とが分かった．

の予備的な調査ではそれ以上焼くとクッキーが焦げすぎてしまい味に苦味が生じ，それ以下にすると生焼けであった

4.4 実験 3: 視点の方位角依存性ためである．クッキーを焼いた後，9 つの穴領域をそれぞ

実験 3 では方位角を変化させた際のコントラストへの影

れクロップし，それぞれの輝度を抽出した．穴領域以外の響に調査した．この実験では，0 度の際を穴が最も見える

クッキー領域の輝度を抽出し，それぞれのコントラスト比角度として 0 度, 15 度, 30 度, 45 度, 60 度, 75 度, 90 度,を抽出した．

105 度, 120 度, 135 度, 150 度, 165 度, 180 度の異なる方位結果を図 6 に示す．図 6 (a) に示す通り，クッキー全体

角から穴を空けたクッキーを焼き，それぞれの方位角でのは焼き時間が長いほど，全体が焦げて暗くなっている．穴

コントラスト比を調査した．穴の見え方には対称性があるに関しても焼き時間が長いほど，エッジが鮮明になる．図と考えているため，180 度から 360 度の領域は調査せず，06 (b) に計算されたコントラスト比を示す．コントラスト

度から 180 度を調査した．輝度計測の過程で方位角が増え

比は焼き時間が長くなれば大きくなる傾向になっている．

るにつれて，影は変化し，穴の位置を目視でクロップする

二次の多項式でフィッティングを行ったところ，決定係数ことが困難であった．そこで，穴領域のクロップの基準を

は 0.9162 であった．

設けるため，穴領域をペンを用いてマークしこれを参考にしてクロップをした．

4.3 実験 2: 穴の深さ
実験 2 では穴の深さの影響について調査した．この実験© 2024 Information Processing Society of Japan

コントラスト計測の結果を図 7 (d) に示す．コントラス
トは 0 度から離れていくにつれて小さくなっていった．線

25

情報処理学会 インタラクション 2024
IPSJ Interaction 2024

図 6

図 7

INT24003
2024/2/28(a) 焼き時間とクッキーの見た目 (b) 焼き時間とコントラスト比の関係(a): 穴の深さと焼いた後のクッキーの見た目．(b): 穴の深さと焼いた後のクッキーの見た目．(c) 穴の深さ（サーボモータの角度）とコントラスト比の関係 (d) 方位角とコントラスト比の関係

形フィッティングを行ったところ，決定係数は 0.9885 であった．

5. 結果・利用シナリオ
本章では，実施に作成したクッキーについて示す．穴のセージを伝えることが可能である．図 1(b) は，クッキーを用いたボキャブラリーカードである．片方の方向からは「さかな」と日本語で文字が見えるが，回転すると英語で「FISH」と見える．これによって子供などに対して英単語を楽しませながら覚えさせることができる．図 1 (c) は片深さを決めるサーボモータの回転角度は 45 度に固定した．

方のみから見える QR コードである．食品の見た目は味に結果を表す図 8 は，すべて撮影ボックス下で撮影された．

対して影響を及ぼす [8] とされ，食品上に QR コードが印字されていた場合は，味に対して良くない影響を及ぼすと5.1 結果考えられる．回転させて QR コードが見えない方向から食2 枚の画像を切り替えた結果を図 8(a)，(b)，(c)，(d) に示

べることで，ユーザは味覚に対して影響を及ぼさずにクッ

す．図 8 (a) はエクスクラメーションマークとクエスチョ

キーを食べることを楽しむことができる．また，食べないンマークを切り替えた例である．図 8 (b) はハートと星をときは QR コードが見える箇所から，賞味期限などの情報切り替えた例である．図 8 (c) は晴れマークと雨のマークが分かる．図 1 (d) はウサギ型クッキーの顔が視点に依存を切り替えた例である．図 8 (d) はパンダと魚のシルエッ

して笑顔と渋い顔に切り替わる例である．

トを切り替えた例である．提示画像は 180 度クッキーを回転させることで切り替えることができた．
図 8 (e) は 4 枚の画像を切り替えた例である．数字の 1,

2, 3, 4 を入力として切り替えることを試みたが，上手く画像が切り替わらなかった．

6. 議論と制約・今後の課題
6.1 原理における解像度の制約と改善策
本研究では，方向の異なる穴を配置することで視点依存の提示を実現している．これによってピクセル同士に間隔が空いてしまう．図 8(a)，(b)，(c)，(d) では同一方向の穴

5.2 利用シナリオ

同士の間隔を 3mm に固定，図 8 (e) では 4mm に固定した利用シナリオを図 1(a)，(b)，(c)，(d) に示す．図 1(a)が，これ以上間隔を小さくすると，穴同士が接触してしまは，特定の方向からのみハートが見える例である．好意をい穴が崩れてしまう．これは本研究の原理の大きな制約の特定の人間に対してのみ提示できたり，サプライズメッ

一つである．これを改善するには，針の地面に対する角度© 2024 Information Processing Society of Japan26

情報処理学会 インタラクション 2024
IPSJ Interaction 2024

図 8

INT24003
2024/2/28(a), (b), (c), (d): 2 枚の画像を切り替えた際の結果． (e): 4 枚の画像を切り替えた際の結果をより大きくすることで改善する可能性がある．本研究の6.4 光源位置

ハードウェアデバイスは針の地面に対する角度は 30 度に本研究で用いた方法は影を利用して情報を切り替えるた

固定されている．今後はこの角度を変更し，解像度の改善

め結果は照明環境の影響を受ける．今後，多様な照明環境に取り組む．

の影響を調査する予定である．

6.2 食品の素材

6.5 穴の構造に関するパラメータ

本研究では，穴を空けた後でクッキーを焼くプロセスが穴の直径や形状，平面に対する角度は本研究で使用した必要である．本実験では各条件 1 枚のクッキーのみを使用

ハードウェアデバイスでは固定されている．これらのパラ

して計測を行ったが，同じ焼き時間でも天板の位置によっメータは穴の見た目に影響を与える可能性があるが，これては焼きムラが発生し、全てのクッキーを均等な焼き加減

らのパラメータは互いに影響し合っており，実世界でそれにすることが難しい可能性がある．今後は各条件のクッらの組み合わせを調査するのは手間がかかる．このようなキーの枚数を増やし，より焼きムラを考慮した実験を実施

問題を解決する一つの方法として，穴の形状を再現するソする．

フトウェアを使用することが考えられる．図 9(b), (c), (d)

本研究では，食品素材としてクッキーに着目した．本研は Rhinoceros と Grasshopper を用いて実装したツールで究で用いた原理に基づく視点依存提示手法は，適切な穴がある．穴の深さ，大きさ，角度，入力画像の数，角度を指形成できればクッキー以外の食品素材や食材にも適用でき

定し，画像を入力することで自動的に穴が作成され，そのると考えられる．しかし、現在のシステムでは適切な柔ら

外観を確認することができる．現在は円形の穴形状しか実

かさの素材にしか穴を開けることができない．他の食材を装できておらず，また，素材表面の色や反射特性を再現す試してみたところ，図 9(a) に示すようにチーズなどにも穴ることはできていない．今後これらを再現することで，効を開けることができた．一方，豆腐やプリンでも穴を開け率的なパラメータの調査が実現する予定である．

ようとしたが柔らかすぎて穴が塞がれてしまった．現在のシステムにおいてどれだけ硬いものに対して穴を空けられ

6.6 味覚体験への影響

るかは，サーボモータのトルクに依存している．ドリルの本研究の実験 1 から焼き時間がコントラストに影響する

ように回転して穴を開ける機構に変えれば，より硬い素材

ことが分かった．しかし焼き時間が長くなるほどクッキーにも穴を開けられる可能性がある．今後は，現在のシステは焦げてしまい，硬くなる．よって焼き時間の変化によっ

ムでどのような素材に穴を開けられるかを調査するとともてクッキーの味や食感が変化する可能性がある．また穴がに，より幅広い素材に適用できる方法を検討していく．

開いていると，穴の開いていないクッキーと比べて食感が変化する可能性もある．これらの変化がユーザの味覚に対

6.3 視点の仰角とハードウェア
本研究では、視点の方位角によって画像を切り替えることができた．この技術は穴の方位角を変えることで実現しているが，方位角だけではなく穴の仰角を変えることで，してどうかを検証するために，ユーザ実験を行う必要が
ある．

7. 結論

視点の仰角に依存した画像を切り替えを実現できる可能

本研究では，穴の形成によりクッキー表面において視点性がある．本研究では使用したハードウェアデバイスではに依存して異なる画像を提示する手法を提案した．画像を

穴の仰角方向を変えることはできないが，自由度の高いロ

入力するソフトウェアと穴を形成するハードウェアから構

ボットアームを用いることで方位角方向に加えて仰角方向成されるシステムを提案した．実際にクッキーに対して使も穴の方向を変えることができる可能性がある．

用することで，視点に依存して異なる画像が提示できた．

© 2024 Information Processing Society of Japan27

情報処理学会 インタラクション 2024
IPSJ Interaction 2024

図 9

INT24003
2024/2/28(a): チーズに数字の「1」と「2」（解像度は 5×5）を描画したときの様子. (b), (c), (d):穴の構造を調査するためのソフトウェアツール．(b) ユーザは画像の枚数と穴の角度などのパラメータを入力し穴の形状をデザインする． (c) 既存の画像を入力し，インタフェー
ス上でシュミレーションした様子． (d) Rhino 上で出力されたレイトレーシングの結果．

今後は，他の食品への適用可能性を調査していく．
[9]

謝辞 本研究の一部は，JST 次世代研究者挑戦的研究プ
ログラム JPMJSP2123 の支援を受けたものです．
参考文献
[1]

[2]

[3]

[4]

[5]

[6]

[7]

[8]

Macht, M., Meininger, J. and Roth, J.: The pleasuresof eating: A qualitative analysis, Journal of HappinessStudies, Vol. 6, pp. 137–160 (2005).
Gayler, T., Sas, C. and Kalnikaitundeﬁned, V.: Exploring the Design Space for Human-Food-Technology Interaction: An Approach from the Lens of Eating Experiences, ACM Trans. Comput.-Hum. Interact., Vol. 29,
No. 2 (online), DOI: 10.1145/3484439 (2022).
Nakamura, H. and Miyashita, H.: Augmented Gustation
Using Electricity, Proceedings of the 2nd Augmented
Human International Conference, AH ’11, New York,NY, USA, Association for Computing Machinery, (online), DOI: 10.1145/1959826.1959860 (2011).
Gayler, T., Sas, C. and Kalnikaite, V.: Taste Your
Emotions: An Exploration of the Relationship between
Taste and Emotional Experience for HCI, Proceedingsof the 2019 on Designing Interactive Systems Conference, DIS ’19, New York, NY, USA, Association
for Computing Machinery, p. 1279–1291 (online), DOI:
10.1145/3322276.3322336 (2019).
Ganesh, S., Marshall, P., Rogers, Y. and O’Hara, K.:
FoodWorks: Tackling Fussy Eating by Digitally Augmenting Children’s Meals, Proceedings of the 8th Nordic
Conference on Human-Computer Interaction: Fun,
Fast, Foundational, NordiCHI ’14, New York, NY, USA,
Association for Computing Machinery, p. 147–156 (online), DOI: 10.1145/2639189.2639225 (2014).
Nishizawa, M., Jiang, W. and Okajima, K.: ProjectiveAR System for Customizing the Appearance and Tasteof Food, Proceedings of the 2016 Workshop on Multimodal Virtual and Augmented Reality, MVAR ’16, New
York, NY, USA, Association for Computing Machinery,(online), DOI: 10.1145/3001959.3001966 (2016).
Ogata, K., Gakumi, R., Hashimoto, A., Ushiku, Y. andYoshida, S.: The inﬂuence of Bouba-and Kiki-like shapeon perceived taste of chocolate pieces, Frontiers in Psychology, Vol. 14, p. 1170674 (2023).
Spence, C.: Crossmodal correspondences: A tutorial review, Attention, Perception, & Psychophysics, Vol. 73,© 2024 Information Processing Society of Japan

[10]

[11]

[12]

[13]

[14]

[15]

pp. 971–995 (2011).
Khot, R. A., Aggarwal, D., Pennings, R., Hjorth, L. and
Mueller, F. F.: EdiPulse: Investigating a Playful Approach to Self-monitoring through 3D Printed Chocolate Treats, Proceedings of the 2017 CHI Conference on
Human Factors in Computing Systems, CHI ’17, New
York, NY, USA, Association for Computing Machinery,p. 6593–6607 (online), DOI: 10.1145/3025453.3025980(2017).
Narumi, T., Nishizaka, S., Kajinami, T., Tanikawa, T.
and Hirose, M.: Augmented Reality Flavors: Gustatory
Display Based on Edible Marker and Cross-Modal Interaction, Proceedings of the SIGCHI Conference on
Human Factors in Computing Systems, CHI ’11, New
York, NY, USA, Association for Computing Machinery, p. 93–102 (online), DOI: 10.1145/1978942.1978957(2011).
Suzuki, Y., Narumi, T., Tanikawa, T. and Hirose, M.:
Taste in Motion: the Eﬀect of Projection Mapping ofa Boiling Eﬀect on Food Expectation, Food Perception,
and Purchasing Behavior, Frontiers in Computer Science, Vol. 3, p. 662824 (2021).
Tao, Y., Do, Y., Yang, H., Lee, Y.-C., Wang, G., Mondoa, C., Cui, J., Wang, W. and Yao, L.: Morphlour: Personalized Flour-Based Morphing Food Induced by Dehydration or Hydration Method, Proceedings of the 32nd
Annual ACM Symposium on User Interface Software
and Technology, UIST ’19, New York, NY, USA, Association for Computing Machinery, p. 329–340 (online),
DOI: 10.1145/3332165.3347949 (2019).
Lin, Y.-J., Punpongsanon, P., Wen, X., Iwai, D., Sato,
K., Obrist, M. and Mueller, S.: FoodFab: Creating Food
Perception Illusions Using Food 3D Printing, Proceedings of the 2020 CHI Conference on Human Factors
in Computing Systems, CHI ’20, New York, NY, USA,
Association for Computing Machinery, p. 1–13 (online),
DOI: 10.1145/3313831.3376421 (2020).
Miyatake, M., Narumi, K., Sekiya, Y. and Kawahara, Y.: Flower Jelly Printer: Slit Injection Printing for Parametrically Designed Flower Jelly, Proceedings of the 2021 CHI Conference on Human Factors
in Computing Systems, CHI ’21, New York, NY, USA,
Association for Computing Machinery, (online), DOI:
10.1145/3411764.3445346 (2021).
Miyatake, M., Watanabe, A. and Kawahara, Y.: Interactive Cake Decoration with Whipped Cream, Proceedings

28情報処理学会 インタラクション 2024
IPSJ Interaction 2024

[16]

[17]

[18]

[19]

[20]

[21]

[22]

[23]

[24]

[25]
[26]

[27]

of the 12th Workshop on Multimedia for Cooking andEating Activities, CEA ’20, New York, NY, USA, Association for Computing Machinery, p. 7–11 (online), DOI:
10.1145/3379175.3391711 (2020).
Miyatake, Y., Punpongsanon, P., Iwai, D. and Sato, K.:Interiqr: Unobtrusive Edible Tags Using Food 3D Printing, Proceedings of the 35th Annual ACM Symposium
on User Interface Software and Technology, UIST ’22,
New York, NY, USA, Association for Computing Machinery, (online), DOI: 10.1145/3526113.3545669 (2022).
Patoliya, J., Vala, K., Makwana, M. and Moradiya, P.:
Shape deformation/transformation in 4D printed food:A review (2023).
Wang, W., Yao, L., Zhang, T., Cheng, C.-Y., Levine,
D. and Ishii, H.: Transformative Appetite: ShapeChanging Food Transforms from 2D to 3D by Water Interaction through Cooking, Proceedings of the2017 CHI Conference on Human Factors in Computing Systems, CHI ’17, New York, NY, USA, Association
for Computing Machinery, p. 6123–6132 (online), DOI:
10.1145/3025453.3026019 (2017).
Nishihara, Y. and Kakehi, Y.: Magashi: Fabrication of
Shape-Changing Edible Structures by Extrusion-Based
Printing and Baking, Proceedings of the 13th Conference on Creativity and Cognition, C&C ’21, New York,NY, USA, Association for Computing Machinery, (online), DOI: 10.1145/3450741.3465388 (2021).
Fukuchi, K., Jo, K., Tomiyama, A. and Takao, S.: Laser
Cooking: A Novel Culinary Technique for Dry Heating
Using a Laser Cutter and Vision Technology, Proceedings of the ACM Multimedia 2012 Workshop on Multimedia for Cooking and Eating Activities, CEA ’12, New
York, NY, USA, Association for Computing Machinery,p. 55–58 (online), DOI: 10.1145/2390776.2390788 (2012).
Henze, N., Olsson, T., Schneegass, S., Shirazi, A. S.
and Väänänen-Vainio-Mattila, K.: Augmenting Foodwith Information, Proceedings of the 14th International Conference on Mobile and Ubiquitous Multimedia, MUM ’15, New York, NY, USA, Association
for Computing Machinery, p. 258–266 (online), DOI:
10.1145/2836041.2836068 (2015).
Lee, B., Hong, J., Surh, J. and Saakes, D.: Ori-Mandu:
Korean Dumpling into Whatever Shape You Want, Proceedings of the 2017 Conference on Designing Interactive Systems, DIS ’17, New York, NY, USA, Association for Computing Machinery, p. 929–941 (online), DOI:
10.1145/3064663.3064790 (2017).
Wang, H., Kanayama, H., Peng, Y., Yoshida, S., Xie, H.,
Okada, S. and Miyata, K.: Sketch2bento: Sketch-based
arrangement guidance for lunch boxes, 2021 Nicograph
International (NicoInt), IEEE, pp. 114–114 (2021).
Funahashi, Y., Omori, W., Yoshida, S., Peng, Y., Xie,
H., Okada, S. and Miyata, K.: Sketch2Makizushi: Interactive Guidance System for Decorative Sushi Rolls with
User Sketches, 2022 Nicograph International (NicoInt),
IEEE, pp. 44–47 (2022).
Nomura, M. and Oku, H.: Edible lens made of agar,
Optical Review, Vol. 27, No. 1, pp. 9–13 (2020).
Oku, H., Sato, M. and Funato, Y.: Edible Retroreﬂector
Made of Candy, IEEE Access, Vol. 10, pp. 24749–24758(online), DOI: 10.1109/ACCESS.2022.3155603 (2022).
Yamada, W.: M&M: Molding and Melting Method Using a Replica Diﬀraction Grating Film and a Laser for
Decorating Chocolate with Structural Color, AdjunctProceedings of the 35th Annual ACM Symposium on
User Interface Software and Technology, UIST ’22 Ad-© 2024 Information Processing Society of Japan

INT24003
2024/2/28

[28]

[29]

[30]

[31]

[32]

[33]

[34]

[35]

[36]

[37]

[38]

[39]

[40]

junct, New York, NY, USA, Association for Computing Machinery, (online), DOI: 10.1145/3526114.3558642(2022).
Jonusauskas, L., Žukauskas, A., Danilevicius, P. and Malinauskas, M.: Fabrication, replication, and characterization of microlenses for optoﬂuidic applications, Advanced
Fabrication Technologies for Micro/Nano Optics andPhotonics VI (von Freymann, G., Schoenfeld, W. V. andRumpf, R. C., eds.), Vol. 8613, International Society for
Optics and Photonics, SPIE, pp. 210 – 217 (online), DOI:
10.1117/12.2001061 (2013).
Alamán, J., Alicante, R., Peña, J. I. and SánchezSomolinos, C.: Inkjet Printing of Functional Materials
for Optical and Photonic Applications, Materials, Vol. 9,
No. 11 (online), DOI: 10.3390/ma9110910 (2016).
Zeng, J., Deng, H., Zhu, Y., Wessely, M., Kilian, A.
and Mueller, S.: Lenticular Objects: 3D Printed Objects
with Lenticular Lens Surfaces That Can Change Their
Appearance Depending on the Viewpoint, The 34th Annual ACM Symposium on User Interface Software andTechnology, UIST ’21, New York, NY, USA, Association
for Computing Machinery, p. 1184–1196 (online), DOI:
10.1145/3472749.3474815 (2021).
Brunton, A., Arikan, C. A., Tanksale, T. M. and Urban,
P.: 3D Printing Spatially Varying Color and Translucency, ACM Trans. Graph., Vol. 37, No. 4 (online), DOI:
10.1145/3197517.3201349 (2018).
Sakurai, K., Dobashi, Y., Iwasaki, K. and Nishita, T.:
Fabricating Reﬂectors for Displaying Multiple Images,
ACM Trans. Graph., Vol. 37, No. 4 (online), DOI:
10.1145/3197517.3201400 (2018).
Pjanic, P. and Hersch, R. D.: Color Changing
Eﬀects with Anisotropic Halftone Prints on Metal,
ACM Trans. Graph., Vol. 34, No. 6 (online), DOI:
10.1145/2816795.2818083 (2015).
SHEN, P., LI, R., WANG, B. and LIU, L.: Scratch-based
Reﬂection Art via Diﬀerentiable Rendering, ACM Trans.
Graph, Vol. 42, No. 4 (2023).
Bermano, A., Baran, I., Alexa, M. and Matusk, W.:
ShadowPix: Multiple Images from Self Shadowing, Comput. Graph. Forum, Vol. 31, No. 2pt3, p. 593–602 (online), DOI: 10.1111/j.1467-8659.2012.03038.x (2012).
Peng, H., Liu, P., Lu, L., Sharf, A., Liu, L., Lischinski,
D. and Chen, B.: Fabricable Unobtrusive 3D-QR-Codes
with Directional Light, Computer Graphics Forum, (online), DOI: 10.1111/cgf.14065 (2020).
Wu, K., Fu, X.-M., Chen, R. and Liu, L.: Survey on computational 3D visual optical art design, Visual Computing for Industry, Biomedicine, and Art, Vol. 5, No. 1,
pp. 1–31 (2022).
Ishii, A. and Siio, I.: BubBowl: Display Vessel Using
Electrolysis Bubbles in Drinkable Beverages, Proceedingsof the 32nd Annual ACM Symposium on User Interface Software and Technology, UIST ’19, New York, NY,
USA, Association for Computing Machinery, p. 619–623(online), DOI: 10.1145/3332165.3347923 (2019).
Sareen, H., Fu, Y., Boulahcen, N. and Kakehi, Y.:
BubbleTex: Designing Heterogenous Wettable Areas for
Carbonation Bubble Patterns on Surfaces, Proceedingsof the 2023 CHI Conference on Human Factors in
Computing Systems, CHI ’23, New York, NY, USA,
Association for Computing Machinery, (online), DOI:
10.1145/3544548.3581030 (2023).
Ishii, A., Ikematsu, K. and Siio, I.: Electrolysis Ion Display on Wet Surfaces, Adjunct Proceedings of the 33rd

29

情報処理学会 インタラクション 2024
IPSJ Interaction 2024

[41]

[42]

[43]

[44]
[45]

[46]

[47]

[48]

[49]

[50]

[51]

INT24003
2024/2/28

Annual ACM Symposium on User Interface Software
and Technology, UIST ’20 Adjunct, New York, NY,
USA, Association for Computing Machinery, p. 19–21(online), DOI: 10.1145/3379350.3416172 (2020).
Tsujimoto, Y., Itoh, Y. and Onoye, T.: Ketsuro-Graﬃti:
An Interactive Display with Water Condensation, Proceedings of the 2016 ACM International Conference on
Interactive Surfaces and Spaces, ISS ’16, New York, NY,
USA, Association for Computing Machinery, p. 49–55(online), DOI: 10.1145/2992154.2992159 (2016).
Nagafuchi, R., Matoba, Y., Ikematsu, K., Ishii, A.,
Kawahara, Y. and Siio, I.: Polka: A Water-Jet Printerfor Painting on the Grounds, Proceedings of the International Conference on Advanced Visual Interfaces,
AVI ’20, New York, NY, USA, Association for Computing Machinery, (online), DOI: 10.1145/3399715.3399817(2020).
Rozin, D.: Wooden Morror, https://www.smoothware.
com/danny/woodenmirror.html (1999). (Accessed on
06/27/2023).
: beachbot.ch, http://www.beachbot.ch/ (2015). (Accessed on 06/27/2023).
Kimura, T. and Kakehi, Y.: MOSS-Xels: Slow Changing Pixels Using the Shape of Racomitrium Canescens,
ACM SIGGRAPH 2014 Posters, SIGGRAPH ’14, New
York, NY, USA, Association for Computing Machinery,(online), DOI: 10.1145/2614217.2630572 (2014).
Gentile, V., Sorce, S., Elhart, I. and Milazzo, F.: Plantxel: Towards a Plant-Based Controllable Display, Proceedings of the 7th ACM International Symposium on
Pervasive Displays, PerDis ’18, New York, NY, USA,
Association for Computing Machinery, (online), DOI:
10.1145/3205873.3205888 (2018).
Tanaka, K., Kato, Y., Mizuno, A., Mikawa, M. and Fujisawa, M.: Dynamic grass color scale display techniquebased on grass length for green landscape-friendly animation display, Scientiﬁc Reports, Vol. 13, No. 1, p. 260(2023).
Sugiura, Y., Toda, K., Hoshi, T., Kamiyama, Y.,
Igarashi, T. and Inami, M.: Graﬃti Fur: Turning Your
Carpet into a Computer Display, Proceedings of the 27th
Annual ACM Symposium on User Interface Software
and Technology, UIST ’14, New York, NY, USA, Association for Computing Machinery, p. 149–156 (online),
DOI: 10.1145/2642918.2647370 (2014).
Yamamoto, T. and Sugiura, Y.: Turning carpets
into multi-image switchable displays, Computers &Graphics, Vol. 111, pp. 190–198 (online), DOI:
https://doi.org/10.1016/j.cag.2023.02.005 (2023).
Sugiura, Y., Toda, K., Kikuchi, T., Hoshi, T.,
Kamiyama, Y., Igarashi, T. and Inami, m.: Grassﬃti:
Drawing Method to Produce Large-Scale Pictures on
Conventional Grass Fields, Proceedings of the EleventhInternational Conference on Tangible, Embedded, andEmbodied Interaction, TEI ’17, New York, NY, USA,
Association for Computing Machinery, p. 413–417 (online), DOI: 10.1145/3024969.3025067 (2017).
Narumi, T., Nishizaka, S., Kajinami, T., Tanikawa, T.
and Hirose, M.: Meta cookie+: an illusion-based gustatory display, Virtual and Mixed Reality-New Trends:
International Conference, Virtual and Mixed Reality
2011, Held as Part of HCI International 2011, Orlando, FL, USA, July 9-14, 2011, Proceedings, Part
I 4, Springer, pp. 260–269 (2011).

© 2024 Information Processing Society of Japan

30