Apple Vision Pro の基本操作と基本設定まとめ

# VisionProに触る
Vision Proのシュミレーターに触る機会があったので、その基本について備忘録的にまとめます。

[シュミレーターはこちらから](https://developer.apple.com/download/all/?q=xcode%2015)

最新のバージョンのMacでないとBeta版のXcodeを起動できないので注意

詳しいインストール方法はこちらの記事をご覧ください
[VisionProのエミュレーターのインストール - kanakanho](
https://qiita.com/kanakanho/items/4dd7448aad63a6beb20a)

# VisionPro基本操作
## 起動
<img width="1440" alt="image.png (785.7 kB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/5dcfacf9-fc29-4f6b-aa69-e3bf400ada02.png">

### 左上の実行マークから実行

### Simulatorが起動すると
- いつものりんごマーク
- 起動音がある


## 上下左右、前進、後進のキー入力
| 視点の移動効果 | 入力 | （矢印）|
| ---| - | --- | 
| 上昇 |  E ||
| 下降 | Q ||
| 左移動 | A | ← |
| 右移動 | D | → |
| 前進 | W | ↑ |
| 後進| S | ↓ |

## ウィンドウの拡大・縮小
今、開いているウィンドウの左下か、右下にカーソルを合わせると、白い外枠みたいなのが現れて、画面サイズの変更ができる。
割と自由に変えられる。
Mapなどの一部のアプリでは3:4のiPadサイズがデフォルトでその縦横の比の入れ替え機能がある。
### 左下
<img width="1170" alt="image.png (3.3 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/802f0643-4d1e-4705-b26c-f271cac83514.png">

### 右下
<img width="1170" alt="image.png (3.3 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/b17e4546-0c97-49f8-97cc-9e41374647be.png">

### 3:4 の様子（ワンクリックで切り替え）
<img width="1170" alt="image.png (5.5 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/bb17d16e-c933-4ce3-abb5-f64586fc730c.png">

### 4:3 の様子（ワンクリックで切り替え）
<img width="1170" alt="image.png (5.1 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/ef5d253a-c9e4-481d-a000-888955885f06.png">

## カーソル操作
| 操作 | 効果 |
| - | - |
| 1本指タップ | 選択 |
| 1本指ドラッグ | ドラッグした方向に視野が移動する |
| 2本指ドラッグ | 1本指ドラッグと同様 |
| ピンチイン | 後進 |
| ピンチアウト | 前進 |

## ウィンドウの操作
表側からしか操作できない。反対側から触ろうとしても何もできない。

## 下の5つの移動の仕方
<img width="310" alt="image.png (96.1 kB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/f190b3cc-e80f-4a6e-a670-4a4b1b06e4e9.png">

左から順番に
### 1：Select to interact with the scene （シーンとのインタラクションを選択）
ウィンドウの中のものの選択＋前述のカーソル操作ができる
### 2：Drag to tilt the camera（ドラッグしてカメラを傾ける）
前述のカーソル操作ができる
### 3：Drag to pan the camera（ドラッグでカメラをパン）
Y軸を固定して、ドラッグで上下左右移動
### 4：Drag to orbit the camera（ドラッグしてカメラの軌道を変える）
視点の中心を固定して、全方向に視点移動
### 5：Drag to dolly the camera（ドラッグでカメラをドリー）
Z軸を固定して、上下ドラッグに対応して、前進、後進の視点移動
### 6：Reset Camera（カメラのリセット）
カメラの向きを初期値に

## 今使えるショーカットキーの一覧
⌘キー長押し
### Mapアプリで使う様子
<img width="1170" alt="image.png (4.7 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/1cfb5a4f-f2c3-4b6e-8655-3b1c0e47684a.png">

## 文字の入力
文字の入力は手というより、声でやりたい感じがする
カメラから外にある文字を認識してそのままペーストする機能があるらしい
AutoFill（自動補完）もあるみたい

### キーボード
バージョン1.0の段階でJISキーボード対応済み


## 謎の白い点
optionキーを押すと謎の白い点が2つ現れる
どうやら片方がカーソルを追って、もう片方が中央から上下左右に対照な場所を追うみたい
用途は不明

### Shiftを押しながら
2つの点の相対位置を固定して視野の移動

## メニュー画面の表示

### カーソルを上方に進めると灰色のポッチが現れる
<img width="1158" alt="image.png (3.3 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/31d1cb7e-1196-479c-9cc8-3ec17f48d465.png">

### カーソルを合わせると矢印が見える
<img width="1158" alt="image.png (3.3 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/f999d17e-913c-4ebe-89c7-1a8c2f5bf976.png">

### カーソルをクリックするとメニューが現れる
<img width="1158" alt="image.png (3.6 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/ee74492a-80fd-49e3-97f0-64c9e5d124c2.png">

左から順番に
#### Home（ホーム）
<img width="1158" alt="image.png (3.7 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/51ba4390-fc2d-4638-a565-ceeabe21b9d5.png">

#### Environment（環境）
<img width="1158" alt="image.png (3.7 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/d802e928-4bf2-46e3-aefd-c30d2799272f.png">

#### Control Center（コントロールセンター）
<img width="1158" alt="image.png (3.7 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/297c0fc8-2ec5-417e-a309-4e8f614be984.png">

#### Notification Center（通知センター）
<img width="1158" alt="image.png (3.7 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/9394e3b3-6334-4e7b-9a9f-b8b7452ad170.png">

#### 音声の設定の左隣にある矢印を押すと、詳細設定が開く
<img width="1158" alt="image.png (3.6 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/f3db88fd-0875-4eb4-b151-065515fafac2.png">

#### アプリケーションの音量設定と、ユーザーの音量設定
<img width="1158" alt="image.png (3.6 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/308be42a-cda7-4c55-8f7d-fcb85b85c247.png">

## Homeを押す
アプリの一覧が表示される
現在の1.0のアプリの数は以下の写真の通り
左下のCompatinle Apps（互換性のあるアプリ）にはいくつかのアプリが表示されているが、実際に開くとPodcastsとブックは存在しない
その名前の通り、iPadで触るのと全く同じようなアプリが開く
<img width="1158" alt="image.png (3.7 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/89ebf1d8-1831-4742-90ca-7d7495bf8c76.png">

### 左下の3つのアイコン
<img width="1158" alt="image.png (3.7 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/b2621642-480c-4269-bb45-1aeb2093013f.png">

#### Apps
Homeで開いたものと同じ画面
<img width="1158" alt="image.png (3.7 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/51ba4390-fc2d-4638-a565-ceeabe21b9d5.png">

#### People
FaceTimeで話す専用の画面
<img width="1158" alt="image.png (3.7 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/48261312-ec5a-44a8-85cc-700eb0ebd3bc.png">

#### Environments
出てくるどのテーマをクリックしても反応しない
公式のデモビデオの感じ、おそらくテーマを選択すると周りの状態が変化すると考えられる
あと左右に不自然に動かせるため、現在のiPhoneのホーム画面のようにテーマの推移があると考えられる
<img width="1158" alt="image.png (3.8 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/7d6ac827-ab18-4f9c-a802-809fecb76355.png">

### Environment（環境）をタップ
No  Environment と表示される先ほどの通り、何も選択できないため、こうなっていると考えられる。
<img width="1158" alt="image.png (3.8 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/be019d6c-0350-4c61-b905-f301c5c36275.png">

### Control Center（コントロールセンター）
iPadやMacのコントロールセンターに似ている。
左上から分かる通り、接続はWi-FiとBluetoothのみで、モバイルデータ通信はない。
右上に通知や音量設定がある
下に五つ並んだアイコンはiPhoneなどと同じ
<img width="1158" alt="image.png (3.7 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/5218f2ba-74c8-41e1-b59c-6ec03597c5f4.png">

左から
- おやすみモード
<img width="1158" alt="image.png (3.6 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/6ee260a5-8e6c-4933-a8d0-1d8b814c6415.png">

- ユーザー設定
<img width="1158" alt="image.png (3.7 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/021f876f-8cfa-49b1-aeca-6a0a89ff021d.png">

- 文字の大きさ
<img width="1158" alt="image.png (3.6 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/4d5337ac-fe4f-4348-837f-140c654f46c1.png">

- Airdrop
<img width="1158" alt="image.png (3.6 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/62a53620-8094-469f-9cc7-c84e08281afe.png">

- Search
<img width="1158" alt="image.png (3.6 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/be34fb44-dbc3-4f91-a30e-49ecfbcb5abb.png">

### Notification Center（通知センター）
デフォルトでは通知自体がオフになっている可能性がある。後の設定の説明にて述べる
<img width="1158" alt="image.png (3.7 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/069038d2-ad2e-4639-ba60-10234ae0b708.png">

**Airdropがある（有線はなさそう）** ファイル共有は大変そう

## 設定
### 初期画面
vision proはスクロールの感度がかなり遅いので、Tabキーを使うことをお勧めする
<img width="1126" alt="image.png (3.4 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/8ab5343e-8eae-4a22-ab17-cb40bcb01114.png">

設定アプリはアプリウィンドウの大きさが固定されていて非常に見ずらいため、画面に大きく表示する方法を先に述べる
### デフォルトのウィンドウの大きさを変える
1. 左側のバーをスクロールして「Display」を選択
1. Displayの一番下にあるDisplay＞Display Zoomを選択
1. Appearance（外観）の画面が開く
1. 「Small」,「Medium」,「Large」の中から「Large」を選択

<img width="1158" alt="image.png (3.6 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/bf6b603e-240d-4274-b16f-781eb3826ec3.png">
<img width="1158" alt="image.png (3.5 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/25702208-3cfc-49e6-a4b4-05111d39b04a.png">

## 上から順番に解説

### General
<img width="1158" alt="image.png (3.5 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/34cbf7d5-096c-4be1-a678-5dee4e8491fa.png">
visionproとvisionOSの情報が書いてある
シュミレーターでは512GBモデルである可能性が高い

#### Keybords
<img width="1158" alt="image.png (3.5 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/10f410c1-7ba0-4a7f-9de1-cd96a9577c16.png">

- Keybords
キーボードの入力が管理できる。現時点では英語のみ
- HandwareKeybord
Japaneseはないみたい
下のKeybord TypeではJISの設定がある

文章を見るだけで自動読み上げする機能があるみたい

### Apps
<img width="1158" alt="image.png (3.5 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/8f8fffa4-fdfc-4c1b-9690-d8515e10f2b0.png">
従来のiOSぽい

### People
<img width="1158" alt="image.png (3.5 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/54ce63cb-d5a3-4144-ad21-0ce46bc0a593.png">
自分の情報と他の人の情報を見れるのかな...?
連絡先アプリがfaceTime用にダウングレードされてが設定に吸収されたのかも

### Environment（環境）
<img width="1158" alt="image.png (3.5 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/1961a291-2ab7-42e0-9b03-d4ed3c1e5259.png">

#### Apperance（外観）
<img width="1158" alt="image.png (3.5 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/3c750cb3-95be-4477-a04a-2d1e7ffc430c.png">
デフォルトで「Light」「Dark」とその自動設定がある

#### Volume（音量）
音の大きさがここでも変えられるみたい

### Notification
<img width="1158" alt="image.png (3.6 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/c83505b8-4651-4f18-bcd6-438a375e8d54.png">
デフォルトで設定がオフになっている
Screen Sharingから画面での通知をオンにできる
<img width="1158" alt="image.png (3.5 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/2dae00cc-f584-4f04-86cc-a25925e49953.png">

通知も従来のiOSぽい「バナー」、「音」、「バッチ」の3つの選択項目がある

### Focus
<img width="1158" alt="image.png (3.6 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/51bb26b9-84a3-47a8-91bf-ea01ba86abea.png">
他の同じAppleIDから共有してこのあたりも使えるみたいだから便利かも

### Screen Time
<img width="1158" alt="image.png (3.5 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/5b9b89d1-131b-4800-aac6-e5ce9ab2fd2c.png">
これも従来のiOSぽい

### Accessibility
<img width="1114" alt="image.png (3.3 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/fbaa44f9-cb49-4688-ba25-0ad4ce359172.png">
これも従来のiOSぽい


#### Keybords
Accessibility  >  Keybords
<img width="1158" alt="image.png (3.6 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/26a86a64-df5e-470d-9e77-a09bd757421c.png">
<img width="1158" alt="image.png (3.6 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/2f5cbf81-df50-4d43-a7e4-b772ffb3f6f0.png">

#### Full Keyboard Access
Accessibility  >  Keybords  >  Full Keyboard Access
<img width="1158" alt="image.png (3.6 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/a2f68e70-8159-4cac-bfff-20cb880cd1ae.png">

#### Commands
Accessibility  >  Keybords  >  Full Keyboard Access  >  Commands
<img width="1158" alt="image.png (3.6 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/2258e82c-a8ba-4695-925e-3a993c7eb271.png">

色々なショートカットキーの割り当てについて書いてある（一部のショーカットキーがMacとダブっていて試せない、逆にそこで互換性がある）
##### Basic
<img width="1158" alt="image.png (3.6 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/166accb4-eb10-4ef7-8e19-01c618ff3d99.png">

##### Movement
<img width="1158" alt="image.png (3.6 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/fb88e7ec-ec0c-44f8-aa45-34fcab6ab62d.png">

##### Interaction
<img width="1158" alt="image.png (3.6 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/ddf5366d-fff7-4c2e-babb-008b8c55f60e.png">

##### Device
<img width="1158" alt="image.png (3.6 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/9acba40b-26a4-4695-a62c-7424ae4157fd.png">

- **Restart**
シュミレータの中で実行できたら、可能性広がる

- **Analytics**
ログを出力できる。Macのダウンロードフォルダに入る

- **Pass-Throrugh Mode**
パススルーの切り替えがショーカットキーできるの便利

##### Gestures（ジェスチャー）
<img width="1158" alt="image.png (3.6 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/df052d66-93d9-4efa-8b7d-8d163dfe7297.png">
<img width="1158" alt="image.png (3.6 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/7b7f3768-c6de-4899-9dd4-07ecafc8d9b7.png">

**ジェスチャーの入力が実機がなくても**ショートカットキーの割り当てで**試せる**！
全て新しいジェスチャが割り当てられている

### Control Center
<img width="1158" alt="image.png (3.5 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/7f2e219e-8f68-4b93-87e1-5ed6f20e5fd3.png">
これも従来のiOSの通り

### Siri
<img width="1158" alt="image.png (3.5 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/a866928a-ca71-472a-a6de-0d38cf6b45c3.png">
これも従来のiOSの通り
「Hey,Siri」じゃなくて「Siri」だけで認識できるようになったアップデートの恩恵が一番出そう

### Privacy & Security
<img width="1158" alt="image.png (3.5 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/f03f9e82-4738-4f8b-975a-04cc240305fd.png">

#### 見覚えのない上2つの項目
<img width="1158" alt="image.png (3.5 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/966aca80-3242-47a0-8371-a02b442adc95.png">

- **surroundings**（周囲）
和訳：サラウンドの利用を申請したアプリケーションは、ここに表示されます。
カメラとは別に周辺の認識についての項目みたい

- **Hand Structure & Movements**（手の構造と動き）
和訳：手の構造と動きの利用を申請したアプリケーションは、ここに表示されます。

周囲のトラッキング、ハンドトラッキングの入力を前提としたアプリケーションの実装が可能になる

### Display
<img width="1158" alt="image.png (3.5 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/044365c6-102e-40e3-95db-edfb166680a8.png">

- 文字サイズの変更
- 太文字の設定
- 明るさの設定
- ウィンドウの大きさの設定

### Storage
<img width="1158" alt="image.png (3.5 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/a1472a97-66e9-43ff-af29-b70db4bbbd40.png">

System Dataの容量がでかくて、果たして512GBで色々アプリを入れて、写真を撮って、音楽を聴いてとできるのか...

### Passwords
<img width="1158" alt="image.png (3.5 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/2c8140b6-5ac1-4225-a19f-a9964f117143.png">
いつものiOSの感じ

### GameCenter
<img width="1158" alt="image.png (3.5 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/0821367d-0a97-4d66-80f7-8d5ba40abaa8.png">
いつものiOSの感じ

### Wallet & Apple Pay
<img width="1158" alt="image.png (3.5 MB)" src="https://img.esa.io/uploads/production/attachments/19973/2023/08/10/148413/fb676b1d-addc-4e01-a3e5-200650a215c4.png">

いつものiOSの感じ
生体認証が指紋でもFaceIDでもなく、虹彩認証になるというので認証めっちゃ楽になりそう
画面見るだけでものが買えてしまう


# まとめ
思ったよりもiOSとの親和性が高く、最近のMacの仕様の変更と合わせて、使いやすいものになっている気がする。
M1のMacbookAir（16GB）でシュミレーターを実行したが、かくつくところがあるので、M2以上、32GBくらいがあるとスペックでネックがないかも。IntelチップのMacでは最適化がされていないらしく、ほとんど使い物にならない。
9月に Meta Quest 3 も発売されて、来年の1月に Vision Pro も発売されるのでこれからのVR、ARの技術の発展と、一般への普及が楽しみです。