実用的！「これならコード書けるのでは」ってレベルの3DoFデスクトップ環境がなんとお試し無料。
![[VITURE] 【正規販売店】 Pro XR グラス（マシュマロホワイト） オンライン先行予約 GACKTコラボモデル](https://i0.wp.com/m.media-amazon.com/images/I/31BBSaGL6nL._SL160_.jpg?resize=160%2C160&ssl=1)
はじめに
当ブログで「電気メガネ」と呼称しているXREAL AirやRokid Max、VITURE Oneのようなセンサーを内蔵している光学シースルー型ヘッドマウントディスプレイはメーカーが出している専用アプリやハードウェアを組み合わせることによって頭の動きに追従する仮想の画面を表示することができたりするんですが、実質専用アプリ内のブラウザで表示したWebサイトしか表示できなかったり、WindowsやMacで3画面表示と言っても「あれ？思ってたんと違うな？」ってガッカリしてそれっきり押し入れにしまってしまったという方も多いことと存じます。
XREAL NebulaにMac版やWindows版がありますが、Windows版は特にGeForce RTX3060以上が推奨されていたりCPUやGPUの負荷が大きく、「そこまでしてこれ？」というつらい気持ちを味わった皆様方にもぜひ今回紹介するBreezy GNOMEを体験してもらいたい。
Breezy GNOMEはwheaneyさんがGitHubで公開してるGNOME Shell拡張で基本的な機能は現状無料で使うことができます。今後月5ドルになるようですが、お試しは無料です。無料で使えるOSであるUbuntuに入ってるGNOMEも無料なのでそこらへんに転がってるミニPCやらThinkPad E495で気軽に体験することができます。
GNOMEとは？
GNU Network Object Model Environmentの略で「デスクトップ環境」と呼ばれるソフトウェアですが、説明しろと言われても「Ubuntu入れたら勝手に入ってるGUI」って感じで本人よく分かってないので、Ubuntuとあわせてざっくり無料で使えるWindowsみたいなヤツぐらいなふんわりした理解でとりあえず進めたいと思います。
GNUが「ぐぬー」なのか「ぬー」なのかについては議論しません。
Windowsと一緒で普通にマウスでぽちぽち操作できるし見た目もいい感じなのでChromeインストールしてしまえば普通にこれでいいんじゃね？って気持ちになりますよね。
対応している電気メガネ
電気メガネメーカーからSDKが提供されているVITUREとRayNeoがオススメだそうです。XREALは公式SDKがなくてユーザーが独自解析したオープンソースSDKなのでオススメできないとのこと。
Rokid Maxは開発中だけどメーカーからSDK来てないっぽい？対応して欲しいなあ…
試した環境
Ubuntu 24.04 LTS
インストール方法はisoファイルをダウンロードして起動可能なUSBメモリを作ってそれでPCにインストールするんですが、Windows環境そのままでインストールすることもできるのでお気軽に試すこともできますが、うっかりすると全部消えたりすることもあるかもしれないので新規にミニPCとか買ってもいいし、使ってないThinkPad E495とか使ってもいいと思います。
参考までにHDMI出力しか無くても「HDMIをUSB Type-Cに変換するアダプター」を使用して、給電をPCからUSB接続すればセンサー値を取得できて普通に動作したので無理にUSB Type-C DP Alt出力のあるミニPCを新調しなくても試すことはできます。
Ubuntu 24.04 LTSのインストール方法は探せばいくらでも出てくるので詳しくはそちらで。
インストールされたGNOMEのバージョンは46でしたが問題なく動作しました。
Breezy GNOMEのインストール
流れとしてはGitHubで公開されているセットアップスクリプトをUbuntu上の端末でダウンロードして実行権限を付与して実行するんですが、今回試した限りにおいてですが標準状態では足りないパッケージがありインストールが完了しないので先にcurlとflatpakのインストールを行います。
具体的には以下ような流れでインストールしました。flatpakに関しては検索すると色々ありますが現状は普通にaptで入れれば良さそうです。
$ wget https://github.com/wheaney/breezy-desktop/releases/latest/download/breezy_gnome_setup
$ chmod +x ./breezy_gnome_setup
$ sudo apt install curl flatpak
$ ./breezy_gnome_setupインストール後すぐはGNOME Shell拡張が認識されないのでログアウトして入り直してください。
再ログインして対応電気メガネを接続した状態でサングラスをかけたペンギンアイコンのBreezy Desktopアプリを開くと設定画面が開きますので色々弄ってください。後述する作者さんの紹介動画が分かりやすいですが、とりあえずEffect enabledをONにすれば3DoFになります。
キーボードショートカット
Breezy GNOMEで一番気に入ってるのがこのキーボードショートカットで操作ができるところです。文章やコードを書く場合にキーボードから手を離さずに画面を中央に持ってきたり近づけたり離したりすることができるのがめっちゃ強力。
「Re-center display」で目線の中央に画面を持ってきてくれます。XREAL Air 2で試してたらセンサーのキャリブレーションができてないからかじわじわ画面が移動してしまうのでズレたら押すみたいな感じ。画面がどっか行っちゃったときもとりあえず押す。
「Display distance」を指定した距離設定を切り替える機能です。その下の0.8と1.0が設定した数字で、1.0は画面が全部表示されて0.8はちょっと近いので大きく見える。押すたびに見てる中心に近づいたり離れたりできる。文字をよく見たいときは近づく。全体を見るときは離れるという感じ。めっちゃ便利。
「Toggle follow mode」がONだと顔を動かすと画面がちょっと遅れてついてくる、OFFだと固定された場所から動かない。微妙に動かしたときはついてこないようにthreshold(閾値)を設定できる。
設定画面には書かれてないけど電気メガネのヒンジあたりをトン・トンってすると「Re-center display」、トン・トン・トンでキャリブレーション機能が起動するんですが、思ったように発動しない印象なのでやっぱりキーボードショートカットが安定してて良いです。
Changeを押して自分の使いやすいショートカットキーに設定し直しておくことをオススメします。
3DoF時の負荷が少ない
Intel N100などの弱小CPUでもちゃんと動く！この動画はThinkPad E495を使用してますが、HiMeLE Quieter 4C(RAM8GB版)でもほぼストレスを感じない挙動です。
この動画のCPU負荷はほとんどスクリーンレコードです。
セキュリティ保護コンテンツの再生もできる
結構重要な点として、XREAL Nebula for Windowsは仮想ディスプレイ上でPrime Videoなどのセキュリティ保護コンテンツが表示されないんですが、Breezy GNOMEでは普通にChrome上でPrime Videoを再生した状態で3DoFできました。視界の外に設置して動画再生しておいて音だけ聞いて他のことをしといて気になったときにだけそっち見るとかもできます。
今後の予定について
公式GitHubにあるREADMEによると、現状GNOME 45以上でx86_64が必要ということですが古いバージョンでも動くようにするそうです。ARM対応は嬉しい人がいそう。
複数の仮想画面対応は期待大ですね。メモリの利用量やCPUの負荷がどれぐらいになるかも含めて注視したいです。
SBSで3D表示は必要かなあ。実際に使ってみないと分かりませんが負荷が増えたら本末転倒だなあって思うのでやや懐疑的です。
作者さんが説明してる動画
概要、インストール、設定などを作者さん自ら説明してくれています。Linuxで公式サポートのあるVITURE推しですね。RokidやXREALも公式でキャリブレーションとかサポートして欲しいですねえ…
支援しよう
現状お試し無料で使えるんですが、今後の予定では月5ドルの寄付が必要になるとのことです。現状の表記では毎月自動更新、年間50ドル、永続ライセンス125ドルのようです。
25ドル寄付したのであと25ドル払えば年間、あと100ドルで永続ってことみたい。
寄付は以下のページからできます。
おしまいに
これは良いよ。ホント。電源とXREAL Air 2だけ繋いだミニPC起動してUbuntuログインしたら自動的にBreezy GNOMEが裏で起動して3DoF有効にしてくれるからマジで実用的。
Intel N100なキーボードPCとか売ってないかなって探しちゃうぐらい気に入ってます。
これが仮想マルチディスプレイ対応予定とか夢が広がりすぎてる。
現場からは以上です。