図 1 ユーザーがどのmacOS設定を変えるのかを尋ねている。表示されたBoBeの返答は、何を達成したいのかを明確にするよう求めている。上部の帯とドキュメントのプレビューは、プライバシーのため削除またはぼかしてある。結論 総合評価 初期のアルファ版です(ウェブサイトによればv0.1.0-alpha)。インストールは簡単で、モデルの選択も明快です。画面を見て手助けするというコアのアイデアは、このテストでは動作を確認できませんでした。アプリ自身のアシスタントは画面収録を許可するのに必要なmacOSの設定を示さず、画面認識が動作しているかの確認にも使える回答は返りませんでした。削除にはアクティビティモニタが必要でした。
テスターの用途への適合度 セットアップ後にアンインストールしました。'Concept I like. Concept is interesting. Implementation is missing.' テスターは3〜6か月後、または創業者と話した後に再度試すかもしれません。
観察 インストールは簡単(312 MBのDMG、macOSの承認1回)。その後のセットアップでは、案内された11 GBに対し4.9 GBと5.7 GBをダウンロードし、所要時間の表示がなく、macOSの画面収録の手順も分かりにくい。 観察 アプリ内アシスタントは、変更すべきmacOSの設定を示さなかった。'is screen reporting working?'への返答は、メモには'Bobe'と記録されている。 テスターの見解 テスターはアンインストールした:アルファ版で、コンセプトは興味深いが実装がない。削除しようとするとアプリは自動で再起動した。 スコアカード ステータス: Abandoned インストール 4/5 312 MBのDMG、macOSの承認1回、'so smooth'(テスターによる)。 導入とモデル選び 2/5 3つのモデルとそのRAM要件を示す明快なダイアログ。ただし、案内は11 GBなのに実際のダウンロードは4.9 GBと5.7 GB、所要時間の表示がなく、権限の手順は分かりにくい。 中核機能 1/5 画面認識が動作していることは確認できなかった。表示されたチャットの返答は、使える回答にならなかった。 ガイダンスと反復 1/5 アプリ内アシスタントは、2回の質問の後もmacOSの設定を示さなかった。反復は未テスト。 パフォーマンス 該当なし 未計測。 ドキュメント 該当なし ステップごとのセットアップガイドがある(良い点)。内容は評価していない。 信頼性とプライバシー 該当なし 監査していません。画面を収録するアプリで、ChatGPTによる確認は決め手を欠き、アプリは分析がMac内に留まると述べています。 アンインストール 1/5 アプリは自動で再起動した。削除できるようになるまで、アクティビティモニタで終了させる必要があった。 スコアは、以下の根拠から導いた案です(1 = 低い、5 = 非常に良い)。確定はテスターが行います。
テストの詳細
アプリ BoBe、画面を見るローカルAIアシスタント(bobebot.com) 観察
バージョン v0.1.0-alpha。テスターが貼り付けたウェブサイトのダウンロードバナーによる。インストールされたバージョンは記録なし。 ベンダーの主張
テスター Hans Kuepper(PromptQuorum創設者)
開始 2026年10月7日(メモには'7 October'とあり、年はファイル名とドキュメントのプロパティから)。時刻は記録なし。 観察
終了 記録なし。テストはアプリをアンインストールして終了した。
ハードウェア MacBook Pro、Apple M3 Pro、24 GBのユニファイドメモリ(メモには'24 GB RAM machine'とあります) 観察
システム macOS(テスト日時点の最新リリース)。正確なバージョンは記録なし
入手元 bobebot.com/#download。セットアップガイド:bobebot.com/getting-started 観察
ダウンロード ウェブサイトからの312 MBのDMG(テスター)。セットアップ後に、4.9 GBの言語モデルと5.7 GBのビジョンモデル(qwen3-vl:8b)がダウンロードされた。 実測
ローカルモデル Medium(8B)。約11 GB、24 GB以上のRAMと記載。どのダウンロードファイルが対応するかは記録なし。 観察
テストの理由 記録なし。
目的 メモには記載なし。メモから推定:画面を記録してそれをもとに推論するアシスタントが、24 GBのMacでローカルモデルとともにインストールでき、動作するかを確認する。 推測
使用したAI支援 ChatGPT(インストール前のセキュリティに関する質問)。BoBe自身のチャットアシスタントをテストした。 観察 すべての記述にラベルが付いています: 観察 実測 テスターの推定 ベンダーの主張 第三者情報 推測 テスターの見解 テスターの誤り ラベルの意味
開示事項。 テスターはPromptQuorum(promptquorum.com)の創設者です。PromptQuorumはローカルAIアプリに関するコンテンツサイト兼ディレクトリです。メモには、ベンダーとの接触、金銭の授受、スポンサー関係の記録はありません。テスターは、創業者と話した後に再度試すかもしれないと述べています。
元ノートのPDF: 追加予定
このテストを形づくった5つの場面 この質問にすら答えられないシステムを、どうして何かに信頼して任せられるでしょうか。
テスターのメモ。音声の文字起こしを軽く編集しています。英語から翻訳。 テストの経過 ウェブサイト 観察
テスターはbobebot.com/#downloadからアプリをダウンロードした:Mac向けの312 MBのDMG。
ベンダーの主張
テスターが貼り付けたダウンロードバナー:'v0.1.0-alpha · Requires macOS 13+ · Apple Silicon · M2 or higher recommended for local models'。
観察
サイトにはステップごとのセットアップガイド(bobebot.com/getting-started)がある。テスターはこれを良い点としている。内容は評価していない。
推測
テスターの印象:BoBeはLM StudioやOllama(メモには'Llama'とある)には接続せず、モデルをダウンロードして直接組み込む。未検証。
テスターの見解
画面を記録し、そこからユーザーを理解するアシスタントというアイデアは、彼の関心を引いた。'So cool function.'
インストール前:セキュリティに関する質問 観察
テスターは、インストール前にChatGPTにセキュリティリスクを尋ねた。
第三者情報
テスターの言い換えによると、ChatGPTは否定的なことも肯定的なことも見つけられず、どちらの方向の情報も得られなかった。ChatGPTの回答そのものはメモに含まれていない。
観察
テスターはリスクを取ってそのままインストールすることにした。独立したセキュリティレビューは、このテストには含まれていない。
インストール 観察
DMGからインストールした。使用前の手順は、アプリがインターネットから来たものであることをmacOSで承認することだけだった。テスター:'so smooth as hell, no problems'。
観察
最初の画面は、どの種類のモデルを使うかを尋ねる。テスターはローカルモデルを選んだ。
モデルを選ぶ 観察
ダイアログは最初にクラウドの選択肢を示す('Continue with OpenAI'付きのGPT-5.1ドロップダウン)。その下に3つのローカルモデル:Small(4B)は約6 GBで、16 GB以上のRAMを持つあらゆるApple Silicon Mac向け。Medium(8B)は約11 GBで、24 GB以上のRAMを持つM1 Pro / M2以降向け。Large(14B)は約15 GBで、48 GB以上のRAMを持つM2 Pro / M3以降向け。
図 2 モデルの選択:3つのローカルモデル。Medium(8B、約11 GB)が選択されており、テスターの24 GBに合う。Largeは48 GB以上のRAMと記載。ダイアログ外の背景はぼかしてある。観察
テスターはMediumを選んだ。これは彼の24 GBに合う。モデルは3つしかないと彼は述べている。
テスターの誤り
テスターは、15 GBのモデルは24 GBのマシンでも'should also run'と書いた。ダイアログにはLargeに48 GB以上のRAMが必要と書かれている。彼はMediumを選んだので、影響はなかった。
ダウンロード 実測
セットアップは3つのステップで進む:AIエンジン、言語モデル、初期化。言語モデルのダウンロードは4.9 GB。スクリーンショットには59 MB、1パーセントが写っている。
図 3 セットアップのダウンロードは3つのステップ。言語モデルは4.9 GBだが、モデルのダイアログは約11 GBと案内していた。バーには割合とサイズしか表示されない。背景はぼかしてある。観察
モデルのダイアログは、Mediumについて約11 GBと案内していた。
実測
最初のダウンロードが終わると、2つ目が始まった:ビジョンモデルのqwen3-vl:8b、5.7 GB(メモには'another five gigabytes'とある)。
推測
4.9 GBと5.7 GBを足すと10.6 GBになり、案内された11 GBに合致しそうだ。アプリはそうは述べていない。
観察
進行バーには割合とサイズが表示され、残り時間は表示されない。テスターは別のアプリでも同じものを見た。
テスターの見解
これほど大きなファイルでは所要時間の見積もりを表示すべきで、11 GB、4.9 GB、さらに別のダウンロードという流れは、説明として不親切だ。
画面収録を許可する ベンダーの主張
Screen Awarenessダイアログは、BoBeが'glances at your screen periodically so it can offer relevant help, track your goals, and remember what you're working on'し、'screenshots are analyzed locally on your Mac and never uploaded'と述べている。未検証。ネットワークの確認は行っていない。
図 4 Screen Awarenessのステップ:Screen Recordingは'Not Granted'で、2つ目のモデルqwen3-vl:8b(5.7 GB)がダウンロード中。システム設定へのリンクがある。背景はぼかしてある。観察
Screen Recordingは'Not Granted'と表示され、'Open System Settings'のリンクと'Grant permission to continue'の文言がある。'Skip: disable screen capture'のボタンもある。
テスターの見解
テスターは、アプリが動けば画面の設定は簡単だろうと考えていた。明確な経路が見つからず、macOSの設定を自分で探す必要があった。
観察
'Open System Settings'のリンクを使ったか、どこにつながったかは記録なし。テスターは、設定を自分で見つけて有効にしたと述べている。
BoBeに助けを求める 観察
テスターはBoBeにチャットで、スクリーンショットと画面監視のためのmacOSの権限をどう与えるかを尋ねた。表示された返答で、BoBeは何を設定したいのかを明確にするよう求め、手助けを申し出た。
図 5 ユーザーが、BoBeにmacOSの画面の権限を与える方法を尋ねている。表示された返答は、設定を示す代わりに明確化を求めている。観察
彼はもう一度、より具体的に尋ねた:'I don't know where I need to click in the Apple system to change this. Tell me please which setting this is.' 表示された返答は、何を達成しようとしているのかを尋ねた(このページの冒頭)。
観察
彼はこう書いた:'Is this supposed to be an answer or a joke?'
図 6 返答に対するテスターの反応:'Is this supposed to be an answer or a joke?'テスターの見解
この質問に答えられないシステムをどう信頼できるのかと彼は問い、正直な'それには答えられません'のほうがましだと述べている。
画面認識は動くか? 観察
セットアップ後、テスターはBoBeに画面認識が動作しているかを尋ねた。メモは答えを'Bobe'と記録している。彼はこれを無回答と受け止めている。
テスターの見解
BoBeは'チャットエージェントとしてすら使えない'。
推測
テスターは、約5 GBのモデルに何ができるのかと疑問に思っている。小さなモデルがアシスタントを制約している可能性はあるが、未検証。
削除 観察
テスターがアプリを削除しようとすると、アプリは自動で再起動し、削除できなかった。彼はアクティビティモニタで終了させてから削除した。
テスターの見解
'Just even for alpha level, this is not acceptable.'
プロジェクトは生きているか? ベンダーの主張
ウェブサイトのバナーには'M2 or higher recommended'とある。ダウンロードしたファイルは'February 26'に言及している。それが日なのか年なのか、メモには書かれていない。
推測
テスターの印象では、プロジェクトは終わっているかもしれない。'M2 or higher'はより新しいチップも含み、ビルド日は不明で、リポジトリもリリース履歴も確認していないため、推論としては弱い。
結論 テスターの見解
'This is alpha.' 将来実装され得るコンセプト。今日動くものがあるのか、それともコンセプトアプリなのかと彼は考えている。'Concept is beyond. Implementation is missing.'
観察
テスターはアプリを削除した。3〜6か月後、または創業者と話した後に、再度試すかもしれない。
主張とテスターが確認した内容 主張 出典 確認した内容 ラベル 'Screenshots are analyzed locally on your Mac and never uploaded' Screen Awarenessダイアログ 未検証。ネットワークの監視や独立した確認は行っていない。 ベンダーの主張 'Download and run an AI model entirely on your Mac. No internet needed after setup.' モデルのダイアログ モデルはアプリ経由でダウンロードされた。オフライン動作は未検証。 ベンダーの主張 Medium(8B)は約11 GB モデルのダイアログ セットアップでは4.9 GBの言語モデルに続き、5.7 GBのビジョンモデルがダウンロードされた。合計10.6 GBは、案内された数値に一致する可能性がある(推測)。 実測 macOS 13以降、Apple Silicon、M2以上を推奨 ウェブサイトのバナー(貼り付けたもの) アプリはM3 Proで動作した。テスターは'M2'という表記を古いと受け止めた。'Or higher'には、より新しいチップが含まれる。 観察 画面に表示されている内容に基づいて、役立つ支援を提供する Screen Awarenessダイアログ テスターは画面認識が動作しているかを尋ねたが、返答は'Bobe'と記録されている。メモには、画面を踏まえた支援が示された記録はない。 観察 ステップごとのセットアップガイド ウェブサイト ガイドは存在する。内容は評価していない。テスターは、macOSの権限の手順を分かりにくいと感じた。 観察
24 GBに合うローカルモデルは? 24 GBのRAM
Small(4B)、ダウンロード約6 GB 16 GB以上のRAMが必要 24 GB以内 観察 Medium(8B)、ダウンロード約11 GB 24 GB以上のRAMが必要 24 GB以内 観察 Large(14B)、ダウンロード約15 GB 48 GB以上のRAMが必要 24 GB超が必要 観察 RAM要件は、アプリのモデルダイアログに記載されているとおりです。Largeは24 GBでも'should also run'というテスターの想定は、この文言と矛盾します。Medium以外は一切テストしていません。
利用ログ # タスク モデル 結果 時間 ステータス 図 1 DMGからインストール - インストール完了。インターネットから入手したアプリに対するmacOSの承認が1回 記録なし 合格 - 2 ローカルモデルを選んでダウンロード Medium(8B)、約11 GBと記載 4.9 GBの言語モデルと5.7 GBのビジョンモデルをダウンロード(完了は後の使用から推定) 記録なし 合格 図 2 , 図 3 3 画面収録を許可する - テスターはmacOSの設定を自分で探した。彼の見方では明確な経路がない 記録なし 一部成功 図 4 4 権限の付与方法をBoBeに尋ねる ローカルモデル 設定は示されず、テスターに明確化を求めた(表示された返答では2回) - 失敗 図 5 , 図 6 , 図 1 5 画面認識が動作しているかを尋ねる ローカルモデル 返答は'Bobe'と記録。確認はできず - 失敗 - 6 BoBeをチャットエージェントとして使う ローカルモデル テスターの見立てでは、使えない - 失敗 - 7 アンインストール - アプリは自動で再起動した。アクティビティモニタで終了させてから削除 記録なし 一部成功 -
テスターが誤った点 テスターの誤り 15 GBのLargeモデルが24 GBで動くと思い込んでいた。ダイアログには、Largeに48 GB以上のRAMが必要と書かれている。Mediumを選んだため、影響はなかった。 テスターの誤り 画面アクセスを設定する明確な方法がないと書いた。ダイアログには'Open System Settings'のリンクがある。試したかどうかは記録なし。 テスターの誤り 記録に抜けがある:インストールしたバージョン、macOSのバージョン、開始・終了時刻、どのダウンロードがどのモデルに対応するか、画面認識の質問に対する正確な返答。 推測 'project is dead'という印象は、より新しいチップも含む表現('M2 or higher')と、はっきりしない'February 26'に基づいている。リリース履歴は確認していない。 テスターの見解 いずれの方向の情報も得られなかったセキュリティ確認の後で、画面収録のアルファ版をインストールした。テスターは承知のうえでリスクを受け入れた。 所見一覧 すべて 観察 実測 テスターの推定 ベンダーの主張 第三者情報 推測 テスターの見解 テスターの誤り
ID 所見 カテゴリ ラベル 重要度 図 BB-01 インストールは簡単:312 MBのDMGとmacOSの承認1回。 インストール 観察 良好 - BB-02 ウェブサイトにステップごとのセットアップガイドがある。内容は未評価。 ドキュメント 観察 良好 - BB-03 モデルのダイアログは明快:ダウンロードサイズ、チップ、RAM要件付きの3つのローカルモデル。 導入 観察 良好 図 2 BB-04 案内は約11 GB、実際のダウンロードは4.9 GBに続いて5.7 GB。アプリはその差を説明しない。 導入 実測 中 図 2 , 図 3 , 図 4 BB-05 ダウンロードバーには割合とサイズが表示され、残り時間はない。 操作性 観察 中 図 3 , 図 4 BB-06 Screen Recordingは'Not Granted'。テスターは明確な経路を見つけられず、macOSの設定を自分で探した。'Open System Settings'のリンクはあるが、使用したかは記録なし。 導入 テスターの見解 中 図 4 BB-07 アプリ内アシスタントは、的確な質問を2回しても、macOSの設定を示さなかった。 中核機能 観察 高 図 5 , 図 6 , 図 1 BB-08 画面認識が動作しているかを尋ねたところ、記録された返答は'Bobe'。画面認識が動作していることは示されなかった。 中核機能 観察 高 - BB-09 このテストではチャットエージェントとして使えなかった。テスターは、約5 GBのモデルに何ができるのかを疑っている。 中核機能 テスターの見解 中 - BB-10 削除しようとするとアプリは自動で再起動し、アクティビティモニタで終了させる必要があった。 アンインストール 観察 高 - BB-11 プライバシーに関する主張:スクリーンショットはローカルで分析され、アップロードされない。未検証。 信頼性 ベンダーの主張 中 図 4 BB-12 ChatGPTによるインストール前のセキュリティ確認は決め手を欠いた。テスターはそれでもインストールした。 信頼性 第三者情報 中 - BB-13 テスターは、プロジェクトが活動していないのではと疑っている。根拠は薄く、'or higher'という表現とは部分的に矛盾する。 メンテナンス 推測 低 - BB-14 アプリはLM StudioやOllamaには接続しないようで、独自のモデルをダウンロードする。 連携 推測 低 -
重大度は、初めて使う人への影響度です。案であり、実測値ではありません。
こんな人に向いています 向いている可能性が高い人 推測 画面認識機能を持つ初期のローカルアシスタントを試したく、アルファ版の品質を受け入れられる、いじるのが好きな人。 向いていない可能性が高い人 推測 今日、動作するアシスタントが必要な人。 テスターの見解 独立したセキュリティレビューなしに画面を記録するアプリに不安を感じる人。 再テスト。 3〜6か月後、創業者と話した後、またはv0.1.0-alphaより新しいバージョンが出たときに再テストしてください(テスターの計画に、きっかけを1つ追加)。
コンセプトは気に入っています。コンセプトは興味深いです。[...] 実装がありません。
テスターのメモ。音声の文字起こしを軽く編集しています。英語から翻訳。 よくある質問 BoBeは24 GBのMacで動きますか? テスターはM3 Pro・24 GBのMacBook ProにBoBe Alphaをインストールしました。約11 GB、RAM 24 GB以上と記載のあるローカルモデルMedium(8B)を選びました。画面認識が動作するかは、このテストでは確認できませんでした。 観察
BoBe Alphaはインストールが簡単ですか? インストールは312 MBのDMGとmacOSの承認1回でした(テスターによれば'so smooth')。その後のセットアップでは、案内された11 GBに対して4.9 GBと5.7 GBがダウンロードされ、所要時間の表示はありませんでした。 観察
BoBeは通常どおりアンインストールできますか? このテストではできませんでした。テスターが削除しようとすると、アプリは自動で再起動しました。彼はまずアクティビティモニタで終了させ、その後に削除しました。試したインストールは1回だけで、インストールされたバージョンは記録していません。 観察
BoBeはスクリーンショットをアップロードしますか? BoBeのScreen Awarenessダイアログは、スクリーンショットはMac上でローカルに分析され、アップロードされないと述べています。このテストではその主張を確認していません。ネットワークの監視や独立した確認は行っていません。 ベンダーの主張
ラベルの見方
観察 アプリ、スクリーンショット、またはテスターのメモの中で、直接確認したもの。
実測 ダイアログ、カウンター、ツールから読み取った値。数値を併記。
テスターの推定 テスター自身の推定。計時や計数はしていない。
ベンダーの主張 アプリ、ストア掲載情報、またはウェブサイトが述べていること。未検証。
第三者情報 別の情報源(AIアシスタント、記事など)によるもの。ここでは未検証。
推測 推論です。誤りの可能性があります。
テスターの見解 テスターの判断または意見。
テスターの誤り テスターが間違えた、または見落とした点。 出典 テスターの実機テストのメモ、2026年10月7日(元ドキュメント。元メモのPDFは追加予定)。 bobebot.comのダウンロードページとセットアップガイド(テスターが見て貼り付けたもの)。 セキュリティリスクに関するChatGPTの回答(テスターによる言い換え。回答そのものはメモに含まれていない)。 テストID pq-test-bobe-2026-10-07 · テスト標準 v0.1 · 元ノートのPDF:追加予定