Perceptron Mk1.5は画像、動画、音声を理解し、関数呼び出しにも対応します。ただし、デスクトップブラウザーのログイン状態にはアクセスできません。ログイン済みページを確認するには、Tabbit Browserと同じ端末のローカルAgentからTabbit CLIでページを開き、匿名化した画像または抽出テキストだけをモデルに渡します。Agentは名前付きの確認用下書きを作り、人が確認します。
この記事ではローカルクライアント、モデルの経路、ブラウザー接続を説明します。モデルとTabbitのネイティブ統合を示すものではありません。 Perceptronのリリース情報はテキスト、画像、動画、音声入力とJSON Schema関数ツールを説明しています。OpenRouterは perceptron/perceptron-mk1.5 とツール呼び出しを掲載しています。アカウント、地域、現在のルートを確認してください。
4つの接続を個別に確認する
| 層 | 確認内容 | 合格基準 |
|---|---|---|
| モデル | 現在のプロバイダーとツール | アカウントで選択でき、設定が文書化されている |
| クライアント | OpenCodeなどローカルツール対応のAgent | スキルを読み込みモデルを呼び出せる |
| スキル | ~/.agents/skills/tabbit/SKILL.md。OpenCodeでは @tabbit | 読み込みをクライアントで確認 |
| ブラウザー | ~/.local/bin/tabbit-cli | 対象Tabbit環境に接続し、サイトにログイン済み |
各層を別々に確認します。モデルが回答できても、ブラウザーを開けるとは限りません。 権限プレビュー、アカウントバッジ、状態ラベルなど、画面表示に意味がある項目の確認に向きます。機密情報のないテストページから始めます。モデルにブラウザーのログイン情報は渡しません。
証拠の渡し方を選ぶ
画面で確認できる状態と局所的な証拠だけを返します。
| 証拠 | モデルに渡す内容 | 人による確認 |
|---|---|---|
| テキスト、日付、項目 | ローカルAgentのDOM/OCR | 元URLを開いて確認 |
| 配置、アイコン、2ページの差 | 部分画像または項目表 | 匿名化しIDを確認 |
| 不足または矛盾 | 抜粋と元URL | 推測せず確認事項にする |
名前付きの下書きを作成して止める
Tabbit Browserへのログインは自分で行い、ローカルAgentに指定ページだけを読ませます。プロンプト内のページと出力は例示用テストデータであり、実際の作業環境への接続を示しません。
@tabbitとTabbit CLIを使い、許可されたプレビュー画面をTabbit Browserで開いてください。状態パネルだけを取得し、名前、メール、トークン、無関係な情報を隠してからPerceptron Mk1.5に渡します。「権限プレビュー確認、下書き01」を作り、表示ラベル、正確なURL、観察した状態、確度、人の確認事項を記録します。表示された事実と推測を分け、承認や権限変更、送信はしないでください。下書きを表示して停止します。画像を送れない場合はローカルOCRを使い、画像を分析していないと記録します。期待する出力： 表示状態ごとにURLを付け、確認が必要な点を最後にまとめます。書き込み操作は行いません。
保存した下書きをTabbit Browserの独立したタスクタブで開き、各出典を再度開いて確認し、「人による確認が必要」の状態にします。確認中も他のタブを使えます。
Tabbit BrowserをインストールしてローカルAgentを接続する
まずTabbit Browserをインストール、利用権限のあるサイトにログインします。macOS/LinuxのCLIは ~/.local/bin/tabbit-cli です。スキルを ~/.agents/skills/tabbit/SKILL.md に置き、OpenCodeでは @tabbit を使います。他のクライアントは別のスキル一覧や構文を使う場合があります。/tabbit が共通だと思わないでください。
スキル検出、CLIの接続、サイトへのログインは別の確認項目です。テスト環境では2つ目の名前付きTabbit CLIタスクが短時間のテストセッションを再利用しました。確認できたのはその環境でのセッション再利用だけで、モデルのネイティブ統合ではありません。タスクタブは他のタブと分かれています。Tabbit CLIガイド、既存ブラウザーへの接続、初回タスクの確認表、MCPとCLIの比較、ブラウザーAgentの安全ガイド、Agent向けブラウザーツール、Codex CLI設定も参照してください。
バーゼル大学の公開テストでは、Perceptron Mk1.5 の情報抽出と文字起こしの結果に差がありました。送信予定の画像かテキスト形式で試し、抽出した状態を元のページと照合します。 テストの原記録
視覚情報を安全に引き渡して確認する
機密情報のないページでモデル経路、出典、下書きを確認してから、実際の作業環境を使います。 権限プレビュー、アカウントバッジ、状態ラベルなど、画面表示に意味がある項目の確認に向きます。機密情報のないテストページから始めます。モデルにブラウザーのログイン情報は渡しません。
よくある質問
モデルだけでログイン済みTabbitタブを開けますか？
いいえ。ローカルAgentがTabbit CLIでブラウザーに接続し、必要なデータをモデルに渡します。
試すOpenRouterのモデルIDは何ですか？
OpenRouterは `perceptron/perceptron-mk1.5` を掲載しています。アカウント、地域、現在の提供状況を確認してください。
Agentにページを編集・送信させてもよいですか？
最初は読み取り専用にします。出典を確認した後、変更は別途承認してください。
クライアントが画像を送れない場合は？
ローカルAgentが抽出したOCRまたはDOMテキストを使い、画像を分析していないと記録します。モデルの画像対応はクライアントの添付対応を意味しません。
実際のアカウントで先に試すべきですか？
いいえ。まず機密情報のないテストページでモデル、スキル、起動ツール、ログイン状態を確認します。
ローカルタスク中に他のタブを使えますか？
タスク用タブは分離されます。他のTabbit Browserタブは引き続き使用できます。