Skip to content

Releases: hidetoame/CatsAI-public

Release list

CatsAI v0.1.0

Choose a tag to compare

@hidetoame hidetoame released this 21 May 03:54

Macを、声で動かす。
デスクトップ常駐型・音声AIアシスタントです。

CatsAI は、OpenAI GPT Realtime 2 を使い、音声でMacを操作できる実験アプリです。デスクトップに常駐するキャラクターに話しかけるだけで、フォルダを開いたり、メモを作ったり、Web検索をさせたりできます。

うめ 標準 うめ お仕事 うめ おやすみ

うめ / 標準・お仕事・おやすみ

ダウンロード

下の Assets から CatsAI.app.zip をダウンロードしてください。

  1. CatsAI.app.zip をダウンロード
  2. ZIPを解凍
  3. CatsAI.appアプリケーション フォルダへ移動
  4. CatsAIを起動
  5. 設定画面で OpenAI APIキーを入力

主な機能

  • 音声でアプリやフォルダを起動
  • 音声でファイル作成
  • 音声でWeb検索
  • 画面理解(「これ見て」)
  • メディア検索(YouTube / iTunes / Apple Music)
  • タイマー / アラーム
  • Googleカレンダー確認 / 予定追加
  • メールチェック(IMAP / POP3)
  • キャラクター差し替え / 画像生成
  • おまけ: スクリーンショット拡張(撮影後にその場で注釈、ON/OFF可)

使い方の例

  • 「ダウンロードフォルダを開いて」
  • 「Notionを立ち上げて」
  • 「デスクトップにメモを作って」
  • 「今日のAIニュースを調べて」
  • 「メール何件ある?」

デスクトップ上のキャラクターをダブルクリックすると、音声会話を開始または終了します。
返答中にスペースキーを押すと、音声を停止できます。

必要なもの

  • macOS
  • OpenAI APIキー
  • OpenAI APIの課金設定

ChatGPTの有料プランとは別に、OpenAI APIの課金設定が必要です。トークン使用量は各自の負担となりますので、OpenAI Platformで適時確認してください。

OpenAI Platform Billing:
https://platform.openai.com/settings/organization/billing/overview

OpenAI Usage:
https://platform.openai.com/usage

Googleカレンダー連携について

Googleカレンダー連携では、Google認証時に「このアプリは Google で確認されていません」といった警告が表示される場合があります。個人の利用において、自己責任で利用できる方は、詳細表示から続行して許可してください。

ソースコードについて

ソースコードは、反響があれば公開します。興味がある方はご連絡ください。

GitHubの仕様でReleaseには自動的に Source code (zip) / Source code (tar.gz) が表示されます。これは公開リポジトリ内のREADME等をまとめたもので、CatsAI本体のソースコードではありません。

アプリ本体は CatsAI.app.zip をダウンロードしてください。

権限について

macOSの仕様により、マイク、アクセシビリティ、画面収録、自動化などの許可が必要になる場合があります。CatsAIは必要な時だけ権限を要求します。

SHA256

24ca1074cabf6a65361b9be44b5cab06af3829d423b26477c02c5475aec53f81  CatsAI.app.zip

免責

本アプリは個人開発の実験アプリです。不具合やセキュリティ上の問題が含まれる可能性があります。本アプリの使用、PC操作、外部サービス連携によって発生した不都合や損害について、開発者は責任を負いません。利用者ご自身の責任で使用してください。

Links