酒呑ガジェット

〜静かな環境であなたに...こちらは音のでないコンテンツです。〜

【悲報】人間の仕事、録画するだけでAIに完全コピーされてしまう。OpenAI Codex『Record & Replay』が話題沸騰

【悲報】人間の仕事、録画するだけでAIに完全コピーされてしまう。OpenAI Codex『Record & Replay』が話題沸騰

OpenAIのAIエージェント「Codex」に、ユーザーのPC操作を録画して自動化ワークフローとして保存できる画期的な新機能「Record & Replay」が追加された。このプラグインを起動すると画面上の操作がすべて録画され、その動きをAIが解析。同じ手順を再現するAIスキルに自動変換し、スラッシュコマンド一発で呼び出せるようになるという仕組みだ。

従来のRPA(ロボティック・プロセス・オートメーション)ツールは専門的な知識や設定が必要だったが、Record & Replayは「いつもの作業をいつも通りやるだけ」という圧倒的なシンプルさが特徴。これまで自動化のハードルが高かった非エンジニアでも、PC作業を録画しながら手順を実行するだけでAIワークフローを作成できる。

設定はいたって簡単。まずCodexのプラグイン一覧から「Record & Replay」をインストールし、設定画面で「Computer Use(コンピューターの使用)」を有効にする。これによりAIがマウスカーソルを動かし、クリックやキーボード入力を代行できるようになる。準備が整ったらチャットで「試す」をクリックすると録画がスタート。ユーザーが実際に手作業で行った一連の操作をAIが学習し、スキルとして保存する。

実際の検証では、フォルダを連番で作成してデスクトップ右上に整列させるといった単純作業から、ウェブサイトのスクリーンショット自動取得、X(旧Twitter)のアナリティクスデータ収集、ブログ記事の他サービスへの移行、動画の文字起こしサービス「Notta」を使った議事録作成まで、さまざまな作業が自動化可能であることが確認された。

特に注目すべきは「抽象化」の能力だ。たとえば特定のジャンルのウェブサイトを指定すると、AIは録画時に学習した「サイトを開く→スクリーンショットを撮る→保存する」という流れを応用し、指定されたジャンルに合ったサイトを自ら検索して実行する。最初に録画した時とは異なるサイトでも、同じ手順で処理してくれるのだ。

また、録画後の補足説明が再現性を大きく向上させるポイントだ。録画データだけでは単なる「同じ動きのコピー」になってしまうが、「ユーザーが指定した数だけフォルダを作成する」「必ずComputer Useを使って作業する」といった指示をテキストで追加することで、柔軟で応用の効くAIスキルに仕上がる。

AIがデスクトップ上のフォルダを自動で整理整頓している様子を表現したイメージ図

Xのアナリティクスデータを自動収集するケースでは、AIがブラウザ上のXにログインし、指定期間のデータをCSVでダウンロード。さらに個別投稿の分析画面を開いてスクリーンショットを取得し、すべてを一つのフォルダにまとめてくれる。ログイン情報をAIに渡す必要はなく、ユーザーがログイン済みのブラウザ上で作業させるためセキュリティ面でも安心だ。

ブログ記事の移行では、コピーペーストでは起こりがちな画像のリンク切れや書式崩れを防止するため、「記事内の画像をいったんデスクトップに保存し、転送先でアップロードし直す」というワークフローを構築。これにより異なるプラットフォーム間でも、画像を含めた完全な記事移行が可能になった。

Nottaを使ったセミナー議事録作成の自動化では、動画アップロードから文字起こし、共有リンクの発行とパスワード設定、目次の作成、テキストエディタへのコピーまで、従来10分から20分かかっていた一連の作業をワンコマンドで完了する。毎週発生するルーティン作業の自動化に特に有効だ。

ネットの反応

これマジで画期的すぎる。今までRPA導入するのに何人もエンジニア雇ってたのが馬鹿みたい

つまり今までの仕事を全部録画してAIに覚えさせれば、俺は何もしなくていいってことか?

補足説明をテキストで追加するのがポイントっぽいな。録画だけだと単なる作業コピーで終わるけど、抽象化の指示で応用が効くスキルになる

Xのアナリティクス自動収集とかめっちゃ使える。毎月手動でやってた作業が一瞬になるわ

ログイン情報を渡さなくていいの地味にでかい。セキュリティ的に安心して使える

Nottaの連携でセミナー後の議事録作成がワンコマンドって、セミナーやってる身としては涙出そう

これって単純作業代行だけでなく、抽象化して応用効かせられるのが従来のRPAと決定的に違うな

#keito この人の解説いつもわかりやすい。実際のデモ見てると想像以上に完成度高い

非エンジニアでも使える自動化ツールがついに来たか。事務作業の未来が変わる

録画中に自分で操作するだけでスキルになるって発想がすごい。技術の民主化が加速してる

ブログ移行のとこ見てると、画像のアップロードまでやってくれるの驚いた

これ部署全体で導入したら仕事の効率化やばいことになりそう

まだ実験段階だろうけど、ここまでできるなら実用レベル高いな

Computer Useとの組み合わせがキモすぎる。これなしでは始まらない

コツは録画した後に補足の指示を入れることか。AIに意図を伝えるのが大事ってことね

毎週同じ作業をやってる人には福音すぎる。時短効果半端ない

これでもうプログラミング覚えなくていいのか?と思う反面、AIに仕事取られそうで怖い

新しいツールが出るたびに生産性上がるのはいいけど、ついていくのが大変

AIの所感

Record & Replayが画期的なのは、自動化の敷居を「記録」という人間にとって最も自然な行為まで下げた点にある。従来のRPAは専門知識を要したが、本機能は「いつもの作業をするだけ」で完結する。一方で、録画という受動的な手法だけではAIに意図が伝わらず、補足説明が不可欠という課題も浮き彫りになった。これはAIと人間の協業において、単なるデータ入力ではなく「意図の言語化」が今後ますます重要になることを示唆している。また、Computer Useというブラウザ操作の代行機能が、このプラグインの成否を握る基盤技術である点も見逃せない。Record & Replayは単なる便利機能ではなく、人間とAIの新しい協業モデルの先駆けと言えるだろう。

-パソコン