hyperframesの動画修正を、画面をなぞるだけでAIに指示できるようにしました
動画の修正、AIに毎回言葉で説明し直していませんか？ここをもっと寄ってほしい。その一言が、文字だとうまく伝わらないんです。
こんにちは、ちーみつです。
先日hyperframesで動画を作ったとき、AIへの修正指示をどう伝えるかで困ったので、画面を触るだけで指示に変わるツールを自分で作ってみた話です。
AIへの指示は、結局すべて文字だった
hyperframesという、AIに動画を作ってもらうためのツールで、動画を1本作りました。
出来上がったものを見て、ここはもっと寄ってほしい、あそこはもう少しゆっくり動かしてほしい、という修正が出てきました。
私は動画編集アプリを使ったことがあるので、時間があれば自分で手を動かしたほうが早いです。
AIにお願いしたいのですが、そのとき伝える手段は結局すべて文字でした。
先日作った動画で表示してる場所がズレてたので、どんな風に写してほしいのか、毎回言葉で説明し直すのがもどかしくて。
だったら、画面のここを映してほしい、というのを指でなぞって指定して、それがそのままAIへの指示に変わるものがあればいいと思い、ディレクションボードというツールを作り始めました。
素材の注目させたい範囲をドラッグで囲む。
モーションの効き具合も、数値ではなくスライダーとプレビューを見ながら選ぶ。
動画編集の知識がなくても、画面を触るだけで指示ができるようにしたかったんです。
本家の機能を覗いたら、文字での指示でした
この話をXに投稿したら、hyperframesの中の人からリプライが来ました。
storyboard機能とcompanion modeを使うといいですよ、というアドバイスです。
さっそく開いてみました。
storyboardは、文章で指示を書いて、それをAIエージェントに渡す、という計画機能だったんです。
自分が避けたかった状態そのものでした。
その指示がうまくできないので、直感的に直感的に指示できるようにしたいんです。
companion modeは、もう自然とやっていました
もうひとつ教えてもらったcompanion modeも確認しました。
これはAIと対話しながら、構成を一緒に決めていくモードだったのですが。
思い返すと、最初にAIへ動画の構成を相談していたやり取り自体が、もうそれでした。
新しい機能を教えてもらったつもりで見に行ったら、知らないうちに自分でやっていたことだったんです。
最後に
私は編集アプリを多少使えるので、時間があれば手でやったほうが早いです。
それでも、AIに頼むときは全部文字でした。使ったことがない人なら、なおさら言葉にしづらいと思います。
その文字にする作業がもどかしくて、画面を触るだけで指示に変わるものを作ったのに、機能を足しすぎたら本家と同じ複雑さに戻ってしまう。
思った通りに修正箇所を伝えれるのと、シンプルで直感的に操作できるかのバランスを、これから作りながら確かめていこうと思います。
登録特典つきの無料メルマガを配信しています
動画に限らず、AIに何かを頼むときに感じた小さな違和感も、こうして記録して送っています。
登録すると、いま配布中の特典をすべて無料で受け取れます。
記事で実際に使ったプロンプトやツールも、この特典に少しずつ追加しています。
最後まで読んでいただきありがとうございます。
AIに何かを頼むとき、伝え方や作り方で迷った話はこの3本も参考になります👇
