じん – 未来環境ラボ

【トピックス】生成AIを使った動画作成の精度が上がってきた。

GoogleのImageFxとRunway Gen3を組み合わせてみました。どちらもGoogleアカウントがあれば無料で使えます。背景のぼかしとかうまく使えたり、人物破綻が少なくなったり精度は上がっているようです。

Stable Diffusion からのスピンアウト。

　　やってみた、かなりリアルな生成ができた（看板の文字もきれい）

　　動画の生成も（短ければ）できる、動画は短いものしかできず、質はいまいちだった。

　　とはいえ、このライブラリがいろいろなものを吸収して成長している状態のようだ。

(8/9)、2024年度第5回のオンラインゼミやります！春学期お疲れ様でした。夏本番に入り、蒸し暑い日が続きますが、体調に気をつけつつ頑張りましょう。紹介したいことやディスカッションしたいことがあれば、是非エントリーしてください！

(7/19)、2024年度第4回のオンラインゼミやります！梅雨も開けていないのに気温が高い日もあり、体調管理が難しい日々が続いていますね。春学期もあと少し、体調に気をつけつつ頑張りましょう。紹介したいことやディスカッションしたいことがあれば、是非エントリーしてください！

動物にセンサーを付けて活用するIoTの事例が出てきているらしい

フォーマットは標準的なもの、日本語の性能では最高とのこと。

実際にやってみたがすこし変な情報がある、呼び方にコツがあるのかもしれない。

公開はされてないがメタのモデルをチューニングしたものが日本語性能でGPT４より上回ったっとのこと。

80億パラメータモデルは公開しているので、実際にやってみたが　意図通り自然な回答があった。

テキストから動画を作ってみた、結構クオリティが高い。静止画から動画を作ることもできるようだが、破綻することもあり、繰り返してよさげなところを探る必要はありそう。

動画：

既存のモデルを合成して作ったとのこと、
小さめのGPUでも日本語モデルがそこそこ成績が良い、やってみたら結構流暢Mistral系をカスタマイズしたようなものをチューニングしたらしい

イーロンマスク率いるxAIが開発したLLM「Grok」がXの有料ユーザに試験的に解放されたとのこと、