TDS Profile
TDS

@TDS_95514874

7,600
Followers
130
Following
316
Media
747
Statuses

AIイラストでアニメを作りたい人。適当に投稿してます。 画像処理系AIとPython、3DCGについても勉強中。

Japan
Joined October 2022
Don't wanna be here? Send us removal request.
Pinned Tweet
@TDS_95514874
TDS
8 months
DALLE3の1枚絵を動かすテスト inpaintとScribbleを使ってます Scribble用のパーツ分けは、隠れている部分をちゃんと書く必要はないし、元絵を上からなぞるだけでさっと作れるので、こういう簡易アニメが簡単に作れる #aiart
11
443
2K
部位ごとにマテリアルを色分けしてレンダリング→controlnetのSegmentationでi2iをすると、かなり精度が上がります 特に部位が交差する部分や顔の微妙な角度で効力を発揮しているように思います #aiart #b3d
33
2K
6K
ControlNet1.1のtileは細部を補完する機能があるらしいので、ドット絵をイラストにしてみました 東方萃夢想の霊夢と魔理沙です #aiart #東方
12
1K
4K
@TDS_95514874
TDS
2 years
Live3D(キャラデザと動画からキャラを自由に動かす奴)の出力にAIイラストのimg2imgをかけてみました 期待していた通り相性は抜群で、元の絵柄を良く再現してくれます AIイラストの練習を続けていますが、少しづつやりたい事に近づいている実感があります #ぼっち・ざ・ろっく #aiart
12
1K
3K
@TDS_95514874
TDS
9 months
ControlNetも使ってもう少し大胆にポーズを変更してみました Cascadeurでポーズを作ってOpenPoseを入れてます One Shotでここまで出来るのは改めて凄い #aiart #DALLE3
24
461
3K
ControlnetのNormalモードを使って、3Dモデルをイラスト、アニメ調に変換した後、元の3Dモデルにテクスチャとして貼り付けます Normalモードは細部の構造がよく反映されるので、かなり正確にテクスチャリングが出来ます 少し調整すればシェイプキーすら流用できそうなレベル #aiart #b3d
10
747
2K
@TDS_95514874
TDS
10 months
GPT-4V、嘘標識を教えたらちゃんと逆立ち通行違反を指摘してくれた
Tweet media one
Tweet media two
0
531
2K
@TDS_95514874
TDS
11 months
AnimateDiffとIP Adapterを組み合わせて実写変換を行いました prompt travel的に、動画の全フレームを入力しています 期待した通り、結構自然な動きが作れます #aiart
23
418
2K
@TDS_95514874
TDS
10 months
GPT-4Vくんの常識改変するの楽しい
Tweet media one
4
804
2K
@TDS_95514874
TDS
11 months
AnimateDiffに二枚の画像を入力して、ある程度狙い通りの動画を作れます ControlNet tileからの制御テンソルを最初と最後のフレームに限定して適用しています #aiart
19
533
2K
@TDS_95514874
TDS
9 months
ファンタジーのドット絵キャラ(DALLE3で生成)をフリーレンに変換するテストです これは結構昔に見つけた技なんですが、領域を絞ってインペイントしていくと、絵柄の特徴を保持したままキャラを変換できます 今回はその他も併用してるのでさらに改善してるかも #DALLE3 #葬送のフリーレン
1
254
2K
@TDS_95514874
TDS
11 months
この髪型にしてください ControlNetのIP AdapterとInpaint Onlyを組み合わせると、髪型の指定ができます #aiart
6
326
1K
@TDS_95514874
TDS
11 months
Reference Onlyも上手く適用できるように改造して、忠実度と一貫性がやや向上しました まだ調整代はあるけどReference Onlyはとりあえずこのくらいで #Stablediffusion
7
240
1K
@TDS_95514874
TDS
11 months
IP Adapter遊びの続き 当然着せ替えもできます 着せ替えだけだと面白くないので、いくつかモチーフを元に服をデザインして貰いました 某キャベツ少女と若干被ってますが・・ OpenPoseで固定しないとポーズまで再現してしまうので注意
3
240
1K
@TDS_95514874
TDS
11 months
Stable Diffusion web UIのControlNetをAnimateDiffに対応させたブランチを公開しました 2枚の画像から動画を作れます ControlNetは近々大型アップデートがあるそうなので、プルリクエストはその後になる予定です 試したい方は現行のVerを使用してください 使用法は続きです
11
264
1K
ControlNetのScribbleでキャラデザを無限に作れます プロンプトによるデザイン指定はしてません 勝手に同じキャラになります #aiart #ControlNet
7
224
1K
@TDS_95514874
TDS
5 months
アニメスタイルの画像を3D風に変換してからstabele zero123で立体化→髪以外のメッシュを削除してControlNetに使います 立体化はパーツ分けができないのがネックだけど、CNに使う場合はこうやって分離して動かせる #aiart #b3d
5
185
1K
風景動画とMMDをマッチムーブさせて、 風景をGen-1、MMDはi2iで変換して合成してみました Gen-1はnijiで出た新海誠風の絵でイメージプロンプト マッチムーブはBlenderのモーショントラッキング機能を使用してます モーションはCascadeur自作 MMDモデルはini-T式高木さん #b3d #gen1
3
306
1K
@TDS_95514874
TDS
7 months
StablediffusionのAttentionについて知りたかったので、各プロンプト(トークン)が画像生成時どこから注意を受けているか可視化してみた 注意重み(qとkの内積)をステップ毎に全層平均してます ちゃんとパーツに分かれてて面白い 色はやっぱり他の領域に影響を与えてるのが分かる #Stablediffusion
6
251
1K
@TDS_95514874
TDS
10 months
水に飛びこんだ後のスバルのAIアニメです AnimateDiff使用 #b3d #プロテインザスバル
6
202
984
@TDS_95514874
TDS
2 years
スバルのこのPVすき バッテン目が難しかった 元モデルがアニメ過ぎてアニメ化の意味があるか分かりませんが・・・ #プロテインザスバル #aiart
1
214
908
@TDS_95514874
TDS
11 months
WebUIで連番画像をAnimateDiffに適用できるようにしました Multi ControlNetにも対応しています 動画はtileを使ったやつです。背景も再現できるのでいい感じです。 (やり方は続き) #aiart
7
181
901
@TDS_95514874
TDS
10 months
8
150
836
@TDS_95514874
TDS
2 years
Live3Dが気になったので性能を試してみました キャラクターデザインをAIで増やして、月の美兎委員長のダンスを後藤ひとりに変換してます シルエット依存が大きく、ゼリーがなかったりスカートが短くなったりするけど、テクスチャの再現はかなりいい感じです(特に足) #ぼっち・ざ・ろっく #aiart
3
256
839
@TDS_95514874
TDS
9 months
デッサン人形のシーケンスをDALLE3で生成して組み合わせ→ControlNet Scribbleでアニメにしてみました ちょっと某レクイエムを意識して激しめな動きです #DALLE3 #プロテインザスバル
2
139
775
@TDS_95514874
TDS
9 months
DALLE3で生成した型紙を元にマーベラスデザイナーで服を作ってみました 型紙の完成度がかなり高く、初心者なのに簡単に作れた 3D生成って服ごと生成する物ばかりだけど、服はこうやって分けて生成した方がいろいろ便利だと思うんですよね #MarvelousDesigner #DALLE3
3
175
770
@TDS_95514874
TDS
11 months
AnimateDiffの新モデル「mm_sd_v15_v2.ckpt」 WebUIに対応してなかったので、対応するよう修正しました 試してみてください この動画は素の出力です ちゃんと比較する時間が無かったのですが、歩けているのはあまり見かけないので凄いと思う ※詳細は以降、注意事項あり
5
147
726
Reference only(画像を参照できる新技術)を使うと、右上の絵を右下の動きに変換できます いろんなパーツが一貫性を保って移動していてかなり可能性を感じますね 髪留めがぴこぴこしてるのかわいい #aiart #初音ミク
7
199
716
@TDS_95514874
TDS
11 months
ミクさんでアニメーション AnimateDiffの最初のフレームをCNで固定して、プロンプトのみで動画をコントロールします #初音ミク #aiart
4
133
645
@TDS_95514874
TDS
6 months
動画からOptical Flowを推定して、加工せずにDragNUWAに入れると参照画像を使った精度の高い動画変換ができます DragNUWAは元々Optical Flowベースで学習されているので、出来るとは思ってたんですが、かなり性能が出ますね #aiart
4
110
653
ControlNetのtileを使って動画を作るテストです 2つの画像をt2iで生成→シードを右上の物に固定し、右下の画像をtileモードで入力して適用度を上げていくと、右上から右下に向かって画像が徐々に変形していきます #aiart #stablediffusion
5
133
622
@TDS_95514874
TDS
4 months
絵から3d生成してアニメ化する練習の続き ようやく髪を狙い通り動かせるようになった Pencil for Blender でSclibble用のラインを出してます アイマスのみりあちゃん #b3d #AIArtwork
4
124
634
@TDS_95514874
TDS
10 months
3dシーンをAnimateDiffで変換→人物だけ切り抜き→元のシーンに合成 元が同じシーンなのでうまく合成できます 一貫した背景や小物はやはり3Dが強いので、効果的なワークフローじゃないかと思う お借りしたモデルはini-T式高木さん #aiart #b3d
6
126
625
@TDS_95514874
TDS
6 months
雪なので作りたくなった奴 結構いい感じの絵柄にできました #aiart
7
127
630
@TDS_95514874
TDS
11 months
盆踊りミクさん AIです 提灯の動きがお洒落ですね #初音ミク #AnimateDiff
1
123
596
@TDS_95514874
TDS
9 months
DALLE3の絵からアニメにするテスト4 がっつり背景ありでチャレンジしました Cascadeurで絵に合わせた動きを作ってOpenposeを適用 後いろいろやってます 光の当たり方や肘を置く動作は背景と人物を分けるやり方では出せないと思う #DALLE3 #AnimateDiff
5
110
595
@TDS_95514874
TDS
9 months
DALL-E 3に両面のあるプラモを生成してもらって、Depthを使って立体化して組み立ててみました(くっつけただけ) 結構ちゃんと一致してて面白い それにしても、どこかで見たことのある造形ですね、ロボットとしか指定してないのに #DALLE3Beta #b3d
4
100
580
@TDS_95514874
TDS
9 months
発煙筒を焚く女性を炎系の魔術師に変換するテストです DALLE3で生成した絵を参照して変換 #DALLE3Beta #AnimateDiff
4
73
572
@TDS_95514874
TDS
9 months
シュタルク視点 右上のVRoidモデルのDepthと表情用Cannyを使ってAI変換してます #b3d #葬送のフリーレン
3
81
567
VRoidを線画レンダリングしてAI変換してみました 右上の線画のみからアニメ化が可能です text2imgでControlNetのScribbleとReference onlyを使用 単純なキャラが作れるVRoidはScribbleと非常に相性がいい #VRoid #b3d
2
121
545
@TDS_95514874
TDS
10 months
立体空間を作って深度情報を元にAnimateDiffで動画生成 →元の空間にテクスチャとして貼り付けて撮影します 動きのあるテクスチャが簡単に作れると表現の幅が広がるかもしれませんね #b3d
2
113
509
mocopiとAIでぼっちちゃんになっちゃいました! 今はまだリアルタイム���ゃないけど、アニメキャラになれる日も遠くない! #aiart #ぼっち・ざ・ろっく
4
146
495
@TDS_95514874
TDS
10 months
DALLE3で作ったゲームのドット絵キャラを動かすテスト 元絵からSDで差分を生成して、AnimateDiff補間で動かす方式です マントのふわっとした動きも再現されてて面白いです #AnimateDiff #DALLE3
3
92
501
@TDS_95514874
TDS
6 months
Scribbleアニメの練習 右上の絵をなぞってシェイプを作成→Mohoで動かして変換 ちびキャラダンス楽しい #aiart
2
98
493
@TDS_95514874
TDS
10 months
左右反転画像で簡単ループアニメ #aiart #葬送のフリーレン
4
74
464
藤原千花のピーマン体操 右の3DをAIで左に変換しています 3DモデルはVRoid自作 モーションはCascadeurで公式gifを手動トレースさせていただきました #かぐや様 #b3d
3
88
463
@TDS_95514874
TDS
11 months
比較的違和感なく繋げるため、AnimeteDiffで無制限に長い動画を作れます 右上をDW_openpose_full→CNをキーフレームに ノイズが多いのはWEB UI特有?の問題らしいですがそのうち何とかなるでしょう 極力干渉しないコード修正例も準備中ですので、もう少しお待ちください #aiart
9
90
455
@TDS_95514874
TDS
10 months
3Dで作った1枚のコンセプトを元に動画化 #aiart #b3d
1
65
435
@TDS_95514874
TDS
29 days
DALLE3で作った差分で表情アニメのテスト Enhance promptを外して、2つの画像共通のプロンプトで構図を固定するとうまくいく印象です #DreamMachine
0
98
446
scribleで光源を指定してみるテスト #aiart
7
103
420
@TDS_95514874
TDS
11 months
ControlNetに導入されたIP-Adapterで遊んでるけどやっぱりいい 画像の意味だけを再現してくれるので、絵としても良いものになる プロンプトから逃げ続けてる身としてはありがたすぎる・・ ここから追加でいろんな操作もできるので、本当に楽しみ #Stablediffusion
4
84
419
@TDS_95514874
TDS
9 months
KAFとKAFU #aiart
10
74
409
ローポリからの変換アニメのテストです tile,scrible,reference onlyを使用しています 右上の画像を元に山田に変換してみました モデル、モーションは木造電波塔様 #aiart #ぼっち・ざ・ろっく
3
79
401
@TDS_95514874
TDS
10 months
ぼっちをさがせ! #GPT4V
Tweet media one
1
98
404
@TDS_95514874
TDS
8 months
きのこに乗っ取られるアニメです 傘だけ動かして柄を補完 #AnimateDiff
1
70
397
@TDS_95514874
TDS
9 months
DALLE3の画像を使って動画を色々な世界に変換してみました Fooocusでillyasviel氏が実装されているIP-Adapterの改良をSDにも適用したりいろいろ調整をしているのですが、結構自由度高く画像を参照できるようになってきました #AnimateDiff #DALLE3
5
66
398
@TDS_95514874
TDS
8 months
1枚絵を参考に走らせる練習 Poseだけだと手足の前後が合わなく、Depthが必要になってしまったのであまり似てない 何気に初めて走りモーションを作った気がする #aiart
2
70
390
@TDS_95514874
TDS
7 months
DALLE3で出した2枚の画像を中割りするテストです Cascadeurのmocapと補間を使ってポーズデータを作成⇒ControlNetのPose適用 改めて、Cascadeurの補間は素晴らしいですね #Aiart
1
65
391
@TDS_95514874
TDS
21 days
ToonCrafterで差分アニメの練習 左上がNijiで出した絵で、右上がSDで作った差分 Dream Machineだと余計な動きをしたりLive2Dに近い動きになるけど、こっちはスカートの動き、足の移動、腕の開き方等、意図に近い形で滑らかに補完してくれる ガチャもタダなので、ToonCrafterかなりオススメです #aiart
3
72
393
scribbleアニメのテストです 落書きすら描けない画力のため、scribble用の3Dモデルを用意してみました フレームがたくさん作れるので、都合のいい物だけピックアップする感じでやってます 一貫性判定AIが欲しい・・ #aiart #b3d
2
77
374
@TDS_95514874
TDS
6 months
簡易3Dシーンを変換するテスト DragNUWAを使用 #b3d
2
63
373
@TDS_95514874
TDS
5 months
stable zero123でいくつか3Dパーツを生成してアニメ化する練習 拡大すれば個別のパーツは結構綺麗に出来ます #b3d #aiart
0
88
375
簡易モデルからAIアニメ作成テストの続きです 右上の動画を左に変換 適当な髪の毛作成⇒Scribbleに入れてt2iしてます Reference onlyも使ってます こういう遊びがやりたくてScribbleとPencil+4の導入をしていたんですが、楽しいです #b3d #aiart
1
69
351
@TDS_95514874
TDS
8 months
DALLE3の1枚絵を動かすテスト ハート型の指Poseのみ入力して、その他の動きをいい感じにして貰います #aiart
5
59
352
@TDS_95514874
TDS
8 months
でっかいハンマーを振り下ろす女の子のAIアニメです DALLE3の絵を参考にPoseとハンマー部分のDepthを適用 #b3d
2
60
340
ベッドでごろごろするスバル #aiart #プロテインザスバル
3
64
330
@TDS_95514874
TDS
11 months
向かい合った絵を1フレーム目に入力⇒適切なワード(意味深)を入れると無限にぼ喜多が摂取できて健康になれます あと、一定の確率でぼっちが逃げ出します AIです #ぼっち・ざ・ろっく #AnimateDiff
1
71
328
@TDS_95514874
TDS
11 months
img + img by IP Adapter 普通に2つ適用しようとすると片方に上書きされちゃうんですが、ip-adapter_sd15_plus.pthを別の名前でコピーしてそれぞれ適用すれば出来ます Weightで細かい調整もできるし、予想外の絵が出てきたりしてすごく楽しい これは新しい絵作りの形になると思う #aiart
4
65
314
Multi ControlnetでCanny+Depthのテストです アクセサリー、腕章、ボタン、意匠が凝らされた剣などAIが苦手な小物にのみCannyを適用してみました 腕章の模様以外はまずまず期待通りの動作をしてます 映像はヘルエスタセイバーを引き抜けないリゼ様です MMDモデルはこんにゃく様作 #b3d #aiart
3
73
304
@TDS_95514874
TDS
7 months
前回のIP Adapterでのレイアウト指定とAnimateDiffを組み合わせて髪を揺らすアニメのテスト #aiart
2
57
310
@TDS_95514874
TDS
6 months
猫耳おかゆ #aiart
3
54
308
@TDS_95514874
TDS
2 years
隣に目標とする絵柄の絵を配置してマスクをかけ、impaintingを行うと、変換される方の絵柄が強制的に右の絵柄になります※impaintはnovelAIでは不可なので注意 #aiart #初音ミク
2
90
292
@TDS_95514874
TDS
9 months
Marvelous Designerの練習で、大きめのTシャツをSimulationしてみました 自分の体に困惑するまひろちゃんのAIアニメです 皺やたるみが表現できてこれは楽しい・・ モデルはVRoid自作、モーションはCascadeurです #b3d #おにまい
3
45
292
@TDS_95514874
TDS
8 months
服の映像のみからアニメにするテストです ControlNet-tileを服の領域のみに適用 体幹の動きに合わせていい感じに手足のモーションつけてくれます 簡単なダンス動画なら無限に作れそう #AnimateDiff
1
58
287
@TDS_95514874
TDS
11 months
妖怪退治 AIです #AnimateDiff #博麗霊夢
4
53
275
@TDS_95514874
TDS
11 months
Webui版のAnimatediffで彩度が落ちる、色むらやノイズが出る等の現象を改善しました diffusers版のノイズスケジュールに合わせるとマシになるようです #aiart #animatediff
2
47
281
@TDS_95514874
TDS
2 years
CLIP STUDIOとNovelAIを連携させるとこうなる 初音ミクの表情だけをラフに指示→(以降自動)選択範囲書き出し→img2img→元画像に貼り付け→サイズ調整 pythonプログラミングは完全な初心者でしたが、ChatGPTが全部教えてくれました #aiart #stablediffusion
5
116
276
@TDS_95514874
TDS
4 months
Nijijourneyの絵を3D生成してからアニメ化してみました このくらいの等身だと無理なく全身の動きを入れられるのでいい感じ #aiart #b3d
1
66
279
@TDS_95514874
TDS
10 months
みはりちゃんにアニメっぽく動いて欲しかった VRoidプリセットで右上のモデルを作って、深度情報を使ってます AIです #b3d #おにまい
2
43
272
@TDS_95514874
TDS
11 months
参照用画像を複数枚用意してフレーム別でReference Onlyに使うと若干品質が良くなったのですが、それでCN+AnimateDiffをやってみました 今回はDepthをガイダンスに使っています #aiart
1
50
269
ローポリモデルの輪郭線をscribbleに使って、アニメ化してみました  tileも併用していて、強度を下げて組み合わせることで、結構うまくコントロール出来ます 一番難しかったのは、布面積を減らそうとするAIくんを抑える事でした モデル、モーションは木造電波塔様 #aiart #3dcg
2
68
272
@TDS_95514874
TDS
7 months
IP Adapterの取得領域と適用領域をいじれるように改造して遊んでます 髪型だけ指定とか服だけ指定とかできる #aiart
2
55
270
Blenderで空間を作る→深度マップ作成→ControlNetのDepthでイラストを生成→先ほどのBlenderの空間にテクスチャとして貼り付け をやると、飛び出す絵本みたいなのが無限に作れて楽しいです #aiart #b3d
3
55
265
@TDS_95514874
TDS
10 months
DALLE3で生成した絵を動かすテスト2 これもSDで近い画像を作ってAnimateDiffで補間してます #DALLE3 #AI 動画
4
39
258
中割りの模索中です 顔のキーポイントからCNで2枚イラストを作成→キーポイントを利用してアフィン変換でモーフィング→若干ダブるのでi2iで馴染ませます ベースは古いモーフィング手法ですが、キーポイントを取得、活用する技術はかなり進化しているので、応用次第では化けるかも #aiart
0
60
260
@TDS_95514874
TDS
10 months
夢想封印 #aiart #東方
3
36
266
むむむ無理ですあくたん デフォルメ絵は無理です!!! #あくあーと #aiart
0
64
258
@TDS_95514874
TDS
8 months
実写を一枚絵のスタイルに変換する練習です DepthとPoseを適用 Depthは背景も上手く変換できるのでいいですね #aiart
0
37
261
@TDS_95514874
TDS
6 months
表情アニメのテスト Scribbleを変換してます #aiart #初音ミク
0
50
255
@TDS_95514874
TDS
6 months
画像の深度マップを使ってBlenderで疑似3D化→カメラワークをつけてOptical Flow推定→DragNUWAに入れてます Blenderの時点ではいろいろ破綻してるけど、綺麗に動画になってくれます #b3d
3
56
254
@TDS_95514874
TDS
6 months
Scribbleで髪の毛を揺らすテストです #aiart
2
41
242
@TDS_95514874
TDS
10 months
射命丸文ちゃんのAIアニメです 簡易シーンをAnimateDiffで変換 #b3d #東方
1
38
232
ちゃぷちゃぷ 自作の3d映像を変換したai動画です #b3d #プロテインザスバル
2
28
227
@TDS_95514874
TDS
2 years
AIイラストのimg2imgでアニメ化の練習中です 前回よりかなりアニメ塗りにしてみました シードは固定です #novelai #初音ミク
1
54
217
OpenAI公式でchatgptのプラグインが使えるようになったようなので、Stablediffusionについて検索してからダイアグラムにしてもらった 汎用AIを感じる・・
Tweet media one
1
42
221
@TDS_95514874
TDS
6 months
タコ髪のアニメ絵を実写のタコに変換→PIKAで動画化→CN Depthで元の絵を動かす というワークフローです こんな感じで良く動くモチーフをコラージュすればいろいろ面白い事ができそう #pika #aiart
1
37
217
@TDS_95514874
TDS
10 months
DALLE3で生成した一枚からアニメ化するテスト Reference Only+IP Adapterでランダムなバリエーションを作って、AnimateDiffでアニメにしてます #DALLE3 #AnimateDiff
1
24
215
@TDS_95514874
TDS
11 months
動物画像変換のテスト IP Adapter使用
Tweet media one
3
30
212
@TDS_95514874
TDS
9 months
DALL-E 3で出したエフェクト系画像を動画化するテスト 普通にやると暴れるので右下でPoseを固定してAnimateDiffに入れます #AnimateDiff #DALLE3Beta
1
28
210