言語指示に対するPV-RNNの視覚予測

言語指示に対する視覚出力を予測するPV-RNNモデルの異なるモジュールの視覚表現。最初の映像では、「put green on blue（青の上に緑を載せて）」に対する正確な予測が示されているが、次の映像では、「put blue on yellow（黄色の上に青を載せて）」に対して誤った予測が示されている。

日付:

2024年12月19日

作者:

adrian-skov

出典:

ヴィジャヤラガヴァン他 (2025)

Copyright OIST (Okinawa Institute of Science and Technology Graduate University, 沖縄科学技術大学院大学). Creative Commons Attribution 4.0 International License (CC BY 4.0).

シェア：

Related Videos

Women in Science（女性科学者）

「Women in Science（女性科学者）」は、OISTで短期インターンシップを経験した広島大学大学院生の引地奈津子さんの作品です。

水槽の壁を這うタコ

全ゲノムが解読されたOctopus bimaculoides（別名カリフォルニア・ツースポットタコ）が水槽の壁を這っている様子がわかる。撮影：Z. Yan Wang（シカゴ大学）

変幻自在な擬態（カモフラージュ）能力をもつタコ

全ゲノムが解読されたOctopus bimaculoides（別名カリフォルニア・ツースポットタコ）がカモフラージュしようとしている様子がわかる。撮影：Z. Yan Wang（シカゴ大学）

STEPS - 視覚化ツールキット

上部左：モデリングされた神経細胞の詳細。細胞の外部構造、カルシウム（黄色）を内包する細胞内膜系（小胞体）、カルシウムチャネルの開口に関わるタンパク質（青、明るい赤紫色、暗い赤紫色）が示されている。他の部分：カルシウムやタンパク質の動きと活性を個別に観察できる。下部中央：モデリングが進行する間、リアルタイムで数値データを追うことができる。

ゲル化の映像

この映像では、石鹸混合液がマイクロ流体プラットフォームの円柱の間を通り抜け、右側からゲルとして出てくる様子を観ることができる。