# 本日15時から生配信します！＋昨日の心理学対談アーカイブあがっています おはようございます。 心理学者のじんぺいです。 本日も最新の論文を紹介していきたいと思います。 今日はNature Human Behaviorという とても有名な学術雑誌に載った AIに関する研究を紹介したいと思います。 AIがいろんな職業にとって変わるんじゃないか というような議論があると思うんですけど 研究者もその中の一つの職業かな というふうに思ってまして 今回は特にお医者さんとかじゃなくて 法律の弁護士とかじゃなくて 自分によく関係するような 脳科学、神経科学というような分野の研究者が AIのパフォーマンスと比べてどうなのか というようなことを調べた研究を紹介したいな というふうに思っています。 本題に入る前にお知らせをします。 昨日本当にギリラで心理学対談をやりました。 今田さん、今田博隆さんという方が ハンブルクに実は来てくださってまして 冗談というか来るならぜひ対談しましょうよ ということを言ってたんですけど 実現するかどうかはそのときの テンションでという感じだったんですけど 博隆さんの話が面白いなというふうに思って ぜひ聞いていただきたいなと思って撮りましたので 聞いてもらえると嬉しいなと思います。 研究内容の話ももちろんですが イギリスの研究者って実は同い年なんですけど 先生なんですよ、イギリスで 先生しててめちゃくちゃ優秀な方なんですが イギリスでの先生生活、大学教員生活というものについて 聞かせてもらったというところもあり 面白かったなと思います。 ぜひ聞いてみてください。 このチャプターにURL貼っておきます。 あと今後の対談、日曜日から 連続して対談がありますので よかったら遊びに来ていただけると嬉しいです。 そうですね、今日も生配信しようかな、今思いました。 明日日曜日なんですけど 日曜日に生配信することが多かったんですけど 明日日曜日に宮野さんと対談が決まっておりますので 今回土曜日にしようかなと思います。 15時からやります。 日本時間15時からやらせていただきます。 ぜひ遊びに来てください、今決めました。 よろしくお願いします。 では本題に行きます。 # AIは脳科学においても強い はい、というわけで、論文の中身に入っていくんですけども AIが本当にすごいと 例えば東大の試験解けちゃったりとか 司法試験解けちゃったりとか そういうのは結構前なのかな もう今は博士号を取れるぐらいのレベルに近づいていたりとか あれから取れるのか、既に そういうレベルになってきているというところで 人間の知能を超え始めているといってもいい 領域もたくさんあるんじゃないかなと思うんですけども 神経科学ですよ、脳科学 脳研究者と比べたときにどうなのかという話をしていきたいなと思うんですけど まず、どうやって比べるかというのは気になると思います これはジャーナル・オブ・ニューロサイエンスという 脳科学の有名な学術雑誌のアブストラクト アブストラクトというのは論文の要約ですね 例えば英語で150文字とかでまとめて その論文で何をやっているのか、何を言いたいのかということを 短くまとめた文章があるんですけど それを使っています いろんな脳科学に関する発見が論文ベースであると それを一部改変して 間違いを入れるということをするんですよね 例えば論理構造は一貫してあっているんだけども 例えば特定の脳領域の役割を反転させる 例えば何があるかな 有名な脳領域で返答体という このネガティブな感情を特に司るところですけど この返答体というところを 前頭筆とかって言ったりとか 極端に言うとちょっとやりすぎかもしれないけど そういうことをしていたりとか 結果の方向性を変える 返答体が活性化するとネガティブ感情が あちらネガティブ感情が上がると返答体が活性化する そういう相関関係があるとしたときに 返答体が活性化するとネガティブ感情が上がっているという 関係性が本当のはずなのに 返答体が活性化するとネガティブ感情が下がるみたいに書くという 正と負の方向を変えるみたいな そういう一手間を加えると 正しいアブストラクト要約と間違った要約が 並べられると思うんですけど これがどっちが正解かっていうのを 読んで当てていくっていう クイズみたいなものをやっていくということです どうでしょうこれだけ聞いて難しそうかなとか 僕多分当てれないな 脳科学はねもちろんかじってはいるし 論文たくさん読んできたつもりですけど まだ弱いかな っていうところかなと思います 専門って言いたいけどね 論文一本書けたら専門って言っていいかな 今ね論文ずっと書いてるんですけどね MRIで研究やったことあるので それがね通ったらちょっと専門って言おうかな はいまあいいや そういうことをしていますと で参加者その人間側のコーナーに立っている 本当に人間代表ですよ どういう人かというと神経科学の専門家 脳科学の専門家170名 例えば大学教員はもちろんそうだし あとはポスト学 僕みたいに博士が思っている研究者 あと博士課での学生も参加しているということで この辺り結構専門家の範囲を広げているのかなと思いますが まあね博士に来るぐらいの人たちはもう専門家の というまあ自分専門家って感じなのかな 本当はそういった人が参加していると で対するAIコーナー コーナーAI AIサイドの出場者というのは 脳科学とかの論文を学習させたようなモデルになっていますと 元々のモデルはGPTじゃなくて ラマとかね これメタが作ったAIでラマっていうのがある 合ってるかな読み方 ラマだったと思うんですけど ラマっていうのを使ってたりとか あとはこれも結構有名なミストラルAI フランスの企業が作っている LLMなんですけど っていうものを使って対戦させるというようなことをやったそうです 結果ですね これがどうなるかというところなんですけど 皆さん予想通りか分からないですけど LLMの平均精度は81.4% だから80%ですね 大体5問に1回は間違える そのアブストラクト当てるっていうもの 人間の専門家の平均精度は63.4%ということで 負けてますと LLMの方が大体18%ぐらい精度が高かったというのが 今回の一番主要な結果になっているかなというふうに思います 地震みたいなことも測ってるんですよね AIの地震って何やねんっていう 正解してるかどうかの地震ですよね 地震どうやって測るかってこれも結構面白くて 不確実性みたいなことがあるわけですよ 二択の問題があったときに Aが正解 Bが正解ってあると思うんですけど Aの確かなしさみたいなのが80% こっちかなっていうのが80%で Bだなってものが20% これ差が結構開いてそうじゃないですか これ地震があるって解釈される 例えばAが60%でBが40%かなぐらいの感じの差の開き方だったら 地震がないのかなっていうふうに解釈する っていうふうに考えたときに やっぱり地震のある差が開いてるっていうときほど 正答率が高かったっていう 人間にとっては当たり前だけど 機械にとっても当たり前なのかな そういう結果も出ていたりしました そんな感じでやや人間にとっては悲しい結果かもしれないんですけど 現実はそういうふうになっております 詳しいAIのモデルの話とかはだいぶ端折ったので もし興味があったら読んでみてください これもオープンアクセスになっておりまして 誰でも読める論文になってます ややややこしいかもしれないんですけども ぜひ翻訳の機械とか使って 興味あるところだけでも読んでみてください # まあバトルするよりも仲良くしましょう はい、というわけでAIは農科学分野でも強いということですね。 5本に1本間違えるので、まだね、完璧というふうには言えなさそうなんですけど、人間の専門家よりは高いというのでね。 教員だけ集めたらもうちょっとね、いい勝負になっているのかなとかも思ったりします。 中坂っていうのは学生で、間違ってもしょうがないかなと思ったりもするし。 AIの精度の方がどんどんレベル上がっていくと思うので、これが100%に近づいていくのかなというふうに思うと、やっぱりこの領域においても、 戦うというよりはね、うまく使っていくと、人間の研究者がもっと新しいことに挑戦したりとか、 研究のスタイルが今とは全然違っているかもしれないけど、可能性は広がっていくかなと思いますし、 もし農学科とか医療の現場とか実践のところにひも付いていくと、よりポジティブな利用のされ方というのもあると思うので、 あまりに悲観することなく受け取っていただければ嬉しいかなと個人的には思っております。 最後まで聞いてくださってありがとうございました。 今日もいい1日にしていきましょう。 陣平でした。心を込めて。 今日3時から生配信します。 # 雑談「blueskyもはじめました」 最後1分だけ雑談をします。 昨日、イギリスの研究者のヒロさんが家に来てくれてお話もしたんですけど、 他にもいろんな話をしていて面白いなって思った話の一つとして、 研究者がTwitterからどんどんいなくなっているというか、いなくなっているとは言っていなかったかな。 でもヒロさんもちょっと移動しているということを言っていて、どこに移動しているかというと、 もちろんミクシー2ではなくて、ブルースカイというSNSプラットフォームがあります。 去年、一昨年くらいにできていて、自分はあまりキャッチアップできていなかったし、 周りでそんなに使っている人いなかったかなというところなので、触っていなかったんですが、 そういう話を聞いて、いいタイミングだと思って、昨日始めました。 もしブルースカイをやっている方がいたら、つながっていただけると嬉しいなと思っております。 そちらは研究者ゴリゴリというか、英語で発信していこうかなと思っていますので、 もし興味があればという感じですけど、むしろ人平の普段の生活とかいらないから、 研究の話だけしていってくれという人にとってはめちゃくちゃいいかもわからないです。 この1週間でミクシー2とブルースカイと2つ始めることになったんですけど、 ミクシー2に海外の方はもちろんほとんどいないだろうし、 ブルースカイは海外の方に向けてというので、いい使い分けができればと思っております。 Twitterも僕は大好きだし、残っててほしいけど、いつまで残っているかもわからないからね。 いろんなところでちょっとずつやっていくのがいいのかなと思っていたりします。 仲良くしてください。よろしくお願いします。