【徹底討論】AIは単語の意味を理解しているのか？

Рет қаралды 56,733

Күн бұрын

「大規模言語モデル」シリーズ撮り終わり雑談回。「単語ベクトルは"意味"を表しているのか？」「"干す"と"乾かす"の違いをAIは説明できる？」「AIと人間の言語習得は同じ？」など、AI専門家のりょーさんと徹底討論しました。
【ことラボ】
◯Twitter → x.com/KotoLaboRyo
◯KZfaq → / @kotolabo
【目次】
0:00 ノリも完璧なりょーさん
5:03 専門用語の衝突にブチギレる
12:44 単語ベクトルは「意味」を表しているのか？
15:17 「干す」と「乾かす」の違いをAIは説明できる？
33:19 AIと人間の言語習得は同じ？
38:31 関係者全員AI説
【参考文献】
◯ことばの意味辞書に書いてないこと
amzn.to/3zuKwyw
【サポーターコミュニティへの加入はこちらから！】
yurugengo.com/support
【親チャンネル：ゆる言語学ラジオ】
/ @yurugengo
【実店舗プロジェクト：ゆる学徒カフェ】
/ @yurugakuto
【おたよりフォーム】
forms.gle/BLEZpLcdEPmoZTH4A
※皆様からの楽しいおたよりをお待ちしています！
【お仕事依頼はこちら！】
info@pedantic.jp
【堀元見プロフィール】
慶應義塾大学理工学部卒。専門は情報工学。WEBにコンテンツを作り散らかすことで生計を立てている。現在の主な収入源は「アカデミックに人の悪口を書くnote有料マガジン」。
Twitter→ / kenhori2
noteマガジン→note.com/kenhori2/m/m125fc452...
個人KZfaq→ / @kenhorimoto
【水野太貴プロフィール】
名古屋大学文学部卒。専門は言語学。
某大手出版社で編集者として勤務。言語学の知識が本業に活きてるかと思いきや、そうでもない。
Twitter→ / yuru_mizuno
【姉妹チャンネル】
◯ゆる音楽学ラジオ( / @yuruongaku )
◯ゆる民俗学ラジオ ( / @yuruminzoku )
◯ゆる天文学ラジオ ( / @yurutenmon )
◯ゆる書道学ラジオ ( / @yurushodo )
◯ゆる生態学ラジオ ( / @yuruseitai )
◯ゆる哲学ラジオ ( / @yurutetsugaku )
#雑談回 #ゆるコンピュータ科学ラジオ_雑談回

Пікірлер: 380

@yurucom 18 күн бұрын

【ことラボ】 ◯Twitter → x.com/KotoLaboRyo ◯KZfaq → www.youtube.com/@kotolabo 【参考文献】 ◯ことばの意味辞書に書いてないこと amzn.to/3zuKwyw 【サポーターコミュニティへの加入はこちらから！】 yurugengo.com/support 【おたよりフォーム】 forms.gle/BLEZpLcdEPmoZTH4A ※皆様からの楽しいおたよりをお待ちしています！

@user-xh4ym4nv6i 15 күн бұрын

「あの選手は監督と対立して干されている」は成立するけど「乾かされている」は成立しないので、選手の内部の水分が抜けていたってことですね！

@secretperopero 8 күн бұрын

つまりどういうことだってばよ・・・！

@hmtsite 15 күн бұрын

意味不明なたとえを使うことで、たとえを引いた説明をした時に強制的にカタルシスを感じさせるのはゆるコンピュータ科学ラジオの策略にも思える

@user-up9ig2to3y 15 күн бұрын

考えすぎで草

@Jinkei2016 15 күн бұрын

39:02 現代数学ではしばしば元よりも先に集合を定義するんですよ．つまり「特定の条件を満たしている集合」を「ベクトル空間」と定義して，その集合の元のことを「ベクトル」と定義するんです．2週間前にコメントしましたが，2週間前にアップロードされたゆるコンピュータ科学ラジオの動画内で水野さんが仰っていたベクトルに関する具体例や直観はほぼ全て合っていたと思います。ざっくり言うと，ベクトルとは「要素の組」という形で定義される訳ではなく，スカラー倍や足し算のような特定の操作が定義された集合（＝ベクトル空間）の元として定義されるということです．

@AS-jm3yp 15 күн бұрын

木材なんかは内部までしっかり乾燥させる意味で「乾かす」って言ってますけどね。乾かすが表面で、干すは内部まではあまり納得感がないな…。干すは動作、乾かすは状態変化ですよね。「湿度が高いから干したけど乾かなかった。」は言えますけど、「乾かしたけど乾かなかった」は成立しないですから、干すことは乾かす意思こそありますが、乾いたかどうかは問わないんじゃないですかね。知らんけど。

@akinaka7543 15 күн бұрын

日本語全体に統一された用法があるというよりは、業界(例えば)ごとに用法のビミョウな差異がある場合も割とありそうな気がします。

@mentaiiicko 15 күн бұрын

これ干しブドウとか干芋ってカラカラに乾いてるわけではないし干すっていう動詞は結果までは言及していない感じある。

@user-eh4cc1wz1n 15 күн бұрын

確かに。十分に乾燥しない状態を"生乾き"と言ったりしますね。

@roadevery9434 15 күн бұрын

「乾かしたけど乾かなかった」は成立してるとおもいます。「干したけど干せなかった」はおかしいけど。

@AS-jm3yp 15 күн бұрын

「乾かしたけど乾かなかった」は確かに成立し得るんですが、そのときの「乾かしたけど」は「乾かそうとしたけど」という動作主体としての表現なんですよね。「乾かした=対象物の乾燥が完了した」の状態変化を前提に置くと成立しないので、ちょっと乱暴に成立しないって言い切ってます。

@user-ic5uw1rl5m 15 күн бұрын

3:24 水野さんのモノマネがうますぎて、りょーさんが喋ってると思った

@roadevery9434 15 күн бұрын

音だけ聴いてると、どっちかわからなくなる時がある

@Kobarienne 15 күн бұрын

細かすぎて伝わらないモノマネ選手権に出てほしい

@yk06688 15 күн бұрын

お煎餅の例え、分かりやすくて好きです笑

@AyatoSaisyoku 15 күн бұрын

「AIと人間の言語習得は同じ？」という話ですが、人間がAIより圧倒的に少ない情報量（と思える量）で学習できているのは、視覚、聴覚、触覚、嗅覚、味覚の五感を駆使して、組み合わせて学習しているからだと思います。聾者は聴覚をほとんど使っていなくても、他の４点で補ている。ヘレンケラーは視覚聴覚両方がほとんど使えない状態でしたが、家庭教師の献身的対応により「触覚」を介して語彙を学びました、味覚嗅覚もあり、体を動かし空間を３次元的に学んでいます。「大規模言語モデル」はそのすべての学習過程を「言語」に依存して学習するために人間より大量の言語データが必要なのではないでしょうか。AIに上記五感や空間認識のインプットを数値として学習するモデルが組み合わさったとき、改めて「そのAIの学習は人間と異なるか否か」を追求できるのかもしれませんね

@7743v 15 күн бұрын

同意見です。コンピュータ上ではデータ量や処理の関係からテキストデータの方が扱いやすく、それに特化させ膨大なデータを使って学習する。一方で人間は(基本的に)生まれながらにして簡単に使える5つのセンサーがありますからね。

@hukuuchi 15 күн бұрын

人間が生まれてから得る五感からのすべての情報をデータ量として捉えると、今のAIでは桁がいくつも少なすぎるように思いますね人間の場合、時間軸という情報量で連続性を想定できるというのもあるかと AIの学習データも長い文章や関連したデータなんかで連続性はある程度確保できるけど、原則的には定義された連続性しか認識できないいうなれば、人間は3次元＋時間の4次元時空で情報を処理分析できるが、AIは1次元で情報を処理分析するまあ、人間の脳の構造としては1次元の電気信号を並列的に処理してるわけで、擬似的に4次元時空だと錯覚してはいるゆる言語学ラジオの方で赤ちゃんの言語習得でも触れられてたように、論理学的に正しくない帰納を使って覚えたりもする AIは1次元の情報処理であれば人間よりも早く処理出来るわけで、人間の認知についての理解が深まってAI技術に落とし込めれば、人間よりも高次元でものごとを認識・処理することは出来るのかも

@user-up9ig2to3y 15 күн бұрын

視覚情報は一秒間にとんでもない数入ってきてるからなあ

@AyatoSaisyoku 15 күн бұрын

「人間が生まれてから得る五感からすべての情報をデータ量とぢて捉えると、今の今のAIでは桁がいくつも少なすぎるように思います」ですよね。"言語"という情報に限定して見た結果、大規模言語モデルの学習量が"言語単位"で多くなっているという話で、人間が様々なインプットをしていく過程のデータ量を考えると、現状の大規模言語モデルの扱うデータ量より多いのでは……専門家の話をきいてみたいですね。実は今の技術力からそう遠くない技術で五感のセンサーを搭載できるのか、はたまたはるか未来の話か。実はそもそもその観点にAI開発側が興味なかったりするのか。

@user-kl7hd2vv3e 15 күн бұрын

@@AyatoSaisyoku それやってる人もいるけど、基本今のまま進める方が効率が良いからなあただ、それだけ

@konsometteoisiiyone 15 күн бұрын

一方の民俗学「昔話一つ満足に作れねぇポンコツじゃ！ガハハ！！」

@user-xt5vp7lb6r 14 күн бұрын

あの回、遊びつつ民俗学のテーマに繋げようとしててすげぇ好き

@ATI_PC 8 күн бұрын

マジレスすると、民俗学に特化したAIになっていない、食わせる情報が制限されていないから、それらしくならない、って話なのかと。一方で、グリム童話だけ食わせて、グリム童話っぽい話なら作れそうですが、なかなか面白い話にはならないかなぁ。壮大な年数の伝言ゲームの中で無駄が省かれ、一方で付け足されしてきたものですから、二度と同じような変遷は辿らないわけですし。。

@kaz-jn7ro 15 күн бұрын

「人を干す」は言えても「人を乾かす」は言えないなぁと派生の意味から元の意味を推測しようとしてたので内部の水分という回答が出てからミイラがちらついて離れない

@malkotoisu9730 2 күн бұрын

人を干すのはめざしを干している状況と関連させて両方とも動けない自由を奪われているという類似性からきているということではないか？

@ucejvfakrcjuwqbnhl_nlacq6476 15 күн бұрын

38:31 ベクトル空間とは和とスカラー倍が定まり、云々の条件を満たす集合のことを指すので、ベクトルの定義にベクトル空間を用いても循環参照にはなりません。ちなみに、数字の組でないものからなるベクトル空間の例としては、関数が集まってできる集合などがあります

@hrsm-chn 15 күн бұрын

言語学研究に「大規模言語モデルのほうが役に立つじゃん」って言うのは、陸上選手に「バイクとか車のほうが速いじゃん」って言うようなズレを感じる

@chicha5358 14 күн бұрын

車の普及で飛脚や人力車が縮小したように、大規模言語モデルの出現で辞書編纂や言語学研究も完全になくなりはしなくても、縮小しそう

@user-kl7hd2vv3e 14 күн бұрын

陸上とは違うかな大人の言語学習に置いては言語学は成果出してる

@nandemotsukuruyo 15 күн бұрын

アラインメントといえば車のホイールアライメントが一番身近ですが「アライメント調整」と多用されるせいで頭痛が痛い。

@dnnb-st 15 күн бұрын

最後笑いました。数学(集合論)では集合を軸に定義するのでこういうことがよくあるんですよね。開集合は開集合系の元ですし、自然数も自然数の集合の元ですし、同様に整数、有理数、実数、複素数、四元数等もそれらの集合の元です。当然ながら、元となる集合を構成する際には循環論法にならないようにするので、ベクトル空間の定義に「ベクトルを集めたもの」と言ったものはなく、「この集合の元は、こういった条件や関係を満たす」として条件の箇条書きで定義されます。数学ではよく見る印象ですね。

@matsuokenshirou 15 күн бұрын

「ベクトル空間」そのものは「ベクトル」を使わずに定義されてるってことですね。

@Redcoral_moe 15 күн бұрын

堀元AI作る時は文中のプリンは取り除かないといけないんだよね……。

@sakaisakasakasu 15 күн бұрын

AIは半導体をプリンに例えたり、ネットワークを大泉洋に例えないから人間とAIの言語モデルは違う！って反論したかったけど、堀元さんの学習データに偏りがある可能性も考えられるのか

@ikedy315 15 күн бұрын

はけ口を「はけくち」と読むのが気になるなぁ。連濁ルールからしても「はけぐち」が標準的・規範的な印象。

@JeanCocteau7 14 күн бұрын

12:20「くち」 12:38「ぐち」左の方は、正しく濁ってます。

@user-kf9ek4tl9w 15 күн бұрын

干してある洗濯物が乾ききった時、その洗濯物は”干してある”と言えるか気になったのでChatGPTに聞いてみた洗濯物が乾ききった場合に「干してある」と言えるかどうかは、その文脈に依存します。乾燥中の状態を指す場合：乾ききった洗濯物には「干してある」とは言わず、「乾いている」「乾いた」と表現します。物理的な場所を指す場合：乾ききっていてもまだ物干し竿やハンガーに掛かっている場合は「干してある」と言えます。なるほどなあ

@SonodaMai74 14 күн бұрын

「画像から文字を出力するAI」という話があったので、画像の内容を分析するアプリ Microsoft社製の Seeing AI に、 32:41 のスクリーンショットを読ませてみました。 - 以下引用 - この画像には、テーブルに座っている3人の人物が写っており、それぞれがマイクを前にしています。左の人は青いシャツを着ていて、目の前に缶とビールのグラスを持っています。真ん中の人は暗い色のシャツを着ていて、赤いラップトップとビールグラスを前にしています。右の人は紺色のシャツを着ていて、目の前にビールのグラスを持っています。左上には「ゆるコンピュータ科学ラジオ」という日本語のロゴがあります。上部中央には、青いバナーに白い文字で「これがAIの力だ!」と書かれています。画像の下部には「画像を入力して文字を出力するAI」と書かれた日本語の大きな白い文字があります。 1. シーン - 説明: マイクを持ってテーブルに座る男性たち 2. ユーザー - 説明: 3人が検出されました。 -細部： - "中立的な黒髪の33歳男性。" (ニュートラルな黒髪の33歳の男性)。 - "幸せそうなメガネをかけた[blurred]の29歳の男性。" (幸せそうなメガネ29歳男性)。 - "27歳の黒髪の男性で、眼鏡をかけており、中立的なようです。" (黒髪と眼鏡をかけた27歳の男性、中立的に見える)。 3. **テキスト (テキスト)**: - "ゆる" - "コンピュータ科学" - "ラジオ" - "BREWD" - "これがAIの力だ!" - "画像を入力して" - "文字を出力するAI" - 以上引用- 年齢の推測とかまで出てくるのがおもしろいですねこれ

@yagi4u8 7 күн бұрын

BREWDは左下の缶に書いてある文字か

@user-zm6dx7dg6i 15 күн бұрын

29:09 ここの話、「『百聞は一見にしかず』っていうけど、一億回聞けば見たのも同じでしょwww」ってAIに言われてる気分です。

@ymokest 15 күн бұрын

工事現場では、2つの配管を合わせる際に、配管の軸芯のずれを修正することをアライメントと言ったりするので、親方が言っている場合は、こっちかもしれないですね。

@user-zs9mh3ci3k 15 күн бұрын

整列するって意味ですね

@Fnak202 15 күн бұрын

コンピューター用語では「同期」という言葉が厄介ですね。順次処理のことを「同期処理」と言ったりしますが、並列処理のタイミングを合わせることを「同期をとる」と言ったります。

@monopoly999 15 күн бұрын

建築系の実験において土、石、木材の含水表現に湿潤(飽和含水): 水分の付着が確認できる表乾(繊維飽和): 表面は乾いているが水を含んでいる気乾(気乾): 通常の乾燥した状態絶乾(絶乾): 水分を含有して無い(と考えて良い)状態。石、土においては定義として『インキュベーターにて100℃程度で自由水を乾燥させた状態』って言う用語があり、吸水率試験や含水比の計測に用います。内部まで乾かしているのに、“干す”の表現が適応されていないので、業界用語の一例としてコメントしました

@sinsato6067 15 күн бұрын

そもそも人もコンピューターも言語化している時点で、言語上の話なので、その範囲内で議論している時点でそこに両者の違いはない気はする。その外を知っているのが人間だ、という話だと思う。

@user-kl7hd2vv3e 11 күн бұрын

外の世界なしでは言語化出来ないからなあ人間は

@Harewo 15 күн бұрын

酒とってくるって言って本当にビール出てくるの細かいなあ

@user-rp1bv9cn2c 15 күн бұрын

干すと乾かすって干すと吊るすくらい違うんじゃないかって感覚がある

@kashita8463 15 күн бұрын

耳で聞いてたら性科学ではなく生化学だと思ってしまって混乱した

@mudaso-heavy-user 15 күн бұрын

楽しみに待ってました

@tsuyuki007 15 күн бұрын

ぼくも！

@AS-jm3yp 15 күн бұрын

たのまち

@user-gn5wj4cn8q 15 күн бұрын

僕もたのまち❤❤❤

@rm-ti8qg 15 күн бұрын

楽しみに待ちすぎたかもしれません

@tsicsafjapan9371 15 күн бұрын

たのまち

@YuYuYu-Yu 15 күн бұрын

ベクトル空間は古来からのベクトルの概念を抽象化した集合で、ベクトル空間の構成要素の定義に当てはまるものがベクトルであると、ベクトルが再定義されている、という順番が大事ですねー。

@pucapucaponpon 15 күн бұрын

ベクトルの成分表示は基底を取って初めて決まるもので、基底を取らなくてもベクトルはベクトルなんですよね。基底はいつでも取れるので、そんなに気にしなくていい部分ではあるのですが……。

@user-kl7hd2vv3e 15 күн бұрын

選択公理は認めな…！おっと誰かが来たようだ

@user-rb1es1xm1s 15 күн бұрын

ベクトル空間の基底の存在は(特に無限次元の場合は)選択公理の元で存在が示されますこれを「いつでもとれる」と言っていいのかちょっと引っかかりますね、わざわざ突っかかるほどのことでもない気がしますが(すみません) 返信欄のはそれを前提とした数学系youtuberの内輪ネタな気がするけど伝わっているのだろうか…

@ray8bit396 15 күн бұрын

「ベクトルはベクトル空間の元」というのはスカラーで言うなら0, 1, 2, ...が集まって実数ができるのではなく，さきに実数というものがあって，その中の1要素に「1」という名前を付け，ほかの1要素には「0」という名前を付け，...という風に定義をしていくということではないでしょうか．

@user-ib3ks5do6i 15 күн бұрын

ゆる言語学ラジオで使われる「メタ認知」もアラインメントみたいですね。心理学では、自分がどのような記憶や思考を持っているかについての認知をメタ認知というのに対して、ゆる言語学ラジオでは、自分が周囲からどう見られているかという認知で使われています。

@tamarind_kingdom 15 күн бұрын

前々回のコメント欄でベクトルに興味のある人が沢山いてびっくりしました。ちゃんと訂正も入っていてさすゆるです。

@eternalempty6886 15 күн бұрын

ハケクチが気になっちゃってブレるぅー絶対言いにくいやんｗ水野さんまで清音で言ってたから不安になって調べちまった

@user-rs2nj5sm6v 15 күн бұрын

21:01　小説の「舟を編む」だったかなあ、「１０」のうち、1のある方　みたいな説明をしているのを見つけたときは高校生ながらに「確かにそれがいっちゃんわかりやすいじゃん！この説明閃いた人すげえ！」って感じたことある

@user-gp2di7wv5k 15 күн бұрын

自分の体を縦半分に分けて、両手をそれぞれの近い方の胸に手をあてて胸に手を当ててドクドクしてる方じゃダメなのかな？と思って自分の胸に手を当ててみたけど、小道具全く感じなかった

@Lambda_deep 14 күн бұрын

@@user-gp2di7wv5k 臓器の位置が反転している人もいるので、それだと定義出来なさそうですね

@ATI_PC 8 күн бұрын

@@user-gp2di7wv5k 心臓や臓器が反対側にある人もいるから(反例)。。。

@furrai991 14 күн бұрын

38:41 ゆっくり首を傾げるりょーさんがかわいすぎて…🤦🤦

@user-qv8bq9oe3z 15 күн бұрын

乾かすは乾くという状態変化を表す動詞の他動詞形なので結果が伴うイメージが強いなあ

@YasushiTakahashi007 15 күн бұрын

チャッピーに聞いたらちゃんと答えた。「干す」と「乾かす」は、どちらも物を乾燥させるという点で共通していますが、使用する場面やニュアンスに違いがあります。干す（ほす）: 主に物を太陽や風に当てて水分を取り除くことを指します。洗濯物や布団、食べ物（干し魚や干し野菜など）を外に出して乾燥させるときに使います。例：洗濯物を干す、布団を干す、干し柿を作る。乾かす（かわかす）: 水分を取り除いて乾燥させること全般を指します。物を自然乾燥させるだけでなく、ドライヤーや乾燥機を使って乾燥させる場合にも使われます。例：髪の毛を乾かす、靴を乾かす、濡れた本を乾かす。要するに、「干す」は主に屋外で自然の力を利用して乾燥させる行為に使い、「乾かす」はより広い意味で、手段を問わず乾燥させることを指します。

@kkkkyyyy8378 15 күн бұрын

「干す」と「乾かす」の説明をAIができたのは、大規模言語モデルの中に、人がした説明文のデータがあったからという可能性はなのかな？

@denkitiyy7982 15 күн бұрын

堀元さんの「はけ口」を水野さんが「営み」に言い換えているの、結局似てて面白い。

@komi3032 15 күн бұрын

干すは乾かす為の場所に吊るしたりして放置しておくことと思っていました。仕事で干される、も追い出し部屋にいれて放置することと考えると通じますしおすし

@ATI_PC 8 күн бұрын

そういう意味でのChatGPTの動詞、形容詞の違いって意味合い、意外と間違っていないかもしれない。。干すは行為で動詞、乾いた状態。英語のdryに引っ張られている感じはあるけども。。

@user-vx7ki9ul2o 15 күн бұрын

まあ、ベクトル空間の定義にベクトルは使われていないから…。

@SE-wx7cu 14 күн бұрын

「干す」は動作、「乾かす」は状態変化かなと思いました。洗濯物で言うと洗った後ハンガーに掛けて竿に掛けるまでが干す、その先が乾かすのイメージ

@tokorox10 13 күн бұрын

AIが単語を正しく用いているがその理解してるのか？は興味深いですね。空手の型は見かけだけ真似ても正しい技が身に付いた事にはならない、という話を聞いたことがありますが、理解はしてなくても体裁は繕うことが出来てしまうと思うので、単語ベクトルでは用法のルールに従うことが出来てもそれは理解とは違う、に一票入れます。

@jipparchuspcpc1197 14 күн бұрын

いつも研究のお供にラジオを楽しんでいます！言語もAIも専門外なので以下は素人の感想です！「干す」も「乾かす」も多次元単語ベクトルで直交する「水分の与奪」軸、「内部ー表面」軸以外の成分（次元）ももつとします。また、厳密にはこれらの単語の違いが内部に関することか表面に関する現象かの違いだけで「水分の与奪」軸に平行な成分の大きさは同じだと仮定します。この場合、「干す」ベクトルと「乾かす」ベクトルの差分のベクトルは「内部ー表面」軸と平行になり、それは「干す」と「乾かす」の意味の差や使用できる文脈の違いそのものをあらわしているのでは？と思いました。しかし、分布仮説の性質上「干す」ベクトルも「乾かす」ベクトルもノイズとして本来重要でない次元にある程度の大きさをもっている、もしくは上記の仮定が不正確で本来これらの単語の意味の違いはほかにも存在していおり、「水分の与奪」軸に平行な成分の大きさも同じではないため差分ベクトルは必ずしも「内部ー表面」軸と平行にならず（ねじれの関係的な・・・）、ほかの次元の成分がそれなりに存在することで動画内のようにChatGPTの回答がぶれてしまうのではないかな～と妄想していました。「干す」「乾かす」「湿らす」「濡らす」などの多次元の単語ベクトルも主成分分析で重要でない次元を削減したりガウス混合モデルなどでクラスタリングすることで大雑把な意味の輪郭みたいなものを浮き彫りにできそうで興味深い話題でした！

@kimikouzaki3665 12 күн бұрын

干す（動詞）＝動作乾かす（動詞）＝動作乾く（動詞）＝動作の結果干した（動詞的）＝動作の完了干した（形容詞的））＝内部まで乾燥した乾かした（動詞的））＝（まれ）動作の完了乾かした（形容詞的）＝表面が乾燥した（動詞の結果の回収）乾いた（形容詞的）＝結果の回収→内部までの乾燥のイメージありませんか？

@keisukesugi5085 15 күн бұрын

8:09 突然の親方草

@MK-ky3uf 15 күн бұрын

干すは行為そのものが重要で水分量については副産物乾かすは水分量を変えることが第一目的

@user-ql8iu9ex3y 15 күн бұрын

つまり、・干した結果 = おこげ・乾かした結果 = おせんべい

@mui1346 15 күн бұрын

堀本さんりょーさんにadversarial attack仕掛けてて草

@user-wt2ev5uc2y 7 сағат бұрын

「単語ベクトルは意味を捉えている」派からのコメントですが、 ChatGPTが「干す」「乾かす」の違いを答えられたことは、単に干すと乾かすの違いについて言及した文章を学習して思考をショートカットしているからうまくいっている可能性があり、単語ベクトルからの意味の抽出が現在の技術で可能かはあやしいと感じました。

@akinaka7543 15 күн бұрын

37:11 「AI」が計算機ベースであり、今の計算機がそもそも成功してる、ってのは大きいですね。特に例えば近年は「AIにしゃべらせる」が「成功」するくらいの性能に計算機が達してる。一方で言語学を駆動する計算機みたいなもの/方法論は多分まだあまり無いですよね多分

@easy2forget2ch 15 күн бұрын

乾かすために干す干すために乾かすなんとなく「干す」は手段で「乾かす」は目的なイメージがあります

@spacelike4724 15 күн бұрын

この意見に賛成

@midoriakibao8726 15 күн бұрын

現時点での水野さんにとっての「意味を理解する」の定義を明示したうえでのりょーさんの回答をもう一度聞いてみたいですね直近のゆる哲で出たメアリーの部屋とか、中国語の部屋や哲学的ゾンビあたりも絡んできそうな話っぽいのでトキヒロさんが今回の話についてどう考えるのかも聞いてみたいかも

@coyotenougat 3 күн бұрын

聞いていて既視感が有ったのですが、この話は「心は存在するか」と同じことではないでしょうか。・AIが心を持つことはあり得るか？→そもそも心とは何か→人間にも心なんてないという説明で私は納得したので、であれば今回の話も同様に・AIは単語の意味を理解しているのか？→単語の意味とは何か→意味は存在しないという結論になると感じました。「人間もAIも大量の用例をインプットして自然な文章が生成できるのだから、同じ」という論理は非の打ち所がまったくないと感じます。それに対して「人間は意味を理解していてAIは理解していないのだから違う」と反論するのは、まるで神や不滅の魂の存在を信じるように「意味」の存在を信仰しているように思えます。「我々がある単語を聞いて、たちどころにその意味を理解できるのはその単語に意味というイデアがあるから」ではなく「我々はインプットした用例に共通する特徴を見出して使える範囲を推測しているに過ぎず、個々の単語に定まった意味は存在しない」のでしょう。乾くと干すのように、似た意味なのに使える状況が異なる単語があるのは、インプットされた用例に偏りがあるからそれに合わせたアウトプットにも違いがあるだけの話であって「意味の違い」とは用例の違いを説明できる解釈を提示しているにすぎないと思います。歴史や人生にナラティブな意味付けをするために物語を作る行為と似ていると感じます。

@hazukilazy 13 күн бұрын

面白いトークをありがとうございます！既に他の方も指摘されていますが、私も「干す」は動作、「乾かす」は結果に焦点が当たっているように思います。例えば、「一人暮らしの女性は防犯のために男物の下着を干すとよい」というような文だと（こんなことを言わなくてはならない社会なのが残念でならないですが、ここでは単に用例として）、「干す」ことに水分を飛ばす目的はまったくなく、動作だけの話ですよね。いろいろ思索するのが楽しく、興味深いです

@user-mk8dv7oo1d 14 күн бұрын

Claude3.5 Sonnetは「干す」と「乾かす」の違いをそれっぽく書いてくれました。 ---- 「干す」と「乾かす」は似た意味を持つ言葉ですが、いくつかの違いがあります：方法：「干す」：主に自然の力（太陽や風）を利用して乾燥させること。「乾かす」：自然の力だけでなく、人工的な方法（ドライヤーなど）も含む。対象：「干す」：主に洗濯物や食品（干し柿など）に使用。「乾かす」：より広い範囲の物に使用可能（髪、床、書類など）。ニュアンス：「干す」：物を外に出して乾燥させるイメージが強い。「乾かす」：場所を問わず、単に水分を取り除く行為を指す。使用頻度：「干す」：日常会話でより一般的。「乾かす」：やや formal な表現。例：洗濯物を外に干す。髪をドライヤーで乾かす。これらの違いを理解することで、状況に応じて適切な言葉を選ぶことができます。さらに詳しい説明が必要な場合は、お知らせください。

@hamachi5342 15 күн бұрын

ご存じかと思いますが、GPT 4oにしろClaudeにしろ、文章だけでなく画像、動画、音声等を直接モデルに入力し、文章以外も出力する、マルチモダリティを目指す流れがあると思います。謎の数字の塊が統計的処理でどこまで人間の感性に近づくか見ものですね。現行手法だと課題はトレーニングのためのデータセットの用意でしょうけど……

@ATI_PC 8 күн бұрын

それが、割と言語ベース依存に近い状態に感じるかなぁというのはあります。。>マルチ

15 күн бұрын

ベクトルはベクトル空間の元、って説明になるんわかりすぎる。ある性質を満たすような集合として定義される対象（ベクトル空間、位相空間、...）て厳密にはそう説明せざるを得ない

@unbobo777 12 күн бұрын

この場だと数学的厳密さを追いかけないイメージの説明でよくて、「いい感じの足し算と実数倍が定義できて、任意のベクトルが基底の実数倍と和で表されるっていう性質を満たすもの」くらいでいいのではと。 (つまり水野さんのほうが合ってるんだよなぁーという)

@zip7362 13 күн бұрын

「乾かす」という目的のための手段が「干す」だと思ってたな

@akinaka7543 15 күн бұрын

21:00 もともと人間の英知の全範囲wにおいても「右」をきちんと説明するのは凄く難しいって話が有った気がします。「左じゃないもの」みたいな「相対的な」答えは人間も(AIも)簡単に出しそうだけど、そういう相対さを排除した説明は(少なくともベクトルの差分では)出にくそう…

@279lseahorse 15 күн бұрын

12:20 え、違うの！？

@higuhigu9297 14 күн бұрын

乾かすのニュアンス、洗濯乾燥機の一般化によってちょっと変わってきてる感じするなぁ

@user-chabo 15 күн бұрын

32:39 想定しているようなAIとズレる部分もあるかもしれませんが、画像を入力して文字を出力するAIもあるように思います。一般的には確かに使われることは少ないかもしれませんが、主に視覚障害のある方向けに、写真の情報を言語化してくれるようなものは存在します。 microsoftの「Seeing AI」などがその一例かと思います。

@kimikouzaki3665 12 күн бұрын

言葉に一元化されたAIの世界でAIが3次元を再生するのと、我々が言語情報で行ったことない国を想像し体験できない抽象世界を構築し、4次元5次元を構築するのとはどう違うのか、あまりわからないです。基本身体性の有無が大きいとは思いますが、生まれつき足のない人、目の見えない人、耳の聞こえない人の世界が劣るわけではないのと同様「違う世界を構築している」「違う世界にそのまま応用はできない」というだけな気がします。

@yuichi6589 15 күн бұрын

「アラインメント」ゴルフではよく使います。

@emc9885 13 күн бұрын

「干す/乾かすの関係は濡らす/潤かすの関係とパラレル」で終わるだろ！何やってんだ堀本ぉ！道民だろぉ！と思って聞いていました。ナショ道民ismが足りていないので、堀本さんは非道民です。「結果を意味に内包しているか」で行くと乾かすと潤かすがパラレルで、「内部まで影響があるか」で行くと干すと潤かすがパラレルなので非常に面白いトピックス。語源的には乾かすの逆として潤かすを作っているっぽい気がするので、道民的には「内部の影響」というより「結果の内包」の方が意味の峻別への影響が強い感じがします。

@user-rb1es1xm1s 15 күн бұрын

堀元さんがベクトル空間の定義とかを知らなさそうなのは、情報学科では線形代数をそこまでしっかりやらないからなのでしょうか？？線形代数を習っていそうな発言が多かったからそこの落差が不思議です。

@user-mk8dv7oo1d 13 күн бұрын

自分も国立大の情報系でしたが抽象的な数学的定義は重視しないかもしれないですね。一列に数字を並べたのがベクトルで縦横に並べたのが行列みたいなふんわり定義で、一次方程式を吐き出し法で解く方法とか、ジョルダン標準形や固有値固有ベクトルの定義と計算ができれば良い。それ以上は個人に任されるというか、本格的な数学の授業を取りたければとってみたいな感じ。

@user-rb1es1xm1s 13 күн бұрын

@@user-mk8dv7oo1d ありがとうございます。よ数を並べたものは数ベクトルといい、ベクトルの公理を満たす対象のひとつでしかない、よってふたつは指し示す範囲が違うので区別しなければならない。というのが自分の認識なのですが… そんな感じなのですね。返信ありがとうございます。

@user-mk8dv7oo1d 13 күн бұрын

@@user-rb1es1xm1s 結局、数値計算のための道具という観点なんでしょうか。その割には、現実の問題からどうやって行列が現れてきて役に立つかみたいなのは授業では全くやらなかったので面白くなかったですね。後々、制御や情報系の問題に行列計算（特に固有値・固有ベクトル）が現れてきて面白いと思いましたが。（そういえば上のに加えて逆行列、余因子行列とかもやりましたねぇ）

@yukizokin 15 күн бұрын

水野さんが「ラムダ演算子」と言うのに驚いたり。

@boak6875 15 күн бұрын

Image Captioningは有るので、ビジュアルシンカーの絵を入力して思考や感情を言語化するAIも作ろうと思えば作れそうですね学習データ集めとビジュアルシンカー毎のパーソナライズに多大な問題があるでしょうが

@user-bx7or2xs1z 14 күн бұрын

大規模言語モデルの学習は赤ちゃんと比べて大量の入力が必要なのは、ニューラルネットワークが人間の脳にくらべて創発するシステムが弱すぎる説

@tatara_gasa 15 күн бұрын

生木を製材の過程で水分を抜くとき、乾かすとも干すとも言わず「乾燥させる」っていうな。「干す」って言葉にも射程があるんかな。

@Jinkei2016 15 күн бұрын

14:49 堀元さんが勘違いしていると思うんだけど、ゲスト研究者の方が仰っているのは「どう使っているかに意味が宿る」んじゃなくて「どう使っているか＝意味」なんだよ。ウィトゲンシュタインは格言っぽくそう言っていたけど、21世紀の分析哲学だと割と主流な学説になっている。プラトニックに意味が存在して用法がそれを反映しているのではなくて、意味と用法を（何らかの形で）同一視する。この「何らかの意味で」の部分がウィトゲンシュタインと現代分析哲学で違うから雑な説明になっちゃってるけど、少なくとも「どう使っているかに意味が宿る」のではない。

@user-zo4gn9xq9y 13 күн бұрын

分析哲学について全然知らないので単純に質問なんですが、分析哲学においては用法は問われるべき重要なものなのですか？なんとなくウィトゲンシュタインについて聞きかじっただけだと、前期の写像的な、意味と単語が厳密に一対一対応するという考え方が分析哲学の萌芽となり、後期の言語ゲームは我々(同一の母語話者同士)が言語の用法を共有している、そのことこそが大事なのであって、意味はあまり重視しないというような立場でなんか大陸哲学っぽいなあと思ってたのですが。

@Jinkei2016 13 күн бұрын

@@user-zo4gn9xq9y まず「前期の写像的な、意味と単語が厳密に一対一対応するという考え方が分析哲学の萌芽となり」という理解は誤っていると思います。「分析哲学の萌芽」という意味ではウィトゲンシュタインに強い影響を与えたフレーゲの貢献が圧倒的であり、ウィトゲンシュタインと分析哲学の関係を上記のように理解することが間違っていると思います。「後期の言語ゲームは我々(同一の母語話者同士)が言語の用法を共有している、そのことこそが大事なのであって、意味はあまり重視しない」については滅茶苦茶で、正しい部分が見当たりませんので、その認識をもって「大陸哲学っぽいなあ」というのは誤っています。

@user-zo4gn9xq9y 13 күн бұрын

@@Jinkei2016 うわ感じわる。滅茶苦茶で悪うござんした。

@Jinkei2016 13 күн бұрын

@@user-zo4gn9xq9y 申し訳ございません、事実誤認を指摘されることが「感じ悪い」という文化の方でしたか。あなたは全て合っています、間違っていること等一つもありません。これで満足ですか。良かったですね。

@user-zo4gn9xq9y 13 күн бұрын

@@Jinkei2016 先のコメントでは私は誤っていると言ったのに、今度は間違っていないという。これは矛盾している。さては君は口先だけの嘘つきだなぁ？

@user-ou8md6fm8o 15 күн бұрын

水野さんが今回やたら必死で少し引くまであったのですが、後半でツラミを語ることで伏線回収しておりドラマだった同様に、自身がオフで触れる人々が見せる言動にも時々意外な心情があるのかもと学習しました

@user-qy2rm7ub6u 13 күн бұрын

人間とAIの言語習得に関してはそれこそ今井むつみ先生辺りに聞いてみたい話ではある

@stealber3107 8 күн бұрын

「意味」は単語の用法を人間の限られた脳で理解できるよう論理的に分解したものであって、単語ベクトルは膨大なデータを膨大な現実に直接ぶつけるものだから工程数が違うと言える気がする

@user-xq8nx2pq4k 15 күн бұрын

アラインメント、言語学の用語にもありますね。（対格型言語か、能格型言語か、等）

@quux- 14 күн бұрын

道民御用達の動詞、「潤(うる)かす」って送り仮名(活用)的に「乾かす」の対義語かと感じていたけど、意味を考えると干すの対義語かもw

@aogr 14 сағат бұрын

グラスの酒を"飲み干す"はいえても"飲み乾かす"はいえないもんな〜 "乾いたグラス"ならグラスの底に水気が残っていない感じ。つまり表面に水が残っていないイメージになる。飲み干したあとのグラスには水気が残ってるので、乾いてるイメージとは全然ちがう…納得

@lemoncmd 8 күн бұрын

ベクトルの定義は物理学と数学とコンピュータ科学では違うんですよねぇ。コンピュータ科学では数字の組でいいです。

@ukkieMFCelenElf 15 күн бұрын

私は「生成AIの時代」に入ってからゆる言語学ラジオを通じて「言語学の概説」を学びました。実態はともかくとして自意識としては言語化能力を自分のストロングポイントだと信じていたこともあって、生成AIについては恐らくラッダイト運動で打ち壊しに参加していた人達と程度の差はあっても同種の「気持ちの悪さ」を感じて来ました。そんな私は言語学の態様を学ぶことで、言語の移ろいやすさ、不完全性、そうでありながらの道具としての有用性の高さや、一般的な言語学者の言語に対する「～警察」とは対照的な姿勢を知るにつれ、徐々に心の平安を取り戻したような、そんな気がしています。 n=1の話しではありますが、「こんな時代だからこそ言語学に救われる人」は実在します。

@hykathon 14 күн бұрын

電子機器も洗浄した時などは内部まで水分を取り除きたいから「干す」ですよね。コンピューターとか。

@tarota3068 15 күн бұрын

音楽では、「ある特定の音の高さ（絶対的なピッチ）」をドレミファソラシで表し、「音階上の特定の音（相対的なピッチ）」をドレミファソラシで表し、二つの音の間隔を〜度で表し、和音の音階上の位置を〜度で表します他にも数え切れないくらいこういうのがあるので控えめに言って地獄です

@ShirayukiYUKISHIRO 15 күн бұрын

統語論を勉強し始めるとSVOCではない「補語」が出てきて「お前どっちや」ってなることがあったりですね……あるんですよ…… 用語の干渉はですね……可能な限り避けたいですよね……無理なときはどうあがいても無理なんですけどね……

@user-ee3ms8ne7z 15 күн бұрын

38:31 ベクトルがベクトル空間の元として定義されるのはベクトルの性質として加法とスカラー倍が定義されていることが必要で、その演算を定義するのに2つ以上のベクトルが必要、みたいな話かな？

@user-cl9gt1gl8l 15 күн бұрын

単にベクトル空間の公理を満たしているものをベクトルというので、ベクトルとはなにか？と言われたらベクトル空間の元と言うしかないということだと思います。ちなみに零ベクトルしか持たないようなベクトル空間（零ベクトル空間）も考えられるので、元が2つ以上である必要はありません。

@user-rb1es1xm1s 14 күн бұрын

ラジオ内ではただ単に、文字面だけ見てベクトル空間の定義にベクトルが含まれていると勘違いしただけでしょうベクトル空間とは和とスカラー倍が定義された集合というだけで、その定義にベクトルは含まれていません。従って循環参照にも陥っていません。その集合がベクトル空間だと分かったならばその元のことをベクトルと言う、そういう話の順番であることに注意しましょう。

@user-ee3ms8ne7z 14 күн бұрын

ベクトルを直接的に定義していないことに対する説明を与えたつもりでした。つまり、一般的な認識として「定義の順番はまず元を定義して、その集まりとして集合を定義するというものである」と想定したときに、ベクトル空間→ベクトルというのは逆向きになっているので、なぜそうなっているのか理由として挙げたつもりです。

@unbobo777 12 күн бұрын

大衆向けのサイエンスの文脈で「〇〇とは何か?」と聞かれたら厳密な定義じゃなくて誤解を恐れず本質的なイメージをなんとなく答えるほうが良いのではと思います。ベクトルで言うと「基底の和と実数倍で任意の要素が表せるって性質をもつやつ」とかですかね。厳密な定義は興味持った人が勉強すればいいよのスタンスでいいのかと。

@user-zs9mh3ci3k 15 күн бұрын

アライメントは整形外科でも使われる場所の位置を整えたり骨折の時などに使われる

@sakazukin9142 14 күн бұрын

画像→文字は生成AIの最初からできたよ。需要はなさそうなのに精度はよかったから、画像→文字、文字→画像は不可分な技術なんだと思います。

@LIZ-oh8pj 15 күн бұрын

「左」の無駄のない語釈とはどんなものか気になるなー、とか思ってググると「東に向いたとき北にあたる方」とか出てきて単語差し替えただけやんけ！ってなる

@dokuo833 15 күн бұрын

3:38 ベクトルはベクトル空間の元という定義は確かに初学者向けに役に立ちませんが、なぜそのような定義が必要になったのか理解されずに流されてしまって悲しいです。

@user-re6ns2kh3o 15 күн бұрын

LLMと人間のインプット量の比較を根拠に全くメカニズムが違うとは言えないと思う。人間はもっと少ない言葉のインプットで言語の運用を習得するけど、言語以外のインプットを利用しているわけで。

@user-rn5mf1kp6u 14 күн бұрын

LLMは単語を理解すると仮定すると、文章は理解しているんですか？トーカナイザーで分割される前のベクトルをほかの単語と比較したりするのか知りたいです

@kamijyo 15 күн бұрын

お煎餅とおこげの喩えは主産物と副産物という意味でのいい喩えだと思うのに、ネタ扱いされて心外

@mos399 14 күн бұрын

35:02 生成文法と生成AIにも「理学vs工学」のような対立構造があるんですね。既視感あるなぁ。工学ですと流体とか理論式は少なくて経験式でモノを作ります。

@user-zs9mh3ci3k 9 күн бұрын

豆腐の水分はどうなる？水を抜く

@user-iu5yw1qk1l 15 күн бұрын

「アラインメントの意味が複数あることで現場レベルで混乱が生じる」の例で親方が出てきたせいで建築用語の方のアラインメントが出てきて大変に混沌としている

@user-vd6yt8yw3t 11 күн бұрын

水野さんが「〇〇的には〜」と言うと、ゆる言の方で「正確」を“性格的”と言い間違えて、一旦「性格的には明るくて〜」とボケた時が毎回毎回頭に過って楽しいりょーさんをゆる言にもゲストで呼んだらいいのに今回のような、りょーさんと検証できる言語関連の話はまだあると思われる

@user-gy7px6sg3q 15 күн бұрын

工学畑の人間ですが、実験装置を繰り返し使うことで生じる装置内部の位置や角度などのずれを調整して直すことをalignmentと言いますね

@icanfly5964 15 күн бұрын

干す乾かすの例で言うと、日本語母語話者のほとんども過去の膨大なインプットから何となくの使い分けはできていて、全く新しい単語が来た時に「どっちかというとこれかな？」とは言えるけど、水野さんみたいに違いを的確に答えられる人はほぼいない。それってやってることAIと同じじゃない？

@user-bx7or2xs1z 14 күн бұрын

干すと乾かすの分類はあまり納得感がない… 僕の解釈では、干すは放ったらかしにする、乾かすは能動的または短時間で乾燥させるニュアンスだと思いました。 Tシャツをハンガーに掛けた場合干すになるのは放ったらかしているからで、ドライヤーを当てたら能動的または短時間なので乾かすになる。他にも、書道の半紙を乾かすときは吊り下げたとしても短時間なので乾かす・人を利用しなくなるときは放置なので干すとか。

@hiroyukinagamachi6114 15 күн бұрын

アラインメントと言えば、古のTRPGであるD＆Dなどで、キャラクターの倫理・道徳上の価値観を表すパラメータの名前でした。爆弾の作り方は教えない、などの側面でアラインメントと言うと、そっち方向の連想をしました。参考： ja.wikipedia.org/wiki/%E5%B1%9E%E6%80%A7_(%E3%83%80%E3%83%B3%E3%82%B8%E3%83%A7%E3%83%B3%E3%82%BA%26%E3%83%89%E3%83%A9%E3%82%B4%E3%83%B3%E3%82%BA)