「単語ベクトル」とは何か？

📕参考文献
・本家 Word2Vec
code.google.co...
・python ライブラリ Gensim
radimrehurek.c...
・訓練済み日本語単語ベクトル
aial.shiroyagi...
🐧 Twitter
/ kotolaboryo
🎵Music: www.bensound.c...
🙏 Special Thanks
日本語字幕・汉语字幕：あやかりさん

[@Mejiro_kyoso]

掃除機の｢飼う:1｣どう考えてもルンバで草

[@stsz1403]

ルンバの登場で掃除機の単語ベクトルがペット方向にも伸びつつある ＝ペットに使われるような文脈に掃除機という単語が用いられるようになってきた 未知の環境に進出して進化の途上にある生物のようで面白い

[@えび-v1p]

4:43 これw

[@ybk1940]

東京-日本+イギリス=ロンドンなのなんとなく理解できるしすごいなこの概念

[@ギョーザ爆弾]

移項すると東京-日本=ロンドン-イギリスで首都-国が成り立つからすごいよな。

[@underambii8388]

@@ギョーザ爆弾 やべぇめちゃくちゃすげぇwwww

[@鳥獣GIGA]

@@underambii8388 当然の帰結

[@pihha5204]

東京は日本の首都だった…？

[@イッヌ-m6y]

@@pihha5204 江戸時代の住民現る

[@hirominakami9991]

さすが猫吸い 吸引がちゃんと入ってるの凄い笑 色々見させてもらってるけど、改めて言語面白いなと思いました

[@ギョーザ爆弾]

掃除機に飼うが1あるのはルンバの影響だろうか

[@しめい-l4m]

@@ギョーザ爆弾 砂浜でルンバ散歩させてそう

[@やまた-h3k]

毎回、最後にスッキリさせてから考えさせられることを言ってるのが好き。 「ほらほら、何見てばかりいるんだ？君も考えるんだよ？！」 って言われてる気がしていつも、はっ！ってなる

[@-haru885]

コサイン類似度で内積計算出てきて知ってる知識が使えてなんか良かった

[@____ai6121]

学んできたことがこんなところで､､､！と思うと、勉強しておいてよかったなあって思いますよね。

[@タケノコ-n4n]

猫に吸引が12あるの良いw

[@GO-ts1nu]

これか kzbin.info/www/bejne/m3m5oWambd-NiNk

[@taiyip9238]

@@GO-ts1nu スパムかと思ったけど有能で草

[@ギョーザ爆弾]

てか普通に猫吸うもんな

[@ももみかん-s3t]

でも、猫を吸う人いる。間違いではない

[@osentak]

犬に吸引がないのはおかしい

[@対艦巨砲大好きな人]

何に使うんやこんなもん、と思ったらそうか… なるほど、そうやってネットって検索者の要望に答えてたのか… すげーな…プログラマーの方々には頭が上がらないな…

[@m.e.7382]

最近では文脈を考慮できるBERTが用いられることが多いですね。"I ate an apple."と"I have a apple product"のappleをフルーツと会社のappleとして区別できます。

[@35satori]

文系も理系も仲良く発狂できる動画見つけたw

[@109ドル]

美術系も数字強い方が便利だなって何度も思いました 多分言語とかも統計とか地学にぶち当たって泡吹いてるんだろうなぁ

[@ss-jx5tf]

理系はわかるんじゃね？これ 俺はわからんけど

[@ふゆ-y1q]

実際にプログラム組むのは別ですが、文系でも大学で金融、心理学、社会学、マーケティングとかで、統計の基礎としてやるかなぁと思います。

[@inntaisagi]

言い方が草

[@Natttttto]

この人の動画なに見ても外れないんだよなぁ

[@kk-xn9rm]

国語でも数学でもなくてガチガチの情報系の内容だった！！

[@登録者100万人目指す米]

猫吸いは猫好き、 掃除機飼うはルンバの影響が出てて草。

[@mdmy-srrc]

以前これを研究していた方をお見かけしたことがあります。物事の性質を数学的に考えるのは楽しいですね。

[@fontono]

Googleが生まれたての頃、開発者がテレビのインタビューに答えていたのを思い出す。 インタビューア　「あなたは何をしているのですか？」 Google開発者　　「我々はコンピュータに『常識』を覚えさせているのです。ものすごくたくさん」

[@iwa6981]

NETFLIX でAIの偏見についての動画をちょっとだけ見てたので、それをよりプログラム的にわかりやすく解説してくれてありがとう

[@ranten-oukoku]

あれ？ゆるコンピュータ科学ラジオでの水野氏のモノマネより遥かに声高いぞ

[@sudou07]

ただのとんでも研究かと思ったら、実用的な技術だった・・・。

[@toofoo7382]

自然言語処理の分野では一般的な手法やね　導入が分かりにくい考え方だから、この動画は良い教材になるなぁ

[@skys6015]

4:40 「猫吸い」の文化を知る者にとってはニヤリとする調査結果。 さて、今回の動画のテーマを元に、SNS由来のビッグデータによって新しい検索アルゴリズムの技術革新が起きれば、現在のseo過対策問題や検索キーワードの選択が苦手な人の問題への解決策が得られそうですね。とてもわくわくしたテーマでした。

[@agemakimakimaki]

このこと知った時、ベクトル好きになったなあ

[@cecilehonda2234]

これで社会科学についても研究できるから本当に素晴らしいですね

[@そふぃ-n4d]

今日のQuizKnockさんの動画見て戻ってきました！ QuizKnockさんの方ではこれを使った式でクイズしてたのですが、こちらではどうやってベクトルを判定しているのか何故そんなことができるのかを理論的に説明されていてどちらも面白いです☺

[@user-ly9el2kb5u]

私は外大卒の日本語教師という超文系なんですが、理系目線の言語学面白いですね!

[@うめ子-n7i]

自然言語処理は計算機科学ではメジャーな分野です！

[@hirozoo3974]

へぇ〜面白い言葉遊びだなぁ〜と思っていたら検索に利用されているですげぇー！！！ってなった

[@みかづきも-g8q]

1人掃除機を飼ってるやつが居るな

[@seasidelabel]

つまり単語ベクトルとは要素に分解するということですね。 東京（地名、首都、日本）－日本（国）＋イギリス（国）＝？（地名、首都、イギリス）　こうすると分かりやすいかな？ 言い換えれば、要素の似ている単語は入れ替えても文章がおかしくない、ということになりますね（「犬を飼っている」→「猫を飼っている」、「バス通勤」→「電車通学」の様に）

[@tase9979]

言語のベクトルについては知らない分野で面白かったです。 ところで、日本語のデータ収集では文法的に英語よりやりにくいところがあるのかなと感じました。 例えば動画にあった「猫-吸う」は「目的語-動詞」で、「掃除機-吸う」は「主語-動詞」(「掃除機で」なら手段ですが)の関係です。「猫を吸う」ので猫は吸われる側であり、掃除機は「掃除機が(ゴミなどを)吸う」ように吸う立場が一般的かと。そうなると、名詞の後の「が」「を」「で」といった助詞を考慮しないといけないのかなと思います。 また、英語は語順が重要(ここは詳しくないのですが間違ってたらすみません)で語の前後の関係でデータの傾向がでそうですが、日本語は語順を入れ換えることができることも多い(例「掃除機が猫を吸う」→「猫を掃除機が吸う」※猫を掃除機で吸ってはいけない)ので、そういったことも気を付けないといけないのかなと思いました。

[@yuya9623]

単語ベクトルの生成方法が体感的にとても良くわかりました！！ありがとうございます！！

[@ninomiya-27]

6:50 最初は言ってることに納得してたけど、数学的に考えると「性別の関係ない職業A」から「性別の関係ない職業B」になるのは仕方ない気がしてきた。

[@三竹山-m2r]

おもしろいチャンネルを見つけてしまった 応援します

[@植松京子]

2:53アインシュタイン➖物理学➕哲学＝ニーチェ

[@マイケル-b1z]

鳥肌たった

[@yotta11]

単語空間の空間としての構造に興味が出てくる 例えば犬と猫が張る空間はどのようなものかとか線形独立な動物50個の線型結合で哲学用語を表したら係数はどうなるかとか

[@fukyouwa-yin]

後半想像したら草

[@Mrdango-sq6lh]

単語空間の基底が動物園になってるのは流石に草

[@ああ-o6y6b]

来年、言語解析の授業取ろうかな

[@Ryon_P329]

このベクトルも時代に合わせてアップデートしていけばかなり有能

[@KANIME]

よろしければ、他の動画にも日本語の字幕付けてください。日本語学習者にとって、より簡単になりますよ。ありがとうございます！

[@ZipRas497]

λさんのやつでも見たけどすごいねこれ

[@soryay]

猫・掃除機の伏線が吸引で回収されるのすごいww

[@momonso0821]

これは最近見た動画の中で一番ほえーーってなった 類似した検索結果とかSiriに聞いた時とかの答えとかが，多少表記ゆれあっても理解してくれるのなんでかなーっていつも疑問だったわ

[@sk-15]

ものすごくおもしろい。

[@johnlennon2009nyc]

分かりやすくて助かりました

[@reito-udon]

言語の機械学習ってどうやってたのか知らんかった。ベクトルにしてと特徴量取り出してたんかな

[@みゃーもと-l8e]

悪いデータを集めて暴走の流れ こち亀だなぁてひとり笑いました。

[@HayakitaP]

この言葉の関係性が最も遠いと考える10単語を入力すると語彙力が測れるってサイトがありましてね…(英語限定ですが)

[@アクアジェットで吹っ飛ばしてけ]

いちいち登場してくれるの助かる

[@全てをぶっ潰す]

喋り方好きすぎる

[@mimizu8706]

画像も言語と同じベクトルに変換できると画像検索や画像生成(単語から画像)とか画像の分類や状況説明(画像から単語)もできるよね

[@クリーブランド-e5l]

transformerを音声に適用すると今ひとつって現象が起こるのはきちんと合成しないと違和感の塊の音声と違って 文字ベクトルは出力がちょっと正しい値からズレてても決まった単語に寄せてくれるからうまくいくだけなんだな

[@大豆大好き剥き太郎]

Microsoftのツイートbotが問題発言をしたのは繕うという作業が抜けていたからだと思うね

[@cocoh4873]

昨日のクイズノックで鶴崎さんがこれ使ってましたね

[@やんほぬ-r1m]

機械は嘘をつかないってことですね

[@ISSAN-02]

分布仮説の説明の例文のところで一瞬でも空白に｢メタルギア｣と入れれば良いのかと思ってしまったワイは恐らく末期

[@p0ny0s95]

数字50個で定義されるベクトルって事は、50次元世界での矢印…ってコト！？

[@calvalefirea2926]

なんの前置きもなくさも常識かのようにPython、しかも対話版使っててびっくりした いやgensim使うならpythonなので問題ないんだけども Colabとか使うのかなぁと思ってたのでびっくり あと思ったよりしっかり説明してて勉強になる

[@grandmascurtain]

猫吸ってる人いるし掃除機飼ってる人いるもんな〜

[@toshihirom2038]

ドラえもんｰ猫はコロスケでしょうよ

[@Tomohiko_JPN_1868]

単語ベクトルってSFやオカルトっぽい言葉で格好いいですね。 単語という1元の1変数を2元の1変数に変換して 操作出来る形にするっていうのは 数学でいう実数空間からベクトル解析や複素平面へ拡げたような感じですね。 追記:　　　　(プログラマ) - (男性) = (専業主婦) これ、失礼な言い方だけど意味を考えれば割と良い線行ってます。 多くの薄給プログラマは雑用エンジニアみたいな作業が大半ですし あれを女性に置き換えて例えるとすれば家事手伝いの作業って比喩としては冴えてます。

[@なつめぐ-n1w]

動画内の説明だと2次元グラフだけど、実際には一つの単語を説明するには15次元になるの面白いな

[@山内太郎-m9w]

単語ベクトルは「一つの単語に一つの意味」を前提とする研究で、複数の意味を持つ単語やその文法表現に対しては課題が多い　ちょっと触れてほしかった

[@ajimov]

学習元の人間が「AIは差別的だ！」と叩くの皮肉でいいよね

[@おむ-t5s]

8月－夏休み気になる

[@Natsu-hi7ee]

犬の時に吸引が出てきて笑ってしまった

[@anubisu1024]

猫のテキストデータのうち1割弱が猫吸いしてて草

[@TK-vr1ob]

単語全部が線型空間に存在してる場合、言語の論理に近似するんじゃないかていうのはあまりにも勝手すぎるし、上手くいかない理由はその仮定にあるのは明らかだから、実際にそれなりの精度を持ったアルゴリズム開発した人間はどういう精神力の持ち主なんだて思う

[@遊輔堂薫風]

意味は単語自体に内在はしていないので、周りの語との関係から意味を定量化する、という仕組みですね。←雑なまとめ

[@しんぴのしずく]

これで「ゲスの極み乙女。」とか「ポムポムプリン」とかの対義語作ったらどうなるか知りたい

[@aaaaa-kq1dh]

AIも人間の偏見や悪い言葉を学習するのか…善悪はともかくそれだけ精巧ということだな

[@葛葉恨之介-z1x]

おもしろい　むかし論理学という本で理論の計算式というのを見たことがあるのですが　それを数値化できるとは

[@そらぞめ]

???「古典的な単語ベクトルはお煎餅に似ている」

[@TG-xx4rp]

単語の言語ベクトルに対してその動作、例えば(successに対してsucceed)みたいな本質的には意味が同じではあるが品詞が異なる関係についてはコサイン類似度がかなり高くなりそうなんだけど言語テンソルなるものを導入すれば解決できる？？

[@yasshi05]

理系なのでタイトルが「単位ベクトル」に見えたwww

[@toyosohakmorik9838]

多次元ベクトルも可能ですか？

[@ian-df6dc]

猫について数字が50個って言ってたしそもそもこれが50次元ベクトルなのでは

[@3kan-7e5]

何やこの文系の皮を被った理系は……

[@凜月-m7e]

ベクトル化は分類問題でお世話になりました

[@ss-jx5tf]

偏見っつーか事実だわな 割合として多いから仕方ないっちゃ仕方ない

[@showflatkk.3288]

その点、りんなは日本らしくオタク化していったよな

[@gerektreqretnowar7783]

内積使いそうと思ったら使ってた

[@みかさ-d8d]

犬吸引しますよ!（愛犬家

[@hajimeshachou]

線形代数の授業でやったなーなつい

[@yuraaaraa]

ラムダ技術部さんのも結構面白いですよ ※ステマじゃないです

[@ReyZone00れいぞーん]

！？大学の自然言語のプロジェクトでやったことだ！

[@時雨ユキ]

単語が近い遠いってどうやって定義すんだろ

[@sunsuga8524]

近い遠いは色々あるぜ！ 数値で、距離尺度化しちまえば、クラスタ分析もできるしMDS分析もできるぜ！

[@김완기-f5e]

good video :)

[@nihey7853]

ある単語の周囲に出てくる単語の類似度で判定かーおもろいな

[@龍女導師]

むしろ大多数の人間が間違えていてAIが正しいんじゃね？

[@ppp-ry5gg]

パラメタが一個一個何を表してるのか気になるな

[@my-nj6gq]

タイトルめっちゃ単位ベクトルに見えた笑

[@優希-x4n]

掃除機の1回出てきた「飼う」は絶対ドラえもんじゃん

[@osigorisanda]

支離滅裂な文を作るときに役立ちそう

[@cocoadrink_014]

単位ベクトルなんて概念があるのか、為になるなぁ。

[@なむりん0624]

ちょー面白い

[@ずるん-z4r]

飼う掃除機はルンバのことだろうね

[@류해]

掃除機は何で一回飼ったことがあるの?

[@aaaaa-kq1dh]

猫と吸引って…中川翔子のことであってる？笑

[@ジュピター-q4m]

東京ー日本＝首都、首都＋イギリス＝ロンドンみたいな感じするもんなぁ

[@一郎鈴木-d8e]

猫と吸うはもっと関連度高いと思います

[@一汁三菜-t8d]

いよいよ文系だからって言い訳が出来ない時代が来たな、、

[@katsenberg3036]

最後んところの恐ろしい前兆… あえて作ったAIならばあまり偏見や差別の思想を残さないで作って欲しいですが

[@Sean-y8m5h]

その場合、同義語は一次従属ですね

[@JohnDoe-tn7ni]

猫は吸うもの

[@ももみかん-s3t]

Tay…手越？