Shigeru ONO
shig-ono.bsky.social
Shigeru ONO
@shig-ono.bsky.social
https://elsur.jpn.org/
twitter: @shig_ono
threads: @shig_ono_
いや、実際のところ私は設計目標と用途がずれているからだめなのかもしれない。だんだん暗い話になってきた、寝よう
February 10, 2026 at 3:11 PM
というか、私は本来寝たりぼんやりしたりするのが向いているのに、こうして無理して社会人のふりをしているわけで、設計目標と用途がずれているからお前はだめだ、という説明は受け入れがたい (なにをいっているのかわかんなくなってきた)
February 10, 2026 at 3:07 PM
どこかで読んだ説明で、transformerのような言語モデルの設計目標は文埋め込みの用途とずれているのだ、というのをみかけて、余計にわからなくなった。じゃあword2vecはどうなのか。ある語を周囲の語で予測するモデルだけど、得られたパラメータは語の意味の表現として用いられてますよね。設計目標と用途がずれているのではないか
February 10, 2026 at 3:02 PM