黒木玄 Gen Kuroki(@genkuroki)/2019年09月18日

長らく疑問だったけど、久保先生の統計モデリング入門読んでようやく腑に落ちたやつだ twitter.com/genkuroki/stat...

タグ：

posted at 23:46:00

trackiss @twi_trackiss

ミルク飲むの相変わらず下手 pic.twitter.com/5bIPurYNNB

タグ：

posted at 23:44:19

#統計モデルの確率分布のサンプルへの適合度はモデルの確率分布の(未知の)母集団分布への適合度とは異なる。

モデルの確率分布のサンプルへの適合度が高くても、モデルの(未知の)確率分布の母集団分布への適合度が低い例は簡単に作れる。

タグ：統計

posted at 23:41:12

#統計難しく考える必要はない。定義に忠実に解釈して余計なことを考えない**だけ**でよい。

歴史的に「尤度」と呼ばれているものの定義は「モデルの確率分布が得られたサンプルと同じサンプルを生成する確率密度」でしかない。一言で言えば「モデルの分布のサンプルへの適合度」。

タグ：統計

posted at 23:35:52

天むす名古屋 Temmus @temmusu_n

#統計【モデルを１つ固定した上で「このモデルを選ぶ限りこのパラメータが最も尤もらしい」と言うのは、どんなに過学習が起きていても正しい】

正しいわけがない。過学習が起こっている疑いがあるケースで尤度を「もっともらしさ」の指標に使うのは自明に誤り。

twitter.com/osamu_takeuchi...

タグ：統計

posted at 23:31:45

Tomoei Takahashi 高橋智 @tomoeit0524

#超算数長崎栄三(1997)の241,2は「戦後の小学校算数科の検定教科書の主な著作者」。これによると石田貞一は二葉と日本書籍の算数教科書に関係したらしい。教科書データベースによれば日本書籍最古の算数教科書は固有記号小算|309と小算|310の3年生上下で1949年出版。 twitter.com/temmusu_n/stat...

タグ：超算数

posted at 23:17:16

Julia言語布教活動をしていきたい。

タグ：

posted at 22:40:17

mtmt @mtmtlife

百折不撓 pic.twitter.com/59lgjDIHdK

タグ：

posted at 21:58:39

☕ @EADGCGDA

拡散律速凝集

計算：Fortran (gcc version 8.1.0)
描写：gnuplot (Version 5.2.6) pic.twitter.com/Xj2nPabsLU

タグ：

posted at 21:53:05

l_ppp @ppp3141592ppp

仔猫を拾ったので @konekowohirotta

人のコードで気づいたけど、#julia言語で

f(x,y,z)=x+3y-z みたいな複数の引数の関数に

a=[3,4,10]
f(a...)

って配列とかにまとめて、「...」で渡せるのか

関数の拡張とか無駄に頑張ってた

この方法何か名前あるのかな？

タグ： julia言語

posted at 21:01:09

518日目。
乳児を寝かしつけて離れたところ、黒猫がやってきて乳児の体を肉球でそっとツンツン。動かないことを確認(？)すると、のっそり寝そべった。
ただ、あまりに距離が近くて寝返りの際「掴むかも」「驚いて引っ掻くかも」と思いハラハラ見守っていたが黒猫は動じなかった。
兄弟のよう。 pic.twitter.com/CdP1xZTwf8

タグ：

posted at 20:18:04

岸田奈美｜Nami Kishida @namikishida

もちろんすべての成果を否定するわけではないが、応用技術に従事する人間としては本当にいい加減にしていただきたいと思う。
深層学習を使ったサービス開発につまづいている方、決してあなたのせいでは無い。

タグ：

posted at 20:16:34

流行に疎い母なので、インフルエンサーを間違えて覚えてることに衝撃を受けましたが、マジでゴキゲンな人なので良かったらフォローしてあげてください。母・岸田ひろ実のツイッター🐥
↓
twitter.com/HiromiKishida pic.twitter.com/3xxFHlDnXD

タグ：

posted at 20:10:29

ʇɥƃıluooɯ ǝıʇɐs @tsatie

肖像画が特にオモロイ♬ twitter.com/genkuroki/stat...

タグ：

posted at 20:07:59

①大量データに主戦場を移し、既存モデルがそのままの実装ではワークしない状況になったこと、
②大量パラメータを導入し、多数の実験を繰り返してチャンピオンデータを出しやすくするようにしたこと、
この2つが「驚異的なスピードで進化を続ける深層学習」なるものの不都合な真実と言って良いです。

タグ：

posted at 20:01:28

深層学習x推薦システムもたいがいですが、同じかそれ以上に深層強化学習の再現性も酷い。
www.wired.com/story/artifici...

タグ：

posted at 19:53:55

Y Tambe @y_tambe

ベイズ玄師

タグ：

posted at 19:40:02

Y Tambe @y_tambe

ﾆｬｰｶﾞ@ﾒｲﾄﾞｲﾝｶﾂｼｶ @siroyagi

ベイズ（推定） twitter.com/genkuroki/stat...

タグ：

posted at 19:39:05

1年くらい前、小泉進次郎はとしまえんのコスイベのとき駅前で「今日はこちらでコスプレのイベントがあるらしいんですよ。みなさん、民主党というのはコスプレのようなものなんですよ!!」と、意味不明なdisをかまされたときから頭の働きに疑問を持ち続けてきた。間違ってなかった

タグ：

posted at 19:36:42

18世紀に生きたベイズさんは300年後の21世紀にこんな言われようをしているとは全く想像できていなかったに違いない(笑)。

タグ：

posted at 19:29:23

Re: RT 私はよくこう言っている。

* ベイズの定理はベイズ統計ではない。

ついでにこうも述べておきたい。

* 主観確率によるベイズ的意思決定論はベイズ統計ではない。

ベイズの肖像画が実際にベイズかどうかは疑わしい。

* ベイズの肖像画はベイズではない。

www

ja.wikipedia.org/wiki/%E3%83%88... pic.twitter.com/PppczoHeAC

タグ：

posted at 19:27:41

ナイーブベイズはベイズ統計じゃねぇ(1年ぶり10回目)

タグ：

posted at 18:52:29

sekkai @sekkai

科学的エビデンスに基づいて粛々と政策を進めてくれる国会議員が欲しいだけなのに、どうして与党も野党もこんな頭の中スピリチュアルお花畑老若男女に溢れてるの🥺 twitter.com/ichiroaisawa/s...

タグ：

posted at 18:27:34

Shuhei Kadowaki @kdwkshh

JuliaのIDEの開発に参加しているのだが、開発が進めば進むほど自分の開発効率が上がるのが楽しくなってしまい、なんだかんだと次々に新しい開発に手を出してしまうので、結局開発が終わらないという事態になってしまっている。というか開発ってなんだ。

タグ：

posted at 17:38:51

江添亮@足首靭帯の手術から14週間 @EzoeRyou

#統計統計学が過学習にも配慮した真の「もっともらしさ」=情報量規準の概念を明確にするには、赤池弘次さんの登場を待つ必要があった。赤池さんの1980年の論説は非常におすすめ！

相対エントロピー、KL情報量、大偏差原理などの概念が統計学に持ち込まれた。

twitter.com/genkuroki/stat...

タグ：統計

posted at 17:21:57

非公開

タグ：

posted at xx:xx:xx

お、とうとう店頭に並び始めたのか。
twitter.com/shosen_bt_pc/s...

タグ：

posted at 17:18:55

#統計最尤法の開発者はフィッシャーさんです。フィッシャーさんが最尤法を考えたときには、過学習の問題にも配慮している情報量規準が存在しなかったので、「もっともらしさ」を「サンプルへのフィットの度合い」として定義してしまったのは仕方がなかったかもしれません。

タグ：統計

posted at 17:16:19

#統計我々が真に欲しいモデルの分布は未知の母集団分布に近い分布なので、(3)の「モデルの分布p(x)の未知の母集団分布への適合度の推定量」(情報量規準の-1倍)を「p(x)の真のもっともらしさ」だと思った方が「もっともらしさ」という用語の統計学的な使い方として正しいように思われる。

タグ：統計

posted at 17:11:31

#統計

(1) モデルの分布p(x)のサンプルX₁,…,X_nへの適合度

(2) モデルの分布p(x)の未知の母集団分布への適合度 (現実の統計分析では計算不可能)

(3) モデルの分布p(x)の未知の母集団分布への適合度の推定量

の3つを区別したい。尤度と呼ばれる量は(1)である。

タグ：統計

posted at 17:11:30

#統計ただし、汎化誤差の計算には、未知の母集団分布が使われるので、現実の統計分析では計算できない。

そこで代わりに使われるのが、汎化誤差の推定量。汎化誤差の推定量は統計学において情報量規準と呼ばれている。

タグ：統計

posted at 17:11:30

#統計統計学における尤度の対数の-1/n倍は、機械学習の用語では「学習誤差」=「訓練誤差」=「training error」と呼ばれることがあります。学習誤差はモデルの分布によるサンプルの予測の誤差の指標になる。

モデルの分布による未知の母集団分布の予測の誤差の指標は汎化誤差と呼ばれる。

タグ：統計

posted at 17:11:26

#統計まとめ：確率分布p(x)のサンプルX₁,…,X_nに関する尤度の定義は、確率分布p(x)がX₁,…,X_nを生成する確率密度p(X₁)…p(X_n)である。尤度はサンプルへの適合度を表している。サンプルへの適合度が大きくなっても、サンプルを生成した未知の分布への適合度が小さくなることがある(過学習)。

タグ：統計

posted at 16:55:48

#統計複数のモデルの情報量規準を計算して「この中ではこのモデルがもっともらしい」と言うのであれば、「もっともらしい」という言葉を普通の意味で正しく使っていることになると思う。

尤度と情報量規準は違う。

尤度は決してもっともらしさではない。サンプル=データへの適合度に過ぎない。

タグ：統計

posted at 16:49:58

#統計サンプル=データに最も良くフィットするパラメーターを探しただけなのに、「このパラメーターがもっともらしい」などと言ってしまうと誤解の原因になると思う。

どんなに過学習を起こしていても「このパラメーターがもっともらしい」と言えてしまうのは良くない。

タグ：統計

posted at 16:49:58

#統計「モデルのもっともらしさ」を最尤法の「モデルのパラメーターのもっともらしさ」と言い換えても大して変わらない。

理解するべき最重要ポイントは、尤度は、我々が真に知りたいサンプルを生成した未知の分布ではなく、サンプルへの適合度に過ぎないことである。続く

twitter.com/osamu_takeuchi...

タグ：統計

posted at 16:49:55

ぬん。 @amasawa_seiji

@notactor これを思い出した。。
⇒ twitter.com/amasawa_seiji/...

タグ：

posted at 15:51:51

石松拓人 @notactor

この４つのデータセット、それぞれ線形回帰すると全部Y=3+0.5X+εになって、しかも決定係数や二乗平均平方根誤差も全部一致する。

統計にはウソが入る余地がありすぎる。これは数学じゃない。数学の中のひとつの単元として教えちゃいけない。統計学という独立したリテラシーとして教えなきゃいけない。 pic.twitter.com/2IiwOSnfgI

タグ：

posted at 15:48:42

雪下岳彦 @Yukitake99

これが、車椅子を使っている人の車の横側にスペースが必要な理由です。そのため、障害者用パーキングスペースの斜線部分に車を置かれてしまうと、車に乗ることができなくなってしまうのです。もちろん車の移動もできないので、斜線部に置いた車の持ち主が戻ってくるまで、身動きが取れなくなります。 twitter.com/nami_mirairo/s...

タグ：

posted at 15:26:36

Dr. KID @Dr_KID_

生後３ヶ月未満で発熱したら必ず大きな病院へ受診しましょう

小児科では３ヶ月未満のお子さんの発熱はかなり慎重に様子をみています。
もし、３ヶ月未満のお子さんが発熱した場合は、お早めに入院できるくらいの大きな病院へ受診しましょう。

www.dr-kid.net/fever-less-tha...

タグ：

posted at 14:20:01

桑満おさむ @kuwamitsuosamu

わあーい、医系からNATROMさんが参戦！！ twitter.com/NATROM/status/...

タグ：

posted at 13:11:26

#統計数学的に定義された概念を理解するときには、歴史的な経路によって固定された「尤度」=「もっともらしさ」=「likelihood」のような呼び名に惑わされることなく、定義に戻ってすなおに解釈する方が無駄に混乱せずに納得できる場合が多いと思います。

呼び名は多くの場合にミスリーディグ。

タグ：統計

posted at 12:27:39

@kuri_kurita

この問題は、なぜ“リベラル”が福島県での甲状腺検査に関わる問題を黙殺しているのかとも深い関連があると思います。

タグ：

posted at 12:13:43

名取宏（なとろむ） @NATROM

[「謎水装置」から学ぶニセ医学の手口 natrom.hatenablog.com/entry/2019/09/... ]。ちょっと古いし、人を殺すようなニセ医学ではなさそうなので、まあいいかと思っていたけど、そういうことなんで医療面で突っ込んでみました。

タグ：

posted at 12:10:26

この画像の方は、ここまでの一連のツイートで批判した人とは違う方だが、

私は、画像にあるようなツイートが、学生たちの不安を過度に煽らず、実践家としてのあるべき発言である、とは全く思わない。 pic.twitter.com/1DTnSm7EMh

タグ：

posted at 11:41:52

あ〜る菊池誠(反緊縮)公式 @kikumaco

私個人は予備校教員ではないので、ここまでの一連のツイートで批判している人が批判したいと思っている人には含まれていないのだろうと推測して実名での批判は避けた。

タグ：

posted at 11:39:54

今日もこれを。マスメディアもジャーナリストも全く注目してくれませんが、重大な問題です。ぜひ関心を持って、そして広めてください。子どもたちが「検査の害」を受けています/

福島の甲状腺検査は即刻中止すべきだ（上） - 菊池誠｜論座 - 朝日新聞社の言論サイト webronza.asahi.com/national/artic...

タグ：

posted at 11:37:06

#統計そして、過学習については「サンプルへの適合度は上昇したが、サンプルを生成した未知の分布への適合度が下がること」と説明できる。

パラメーターを増やしたり、ハイパーパラメーターを調節して、サンプル(学習データ)へのフィッティングを強化すると、過学習が比較的容易に発生する。

タグ：統計

posted at 11:29:51

#統計続き。最尤法については「有限個のパラメーターを持つ確率モデルのサンプルへの適合度を最大にするパラメーターを求める推定法」と説明することができる。

このように言い直すと、「尤度」=「もっともらしさ」という用語を使った説明の分かりにくさが明らかになると思う。

タグ：統計

posted at 11:29:51

#統計続き。我々が欲しいのは、サンプルに適合するモデルではなく、サンプルを生成した未知の分布(未知の法則)に適合するモデルです。

その区別を明瞭にするためには、「モデルの尤度」と呼ばずに「モデルのサンプルへの適合度」と呼ぶ方が分かりやすいし、無用な誤解も防げると思う。続く

タグ：統計

posted at 11:29:50

#統計続き～、まるで「モデルの正しさの度合い」のように聞こえてしまうのですが、実際には、モデルが現実世界から得られたサンプルと同じサンプルを生成する確率密度が尤度の定義なので、「モデルのサンプルへの確率的な適合度」に過ぎません。続く

タグ：統計

posted at 11:29:49

(｢・ω・)｢ｶﾞｵｰ @bicycle1885

#統計「尤度」=「尤もらしさ」=「likelihood」という用語も相当にミスリーディングでかつ正常な理解を阻害していると思う。

尤度の定義は、モデルの確率分布p(x)がサンプルX₁,…,X_nを生成する確率密度p(X₁)…p(X_n)です。

これを「モデルのもっともらしさ」と呼んでしまうと～続く

タグ：統計

posted at 11:29:46

晴耕雨Julia

タグ：

posted at 11:10:51

闇のapj @apj

「謎水装置」から学ぶニセ医学の手口 - NATROMのブログ natrom.hatenablog.com/entry/2019/09/...

タグ：

posted at 11:05:31

今回の大学入試改革に反対している人たちの中にも、各論では様々な意見の違いがあるのは当然。そうであっても、この入試改革の方向性はまずいという意見の一致はあるし、具体的な行動へ移す段階になって一本化とまではいかなくてもまとまりはできているように思う。

タグ：

posted at 10:56:59

私個人はカジュアルにツイートしているつもりはないし、できるだけ問題点を明確化することに寄与したいと思っているが、ある程度賛同できる意見をRTしているだけで具体的な行動を起こしていないと言われればその通り。だからこそ様々な場面で具体的な行動に移している方々に敬意を表したい。

タグ：

posted at 10:50:53

学生の見ているとわかる場とかツイッター上で発言するなというのならそれでもよいが、少なくとも、こんな分析はまともじゃないとお互いに意見し合ってほしいと思ったりする。

タグ：

posted at 10:30:35

予備校教員の方たちの中にも様々な問題意識があるのだと思うし、それはそれで全く問題ないことだと思うが、私個人は、例えば第2回試行調査数学記述式問題に関する駿台の小林隆章氏のコメントのようなにわかには信じがたいおかしな議論が出てきたりすることに困惑している。
twitter.com/RochejacMonmo/...

タグ：

posted at 10:29:03

非公開

タグ：

posted at xx:xx:xx

英語民間試験も共通テスト記述式問題も、このまま実施すると、受験生が試験を受けられないとか、採点者が確保できずに採点が終えられないとか、採点ミス発覚で合否判定を複数大学でやり直すとか、そういうクラッシュが起きる可能性があるレベル。そういうことを理解した上での話なのかがわからない。

タグ：

posted at 10:16:56

「どういうものになっても最高の対策を必ず考えます！」は結構だけど、そもそも公平に採点される見込みすら危うい（同一内容の答案に同一の評価が付かない懸念がある）代物に、どういう最高の対策があるというのだろうか。よくわからない。

タグ：

posted at 10:11:34

実際にアピール目的で発言している予備校講師の人が誰なのかもよくわからないけれど、形式も内容もダメな問題だと指摘することと「この問題はできなくてもよい」と言うこととは全然違うわけで。「できなくてもよい」なんて言ってる人いるの？よくわからない。

タグ：

posted at 10:08:45

共通テストに反対する運動が予備校講師のアピール道具になっているとか、カジュアルなツイートを量産していたら、勝てるものも勝てなくなるとか、完成度の高い代替モデルを示せとかいうツイートを見かけたが、正直どうしてほしいのかよくわからなかった。

タグ：

posted at 09:59:56

ʇɥƃıluooɯ ǝıʇɐs @tsatie

@genkuroki 個人ということであればrubyのコミッター？なんかで日本にもそういう人はいる。当たり前だけど数えられるほどだとは思うのだ。其処がもったいないとは思うがおそらく数えられないほどになったらまた別のフェイズになるので...

タグ：

posted at 09:48:09

化け物揃いのJulia言語開発者の中での「化け物の中の化け物」として有名な Keno Fischer さんは高校生時代からJulia言語の開発に本質的な貢献をし続けている。

こういう派手な貢献でなくても個性を出せることはたくさんあると思う。

タグ：

posted at 09:14:47

他人が出した解けるに決まっている問題を解くことに若い人たちがみんなで精を出していることには「もったいないな」と思ってしまう。

そんだけ頭がいいなら、自分自身の創造性をはっきできることに**も**リソースを割いた方が楽しいんじゃないかなと私は思うのだが。

タグ：

posted at 09:14:45

みょうが @mrkn

岸田奈美｜Nami Kishida @namikishida

東大教養で教えるプログラミング言語は Julia にすればいいのに。

タグ：

posted at 09:14:17

大橋穣二／『英文構造マンダラ』完成間近 @George_Ohashi

母上はゴリラなので自分で車いす持ち上げた方が楽だそうですが、こういう車いすを自動で収納する装置とかもありますよ〜。母の車いすは「オーエックスエンジニアリング」さんのRXという種類です。あと母は５１歳です。 pic.twitter.com/ykL3zQpuGj

タグ：

posted at 09:08:38

@RochejacMonmo 誰かフォロー頼みます！（出先でスマホなのです。）

タグ：

posted at 08:52:20

#統計関連

twitter.com/genkuroki/stat...

タグ：統計

posted at 08:50:46

むいみ @muimi

中身なんもなくて笑ってしまった。こんな進次郎でも母はこれから下積みしていくんじゃないのとかなり寛容。ぼくらの親世代が、七光りの無能に向ける寛容さの一ミリだけでも若い世代に向けてくれるならぼくも無能に寛容になれるのに。

タグ：

posted at 08:46:49

@George_Ohashi むむ？混乱してきました。今年の高3生がもし今年大学に受からなかった場合はどうなるんでしたっけ？

タグ：

posted at 08:42:30

大橋穣二／『英文構造マンダラ』完成間近 @George_Ohashi

@George_Ohashi ということは高3になって民間試験不要な大学に志望校を変更した場合、英検は受けずに済むから予約金を返して、ということはできないわけですね。

タグ：

posted at 08:39:43

@RochejacMonmo 対象は高２（基本的に今年は受けない）で、彼らが来年確実に受けるためのものですね。

タグ：

posted at 08:37:36

大橋穣二／『英文構造マンダラ』完成間近 @George_Ohashi

@George_Ohashi 予約金の話って、今年合格するかしないかに関わらず来年度の分の席を予約金を払って確保しなければならなくなっている、という話ではなかったんでしたっけ？私の理解が間違っているのでしょうか。

タグ：

posted at 08:34:35

@RochejacMonmo 当人たちは必死なんでしょうけど、これほど「岡目八目」な話もなかなかありませんよね。

タグ：

posted at 08:32:18

ちゃんとフォローできていないのだけれど、英検の予約金の問題で、1週間の返金期間を設けることで解決するような話だったんだっけ？自分の理解と全然違うのでよくわからない。

タグ：

posted at 08:24:46

非公開

タグ：

posted at xx:xx:xx

想像以上にたくさんご連絡いただきました。今から返信します。
まだまだ募集中です。（改めて、直接リプには対応できません。） twitter.com/sammy_suyama/s...

タグ：

posted at 08:19:33

Sparrow @Sparrow243

@nazomizusouti 文春砲はこの人の風俗通いは叩いたけど、もっと政治家としての問題もさぐってほしいですね。

タグ：

posted at 08:10:57

Yukihiro Matz @yukihiro_matz

昔はGitHubもRailsバージョンあげるのに何年もかかってたのに、進歩したものだ
#ITnews
itnews.org/news_resources...

タグ： ITnews

posted at 08:03:22

数学女子 @phasetrbot

「ガウス過程と機械学習」によらず、ベイズの本でよく「求めたいのは事後確率」も書かれているが、本当に欲しいのは予測分布であって、事後確率はあくまでそのための中間生成物ではないの？その辺がいつも全くわからないし、本当に苛々する。

タグ：

posted at 07:47:24

Arturo Erdély @ArturoErdely

Bayesian Inference for AR(p) Models #JuliaLang
towardsdatascience.com/bayesian-infer...

タグ： JuliaLang

posted at 07:32:46

ジュンイチ @junichi001ooo

そりゃそうだ twitter.com/genkuroki/stat...

タグ：

posted at 07:26:24

JuliaCon 2023 @JuliaConOrg

"Computational topology and Boolean operations with Juliasparse arrays"
Presented by Alberto Paoluzzi @ JuliaCon 2019
Livestream: www.youtube.com/watch?v=N7YHAc...
Abstract: pretalx.com/juliacon2019/t...
#JuliaLang #JuliaCon

タグ： JuliaCon JuliaLang

posted at 07:26:00

なないお @Nanaio627

想像以上に酷かった。こんなので算数習ったら思考力などつかないわ。 / 1件のコメント b.hatena.ne.jp/entry/s/togett... “陰山英男「陰山メソッド　徹底反復　算数プリント」（小学館）は駄目な問題集 - Togetter” htn.to/4mG2cPCruL

タグ：

posted at 07:08:16

山口智美 @yamtom