Twitter APIの仕様変更のため、「いいね」の新規取得を終了いたしました

黒木玄 Gen Kuroki

@genkuroki

  • いいね数 389,756/311,170
  • フォロー 995 フォロワー 14,556 ツイート 293,980
  • 現在地 (^-^)/
  • Web https://genkuroki.github.io/documents/
  • 自己紹介 私については https://twilog.org/genkuroki と https://genkuroki.github.io と https://github.com/genkuroki と https://github.com/genkuroki/public を見て下さい。
並び順 : 新→古 | 古→新

2019年11月06日(水)

言迷水 @genmeisui

19年11月6日

@nhk_kurogen 「謎水問題」を検討していただきたいです

マンション大規模修繕に絡むニセ科学装置の問題です
装置を批判すると業者にスラップ訴訟を起こされると言った案件が進行中です
都営交通がニセ科学に利用されているという問題もあります
nmr.nazomizu.com

タグ:

posted at 00:05:14

大倉崇裕 @muho1

19年11月6日

文科相というこりないポンコツ達。

「柴山昌彦・前文科相、馳浩・元文科相らが5日、文科省を訪れ、萩生田氏に対し、「失望感を与えることになった」などとする自民党文科部会の決議文を手渡した」

元文科相ら「失望感与えた」 英語民間試験延期で決議文:朝日新聞デジタル www.asahi.com/articles/ASMC5...

タグ:

posted at 00:25:36

大倉崇裕 @muho1

19年11月6日

特に柴山昌彦氏は、プライドばかりが高く、非を認めず、引かず、謝らずと始末におえない。

「柴山氏は『予定通りのスケジュールで行うためにあと一押し、国が支援することは可能だったのではないか』」

タグ:

posted at 00:28:34

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#統計

nbviewer.jupyter.org/gist/genkuroki...
を更新。

添付画像1: まるでFisher検定が正確であり、χ²検定のP値でさえ小さ過ぎるかのような誤解を生むプロット。

添付画像2: 上の作り直し。これならばFisher検定のP値が無用に高くなることが一目瞭然。

どちらも計算の仕方は同じでプロットの仕方だけが違う。 pic.twitter.com/9DRSHchCro

タグ: 統計

posted at 00:36:18

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#統計

nbviewer.jupyter.org/gist/genkuroki...
も更新。

"n-1"版χ²検定のプロットを追加した。

nが小さい場合のプロットを見ると、4個のPoisson分布の直積でサンプルを生成した場合を見ると、通常のχ²検定が正確になる場面で"n-1"版χ²検定のP値が大き過ぎるままになる場合があることがわかった(例:添付画像4)。 pic.twitter.com/RnHXeOymRX

タグ: 統計

posted at 00:41:02

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#統計 非常に稀な症例で報告されているものをすべて集めてデータとする場合には、2つの二項分布モデルや多項分布モデルはふさわしくなく、Poisson分布の直積モデルが適切だと思う。

だから、サイズが非常に小さなサンプルについては、Poisoon分布の直積モデルを重視するべきだと個人的には思う。

タグ: 統計

posted at 00:42:53

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#統計 2×2の分割表の独立性検定について、あらゆる場合に不満のない検定法はないと思う。少なくとも現時点では知られていない。

すべてのセルの期待度数が1以上だと期待される場合には、不満がある場合もあるが、シンプルな補正無しのχ²検定でよいのではないか?

タグ: 統計

posted at 00:46:36

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#統計 仮に後で別の人が"n-1"版χ²検定でやり直したい場合が出て来ても、通常のχ²統計量の値がわかっているなら、(n-1)/nをかけて統計量を作り直すことによって"n-1"版χ²検定をやり直せる。

こういうこともあるので、普段使いする独立性検定はシンプルな補正無しのχ²検定でよいのではないか?

タグ: 統計

posted at 00:46:37

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#統計 さらに個人的な意見では、2×2の分割表におけるFisher検定は基本的に使ってはいけない独立性検定だと思います。P値の値が真の確率からほど遠く、誤差が大きい。誤差の大きな数値で意思決定するのはよくないです。

さらにG検定はFisher検定以上に使ってはいけない。有意差を不当に出し易くなる。

タグ: 統計

posted at 00:51:47

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#統計 現時点での個人的な意見の続き

そして、χ²検定のYates補正はなんというか、極めておかしなことをしていると思う。補正無しのχ²検定の方が誤差が小さいのに、誤差が大きなFisher検定をよく近似するようにχ²統計量を変更してしまうのはおかしい。

複雑なことをして苦労して結果的に害しかない。

タグ: 統計

posted at 00:53:44

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#統計 多くの教科書に根拠抜きに、χ²検定を使ってもよい条件として「すべてのセルの期待値が5以上ならば」のような条件が書いてあるのですが、これはまったくあてにならないルール。

少なくとも、根拠となる計算結果とソースコードを全公開してくれないと納得できない話。(私は常に全公開している)

タグ: 統計

posted at 00:55:54

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#統計 2×2の分割表の独立性検定は、医療関係者のあいだでよく教えられているようです。

基礎になる数学的にややこしい事柄まで理解してもらう必要はないと思いますが、根拠となる計算を示さず、根拠となる数学のキーワードも示さず、文献も示さないというような教え方は非常にまずいと思いました。

タグ: 統計

posted at 00:57:50

弓月 光 @h_yuzuki

19年11月6日

ワタシは週刊ジャンプで描いた事がありませんので明瞭な内実は存じませんが、アレは見せかけのコンセプトじゃ無いかと思ってます😅
特に初期なんて「なんでもあり」でしょう。 twitter.com/Scarface702152...

タグ:

posted at 00:59:01

ごまふあざらし(GomahuAzaras @MathSorcerer

19年11月6日

Juliaを勉強してわかったこと
PILのresize 相対的に速い。

タグ:

posted at 01:00:25

Massimo @Rainmaker1973

19年11月6日

The Ollie Chair is an ergonomically designed shape-shifting seat with lumbar support. The chair unfurls in a second and retracts with a simple pull of a string buff.ly/2s07s39 pic.twitter.com/qyjDqsixm2

タグ:

posted at 01:00:47

まゆりんtakada @lisamayu0317

19年11月6日

今回の「入試改革」では専門家の意見を悉く無視して座礁に乗り上げているが,ことに「採点の専門性を軽視している」点においてもそれが顕著に表れている。
と,本日のまとめをしたところで寝ます。

#記述式いらない

タグ: 記述式いらない

posted at 01:02:03

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#統計 ちなみに上で紹介した"n-1"版χ²検定に関するCampbellさんの論文はPubMedで見付かる論文です。

www.ncbi.nlm.nih.gov/pubmed/17315184

この論文では、補正無しχ²検定、Yates補正入りのχ²検定、"n-1"版χ²検定、4種のFisher検定を比較しています。その計算結果は私の計算と整合的。

タグ: 統計

posted at 01:02:33

吉田弘幸 @y__hiroyuki

19年11月6日

大学入試や教育を金儲けの道具としか見ていない人がいるのだろうね。

タグ:

posted at 01:03:18

ごまふあざらし(GomahuAzaras @MathSorcerer

19年11月6日

よくいうとJulia側の最適化の余地はあるということだけれど、まぁ画像系の方はまだまだがんばらなくてはー感あるね。

タグ:

posted at 01:18:27

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#統計

このケースで痛いのは、日本語に限らず、英語による解説でも、分割表の自由度に関する教科書における標準的な説明が間違っていることです。

Fisher vs. Pearson 論争での論文 Fisher 1922 での間違った議論がほぼ100年後の現在も流通しまくっている。

twitter.com/genkuroki/stat...

タグ: 統計

posted at 03:02:09

斉藤久典 @saitohisanori

19年11月6日

ご本人が、ここまで言うてはるんやから、真相究明という看板を掲げた議員は、国会に呼んであげたらどうやろ…と思う人は多いと思うけどな。 twitter.com/YOSHISHIGEKAGO...

タグ:

posted at 03:06:21

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#統計

分割表の自由度に関する誤解に限らず、統計学入門の教科書に書いてある標準的な説明の多くが科学的には相当にまずい誤りをおかしています。

どうしてこういうことになっているのやら。

どうしてみんな「これはひどい」と指摘しないのか?

twitter.com/genkuroki/stat...

タグ: 統計

posted at 03:08:00

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#統計 教科書的にはχ²検定の使用が不適切だとされているが(添付画像1のような見方をして誤解しているのだと思う)、Fisher検定より補正無しのシンプルなχ²検定の方が適切だと思われるケース。

#Julia言語 nbviewer.jupyter.org/gist/genkuroki... pic.twitter.com/5buiXASxUG

タグ: Julia言語 統計

posted at 03:22:54

Steven Strogatz @stevenstrogatz

19年11月6日

I was playing tennis with my friend Herbert Hui this morning, and he casually tells me he knows six ways to do this integral. I couldn’t stop thinking about it during the game…. How many ways can _you_ solve it? pic.twitter.com/6AMkTGyU8T

タグ:

posted at 03:49:07

非公開

タグ:

posted at xx:xx:xx

打越さく良 りっけん 立憲民主党 @sakurauchikoshi

19年11月6日

参議院議員としてスタートして驚いたことは、政治がエビデンスに根ざしていないこと。松岡亮二教授が「これまでの「教育改革」が、データの蓄積や分析なしに、「これからはグローバル時代だ」といった理念で進められてきたことです。」と指摘する状況がそこかしこに現れる。
www.asahi.com/articles/ASMC5...

タグ:

posted at 06:55:52

羽藤 由美 @KITspeakee

19年11月6日

【拡散希望】11/5の衆院文科委員会に参考人として出席した。同じく参考人の吉田晋氏は私立中高連会長ではなく,2013年の教育再生実行会議の第4次提言を受けて,4技能評価や民間試験利用を含む答申をした14年当時の中教審の委員として参加していると感じた。→
www.asahi.com/articles/ASMC5...

タグ:

posted at 06:56:55

羽藤 由美 @KITspeakee

19年11月6日

表向きは4技能入試の延期によって不利になる受験生の救済を訴えているが,その心は「教育再生実行会議→中教審(の安西委員長ら一部の委員)でつけた民間試験利用の道筋をまっすぐ進め!」 そして,その合意がすでに一部の自民党議員(馳氏,柴山氏らの元文科大臣を含む)とできていると感じた。→

タグ:

posted at 07:05:46

羽藤 由美 @KITspeakee

19年11月6日

言いかえれば「大学入試英語成績提供システムなどなくてよい。むしろその方がシンプルだ。全国の大学が英語民間試験の成績を共通テストあるいは個別試験の成績として使えばよいだけ。今度はこの線で行こう」という合意ができていると感じた。

タグ:

posted at 07:16:05

Cats Purrfect @catspurfect

19年11月6日

Trying to behave like it🤭

Awesome meow 🎥😼 youtu.be/c6_eWf89LCo pic.twitter.com/YUcmawmeCs

タグ:

posted at 07:16:21

羽藤 由美 @KITspeakee

19年11月6日

11/8は国立大学協会の総会。国大協は今回のことを反省するどころか,再度この流れに加担する判断をするのではないか? そうなれば「民間・2020ありき」が「民間・2024ありき」に変わるだけで,同じ失敗が繰り返される。→

タグ:

posted at 07:19:50

羽藤 由美 @KITspeakee

19年11月6日

各大学は2024年度以降に,受験生が受けた異なる民間試験の成績を入学者選抜に具体的にどう利用するのか? GTEC一本,TOEFL一本などに絞る覚悟があるのか? 国大協にとって,この問題は2017年6月の時点に戻った。→

タグ:

posted at 07:23:42

羽藤 由美 @KITspeakee

19年11月6日

今度こそ,関連分野の研究者の意見を聞いてほしい。大学の存在意義である専門知を活かしてほしい。Well-informed decisionをしてほしい。→

タグ:

posted at 07:26:10

羽藤 由美 @KITspeakee

19年11月6日

大学が再度,「4技能」の名を借りた入試(ひいては公教育)の市場化・利権化に無批判に加担するなら,この国の若者は大学に完全に失望する。せめて,制度の実現可能性を確認してほしい。11/8の国大協総会が鍵になる。

時間がないが,メディアや各国立大学の先生方に協力していただきたい。

タグ:

posted at 07:28:31

羽藤 由美 @KITspeakee

19年11月6日

11/8の国大協総会では「基本方針」の撤回を確認したうえで,今回のことを総括し,今後の入学者選抜のあり方について,主体的な(!)検討を始めていただきたい。

タグ:

posted at 07:45:51

言迷水 @genmeisui

19年11月6日

クロ現の取材条件は「急上昇」らしいから、RT伸びれば良いのか
皆様、NHK様のツイートをRT願います(^^) twitter.com/nhk_kurogen/st...

タグ:

posted at 08:37:47

言迷水 @genmeisui

19年11月6日

1000RTぐらい欲しいです
そこまで行けはNHKから取材されなくても「これだけRTされたのに!不作為だ」と言える(^^)

タグ:

posted at 08:39:56

これでも大学職員 @koredemo

19年11月6日

いや、時期的に無理。

“日本私立中学高等学校連合会の吉田晋会長(富士見丘学園理事長)は「採点は各大学がしたらどうか。完璧な解答があるということに疑問がある」と述べた。”
www.nikkei.com/article/DGXMZO...

タグ:

posted at 08:48:46

@kuri_kurita

19年11月6日

「HPVワクチン(子宮頚がんワクチン)に関しては、科学的根拠のない反ワクチン運動に屈している厚労省」

将来訴訟が起こされても仕方ないな。
かつて問題になったのが「薬害訴訟」なら、これは何と呼べばいいのか。

タグ:

posted at 09:47:40

言迷水 @genmeisui

19年11月6日

クロ現は以前、似たようなテーマを扱ってるから、詳しいスタッフがいるはず
第二弾をぜひ!

「追跡!マンション修繕工事の闇 狙われるあなたの積立金」
www.nhk.or.jp/gendai/article...

タグ:

posted at 10:35:56

黒木玄 Gen Kuroki @genkuroki

19年11月6日

@h_okumura #統計

oku.edu.mie-u.ac.jp/~okumura/stat/...

にあるグラフは原理的に不正確なFisher検定のP値を横軸に採用しているのでミスリーディングです(本質的に添付画像1)。教科書的にもχ²検定が適切な場合なのにそう見えない。

以下のリンク先のスレッドに代案を投稿(添付画像2)。

twitter.com/genkuroki/stat... pic.twitter.com/SvOF4HxuT8

タグ: 統計

posted at 10:57:43

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#統計 以上の件について、奥村さんに報告しておきました。

別件での以前の報告は無視されたので非常に残念でした。

統計学は広い分野で使われているので、統計学の教科書の記述については多くの人の目に触れるオープンな場所で議論した方がよいと思う。

twitter.com/genkuroki/stat...

タグ: 統計

posted at 11:06:35

吉田弘幸 @y__hiroyuki

19年11月6日

打ち合わせが終わりました。
abema.tv/channels/abema...

タグ:

posted at 11:16:06

KokyuHatuden @breathingpower

19年11月6日

@nazomizusouti NHK科学文化部には科学に詳しくて優秀で良心的なスタッフが大勢います。ただ2011年の福島第一原子力発電所事故以後、科学の地位低下に伴い科学文化部の発言力も低下してしまいました。NHK科学文化部を応援しましょう。

タグ:

posted at 11:19:06

黒木玄 Gen Kuroki @genkuroki

19年11月6日

@h_okumura #統計 奥村さん曰く【少なくともこの場合にはG検定のp値は小さすぎることがわかります。】

これはミスリーディングなグラフの印象を述べただけの発言だと思われます。

私の代案のグラフを見れば分かるように、この場合にはG検定のプロットは45度線に近く、結構正確です。(χ²検定の方がbetter) pic.twitter.com/cer0lUHFqC

タグ: 統計

posted at 11:56:16

horiem @yellowshippo

19年11月6日

コードの中に goma って見つけて「おっこいつもか」と思ったら gamma だった

タグ:

posted at 13:36:21

非公開

タグ:

posted at xx:xx:xx

watchmann @watchmannAF

19年11月6日

@TOTB1984 これを見ても、世界的にみた先進国であるはずの日本が異常だと思わないのか不思議です、、、🤔
将来的には非ワクチン群として、日本の疫学データが使われそうで怖い😣

タグ:

posted at 13:59:01

電子計算機の沼 @Hishinuma_t

19年11月6日

おれはgammaを見たらgomaに間違えて書き直したりしてる( ・ิω・ิ)キリッ

タグ:

posted at 14:06:44

塩川鉄也 @ShiokawaTetsuya

19年11月6日

今日の予算委員会集中審議で使ったパネルです。
パネル3枚目「ベネッセ(GTEC)関連法人の主な役員」
<スタッフ> pic.twitter.com/BQYN330Z43

タグ:

posted at 17:26:42

RED ETH @Red_Eth_Future

19年11月6日

妻「長男のプラレールが多くなってきて仕舞う場所が…片付けないし、踏むと痛いし…」
俺「コンテナボックスみたいなのを買うか。良いのがあったら…マジかあったわ。コンテナ」
妻「ホムセンとかで売ってるみたいなやつ?」
俺「いや、コンテナ」
妻「?」

今すごい勢いで長男が片付けに入りました。 pic.twitter.com/jtBxAh289M

タグ:

posted at 18:17:50

女流本因坊戦•KK共同通信 @KK_joryu

19年11月6日

上野女流棋聖は「右上のコウを解消して少しいいかと思ったけど、最後も全然計算ができなくて。本当に最後の方で形勢がいいとわかりました。第4局は序盤でつぶされないよう頑張ります」#女流本因坊戦 #JA共済 #共栄火災 #囲碁 #日本棋院 pic.twitter.com/ECnsPe1axy

タグ: JA共済 共栄火災 囲碁 日本棋院

posted at 19:15:34

Yuhichi (77.5kg) @dilettantestyle

19年11月6日

で、出〜!! 毎年この時期話題になるかけ算の乗数と被乗数の順番で×にされる小二奴〜!!! pic.twitter.com/L24ocz12Go

タグ:

posted at 20:29:00

akoustam @akoustam

19年11月6日

NHKよ、このバリバラのアーカイブはずっと公開を続けるべき、というかこの動画こそ薬物依存の怖さ(本人がやめたいと思っても、やめなくてはいけないとわかっていてもやめられない、それこそが依存症の本質)を伝える教材として活用するべきだ。 www.buzzfeed.com/jp/keiyoshikaw...

タグ:

posted at 20:56:03

松浦晋也 @ShinyaMatsuura

19年11月6日

つまりベネッセは天下りを受け入れていることを理由にして、入試制度改革を早期に行うように文科省に陰に陽に圧力をかけている可能性がある。取材中のメディア各員の奮闘を期待したいところだな。 twitter.com/ShinyaMatsuura...

タグ:

posted at 20:58:43

積分定数 @sekibunnteisuu

19年11月6日

@genkuroki @LimgTW @temmusu_n @sekibunnteisuu @katabiragawaA あなたのツイートをトゥギャりました。読んでいただけると幸いです。 togetter.com/li/1426968

タグ:

posted at 21:05:57

ごまふあざらし(GomahuAzaras @MathSorcerer

19年11月6日

自分のリポジトリ jlcross を Transferしまへんかのお誘いが来たのですが、こういうご経験の方でメリット•デメリットあったら教えていただきたいできゅ!

#Julia言語 twitter.com/mathsorcerer/s...

タグ: Julia言語

posted at 21:13:59

matheca @paulerdosh

19年11月6日

ちょっと縁あってあまり学校に行けていない女子中学生の数学をみた。二次方程式解けていたのに、そこのテストを白紙で出してきたと言うので、なぜ?と問うたら、何やってるのか全然わからず機械的に解いてるだけだから嫌だったと言う。それを自覚してるの偉いじゃん。

タグ:

posted at 21:22:07

ceptree @ceptree

19年11月6日

YouTubeとなかよしのやつがいてうける

タグ:

posted at 21:59:13

EARLの医学ツイート @EARL_med_tw

19年11月6日

田代まさし容疑者逮捕でNHK・Eテレ「教えて★マーシー先生」放送回を抹消 www.tokyo-sports.co.jp/entame/news/16...

消さない方がいいです。田代さん自身言ってたじゃないですか、やめるにやめれない、今でも覚醒剤やりたくなるという恐ろしさを。のこすべきですよこれ

タグ:

posted at 22:01:28

きむらえり @eri010k

19年11月6日

「著名人が捕まる報道でメディアが騒ぐ時に、私の外来の患者さんたち、ばたばたと再使用しちゃってるんですよ。もう本当に、やめてくれよってくらいに毎回、起きます」精神科医の松本俊彦氏の言葉、今日何よりも読まれるべき

なぜ薬物使用疑惑をスクープにしてはいけないのか natgeo.nikkeibp.co.jp/atcl/web/17/04...

タグ:

posted at 22:02:57

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#Julia言語

nbviewer.jupyter.org/gist/genkuroki...
Plots.jl pyplot()で dashdotdot などを使う方法

matplotlib.org/3.1.1/gallery/...
に書いてあるラインスタイルをJuliaのPlots.jlで利用する方法を書いておきました。

色なしでも判別がつくようにプロットしたいときには、線の種類を自由に増やせないと苦しい。 pic.twitter.com/dpUqzXb236

タグ: Julia言語

posted at 22:07:11

福島伊知郎 @iffififfi

19年11月6日

学部時代これでありがたく思って勉強してたんだった。残念なことだ。 twitter.com/genkuroki/stat...

タグ:

posted at 22:15:48

ǝunsʇo ıɯnɟɐsɐɯ / メタ @otsune

19年11月6日

京都アニメーションの事件の時に出ていた「サーバーを自社内に持たないでクラウドを使えばいいのに」という意見。
それが現時点では転送速度の面で非現実的な理由がわかるサムスンの記事広告だ。

akiba-pc.watch.impress.co.jp/docs/sp/121611...

タグ:

posted at 22:19:27

きむらえり @eri010k

19年11月6日

「依存症にかかっている人って、惨めさや情けなさ、恥ずかしさや自己嫌悪を自覚した瞬間に、『シラフではいられない』渇望のスイッチが入ってしまいます。『こんなやつは消えてしまった方がいい』と思って、これまでの何倍もの覚せい剤を使ってしまったりすることもあります」
natgeo.nikkeibp.co.jp/atcl/web/17/04...

タグ:

posted at 22:23:33

(「・ω・)「ガオー @bicycle1885

19年11月6日

cep木と俺がなかよし…?🤔

タグ:

posted at 22:25:35

ceptree @ceptree

19年11月6日

@bicycle1885 YouTubeとなかよしさんだ

タグ:

posted at 22:31:44

l_ppp @ppp3141592ppp

19年11月6日

統計じっくり再勉強中「カノニカル分布」

サイコロn(→∞)回振ったとき、各期待値で(拘束した時)のそれぞれの分布の収束 pic.twitter.com/Q2L6HT7XBN

タグ:

posted at 22:41:26

l_ppp @ppp3141592ppp

19年11月6日

#Julia言語 で動画化(β指定→Eだけど) pic.twitter.com/3fzKEFB1MH

タグ: Julia言語

posted at 22:42:52

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#統計 英語で contingency table degree of freedom margins fixed などを検索してみたのですが、r×cの分割表の独立性検定で使うχ²分布の自由度の決め方についてクリアな説明を見つけるのが難しい状態。

世界的に嘆かわしいことになっている。

タグ: 統計

posted at 22:48:49

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#統計 一般にWilksの定理から

モデル全体のパラメーター空間の次元が帰無仮説によって下がった幅

がχ²検定で使うχ²分布の自由度になります。

タグ: 統計

posted at 22:48:57

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#統計 r×cの分割表がrc個のポアソン分布に従う乱数で生成されるというモデル全体のパラメーター空間の次元はrcでなり、独立性の帰無仮説によってパラメーター空間の次元は1+(r-1)+(c-1)まで下がります。独立性検定で使うχ²分布の自由度は次元が下がった幅のrc-(1+(r-1)+(c-1))=(r-1)(c-1)になる。

タグ: 統計

posted at 22:48:59

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#統計 r×cの分割表が多項分布に従う乱数で生成されるというモデルのパラメーター空間の次元はrc-1であり、独立性の帰無仮説によってパラメーター空間の次元は(r-1)+(c-1)まで下がります。独立性検定で使うχ²分布の自由度は次元が下がった幅のrc-1-((r-1)+(c-1))=(r-1)(c-1)になる。上と同じ。

タグ: 統計

posted at 22:50:45

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#統計 r×cの分割表がr個のc項分布に従う乱数で生成されるというモデルのパラメーター空間の次元はr(c-1)であり、独立性の帰無仮説によってパラメーター空間の次元はc-1)」まで下がります。独立性検定で使うχ²分布の自由度は次元が下がった幅のr(c-1)-(c-1)=(r-1)(c-1)になる。上と同じ。

タグ: 統計

posted at 22:53:02

べにばな™@ミリオンAct2名古屋両日 @b__legacy765

19年11月6日

@taka_nashi 横から失礼します これめちゃくちゃ便利ですよ!鉄道模型しまうのにかなり相性ピッタリです pic.twitter.com/SNCEUgW9ah

タグ:

posted at 22:54:20

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#統計 r×cの分割表における独立性の帰無仮説の条件は(r-1)(c-1)個の2×2の行列式が0になるという条件で書けるので、独立性の帰無仮説は(ちょっと荒い議論ですが)常にパラメーター空間の次元を(r-1)(c-1)下げます。

だから、モデルに寄らずに独立性検定で使うχ²分布の自由度は(r-1)(c-1)になります。

タグ: 統計

posted at 22:57:30

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#統計 2×2の分割表で各セルの期待値λ_{ij}をパラメーターに選ぶと、独立性の帰無仮説は

λ₁₁λ₂₂ - λ₁₂λ₂₁ = 0

という条件で書けます。この1つの等式で書ける条件の分だけパラメーター空間の次元が1下がる。

だから、2×2の分割表の独立性検定で使うχ²分布の自由度は常に1になる。

タグ: 統計

posted at 23:02:35

@heart8255

19年11月6日

この方たちが、何故被害が少なく済んで良かったと言えないのか不思議で仕方がなかったけれど。

こんな風に思って予想を立てていたのね。

自分たちが思っていた通りにならなかったから、それを否定されたようで悔しかったのね。

被災地の人々の事より自分のためなのね。 twitter.com/naoshim/status...

タグ:

posted at 23:04:01

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#統計 「帰無仮説によってパラメーター空間の次元がいくつ下がるかがχ²検定で使うχ²分布の自由度になる」というシンプルな説明をせずに、分割表の縦横の合計を固定するというFisherさん(すでに紹介済みの1922年の論文)由来の間違った説明がすでに100年近く経った現代でも横行している。

タグ: 統計

posted at 23:05:17

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#統計 分割表の縦横の合計を固定して残った自由度が、χ²検定で使うχ²分布の自由度だと説明されてしまうと(実は答えだけはそれで正しい)、分割表では縦横の合計をすべて固定しないとχ²検定できなくなるかのような誤解をしてしまう。

上ではYatesさんがそのように誤解していることを紹介した。

タグ: 統計

posted at 23:07:19

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#統計 R言語を使うと分割表のχ²検定では自動的にYates補正というのを行ってしまいます。

しかし、そのYates補正は、Yatesさんの誤解(縦横を固定しないとχ²検定は使えない)がもとになっているので、補正を行なうとP値の誤差がひどく大きくなります。Fisher検定のようなひどく不正確な検定に近づく。

タグ: 統計

posted at 23:09:56

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#統計 Fisher検定も縦横の合計をすべて固定するというおかしなことをやっているので、P値の誤差は非常に大きくなります。

特にFisher検定の使用が推奨されている小サンプルでの誤差が非常に大きい。

どうしてこんなものが教科書で勧められているのか非常に不思議です。

タグ: 統計

posted at 23:11:44

ryozo18 諸悪莫作 @ryozo18

19年11月6日

んー、マジっすか?!
ちょっと自分でも調べてみます。情報ありがとうございます twitter.com/genkuroki/stat...

タグ:

posted at 23:15:14

非公開

タグ:

posted at xx:xx:xx

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#統計 二項分布モデルにおいて二項分布を使って確率を正確に計算する正確な二項検定と分割表におけるFisher検定は本質的に異なることをやっています。

タグ: 統計

posted at 23:16:37

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#統計 Poisson分布の直積モデル、多項分布モデル、多項分布の直積モデルにおいて、勝手に縦横の合計が固定された条件付き確率分布に引っ越して確率を正確に計算するのがFisher検定です。

確率分布Aでの確率を知りたいのに別の確率分布Bでの確率を計算するのがFisher検定なのですwww

タグ: 統計

posted at 23:16:38

非公開

タグ:

posted at xx:xx:xx

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#統計 ググればFisherさんの時代から「自分勝手に確率分布を変えるのはやめろ」という批判があるのですが、Fisherさんは曖昧または非倫理的な言説を駆使し、Fisherさんの追随者達はそれの解釈論と擁護を展開するという黒歴史ができた。

現代にもFisherさんの追随者達がいてひどいことになっている。

タグ: 統計

posted at 23:19:45

簡易包装 @kisan_kono

19年11月6日

@taka_nashi 家はこーゆーのしか持ってません。 pic.twitter.com/U2JYPSNYCX

タグ:

posted at 23:20:54

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#統計 統計学のユーザーはその手の黒歴史を完全否定して、偉い人の言説に頼らない科学的に健全な考え方をして欲しいと思います。

タグ: 統計

posted at 23:21:17

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#統計 R言語では分割表のχ²検定で勝手にYates補正をオンにされてしまうので、ユーザーは以下のリンク先の前後を確認して、Yatesさんが分割表のχ²検定のイロハ(自由度が1になる理由)を全然理解してなさそうなことを確認したい方がよいと思います。

twitter.com/genkuroki/stat...

タグ: 統計

posted at 23:28:28

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#統計 2×2の分割表におけるχ²検定のYates補正は、χ²検定をFisher検定に近付ける補正としては非常によく出来ています。

しかし、Fisher検定では、χ²検定では無用な縦横の合計をすべて固定することをしています。確認分布Aでの確率を計算したいはずなのに、別の確率分布Bでの確率を計算しているwww

タグ: 統計

posted at 23:33:40

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#統計 Poisson分布の4個の直積モデルでは可能な状態の個数が無限個、4項分布モデルと2つの二項分布の直積モデルでは有限個だが可能な状態の個数はそれなりに大きい。しかし、縦横の合計を固定すると可能な状態の数は相当に小さくなる。Fisher検定の使用は無用な強い離散性を呼び込むことになります。

タグ: 統計

posted at 23:37:16

黒木玄 Gen Kuroki @genkuroki

19年11月6日

#統計 縦横の合計をすべて固定することによって別の確率分布に移っているだけですでに正確さは失われているのに、それによって無用なほどの強い離散性(有限性)を呼び込み、P値の誤差は小サンプルでは非常に大きくなる。

これがFisher検定の実態です。

タグ: 統計

posted at 23:40:24

langstat @langstat

19年11月6日

文科相、大学入試の記述式は予定通り実施 衆院予算委 - 毎日新聞 mainichi.jp/articles/20191... ああ、教員が監督業務して、大学生が採点業務するやつね(言い方w

タグ:

posted at 23:42:12

栗原裕一郎 @y_kurihara

19年11月6日

先月の終わりに二人目の子供が生まれました。女の子です。母子ともに健康です。今後とも親子ともどもよろしくお願いいたします。 pic.twitter.com/dg8FtCbRms

タグ:

posted at 23:54:48

@genkurokiホーム
スポンサーリンク
▲ページの先頭に戻る
ツイート  タグ  ユーザー

User

» More...

Tag

» More...

Recent

Archive

» More...

タグの編集

掛算 統計 超算数 Julia言語 数楽 JuliaLang 十分 と教 モルグリコ 掛け算

※タグはスペースで区切ってください

送信中

送信に失敗しました

タグを編集しました