黒木玄 Gen Kuroki
- いいね数 389,756/311,170
- フォロー 995 フォロワー 14,556 ツイート 293,980
- 現在地 (^-^)/
- Web https://genkuroki.github.io/documents/
- 自己紹介 私については https://twilog.org/genkuroki と https://genkuroki.github.io と https://github.com/genkuroki と https://github.com/genkuroki/public を見て下さい。
2022年08月13日(土)
Mayo Tsukuda(附田磨世) @tsukudamayo
そんなことないですよ!
いつもjuliaの情報など参考にしてます!! twitter.com/MathSorcerer/s...
タグ:
posted at 00:29:59
数学Bの確率分布と統計的な推測
『nが大きいとき,二項分布B(n,p)は近似的に正規分布N(np,npq)に従う。』
と教科書にありますが,pが十分小さいときは,正規分布に従わない時があります。
そのときはポアソン分布を用いるようです。
(1/n)
タグ:
posted at 00:51:59
正規分布の近似基準は3つの条件のうち少なくとも1つを満たすことのようです。
① min(np,nq)>10
②0.1≦p≦0.9 かつ npq>5
③npq>25
atarimae.biz/archives/7922
(出典:統計分布ハンドブックと書いてありました。)
(2/n)
タグ:
posted at 00:52:24
ポアソン分布の一般的近似基準は次の条件を満たすことのようです。
n>50 かつ p<0.1
www.math.s.chiba-u.ac.jp/~yasuda/statEN...
(このサイトの一般的近似基準では『正規分布ではなくポアソン分布を利用するときの基準』
ではないかと推測します。『n>50 かつ np≦5』としていました。)
(3/n)
タグ:
posted at 00:52:44
二項分布B(n,p)でP(X≦k)の確率を近似的に求める。(その1)
n=720,p=1/6,k=100,np=120,npq=100
○ 二項分布
× ポアソン分布
#julia言語
(4/n) pic.twitter.com/oEjC4AanBV
タグ: julia言語
posted at 00:54:00
二項分布B(n,p)でP(X≦k)の確率を近似的に求める。(その2)
n=8,p=0.5,k=3,np=4,npq=2
× 二項分布
× ポアソン分布
#julia言語
(5/n) pic.twitter.com/CboJQUWtsK
タグ: julia言語
posted at 00:55:03
二項分布B(n,p)でP(X≦k)の確率を近似的に求める。(その3)
n=400,p=0.01,k=2,np=4,npq=3.96
× 二項分布
○ ポアソン分布
#julia言語
(6/n) pic.twitter.com/IYo7XhwzVM
タグ: julia言語
posted at 00:56:04
二項分布B(n,p)でP(X≦k)の確率を近似的に求める。(その4)
n=10000,p=0.01,k=80,np=100,npq=99
○ 二項分布
○ ポアソン分布
#julia言語
(7/n) pic.twitter.com/ctqyi6sVXq
タグ: julia言語
posted at 00:57:12
非公開
タグ:
posted at xx:xx:xx
#統計 有害な本を読んで「あんれまあ」と思わずに、受け入れて、しかもそれを勉強だと誤解するとおかしくなる。
この勉強法はまずい
↓
qiita.com/ueniki/items/d...
タグ: 統計
posted at 04:03:54
#統計 あと、文献を引用するときには、できるだけ著者名も書くようにして欲しい。
頑張っているのはわかるが、色々なことについて適切んし指導抜きになっているので、相当にまずいことになっている。これはつらい。
↓
speakerdeck.com/ueniki/beizuto...
タグ: 統計
posted at 04:14:37
#統計 ベイズではないらしい(そもそもベイズである証拠もない)肖像画を引用していたら、その解説がダメだとみなして大丈夫と言うのが私の経験則。
どうして無駄にこういう怪しげな肖像画を引用する?
speakerdeck.com/ueniki/beizuto... pic.twitter.com/aT7jrIZQzm
タグ: 統計
posted at 04:23:22
#統計
豊田本をあんまり参考にしない方がよいです。
部分的な引用によって、ASA声明をP値への批判文献のように見せるのは非常にまずい。こういう印象操作をしちゃダメ。
speakerdeck.com/ueniki/beizuto... pic.twitter.com/AtE2JTPG8c
タグ: 統計
posted at 04:31:08
#統計 あと、渡辺澄夫さんの
watanabe-www.math.dis.titech.ac.jp/users/swatanab...
を引用するなら、「好きな主義~を使う」のではなく、添付画像②の
【推測に 「主義」 は 不要です。
推測を当てるには 数理科学 が必要です。】
に従うべき。
「主義」による統計学の整理は有害です。
speakerdeck.com/ueniki/beizuto... pic.twitter.com/JNXzqfWYZV
タグ: 統計
posted at 04:31:16
#統計 怪しげなベイズでないらしい肖像画をベイズ本人であるかのように引用できてしまう時点で、ベイズ統計云々以前に非常識でダメな人だと判断されても仕方がない。
こういうことを一部の大学の先生達が率先してやっているせいで、大学卒業生も真似しているように見える。
高等教育の暗黒部分。 twitter.com/genkuroki/stat...
タグ: 統計
posted at 04:34:38
#統計 p.145には
【頻度主義の不偏推定のようなややこしい理論は必要ない】
と書いてあった。
「不偏推定のようなややこしい理論」!!!!!
さすがにこれはつらい。学部レベルの統計学を勉強し直すべき。
speakerdeck.com/ueniki/beizuto... pic.twitter.com/Q6kL617ixF
タグ: 統計
posted at 04:43:41
#統計 主観期待リスク最小化を基礎とする教科書的な主観ベイズでは、事前分布+パラメータ付き確率分布で記述されたモデルにおけるデータの生成のされ方__しか__考えず、そのモデル内部で(現実には通用する根拠が皆無に)期待リスク最小化を行います。
続く
speakerdeck.com/ueniki/beizuto... pic.twitter.com/GlXD7FwwsC
タグ: 統計
posted at 04:54:23
#統計 現実のリスクに立ち向かいたいなら、そういう代物じゃない数理科学的な基礎を持つベイズ統計を使うべきです。
サヴェジさんも、そういう代物のベイズ統計は「小さな世界」でしか通用しないと言っていたらしい。 twitter.com/genkuroki/stat...
タグ: 統計
posted at 04:54:24
#統計 日本では、このデタラメを心理統計の人達がこぞって広めたという印象がある。
頻度主義であろうがベイズ主義であろうが、S市の中3男子全員分の平均身長は定数だと思ってよい。
袋の中に赤い玉がm個と白い玉がn個入っているときm/(m+n)も確率的に揺らがない定数。続く
speakerdeck.com/ueniki/beizuto... pic.twitter.com/GxYC3ZTgpq
タグ: 統計
posted at 05:01:22
#統計 こういうことを言葉で説明するだけだとダメだと思うので、コンピュータで例を作ってみました。
二項分布モデルの場合の通常の検定と事後分布の比較
github.com/genkuroki/publ...
通常のP値として、対数尤度比のχ²検定とPearsonのχ²検定のP値函数を考え、それらを事後分布と比較できるように変換。
タグ: 統計
posted at 05:26:04
#統計 二項分布モデルでの平坦事前分布に関する「20回中6回あたりが出た」というデータの事後分布postとベイズ版の95%信用区間。 pic.twitter.com/W2OQMVJYuH
タグ: 統計
posted at 05:28:39
#統計 二項分布モデルでは、対数尤度比のχ²検定における事前分布の対応物は尤度函数です。それを正規化したものは、平坦事前分布の事後分布と同じものになる。
しかし、この場合の95%信頼区間は正規分布近似を使っているのでベイズ版95%信用区間と定義が異なり、この場合には微小に違うものになる。 pic.twitter.com/6IIli4ZTNX
タグ: 統計
posted at 05:32:47
#統計 二項分布モデルでのPearsonのχ²検定における事後分布の対応物も、対数尤度比とPearsonのχ²統計量が漸近的に同値であることに注意すれば自然に作れます。 pic.twitter.com/6mAxbWd8fW
タグ: 統計
posted at 05:35:11
#統計 以上の3つを重ねてプロットするとこうなる。
平坦事前分布の場合に3つは非常に近くなります。
この3つの函数達の値は「パラメータ値pとデータの数値(n回中k回)の整合性の指標」になっています。
P値を適切に変換すると事後分布とほとんど一致してしまう。 pic.twitter.com/1RgPxpFTUs
タグ: 統計
posted at 05:38:13
#統計 #Julia言語
上で使った github.com/genkuroki/publ... では、
* 単峰型連続分布のHDI (highest density interval)
* 単峰型連続分布の密度函数の左側と右側の逆函数
の実装例があります。
posted at 06:01:39
#統計 個人的な感覚では、通常のP値や信頼区間を使う統計学についてはP値函数 twilog.org/genkuroki/sear... の言葉でせいりしており、シンプルなモデルでのP値函数と事後分布の関係から、ベイズ統計は
❌別の統計学
ではなく、
⭕️上位互換な統計学
だと思う。事前分布という新しい道具が増えている。
タグ: 統計
posted at 06:05:54
Emi E. Nakayama MD, @EmiNakayama7
お子さんなどでオミクロンBA.1に感染してしまった方は、それで免疫がついたと思わずに、ワクチン接種をしてS抗体を高く保つようにしてください。
まだワクチン接種ができない乳幼児を守るために、ワクチン接種と「三密回避」で今の流行の早期収束にご協力をお願いします。(コクーン戦略)36/36
タグ:
posted at 12:40:40
#統計 二項分布モデルのようなシンプルなモデルでは。ベイズ因子に定数の閾値を設けることと、通常の検定でnと共に有意水準を単調減少させることは、近似的に同値であることも示せます。
このようにP値とベイズ因子のあいだも相互翻訳可能になっている。
github.com/genkuroki/publ... pic.twitter.com/SdCZfbNxv8
タグ: 統計
posted at 12:42:48
#超算数
学校図書の最新版見たけど、さらに劣化している。
このページだけで、ブロック操作や書き順などトンデモ算数が凝縮されている。 pic.twitter.com/uUGFJTkhiA
タグ: 超算数
posted at 12:58:58
#超算数
●●→ ←〇〇〇〇〇 などとノートに書かせる。
当然、合併と増加で書き分けるように、となるんでしょうね。最悪。 pic.twitter.com/y5XQ2iymK3
タグ: 超算数
posted at 13:03:14
こういうのがコスプレの醍醐味
#c100 #コミックマーケット100 pic.twitter.com/ejz7YeryHG
タグ: c100 コミックマーケット100
posted at 13:14:38
#超算数
「あわせていくつ ふえるといくつ 指導案」でググると、こういうくだらない授業案がすぐに見つかる。
「おかしな教員がおかしな授業をしている」のではない。こういう授業が望ましいとして、推奨されている。
教員はこんなのサボタージュすべき。
kyoiku.sho.jp/154066/
タグ: 超算数
posted at 13:17:57
OokuboTact 大久保中二病中年 @OokuboTact
トンデモ算数の背景には心理学の悪影響がある気がする。
心理学一般が悪いというわけではなく、エセ科学的な・・・ twitter.com/sekibunnteisuu...
タグ:
posted at 13:28:41
非公開
タグ:
posted at xx:xx:xx
#統計 ベイズ解説ワールドで最も滑稽な話の1つは、ベイズではないと言われている肖像画をベイズの定理の解説時に引用するおかしな人達が沢山いること。
添付画像は ja.wikipedia.org/wiki/%E3%83%88... より。【疑わしい】とはっきり書いてある。
詳しくは→ www.york.ac.uk/depts/maths/hi... twitter.com/genkuroki/stat... pic.twitter.com/7VsJ9zKxfk
タグ: 統計
posted at 14:05:48
#統計 ただし件のスライド自体も加害行為になっている。
【好きな主義と好きな方法を使うことができる】とリンク先PDF p.5の言葉を引用しているのですが、その次のページの
【推測に 「主義」 は 不要です。
推測を当てるには 数理科学 が必要です。】
も引用しないと意味が変わってしまいます! twitter.com/genkuroki/stat...
タグ: 統計
posted at 14:34:52
#統計
添付画像は watanabe-www.math.dis.titech.ac.jp/users/swatanab... より。
回答1の【好きな主義と 好きな方法を 使うことができます】は「主義に基く統計学を好きに使ってよい」という意味ではありません。
回答2、3で「主義」を赤字にして否定して【数理科学 が必要】【数理科学 へ進みましょう】と書いてあります! pic.twitter.com/d6rfHLLIqZ
タグ: 統計
posted at 14:39:36
#統計 件のスライド全体を見れば、もろに俗な「主義に基く統計学」の話をしていることは明らかで,スライドのこのページにおける渡辺さんの言葉の部分的な引用は読者に「主義」を積極的に使ってよいと渡辺澄夫さんが言っていたと誤解させる危険性があります。
speakerdeck.com/ueniki/beizuto...
タグ: 統計
posted at 14:43:50
#統計 再掲になりますが、添付画像①は件のスライド
speakerdeck.com/ueniki/beizuto...
より。②③は渡辺澄夫さんの
watanabe-www.math.dis.titech.ac.jp/users/swatanab...
watanabe-www.math.dis.titech.ac.jp/users/swatanab...
での説明。 pic.twitter.com/3UJuBXJhmk
タグ: 統計
posted at 14:58:55
#統計 添付画像は件のスライド
speakerdeck.com/ueniki/beizuto...
より。この引用の仕方だとP値に関するASA声明がまるでP値の使用を批判するために書かれた文献のように誤解させてしまいます。実際にはP値の誤用を批判し、P値を正しく使うために役に立つ内容になっています。
↓
www.biometrics.gr.jp/news/all/ASA.pdf pic.twitter.com/qC0NwTwaWm
タグ: 統計
posted at 15:13:11
#統計 P値の使い方に関する最前線の議論は最近の論文
journals.sagepub.com/doi/10.1177/02...
で読めます。これは短くて非常に分かり易いのでおすすめ。
「効果はない」という仮説のP値だけではなく、「効果は○○である」(○○は具体的な数値)のP値もオールオーバーで求めた方が良いと提案しています。 twitter.com/genkuroki/stat...
タグ: 統計
posted at 15:17:00
宮澤大輔氏/j_sato氏の反ワク誤解釈コンビの残る数少ないワクチン逆効果噂話の牙城「カタールで7-9カ月目位に発症予防有効性が一時的に-10%程,ADEだ」という話
検査をまあまあする国で既感染を除き十分な観察期間をとった7個の研究でいずれも負の効果は再現できず反ワクの願い通りにはいかないようです pic.twitter.com/z1Rl7FZStp
タグ:
posted at 15:27:33
#統計 P値に関するASA声明 www.biometrics.gr.jp/news/all/ASA.pdf の翻訳者の佐藤俊哉さんはP値と信頼区間の正しい使い方に関する講義 youtu.be/vz9cZnB1d1c でASA声明を利用しまくっています。
P値に関するASA声明をP値の使用を否定している文献であるかのように引用する行為は、統計学教育を邪魔しています。 twitter.com/genkuroki/stat...
タグ: 統計
posted at 15:38:27
#統計 細かい話
共役事前分布の例がおかしい。
正規分布の共役事前分布は正規逆ガンマ分布。
ポアソン分布の共役事前分布はガンマ分布。
speakerdeck.com/ueniki/beizuto... pic.twitter.com/9MphYbsE1I
タグ: 統計
posted at 15:59:54
新しい記事がZennにアップされました!#Julia言語 #Julia日本語記事
zenn.dev/dannchu/articl...👈
タグ: Julia日本語記事 Julia言語
posted at 16:00:09
#統計 細かい話2
事後ベータ分布の正しいパラメータ値は(x+a, n-x+b)です。
speakerdeck.com/ueniki/beizuto... pic.twitter.com/KIUAuSYSrm
タグ: 統計
posted at 16:01:51
#超算数 各学習指導要領における授業時数(正確には学校教育法施行規則の別表1が定めるが指導要領に対応して改訂される)の表があったので参考にリンクをつける。1947年と51年の授業時数は指導要領にパーセンテージで記述されているので、算出の根拠を知りたいところではあるteachforjapan.org/entry/column/2...。
タグ: 超算数
posted at 16:08:31
#統計 1標本のt検定と正規分布モデルでのベイズ法の比較。
t検定の側でも予測分布(予測区間に対応する分布、最尤推定値を正規分布のパラメータに代入したものとは違う(重要))を定義して、ベイズ法の予測分布(事後分布で正規分布の平均を取ったもの)を比較しています。2×2の右下。 twitter.com/genkuroki/stat...
タグ: 統計
posted at 16:09:20
#超算数 坂間利昭氏(1930-2008)の略歴 (78)
坂間利昭『無限を求めて』坂間賀世子・酒井義知編 東京、弘報印刷出版センター、2016年。
による。遺稿集を編集したのは坂間の子と孫。1951年指導要領執筆陣が1910年前後生まれ、1958年・1968年指導要領の中島健三が1921年生まれ。坂間は第3世代といえよう。 pic.twitter.com/8wumZWhM7e
タグ: 超算数
posted at 16:09:55
#統計 P値を使う統計学側での適切な予測分布の定義は非自明です。
以前の私は、最尤推定値をモデルの確率分布のパラメータ値に代入したものを予測分布の定義だとして良いと誤解していました。それだと、パラメータの点推定の確率的揺らぎが予測分布に全く反映されておらず、よろしくないです。 twitter.com/genkuroki/stat...
タグ: 統計
posted at 16:14:27
元ネタはこちら
じゃあ、カタールのこれなんだというと
カタールは色々な調査がありますが非常にワクチン前から抗体保持率が高く(図1)一方で多くの陽性を検出できてないという特殊な点があります
twitter.com/j_sato/status/... pic.twitter.com/UlGTU6kGDw
タグ:
posted at 16:26:17
#超算数 坂間氏本人の回顧による1977年指導要領
坂間利昭「学習指導要領作成の背景と課題: 昭和52年の改訂を例として」『無限を求めて』2016年 (原稿日付: 2005年2月1日)、35-48ページ。
40頁に教育課程審議会答申の前から指導要領作成がスタートすること、教科調査官の影響力が大きいことがある。。 pic.twitter.com/Q35qVza5IG
タグ: 超算数
posted at 16:50:18
#超算数 41ページには、前指導要領にあった集合の概念が徹底的に排除される様子が描かれる。集合という語さえ【使用してはならないとなった】ことの意味は、直上のツイの通り、教育課程審議会答申(中央省庁改組以降は中教審答申)と指導要領が並行して作成される事実に基づいて理解されるべきである。 pic.twitter.com/IrJCrnBI4s
タグ: 超算数
posted at 16:50:19
The Oware Society @Oware_Society
This clip features the final game of the grand finale match between Apkemon Souradjou and Orou Casimir of the Tournoi De L’Independence Du Jeu Awale Dans La Commune De Bassila, which took place on Monday 1st August 2022 pic.twitter.com/JteKSjre4x
タグ:
posted at 17:00:30
The Oware Society @Oware_Society
Ce clip présente le match final du match de grande finale entre Apkemon Souradjou et Orou Casimir du Tournoi De L'Independence Du Jeu Awale Dans La Commune De Bassila, qui a eu lieu le lundi 1er août 2022
タグ:
posted at 17:00:32
@temmusu_n この時の指導要領で現代化からゆとりへと変化しましたが、どちらも数学を生み出すとの中島氏のテーゼは変わってませんね。
www.jstage.jst.go.jp/article/jjsme/...
タグ:
posted at 17:20:47
@tsubu_02 #超算数 坂間の半公式解説本にも遺稿集にも、現代化自体は1977年指導要領でも維持されるべきと答申された胸記述が。だから数学を生み出す方針の存置は理解可能。ただし、「どう」生み出すのかが死活的に重要でしょう。増加と合併を区別してどんな【将来の方向】があるのかtwitter.com/temmusu_n/stat...?
タグ: 超算数
posted at 17:30:53
#超算数 つぶ二さんに教えてもらったがtwitter.com/tsubu_02/statu...、
坂間利昭「新しい教科書の誕生」『日本数学教育学会誌』第62巻 (1980年) 第4号、3-6ページ。doi.org/10.32296/jjsme...
によれば、このような提案は【改善調査委員会】から文部省になされたと思われる。当時の所属は初中局。
タグ: 超算数
posted at 17:48:24
#超算数 5ページの教科書工程表によれば、1980年4月に使用開始の教科書を規定する文部省の諸規則は1977年以前に成立していなければならないことになる。可能性としては正式に成立する以前に役人から出版社へのレクのようなものがあったとしたら、数ヶ月程度先行するか。関与は教科調査官時代だろう。 pic.twitter.com/JUVfOkE1SS
タグ: 超算数
posted at 17:58:50
新しい記事がQiitaにアップされました!#Julia言語 #Julia日本語記事
qiita.com/kimseok1973/it...👈
タグ: Julia日本語記事 Julia言語
posted at 19:10:23
#超算数 ちなみに坂間氏、中学校教員時代には【生徒の学習を能率化してやる】(69)ことを願っていた。
坂間利昭「個別指導をするにあたって」『算数と数学』復刊第9号 (1954年5月、原稿日付: 1953年10月10日)、65-9ページ。dl.ndl.go.jp/info:ndljp/pid...
タグ: 超算数
posted at 19:37:39
#統計 【データ数が5以下のセルが一つでもある分割表では、フィッシャーの直接確率検定を推奨】という説が証拠となる計算結果を示さずに、天下り的に主張されていることが多い。
こういう傾向は無くして行かないとまずいと思った。
なによりも証拠を示さない態度がまずい。
github.com/genkuroki/publ... twitter.com/bbiostatistics... pic.twitter.com/K3cTOdG5GX
タグ: 統計
posted at 19:40:20
#統計 お勧めの文献はこれ
www.jstage.jst.go.jp/article/dds/30...
連載 第3回
医学データの統計解析の基本 2つの割合の比較
朝倉こう子・濱﨑俊光
Cochran規準の俗説の権威に従わずにコンピュータで確認してから、どうするべきあるかを解説している。
科学的であるためにはこうでなければいけない。 pic.twitter.com/ZVfAbynq6u
タグ: 統計
posted at 19:40:23
#統計 Binomial(80, p=0.4)×Binomial(80, q=0.4)でデータを生成したときに、仮説p=qが名目有意水準αで棄却される確率のグラフ。
Fisher検定だと、有意水準5%なのに3%よりちょっと大きめの確率でしか棄却されない。
github.com/genkuroki/publ... pic.twitter.com/2z33PVH3Wq
タグ: 統計
posted at 19:59:50
#統計 検出力のプロット。対数スケールの横軸はパラメータとしてのオッズ比。
Fisher検定を使うと検出力は下がる。
github.com/genkuroki/publ... pic.twitter.com/RZyqrOkPJq
タグ: 統計
posted at 19:59:53
#統計 あと、分割表についてはχ²検定であってもFisher検定であっても、効果量の指標についての信頼区間を必ず計算するべきです。「効果なし」という仮説のP値だけに頼るのは非常にまずい。
↓
journals.sagepub.com/doi/10.1177/02...
タグ: 統計
posted at 20:03:36
#統計 私の経験では、権威的に昔から普及しているその手の基準は当てにならないことが多いように思えます。
自分でJuliaなどに計算させてチェックしないと信用できない。
ついさっき分割表に関するCochran規準は正しくない権威的な俗説であることの説明を書きました。 twitter.com/dannchu/status...
タグ: 統計
posted at 20:12:30
浅草や鎌倉、京都など全国的に展開しているお店「芋ぴっぴ」の、糖度50度以上の熟成焼き芋にカスタードをたっぷりのせて表面を炙った「焼き芋ブリュレ」✨ pic.twitter.com/EtXWXv0BdG
タグ:
posted at 21:29:31
実装できた!実験は白黒画像410枚をランク(4,6,100)で分解して再構成して,もとの画像と比較している様子.
丸一日かかってしまった...今はランクを決め打ちしているけど,明日はちゃんとtruncated-SVDになるように修正しよう.
arxiv.org/abs/1606.05535 pic.twitter.com/X7BuGctcw3
タグ:
posted at 21:29:47
浅草や鎌倉、京都など全国的に展開しているお店「芋ぴっぴ」の、糖度50度以上の熟成焼き芋にカスタードをたっぷりのせて表面を炙った「焼き芋ブリュレ」✨ pic.twitter.com/ggQC6Kosio
タグ:
posted at 22:04:13
2つめのnote記事です!!!
「プレイヤーAがプレイヤーBより強い確率」をベイズ推定で考える方法について書きました!
【麻雀】安定段位をベイズ推定する|一方通行 @ippou1000 #note note.com/ippou1000/n/nf...
タグ: note
posted at 22:52:55