黒木玄 Gen Kuroki
- いいね数 389,756/311,170
- フォロー 995 フォロワー 14,556 ツイート 293,980
- 現在地 (^-^)/
- Web https://genkuroki.github.io/documents/
- 自己紹介 私については https://twilog.org/genkuroki と https://genkuroki.github.io と https://github.com/genkuroki と https://github.com/genkuroki/public を見て下さい。
2022年10月21日(金)
Re: RTs #統計 我々の社会には、統計検定○級の受験のために
竹村彰通『現代数理統計学』
久保川達也『現代数理統計学の基礎』
のような教科書を読んで、検定と信頼区間の双対性を既習な人達がいる。そういう人達の存在が見えていない「識者」はこの手の教科書も読んでから発言した方が無難。 twitter.com/genkuroki/stat...
タグ: 統計
posted at 00:55:25
#統計 検定と信頼区間の双対性(表裏一体性)について知らなかった人はまずは教科書に目を通した方が良いです。
以下のリンク先で紹介した教科書はどれも有名です。
あと現代的なP値と信頼区間の解釈の仕方については論文 journals.sagepub.com/doi/10.1177/02... を見てください。続く twitter.com/genkuroki/stat...
タグ: 統計
posted at 01:25:32
#統計 その論文 journals.sagepub.com/doi/10.1177/02... の2人の共著者は、800人以上の科学者達が統計的有意性に反対したという記事 www.nature.com/articles/d4158... の3人の共著者の内の2人でもあります。3人目とGelmanさんの論文は以下のリンク先で紹介した。添付画像も参照。 twitter.com/genkuroki/stat... pic.twitter.com/cI3UycjXX0
タグ: 統計
posted at 01:25:36
#統計 関連
私は現在では、検定警察行為は改められるべき行為だと思っています。詳しくは以下のリンク先を参照。 twitter.com/genkuroki/stat...
タグ: 統計
posted at 01:34:57
#統計 多分、検定と信頼区間の関係に関する典型的な誤解は以下のようなものです。
検定と無関係に信頼区間の計算法を決めたとしても、竹村さんとか久保川さんの売れ線の有名な教科書には、信頼区間の計算法から検定法(棄却領域)が自動的に決まってしまうという話が書いてあります。標準メニュー。 twitter.com/lempiji/status... pic.twitter.com/3iMrH0gy3s
タグ: 統計
posted at 01:54:43
#統計 そういう標準メニューを既習の人達は、検定と無関係に信頼区間を使っている場合であっても、信頼区間を
その信頼区間の計算法に自然に対応する検定法によって棄却されないパラメータ値全体の集合
だと解釈できるわけです。この解釈は実際に役に立ちます。
journals.sagepub.com/doi/10.1177/02... pic.twitter.com/OszLQA9XQK
タグ: 統計
posted at 01:54:46
#統計 私が検定と信頼区間の関係について語っていることは、以下のリンク先で紹介した有名な教科書を読んだ人達にとっては常識に属することです。
たとえ検定と無関係に信頼区間の計算法を与えても、検定法を与える棄却領域が信頼区間の「和集合」の補集合として自動的に決まってしまいます。 twitter.com/genkuroki/stat...
タグ: 統計
posted at 02:13:01
#統計 そしてこの話題で「検定したい仮説を後出しジャンケンで決めてはいけない」という典型的な検定警察行為に走る人もダメな人達です。その理由については以下のリンク先に書いたつもりです。
自信過剰にならないP値と信頼区間の解釈 journals.sagepub.com/doi/10.1177/02... と以上の話はワンセットで使うべき。 twitter.com/genkuroki/stat... pic.twitter.com/ycqD1js8mW
タグ: 統計
posted at 02:18:05
#統計 ちなみに、Neyman-Pearsonの方のPearsonさんは2値的な意思決定を強いる響きのある "acceptance", "rejection" という用語選択は多分失敗だったと認めており、Fisher先生と「検定法は学習の手段である」という考え方を共有していると言っていました。
こういう歴史にも学ぶべきことがあります。 twitter.com/genkuroki/stat...
タグ: 統計
posted at 02:33:13
#統計 Fisherさんがlikelihoodを定義するまでの経緯は以下のリンク先からリンクをたどれば読めます。
最初は most probable と言っていて、それを most likely と言い変えて、そこから likelihood という用語を採用することになった。 twitter.com/genkuroki/stat...
タグ: 統計
posted at 02:54:27
#統計 このスレッドで紹介したような教科書でない入門書の解説しか読んでいないと、任意のパラメータ値aについて
仮説θ=aを棄却するデータの数値x全体の集合(棄却領域)
を与えることと、任意のデータの数値xについて
パラメータθの信頼区間
を与えることが、同じことだと知らずに終わってしまう。 pic.twitter.com/dG5wueiEvX
タグ: 統計
posted at 03:57:59
#統計 そういうことを知っていれば、以下のリンク先に引用したグラフのように、
* 効果無しという仮説の検定 p-value of HR=1
* 信頼区間 CI = confidence interval
* 点推定値 point estimate HR=1.61
を統一的に理解できるようになり、統計分析の結果を解釈するときに大いに役に立ちます。 twitter.com/genkuroki/stat...
タグ: 統計
posted at 04:05:22
#統計 文献を挙げて無かった。
両側検定や片側検定の対立仮説が、単独の仮説ではなく、パラメータの値に関する仮説の集合であることについては、Lehmannさん著のTesting Statistical Hypothesesを見て下さい(ロングセラーの定番の教科書)。
www.google.com/search?q=Lehma... twitter.com/genkuroki/stat...
タグ: 統計
posted at 04:25:36
先生から生徒へのハラスメントに気がついたのなら、次は小学校で起こってる謎の正誤ハラスメントにもなんとか言ってくれねぇかなぁー
「下」の三画目が縦棒と繋がったらバツとか、掛け算の前と後が逆だったらバツとか、クソみたいなルールで子供の答案バツにすんの小学校の先生しかやらねーんだわ twitter.com/TeacherChildis...
タグ:
posted at 06:44:07
昭和の終わりころ、車に酔いやすい人は「クルマニヨン人」と呼ばれていた。なぜか男だけがそう呼ばれていて、多少の侮蔑が込められていた記憶があるが、まだ「車は男が運転して当たり前」という風潮が強かったのだろうな。
タグ:
posted at 10:14:12
問題提起した人に、そうなっている理由の解明を要求するケースも有る。
長年、その問題に取り組んでいるから、詳しいだろうから質問するというのはありだけど、 twitter.com/kale_aojiru/st...
タグ:
posted at 12:15:38
理由を知らないなら問題提起するな、とアホなことを言う人がいる。
なぜ先生がバツにしたのか、かけ算順序指導の背景を知らないでどーたら、とか。
こっちは背景を知った上で批判しているが、背景を知らなくても批判していい。
タグ:
posted at 12:19:07
@minemurakenji @konamih blogs.yahoo.co.jp/judge_nori/636... が現在リンク切れで読めなくなっています。
どなたか、見せてくれるとうれしいです。 twitter.com/minemurakenji/...
タグ:
posted at 12:40:16
秋はかけ算の順序とハゼの季節。
ダボハゼさん、こうやって批判された人にすり寄って信者を増やすあたり、まさにカルト教団の手口だね twitter.com/w2Y3lkPhWhOwuq...
タグ:
posted at 13:14:38
#統計
stat.columbia.edu/~gelman/resear... の続きにあたる部分。
読むときのヒント
仮説「効果ゼロ」のP値が5%未満であることと95%信頼区間が0を含まないことは同値。
P値はcompatibilityと解釈されており、95%信頼区間はP値(=データの数値とのcompatibility)が5%以上になる効果値全体の集合になっている。 pic.twitter.com/JnhHzRKshd
タグ: 統計
posted at 14:28:33
#統計 P値や信頼区間のcompatibilityという解釈は上の論文の第一共著者が第三共著者になっているnatureの記事(有名)でも解説されている。
↓
www.nature.com/articles/d4158... (添付画像1,2)
compatibilityという解釈についてはさらに journals.sagepub.com/doi/10.1177/02... (添付画像3) も参照。 pic.twitter.com/T3aH04PoVH
タグ: 統計
posted at 14:28:36
#統計 #Julia言語 Fisher検定(より一般に離散分布モデルでの確率計算の実装)では <= ではなく、
x ⪅ y = x < y || x ≈ y
を使う必要があります。
添付画像1: <=を使った実装が不適切である証拠
fisher(11, 6, 1, 6)の結果が正しくない。
添付画像2: 正しい実装の例
github.com/genkuroki/publ... twitter.com/julia_kizi/sta... pic.twitter.com/wDKWkn56hc
posted at 17:18:34
【NZ固有種】カカポ、人気すぎて鳥のビューティーコンテストから外される
news.livedoor.com/article/detail...
過去2度優勝し、2021年は2位につけ、今年も優勝候補と目されていたが、主催者は人気が劣る鳥にもチャンスを与えたいとして、候補からカカポを外した。ファンからは不満の声が上がっている。 pic.twitter.com/dNkL1EK8FG
タグ:
posted at 17:35:48
#統計 そういうバグが生じる理由は添付画像の確率の表を見ればわかります。
例えば, pa = pdf(Hypergeometric(17, 7, 12), 6) のとき、≤ pa となる確率の和を取ると、paとほとんど等しい pdf(Hypergeometric(17, 7, 12), 11) を足さずに終わってしまいます。実際には足さないとまずいです。 pic.twitter.com/qI4e2j3EnR
タグ: 統計
posted at 17:39:39
恐れながら申し上げます
総供給を左シフトさせるコストプッシュ・インフレではなく、総需要を右シフトさせるディマンドプル・インフレで
→総需要増
→労働需要増
→賃金増
を目指しているのが、政府・日銀です。
日銀の独立性を脅かすご発言は残念
高橋洋一さん記事、ご参考
diamond.jp/articles/-/53750 twitter.com/shinatakeshi/s... pic.twitter.com/0NSgabHsJQ
タグ:
posted at 17:44:09
#統計 判断指標として別なのは当たり前。
「数学的な処理としては云々」と制限を付けた言い方から、私が紹介したP値や信頼区間の使い方に関する文献(以下のツイートで再度リンクをはる)を読んでいないのだと思う。
検定と信頼区間の関係は統計分析の結果を__実践的に__解釈するために役に立ちます。 twitter.com/kiyokuakaku/st...
タグ: 統計
posted at 18:03:45
#統計
繰り返し紹介している最近の論文のはこれ
↓
journals.sagepub.com/doi/10.1177/02...
非常に短くクリアに書かれているのですぐに読めると思います。
「信頼区間と仮説検定は無関係」というまずい説明の仕方の正当化にがんばるよりも、みんなでこういうのを勉強するようにして行った方が生産的だと思う。 pic.twitter.com/KQ9ViVZXm6
タグ: 統計
posted at 18:03:49
#統計 信頼区間だけを使う場合であっても、正しく解釈できないとまずい。
信頼区間の解釈には、信頼区間内及び信頼区間外のパラメータ値ごとに検定で使うP値(データの数値とモデル+パラメータ値のcompatibilityの指標)が対応していることが役に立ちます。
↓
journals.sagepub.com/doi/10.1177/02... pic.twitter.com/IN3Slm2e9G
タグ: 統計
posted at 18:03:52
#統計 最近 stat.columbia.edu/~gelman/resear... について紹介したが、この論文を読むためには検定(もしくはP値)と信頼区間の双対性(表裏一体性)を当たり前のこととして理解していないと苦しいだろう。
P値や信頼区間の使い方の理解のためには、それらが表裏一体であることを知っておく必要がある。 twitter.com/genkuroki/stat...
タグ: 統計
posted at 18:03:53
#統計 自信過剰にならずにすむ適切な解釈法を、検定(もしくはP値)と信頼区間について別々に考えるのは無駄に学習コストを増やす。
P値については自信過剰にならずに済む解釈の仕方の解説が沢山あり、検定と信頼区間の関係を使えば信頼区間の解釈をP値の解釈に帰着できます。
journals.sagepub.com/doi/10.1177/02... pic.twitter.com/iO5us3iPvz
タグ: 統計
posted at 18:04:03
#統計 余談
"acceptance" (受容)という用語は使い難いと思う人は多いと思います。しかし、竹村『現代数理統計学』では「受容域」という用語が使われています。
実際には "rejection" (棄却)も相当に危ない用語です。その理由を次のツイートで述べます。 twitter.com/genkuroki/stat...
タグ: 統計
posted at 18:22:48
#統計 なぜならば、P値が有意水準以下になっただけで帰無仮説を誤りだと判断することはP値の誤用になるからです。添付画像1の「これも誤解なんです」に注目!
知らなかった人は以下の講義動画を見て情報をアップデートした方がよいです。
ocwcentral.com/subjects/01GB4...
youtu.be/vz9cZnB1d1c pic.twitter.com/Phn7Ss2RPF
タグ: 統計
posted at 18:22:51
スキンケア&皮膚科Info by 皮膚科 @S96405539
世界中のアニサキス症のうち9割以上が日本で報告されています!欧州では「魚は冷凍してから食べるように」と義務付けられていますが、日本は魚の冷凍を嫌いますね。
ただ、過去の研究では「冷凍しても寿司の味は落ちない!」と報告されます。安全の為には日本でも魚の冷凍を検討すると良さそうです。 twitter.com/doughimself/st...
タグ:
posted at 18:26:34
スキンケア&皮膚科Info by 皮膚科 @S96405539
そのランダム化比較試験の詳細は、こちらのツイートツリー↓でご確認下さい。
冷凍寿司の方が美味しいと評価された割合⇒42.5%
非冷凍寿司の方が美味しいと評価された割合⇒49.2%
特に変わらないと評価された割合⇒8.3%
と、食べた人の評価は冷凍ネタでもほぼ同じでした。
mobile.twitter.com/S96405539/stat...
タグ:
posted at 18:28:33
スキンケア&皮膚科Info by 皮膚科 @S96405539
<参考文献>
www.ncbi.nlm.nih.gov/pmc/articles/P...
※COIはありません。
タグ:
posted at 18:29:18
消費者物価におけるサービス価格の動向
www5.cao.go.jp/keizai3/shihyo... pic.twitter.com/p7vte9r4dn
タグ:
posted at 19:03:33
#統計 以下のリンク先に続く自己返答の連鎖は誤爆。本当はこちらに繋げて書くべきことでした。 twitter.com/genkuroki/stat...
タグ: 統計
posted at 20:30:44
#統計
棄却は棄却ではない。P値がα未満のとき慣用的に「帰無仮説は棄却された」と言うが、実際には帰無仮説単体を否定はできない。
likelihoodはlikelihoodではない。統計学用語としてのlikelihood(尤度、ゆうど)はもっともらしさの指標ではない。
続く twitter.com/genkuroki/stat...
タグ: 統計
posted at 20:43:28
#統計 続き
統計的に有意はsignificantではない。統計的に有意であることは単にP値がα未満になることを意味するに過ぎず、それだけで重要な意思決定をすることは誤りである。
信頼区間は信頼できない。信頼区間は統計モデルにも依存するので、統計モデルが妥当である保証がなければ信頼できない。 twitter.com/genkuroki/stat...
タグ: 統計
posted at 20:43:29
どうか、幸せな猫生を
愛犬の散歩中に出会った痩せた子猫…… 懸命についてくる姿に保護を決意→里親募集で「幸せが続きますように」と応援の声
nlab.itmedia.co.jp/nl/articles/22... pic.twitter.com/QizkCvIu1W
タグ:
posted at 21:05:00
@gatinarios Olha o miauzinho na cabeça. Kkkkk Que belezuras! Tinha que ter som de miadinhos, aí ficaria mais perfeito ainda. 😻😹😼 pic.twitter.com/JqQ1nLEQMX
タグ:
posted at 21:59:46
What Makes Julia Unique? by Erik Engheim at #ITNEXT. #programming #programminglanguages #julialang itnext.io/what-makes-jul... (f)
タグ: ITNEXT julialang programming programminglanguages
posted at 22:00:21
Need to process tables of data and do plotting? Ditch Excel and use Julia instead 😉 Obviously they are not exactly the same kind of tool, but it is useful to know how many common Excel tasks can be done in a Julia.
#julialang #excel #datascience
erik-engheim.medium.com/working-with-t...
タグ: datascience excel julialang
posted at 22:12:32
Hippos can’t swim. So how do they move through water? They leverage their own buoyancy and bone density to charge through the water
[read more: theatln.tc/2qJpFn6]
[📹 realalishahraki: buff.ly/3O3lXL4]
pic.twitter.com/1epSz9BXNh
タグ:
posted at 22:16:36