黒木玄 Gen Kuroki
- いいね数 389,756/311,170
- フォロー 995 フォロワー 14,556 ツイート 293,980
- 現在地 (^-^)/
- Web https://genkuroki.github.io/documents/
- 自己紹介 私については https://twilog.org/genkuroki と https://genkuroki.github.io と https://github.com/genkuroki と https://github.com/genkuroki/public を見て下さい。
2020年02月16日(日)
#統計
scholar.google.com/scholar?cluste...
Andrew Gelman and Cosma Rohilla Shalizi
Philosophy and the practice of Bayesian statistics
2010
あちこちからダウンロードできますね。 twitter.com/genkuroki/stat...
タグ: 統計
posted at 00:22:36
まあこないだの進次郎セクシー問題の時に「政治家は公の場でwannaとかgonnaとかgottaとか使わない」という人が大量に沸きましたが、根本は同じことなんである。ネットにいくらでも転がってるアメリカ大統領演説のトランスクリプトを検索してみることすらしない。
タグ:
posted at 00:38:55
たぶんですけど、言語について「こういうのは使わない!」という規範で他人を殴るのはすごい気持ちがいいことなんですよ。しかし実際の言語使用における幅っていうのは、特に第二言語学習者中岡
個人が経験から帰納できる範囲を遥かに超えてるんですよね
タグ:
posted at 00:42:01
なので、他人にマウンティングできる誘惑に流される前に、自分の「常識」を一度くらいは客観的に検証できるようになりたいよね。現代はネットでいくらでもそれができるんだから、活かさないでどうする。
タグ:
posted at 00:46:00
生物と一言で言ってもそこで想像されるよりはるかに多様で驚きに溢れたデザインが眠っていると信じているので自分の知っているつもりの生物の知識だけで一般化して語ることをせず固有のあり方を探求しなさい、アリストテレスの時からそうだと教育されました。
タグ:
posted at 01:48:39
@nhayashi1994 #統計 事前分布を含むモデル内でのリスク最小化によるベイズ統計の「正当化」は、統計学入門の分野では標準的です。そういうのを知らないのは、我々(という言い方をお許し下さい)だけです。
我々が少数派であることの証拠物件を引用します。続く
タグ: 統計
posted at 01:53:55
@nhayashi1994 #統計 添付画像1は
www.kyoritsu-pub.co.jp/bookdetail/978...
久保川 達也著、現代数理統計学の基礎
の目次
より
添付画像2,3は
sites.google.com/site/ktatsuya7...
MathStat_hosoku.pdf
v. 6 2019/08/17 17:41久保川達也
より
こういう時代遅れな解説の方が標準的。 pic.twitter.com/vBk9ebUTil
タグ: 統計
posted at 01:59:04
@nhayashi1994 #統計 久保川達也著『現代数理統計学の基礎』は統計検定1級に適したテキストとして有名です。
事前分布を含むモデル内部でリスク最小化によってEAP推定やら予測分布を特徴付けても、数学的にはほぼつまらないトートロジーに近いtrivialな議論に過ぎず、現実世界におけるリスクとは何の関係もない。
タグ: 統計
posted at 02:03:03
#統計 資料
ベイズ統計に関しては半世紀程度時代遅れっぽい解説の方がスタンダード。
赤池弘次さんや渡辺澄夫さん的な考え方は無視されているように見える。
「主観的事前分布」「無情報事前分布」というような説明をしているだけで私はアウトだと感じる。
twitter.com/genkuroki/stat...
タグ: 統計
posted at 02:08:32
@genkuroki かなり保守的な意味でベイズ法がある種の最適性を持つ場合があることが古くから知られていて,それが世間標準である.
☝と同値な事実そのものは聞いたことがありましたが,それがベイズ推定量で,久保川本の説明がその例というのは知らなかったです.
タグ:
posted at 02:11:57
香川県の大山議員、まじで「子どもの自由を制限したい」という一新で動いているので、子どもに選挙権ないからってこいつに好き放題させたらダメです。香川県の子どもは絶対にこいつのやり口を見逃してはならない。
ides.hatenablog.com/entry/2020/02/... pic.twitter.com/iAef27W5Se
タグ:
posted at 02:27:41
#統計 Gelman-Shalizi (2010)は当時のウィキペディアにおける時代遅れのベイズ統計観をボコボコにしています。
ベイズ更新後に事後分布で仮説が正しい確率を計算して終わりにするには科学的に非常識で、普通は事後分布を求めた後にモデルのチェックを慎重に行う。
twitter.com/genkuroki/stat... pic.twitter.com/pWosTOVQ8u
タグ: 統計
posted at 02:29:33
#統計 おそらく、以下のリンク先の1,2,3の考え方を「時代遅れ」と批判しても、ベイズ統計について教科書で勉強した人達の大部分は「普通の標準的な考え方なのにどうして批判されなければいけないのだろうか?」と感じると思う。
下手をすれば「専門家」の間でもそうかもしれない。 twitter.com/genkuroki/stat...
タグ: 統計
posted at 02:36:09
#統計 Z(x_1,…,x_n)はベイズ統計で使うモデル内部における標本分布。モデル内部でサンプル(データ)X_1,…,X_nが生成されたとき、そのデータに応じて〇〇することのリスクの期待値を最小にするというようなことを考える。
現実世界とは縁が切れた純粋にモデル内部における議論でしかない。 twitter.com/genkuroki/stat...
タグ: 統計
posted at 02:59:38
@takusansu @genkuroki www.freedu.jp/work/teaching/...
>仮に「数学では2πrなのだから、小学校もこの順番で計算すべきだ」という論になったら、今までの指導の系統から外れてしまうので、子どもは混乱してしまうでしょう。
中学になったときに混乱するのは構わないのかな?
自分の担当領域さえよければいいと思っているのかな?
タグ:
posted at 07:13:44
陰山英男や杉山奈津子は、基本問題はまず暗記、そのことで応用力がつく、とか言っているが
嘘出鱈目にも程がある。
「はじき」を教え込むことで、応用力がつくようになるはずがない twitter.com/matho2019/stat...
タグ:
posted at 07:20:35
稲川右樹先生に書いていただきました。「チンチャそれな」など、日本語と韓国語を混ぜた「日韓ピジン」とでも呼ぶべき表現が若者の間でブーム。そうした言語表現を通して日韓関係史を、日韓関係を通して言語表現を考える記事なんですが、面白く奥深く、本当に感動します。
gendai.ismedia.jp/articles/-/70450
タグ:
posted at 07:33:19
韓国でも日韓のミックス言語「韓本語(ハンボノ)」が古くから使われているが、そこにも新しい表現が生まれてるらしい。記事中にも出てくる「チョメンナサイ」という表現は、融合の洗練されっぷりにおそれをなしました…。若い人の自由な表現ってスゴい、と思わされる。
gendai.ismedia.jp/articles/-/70450
タグ:
posted at 07:41:32
原稿の導入はあくまでポップ、でも気づいたら奥深い専門の世界の門前まで誘い込まれ、もっと勉強したり本読んだりしたくなるタイプの記事が大好きなんだけど、稲川先生のこの記事は、僕にとってまさにそれだった。
gendai.ismedia.jp/articles/-/70450
タグ:
posted at 07:52:18
人種融合型の学校は基本的には低学力層への恩恵+高学力層はノー被害&非認知に好影響なのでガンガン進めたいけど、白人も黒人も親の希望は人種分離型の学校なので、米国で一般的に嫌われるパターナリスティックな介入が必要で本当にメチャクチャ難しい…。qz.com/1795993/do-us-...
タグ:
posted at 08:34:37
#統計 訂正
❌無条件事前分布
⭕️無情報事前分布
ベイズ統計のユーザーは自分が採用した事前分布を「主観的事前分布」「無情報事前分布」に主観的に分類して満足せずに、採用した事前分布を使った推定・推測・推論の性質を確認した方が無難かも。
twitter.com/genkuroki/stat...
タグ: 統計
posted at 09:10:35
> 新型コロナウイルス対策はものすごく重要。同時に、経済をできるだけ冷え込ませないようにすることも、ものすごく重要。前者も後者も共に人命にかかわる問題。
これを口実に増税しようとするようなのが出てきたら瞬殺しような。
タグ:
posted at 10:13:35
あまりにもブッ飛んでいるので、既にそういうのが居たのを忘れていた。😆(もちろん日本の財務省の差し金だ)
www.jiji.com/sp/article?k=2...
タグ:
posted at 10:16:37
Masa Yamamoto予測誤差が大き @mshero_y
統計という言葉と検定という言葉の魔力?なのか… twitter.com/genkuroki/stat...
タグ:
posted at 10:42:05
非公開
タグ:
posted at xx:xx:xx
非公開
タグ:
posted at xx:xx:xx
非公開
タグ:
posted at xx:xx:xx
非公開
タグ:
posted at xx:xx:xx
%の計算もままならない文系の学生達に必修でビッグデータの分析させろ、と言われびっくりしたが、相手が1000程度のデータをエクセルで整理しグラフにして解釈することをビッグデータ分析と呼んでるらしいと分かりさらにのけぞった。しかもそれがAI教育だと。
タグ:
posted at 12:27:07
非公開
タグ:
posted at xx:xx:xx
岩田健太郎 K Iwata, MD, M @georgebest1969
@skoba @Preprints_org 死亡は今回のモデルには組み込んでいません。シミュレーションそのものには影響はないと考えました、が、もちろんそうでないシナリオもありだと思います。
タグ:
posted at 12:52:08
非公開
タグ:
posted at xx:xx:xx
Juliaで図中に数式を使う話。LaTeXStringsを使えばできるが、テキストと数式が混在するとき、バックエンドがgrだとうまくいかない模様。たしかにうまくいかない(数式だけはできる)
#julialang
discourse.julialang.org/t/how-can-i-us... pic.twitter.com/SLt2tc4dSM
タグ: julialang
posted at 14:09:29
#統計 はなだてさん、どうもありがとうございます。
実際の「米国統計学会の統計的有意性とP値に関する声明」の実質的内容は「P値入門」になっていて、それを読めばP値の概念をより正確につかめ、誤用する心配もなくなる類のものですよね。
ベイズ云々と無関係にこういうことは大事だと思う。続く twitter.com/87rhander/stat...
タグ: 統計
posted at 15:03:15
#統計 「米国統計学会の統計的有意性とP値に関する声明」の日本語訳が
www.biometrics.gr.jp/news/all/ASA.pdf
にあります。
検定について教えなければならなくなった人にとってこれは非常にありがたい翻訳だと思いました。 twitter.com/genkuroki/stat...
タグ: 統計
posted at 15:03:18
#統計 階層モデル(表に出て来ない変数で内部で積分されるものを含む確率モデル)は、確率モデルp(x|w)のベイズ統計においては、パラメータwの事前分布にさらにパラメータzが入っていて、事前分布がφ(w|z)の形のときに、パラメータzについても事前分布ψ(z)を設定するモデルを考えれば自然に出て来ます。 twitter.com/genkuroki/stat...
タグ: 統計
posted at 15:16:51
iJohannes5430☢️ @iJohannes5430
一つ有益なことをつぶやいておくと、日本のツイッタラー感染症医として多数のフォロワー数を誇る岩田先生とEARL先生は、一時TLで深刻なレベルで争っていたくらいマジで仲が悪い
だから、この二人が新型コロナウイルスについて同じことを言っていたら、それは感染症学的に正しいと考えてまず間違いない
タグ:
posted at 15:20:57
#統計 そうするのではなく、以下のリンク先の形式(階層モデルのスタイル)でモデル内でのサンプル生成法を記述して、そのスタイルを用いてコンピューターで事後分布のサンプルを作ることであれば、実用的な時間内で比較的容易に実行できる場合が多数あるのです。 twitter.com/genkuroki/stat...
タグ: 統計
posted at 15:52:04
#統計 (A)の場合にモデル内でサンプルX_kは以下のように生成されていると考える。
(1) Wが分布φ(w)に従ってランダムに生成される。
(2) k=1,…,nについて、X_kが分布p(x_k|W)に従ってランダムに生成される。
これと以下のリンク先の(B)の場合の注目するべき違いはWとW_kの違いです。続く twitter.com/genkuroki/stat...
タグ: 統計
posted at 16:10:04
Richard Dawkins @RichardDawkins
It’s one thing to deplore eugenics on ideological, political, moral grounds. It’s quite another to conclude that it wouldn’t work in practice. Of course it would. It works for cows, horses, pigs, dogs & roses. Why on earth wouldn’t it work for humans? Facts ignore ideology.
タグ:
posted at 16:26:22
#統計 #Julia言語 補足: 私が
nbviewer.jupyter.org/github/genkuro...
で解説し、数値例を作ったStein推定では、n個の別々の期待値を持つ分散1の正規分布でX_1,…,X_nが生成されると想定しているので、「個性」を考える(B)の話に関係しており、この場合も渡辺澄夫さんのベイズ本の範囲内の話題になります。
posted at 16:32:54
うつ病九段、ついに最終回です。
【最終回】将棋の力で、僕は人生を切り拓いてきた――マンガ「うつ病九段」第25話 #うつ病九段 #shogi bunshun.jp/articles/comic...
posted at 17:04:18
Test1,Test2ってモジュールがあって、mainからTest2を直接インポートしたときの値とTest1を経由してTest2に入れた値は違うんだな…
例えばTest2にparamって変数があるとそれのpathを明示的に書くなら前者はMain.Test2.paramなんだけど、後者はMain.Test1.Test2.paramになるわけだ
タグ:
posted at 17:09:11
#統計 #Julia言語
nbviewer.jupyter.org/gist/genkuroki...
測定スキルの異なる7人の科学者たち
このノートではまさに以下のリンク先の問題の練習問題を扱っています。(B)でr(x|w)の積分後の結果が分かっている場合なので、ベイズ法ではなく、最尤法を使いました(へそ曲がり(笑))。AICとLOOCVも計算しています。 twitter.com/genkuroki/stat...
posted at 17:14:38
#統計 #Julia言語 最尤法版の
nbviewer.jupyter.org/gist/genkuroki...
測定スキルの異なる7人の科学者たち
のベイズ統計版のノート(計算&プロット)を作れば勉強になると思います。WAICやLOOCVも計算する。
さらに(B)で(ii)の方法も使ってみて、(i)の結果と比較して一致することを確認するとよいと思う。
posted at 17:19:17
非公開
タグ:
posted at xx:xx:xx
非公開
タグ:
posted at xx:xx:xx
非公開
タグ:
posted at xx:xx:xx
#統計 訂正
❌1(w(1-w))
⭕️1/(w(1-w))
パラメータ0≦w≦1のベルヌイ分布モデルの共役事前分布は
w^{a-1} (1-w)^{b-1}
の形。定数倍部分は本質的でないので省略。
a=b=0の場合の、両端のw=0,1に分布の集中度が最も高い場合の事前分布が最尤法に対応しています。続く twitter.com/genkuroki/stat...
タグ: 統計
posted at 19:19:37
やはり、歴史的にここでバトルがあったんですね。twitter.com/katzkagaya/sta... twitter.com/katzkagaya/sta...
タグ:
posted at 19:23:09
#統計 #Julia言語 添付画像は
nbviewer.jupyter.org/gist/genkuroki...
より。平均予測誤差(KL情報量の平均)と平均二乗誤差のプロット。サンプルサイズがn=10,20,50の場合。MLEは最尤法、Bayes(0.5,0.5)がJeffreys事前分布、Bayes(1.0,1.0)が一様事前分布の場合。
1つ前のツイートで説明した通りになっています。 pic.twitter.com/FUmJdrVkJV
posted at 19:28:23
非公開
タグ:
posted at xx:xx:xx
非公開
タグ:
posted at xx:xx:xx
非公開
タグ:
posted at xx:xx:xx
『しくじりから学ぶ13歳からのスマホルール』では、トーンポリシングについても書いています。今の小中学生にこの認識が広まれば...。 pic.twitter.com/jV4OQ3qhrb
タグ:
posted at 20:12:08
大関真之『ベイズ推定入門』を読了.
ベイズ推論の基本とモデル選択から始まり,スパース推定,カーネル法,ガウス過程も含めて紹介する網羅的な本.
漫画のキャラがかわいいくせに特異モデルとか出てくるからギャップが面白い.白雪姫のお后様ってこんなかわいかったっけ……w
タグ:
posted at 20:35:58
例の本のサイトに「本論の章タイトルはDon't Say “Statistically Significant” であり,命令形ではっきりと有意性検定を禁止しています.これ以上 p 値を使い続けるということは,最大手の製造元メーカーがリコールし,乗車を禁止している車に乗るのといっしょ」とありますが
www.asakura.co.jp/books/isbn/978...
タグ:
posted at 20:38:22
アメリカ統計学会監修(?) The American Statistician の「21世紀の統計的推論:“p < 0.05”を超えて」で、禁止しようと言っているのは、p値の二分法的な使用であって、p値の使用を禁止しているわけではありません
www.tandfonline.com/doi/10.1080/00...
タグ:
posted at 20:41:48
”Despite the limitations of p-values (as noted in Principles 5 and 6 of the ASA statement), however, we are not recommending that the calculation and use of continuous p-values be discontinued.”
www.tandfonline.com/doi/10.1080/00...
タグ:
posted at 20:42:41
『しくじりから学ぶ13歳からのスマホルール』では、AEDセクハラデマとその背景のミソジニー(女性蔑視)についても言及しています。 pic.twitter.com/Fs9dDkfACN
タグ:
posted at 20:53:14
しかし、p値を連続値で出すようにすると、(その小ささが)効果の強さをあらわす数字であるかのように使う人がが出てくる。「ゼロがこんなにたくさんある強い結果です」 AMEDやJSTの報告会でよくある光景
タグ:
posted at 20:59:00
@amneris84 僕は安倍政権には珍しく落ち着いた行動を取っていると思いました。感染症だけでなく他の要因で亡くなる人たちも俯瞰してバランスが取れていると思います。最善ではないかもしれませんが納得できるものです。ただ、恐怖で思考が混迷している人には無能に見えると思います。
タグ:
posted at 21:14:57
#統計 歪んだコインを投げてn回中k回表が出たときに、二項分布モデルでの帰無仮説をp=0~1(横軸)としたときのP値。
Normal→二項分布の正規分布近似で定義したP値
Posterior→ベイズ統計の事後分布に関するP値の類似物
2つの線の一致は「頻度論」信頼区間と「ベイズ」信用区間の一致を意味する。 pic.twitter.com/hgu2hPetyT
タグ: 統計
posted at 21:19:38
プロ棋士になられた谷合廣紀四段、プロになられる前に統計解析の「Pythonで理解する統計解析の基礎 」ってな本を出版してる。。。
異色の秀才が棋界に爆誕した。
タグ:
posted at 21:19:56
『しくじりから学ぶ13歳からのスマホルール』では、災害時の外国人へ向けられるデマについても触れています。今回のコロナウィルスをめぐっても、人種差別的なデマを見かけました。
デマは偏見を助長し、簡単に差別へと繋がります。 pic.twitter.com/Xb05TWoOl8
タグ:
posted at 21:24:24
#統計 1つ前のツイートに添付した動画を見れば分かるように、例えばベルヌイ分布モデル(二項分布モデル)の場合には、
「頻度論」でのP値信頼区間
と
「ベイズ」でのP値の類似物と信用区間
はよく一致しています。
「頻度論」でp-hacking可能ならば「ベイズ」でも全く同じ方法で可能です。 twitter.com/not_identified... pic.twitter.com/NdrCn6TPG3
タグ: 統計
posted at 21:24:47
ここにあるように、numerical recipesの第1種ベッセル関数の0次と1次は倍精度だとしても6桁も精度がない事が知られている。自分も試した事がある。Why not use Numerical Recipes? www.uwyo.edu/buerkle/misc/w...
タグ:
posted at 21:47:50
Juno (Julia IDE)の新しいバージョンをリリースしました!
4か月ぶりのリリースで、めちゃたくさんの便利機能追加とパフォーマンス改善などなどを含んでます。ぜひ試してみてください :)
リリースノートも書いたのでもしよければ読んでいただけると嬉しいです!
discourse.julialang.org/t/ann-juno-0-1...
タグ:
posted at 21:51:14
インストール等はこのリンクを見てみてください:
docs.junolab.org/latest/man/ins...
せっかくなので後日Qiitaかどこかで今回のリリースについて日本語にして記事にするかもしれません。
#Julia言語 #Juno
posted at 21:54:21
ジェンダーの教授の保守的なジェンダー観がヤバい。「ミカンを箱で買うのは家族を持ったお母さん」という昭和の保守的な家族観を持って学生にジェンダースタディーズを教えているのだとしたら、「ジェンダースタディーズ」そのもののバックラッシュでしかない。 twitter.com/peureka/status...
タグ:
posted at 22:28:54
民間の出版社が発行した共通テストの国語記述式の例題集作成に,大学入試センターが設置した「国語問題作成分科会」の分科会長と委員数人がかかわっていた。← 産経のスクープだが,驚くのは「国語もか」ということだけ。
a.msn.com/01/ja-jp/BB103...
タグ:
posted at 22:36:27
「共通テストは公正であることが不可欠で、関係者が立場を利用して金銭的な報酬を得るなど利益を図るような利益相反行為は厳禁とされている」← 笑止千万。利益相反行為を排除したら共通テストは運営できない状態になっていた。
タグ:
posted at 22:38:51
2024年に向けた入試のあり方を検討する前に,文教族議員や文科省・センターと民間事業者の正常なあり方を検討すべき。その前提が担保されなければ,教育改革も入試改革もあったものではない惨状。犯人を絞り上げるのが先でしょう!
タグ:
posted at 22:45:19
その下で委員等を務める研究者の堕落も凄まじい。例題集を作った委員らは文科省と出版社の両方から報酬を受け取っていたのではないのか? YNT2020もそうだったのではないのか? 文科行政への国民の不信がここまで募っているのに,このまま前に進めるわけがない。清算して出直しを!
タグ:
posted at 22:55:57
Aprender #julialang por medio de ejemplos, excelente material: juliabyexample.helpmanual.io pic.twitter.com/1mDtI3vSN1
タグ: julialang
posted at 23:21:29
#統計 なるほど、これはおもろいな。
What’s wrong with Bayes « Statistical Modeling, Causal Inference, and Social Science statmodeling.stat.columbia.edu/2019/12/03/wha...
タグ: 統計
posted at 23:34:49
The new Juno release has a long list of impressive new capabilities and improvements. Especially on the debugging and profiling front. Thanks to the work of @kdwkshh and Sebastian.
discourse.julialang.org/t/ann-juno-0-1... pic.twitter.com/evr59aGpBB
タグ:
posted at 23:36:04
入学共通テスト、問題作成委員らが例題集を出版 「疑念持たれる」と指摘受け複数辞任 www.sankei.com/life/news/2002... @Sankei_newsさんから
タグ:
posted at 23:39:36
職業上、手がチョークまみれになることが多く、指先から水分が抜けて、爪の周辺の皮膚がボロボロになってしまうことがよくあった。特に冬がまずい。😭
白ワセリンを指先に塗ってほぼ完全に拭き取る習慣にしたら、冬に指先がボロボロになることがなくなりました。😊
タグ:
posted at 23:51:44