黒木玄 Gen Kuroki(@genkuroki)/2019年11月

#統計 #Julia

nbviewer.jupyter.org/github/genkuro...
分割表のPearsonのχ²統計量

r×cの分割表のPearsonのχ²統計量が漸近的に自由度(r-1)(c-1)のχ²分布に従うことを特別な場合に数値的に確認しています。周辺度数をすべて固定してnuisanceパラメーターを消すという余計なことはする必要はありません。 pic.twitter.com/7r7bCZDXMT

タグ： Julia 統計

posted at 00:18:37

#統計 #Julia言語

統計学入門書では、r×cの分割表の「自由度」が(r-1)(c-1)になることを、周辺度数をすべて固定するというFisherに由来する無茶な議論で説明している。

あれは結論が正しいだけで理屈はデタラメなので無視するべき。

nbviewer.jupyter.org/github/genkuro...
分割表のPearsonのχ²統計量

タグ： Julia言語統計

posted at 00:20:58

#統計現実に得られる分割表のサンプルで周辺度数をすべて固定可能な場合はほぼないです。極めて特殊な状況を考えないとそういうことは無理。

「周辺度数をすべて固定してnuisanceパラメーターを消す」という無理な議論をしなくても、Pearsonのχ²統計量は漸近的にいつもの自由度のχ²分布に従う。

タグ：統計

posted at 00:25:22

#統計「周辺度数をすべて固定してnuisanceパラメーターを消す」ことによって、Fisher''s exact test (およびそのr×cへの一般化)が可能になるのですが、周辺度数をすべて固定するという仮定が非現実的なので現実的な仮定のもとでFisher's exact testは原理的に不正確な検定になります。

タグ：統計

posted at 00:26:59

#統計私には「Fisher's exact testのp値が不正確」なのは当たり前のことだと思うのですが、なぜか、「Fisher's exact testのp値は不正確である」とはっきり明言せずに「conservativeである」と言う悪しき慣習ができあがっていて、科学的に非常に嘆かわしいことだと思っています。

正直さがない。

タグ：統計

posted at 00:30:58

#統計実際には不正確な検定に「正確検定」という呼び名が広まってしまっているのだから、正直な人であれば「Fisherの正確検定とう名の不正確な検定」のような言い方を当然すると思うのですが、「conservative」と言う慣習になっている。

これは相当にひどい話だと思う。

タグ：統計

posted at 00:30:58

#統計 Pearsonのχ²統計量は「周辺度数をすべて固定する」というような不自然な仮定抜きで有効な統計量になっています。その代わり漸近論を使う近似になっている。

Fisher検定では「周辺度数をすべて固定する」という無茶な仮定をした上で正確に確率を計算している。

どちらも近似を使っている。

タグ：統計

posted at 00:33:18

スゴイ，アザラシ市民権を得た

タグ：

posted at 00:51:56

遅くとも2014年中には甲状腺検査を中止にできたはずです。韓国での過剰診断の論文が2014年に出版されたからです。なぜその時点で中止にできなかったのかは、今後問われることになるでしょう。いや、まだ甲状腺検査は続いていますが

タグ：

posted at 01:03:13

絶対に奨励しません。絶対にだめです。大学とは関係ない。表現の自由を求めるのなら、言論の自由を破壊するような行為をしてはならない twitter.com/tk_takamura/st...

タグ：

posted at 02:09:38

Hiroyasu Kamo @kamo_hiroyasu

絶対にやってはいけません。それを許したら、同じ手を敵がもっと巧妙にやってきます。言論弾圧の武器を提供してはいけません。 twitter.com/tk_takamura/st...

タグ：

posted at 02:53:35

実施できないことは、複数の民間試験を使うことが決まった2017年の時点で分かっていた。それにもかかわらず、ここまで来てしまった。「延期」だけでは済まされない。当該制度および教育政策の決定手続きの抜本的な見直しを粘り強く求めていきたい。
www3.nhk.or.jp/news/html/2019...

タグ：

posted at 05:38:42

内閣の私的諮問機関である「教育再生実行会議」において、財界の意向を重視し、現場や専門家の意見を無視して、教育政策の基本が固まってしまう仕組みを改めない限り、同じ間違いが繰り返される。今回の件でも「制度に構造的な欠陥がある」と専門家は叫び続けてきたが、その声はまだ国に届いていない。

タグ：

posted at 05:48:38

神永美津代 @popopohatopopp

共通テストの記述も延期するべきでしょう。これも延期というより、制度として無理なので、ゼロに。とにかく、どちらも、専門家、教員の意見を聞くべきです。

タグ：

posted at 06:48:00

Dream Scatter @dreamscatter

Grassmann.jl v0.3.3 has support for Makie.jl visualization in Julia language, Differential geometric algebra paper is now updated, PDF available here: www.dropbox.com/sh/tphh6anw0qw... @JuliaConOrg @enkimute @johncarlosbaez @keenanisalive @7shi @adhara_mathphys @eigenchris @Looking_glass_u pic.twitter.com/2wtIE46HJL

タグ：

posted at 07:03:46

積分定数 @sekibunnteisuu

入試改革自体を撤回すべき。 twitter.com/nhk_news/statu...

タグ：

posted at 07:04:19

新共通テストの記述式は何がヤバいのか？
→民間業者が大量のバイトを使って採点する体制。採点に対する異議が生じたとき、受験生がそれをどこに持って行ったらいつまでに救済されるかのルートが明らかになっていない。国語の段階式評価が1段ズレると、得点換算の方法によっては8点違う。合否が変わる

タグ：

posted at 08:58:54

吉田弘幸 @y__hiroyuki

加藤公一, 가토우 기미카즈（はむかず） @hamukazu

大人達は声を挙げることが無駄ではないことを高校生から教わったはずです。大人は堂々と顔を見せてさらに大きな声を挙げていきましょう。

タグ：

posted at 09:06:15

英語外部試験の件は決着がついたようなので、次の主戦場は大学生に採点させるクソ記述問題の撤回ですね。各位頑張りましょう。

タグ：

posted at 09:24:38

大学入試共通試験は基礎学力だけを問えばいいので、今の選択式自動採点がベストだと思います。それ以上の能力は各大学が個別試験で問えばいいのです。
記述式の導入に反対します

タグ：

posted at 09:43:47

何度も書きますが、現行センター試験の難点は問題量に対して試験時間が短すぎることだと思います

タグ：

posted at 09:44:57

父親育休NEWS @papaikukyu

妻が心不全で緊急入院しました
ICUにて治療中です

産褥心筋症

と言うものが原因のようです

産後
ママの高血圧・浮腫がひどかったら
パパは迷いなくすぐ病院に連れて行って
あげてください

生後まもない第二子、長男
祖母と僕でママの退院まで
何とか頑張ります！

タグ：

posted at 09:54:28

吉田弘幸 @y__hiroyuki

どーも僕です。（どもぼく） @domoboku

文科大臣の記者会見を見た。
やはり英語民間試験以外は予定通り実施すると言っている。延期を隠蓑にして本体の悪事を遂行するつもりだ。14時からの記者会見と15:30からのヒアリングの場で新共通テストの本性を暴きます。

タグ：

posted at 10:20:25

大学入試の新制度の目玉、不平等な英語民間試験導入が延期されたけど、
「思考力を測る」大義で捻じ込まれる雑な筆記試験のことも忘れちゃいけない。
ベネッセが61億で採点を受注してるけど、思考停止で掛け算の順序をこども達に押し付ける企業が思考力をどう採点すんの？
pic.twitter.com/OvqsCsgiN0

タグ：

posted at 10:25:38

RochejacMonmo @RochejacMonmo

柴山前文部科学大臣は萩生田文科相の会見前にこんなつぶやきをしている。理念と制度の現実との区別が全くついていない政治家と少なくとも問題認識が少しずつでも前進している政治家との違いに愕然とする。 pic.twitter.com/c7r3NBQ30m

タグ：

posted at 11:25:10

ふぁっふぉい @sugikota

貧乏の理由は怠惰ではないし、病気の理由は不摂生ではないのだ。

タグ：

posted at 11:40:14

村中さんが敗訴したからといって、それで反HPVワクチン派を勢いづかせてはなりません。HPVワクチンの危険性が認定されたわけではありませんから。

HPVワクチンは効果も安全性も高いワクチンとして世界中で使われています。日本だけがおかしなことになっており、その原因は反ワクチン派に屈した厚労省

タグ：

posted at 11:58:52

戌一いぬいち @inu1dog1

本番になるとトランス状態になり暗譜が飛びがちな妻。
私「楽譜は持ち込めんの？」
妻「別にナシじゃないけど格好悪いから誰もやらない」
私「じゃあ格好良ければアリなんじゃない？」
ということで、巻物に楽譜を貼り付けて、クラシックコンサートに出演したことがある。
今思うと正気とは思えない。 pic.twitter.com/67osxRACOJ

タグ：

posted at 12:36:34

三塚ハル @mtkharu3

有名な話ですが紹介 #超算数 #掛算 twitter.com/domoboku/statu...

タグ：掛算超算数

posted at 13:28:34

濡れT @wettshirt072

仲野徹『笑う門には病なし！』 @handainakano

ウチの娘にもかけ算の順序問題がやってきたぞ！「先生はこう教えたいからこうやって解答出すと丸をもらえるけど、もし順序が逆でも (略) だから間違っていない。先生にバツをつけられたらパパが連絡帳にその旨書いて説明するから気にするな」という面倒臭い指導をした。 pic.twitter.com/43FKcys5xb

タグ：

posted at 13:44:47

こういうときに◎をつけて、満点以上の点数をつけてあげるのが教育 twitter.com/sage_darts/sta...

タグ：

posted at 13:52:40

H. Hosaka @H_H

首里城が燃えてしまった今だからこそ，きらぼし銀行日本橋支店で 2000 円札の新券両替をしていただけるという事実を知って欲しいし，2000 円札を日々使うことによって首里城のことを風化させないようにしたい pic.twitter.com/VLRMcm0wHO

タグ：

posted at 14:06:49

Hiroyasu Kamo @kamo_hiroyasu

@sgt_stephen3rd 数学的帰納法が多重にネストする証明を多用する分野をやっておりますので、「n=kで成り立つと仮定して……」などとやっていたら、たちまち文字が枯渇します。

タグ：

posted at 15:21:53

濡れT @wettshirt072

かけ算の順序問題は乱暴な言い方だけど「まだ習ってない漢字を書いたらダメ」というのと同じ事じゃないかな。各個人の理解度の違いに現場の先生が一々対応を変えられないから、百足競争のようにみんな同時に理解できるように授業を進めていかなければならない。

タグ：

posted at 15:31:53

濡れT @wettshirt072

何故かけ算の順序を「逆」に書いたのか本人が直接先生に説明できるようにすればいいかなと思ってる。

タグ：

posted at 15:32:50

Hiroyasu Kamo @kamo_hiroyasu

だいたい、ラテン文字26文字は数学するのに少なすぎ！

タグ：

posted at 17:35:54

ウギャーさん（＠オフィスぴの吉） @uger_san

まだこんなことを...。
自民世耕参院幹事長
「制度設計の詰めの甘さが原因で、民間のテストを使って、話す力などをチェックするのは正しい方向性だ」
公明斉藤幹事長
「導入そのものを見直す必要はないのではないか。いかに公平に行われるかという点で見直してもらいたい」
www3.nhk.or.jp/news/html/2019...

タグ：

posted at 17:46:00

で、ワイ個人としては「X語やって何年」という言い方に罠が潜んでると思うてるんですよ。ほんとは「X語開始してY時間（それもできれば継続的に）」の指標じゃないといけないと思うの。前者のトリックを悪用するワルい大人たちはいますから、ワイらは気をつけないといけません

タグ：

posted at 18:16:11

はい。更に言うと、「学校で習う」ような環境では、学習開始年齢が低いと学習効率が低い=無駄が多いことが様々な実証研究を通して明らかになっています

タグ：

posted at 18:24:28

つまり「小さい頃から少しずつだらだらと長い年月かけてやる」は外国語学習のやり方として全く合理的ではないんですね。なぜか日本の「英語教育改革」はそっち方向に突き進んでいますけど

タグ：

posted at 18:26:58

この問題について某研究者が政府の有識者会議でデマを流したことについては、末代までその罪を語り継いでいく覚悟であります

タグ：

posted at 18:32:47

吉田弘幸 @y__hiroyuki

とりあえず記者会見でもヒアリングでも今日の決定は始まりに過ぎないことを強調しました。

タグ：

posted at 18:44:19

A practical example of `view` and `views` macro
#Julialang
#Julia言語
 #juliamokyumokyu pic.twitter.com/GZiA75zni0

タグ： Julialang juliamokyumokyu Julia言語

posted at 19:55:53

鰹節猫吉 @sunchanuiguru

数学的帰納法でも #超算数。
いつでも、どんなときでも超算数。 twitter.com/sgt_stephen3rd...

タグ：超算数

posted at 20:09:17

松浦晋也 @ShinyaMatsuura

未来への責任を感じられなくなったのなら、致命的失策を犯す前に引退したほうがいいよ。未来は老人のものじゃない。若者のものだ。 twitter.com/Reuters_co_jp/...

タグ：

posted at 20:25:47

Daisuke KATO @Dsuke_KATO

flippedのスライスを作った時点でコピーが発生するので、たとえchannlviewを使ったとしてもflippedは変更されないんですね。なるほど twitter.com/mathsorcerer/s...

タグ：

posted at 20:27:52

SpringerMath @SpringerMath

天むす名古屋 Temmus @temmusu_n

Introducing the first Open Access GTM: ‘Measure, Integration & Real Analysis’ by best-selling author Sheldon Axler. Readers around the world will be able to access an electronic copy for free. Due December.

タグ：

posted at 20:37:08

#超算数メモ。
山本喜治氏の『新しい算数科学習の方法』という本が気になる。1955年発行。めちゃくちゃいっぱい本を書いているな。

タグ：超算数

posted at 20:56:48

非公開

タグ：

posted at xx:xx:xx

そうかー
Thunderboltケーブルを挿したままだと起動できないけれど、起動した後に挿すと外部GPU認識できた

タグ：

posted at 21:01:19

松本佳彦 @ymatz

Dropboxの無料プランでファイルを同期できるのは3台まで、という制限の問題を、「Dropbox↔Synology NAS↔個々のコンピュータ」とすることで解決してしまった

タグ：

posted at 21:22:04

松本佳彦 @ymatz

「そうするのならそもそもDropboxが不要では」という考えもあるかと思いますが、何かが原因でNASが止まっても、Dropboxにアクセスすれば済んでしまうのがよい点。

タグ：

posted at 21:26:42

のらんぶる @nolimbre

@ymatz Synology NAS ! 家に置いてるの？

タグ：

posted at 21:26:52

松本佳彦 @ymatz

@nolimbre うん。そもそもはTime Machine用だったんだけど、その後写真もそこに置くことにしたり、VPNを立ち上げたり、活躍してる。

タグ：

posted at 21:28:41

しぶてぃ @takuizum

juliaのcmdstanのセットアップにめちゃくちゃ手間取った。Rstanは偉大なのだと気がついた

タグ：

posted at 21:36:02

しぶてぃ @takuizum

ちなみにwinは公式にのっとって、Rtoolsとmingw32-makeを使った。
ちゃんと64ビットのmingwのパスも通しておかないとコンパイルエラーで詰む。
#julia言語 twitter.com/takuizum/statu...

タグ： julia言語

posted at 21:42:32

しぶてぃ @takuizum

すずきです☕️垢終了 @SuzukiActually

julia側だと、Stan.jlとCmdStan.jlの両方が必要だった。CmdStanだけだと、サンプリングの関数が動かない。

タグ：

posted at 21:44:40

今日仕事暇だったからJulia言語めちゃ勉強した。
Pythonと似ててしかも処理速度早いのは画期的ね。

タグ：

posted at 22:03:31

#統計

 nbviewer.jupyter.org/github/genkuro...
r×c分割表のPearsonのχ²統計量

の説明を少し詳しくし、Pearsonのχ²統計量だけではなく、G統計量(2対数尤度比)に関する説明とコードを付け加えた。

個人的な意見では分割表の独立性検定では補正無しのPearsonのχ²検定がよいと思う。

twitter.com/genkuroki/stat...

タグ：統計

posted at 22:09:51

#統計 Fisher's exact test は不正確過ぎて使う気になれないし、Fisher's exact testに近付ける補正になってしまっているχ²検定におけるYates補正も使う気になれない。

歴史的にどうしてそういうひどく不正確な検定が流行してしまったのか不思議。P値が大きめになって有意差がひどく出難くなるのに。

タグ：統計

posted at 22:09:51

#統計さらに、分割表の独立性検定には2対数尤度比になっているG統計量を使ったG検定もあるのですが、小サンプルサイズでPearsonのχ²統計量と比較すると、G統計量の方が誤差が大きくなります。

Pearsonのχ²統計量があるのに、わざわざ誤差の大きなG統計量を使う不思議。

タグ：統計

posted at 22:13:46

Riko Muranaka/村中璃子 @rikomrnk

#統計私は統計学はど素人なのですが、分割表の独立性検定については「不思議なこと」が余りにも多い。

分割表のχ²検定で使うχ²分布の自由度が決まる仕組みについても正しい説明が教科書に全然書いていない不思議。その不思議はFisher検定を正確だとする誤解に直結している。

タグ：統計

posted at 22:13:47

名誉は毀損されたけど、ありもしない薬害の証明を吹聴したのは事実です、って判決なのだけど、それをきちんと説明した記事が結局出なかったのは、裁判の本質も判決の内容も理解してない一部の記者に会見を邪魔されたからだろう。本当はメディアが一番怒らなくちゃならない判決なのに少し悲しい。

タグ：

posted at 22:26:50

KokyuHatuden @breathingpower

“「（ワクチン接種を拒むのは）もはや小さなカルト集団の話ではなく、よく組織された運動」だとホッテズ氏は指摘する。「そうした運動に直接、働き掛ける必要があるのです」(c)AFP/Kerry SHERIDAN” / “反ワクチン派の高学歴の親たち、「カルト集団」の批判も米【再掲】　…” htn.to/2BR1YVZBQL

タグ：

posted at 22:28:59

みずたま @go_tom_89

淡々と、コツコツと。

５手詰

#おやすみ詰将棋 pic.twitter.com/qQIjp4yNo9

タグ：おやすみ詰将棋

posted at 22:30:27

(:3 っ )っ @sn0wyrabbit

Riko Muranaka/村中璃子 @rikomrnk

Jupyterってプログラミング教育にもいいよなぁと最近思った。カーネル追加すればJulia, Python, R以外でも全然使えるし、むしろデータ分析に使われることの多い上記3言語以外だったら教育に使うのが使い道として一番いいんではと思う。ちなみに本書くのにも使える。

タグ：

posted at 22:30:43

元教授の名誉は、命を守るその記事をより多くの人に届けるよう、科学界の常識に照らし合わせ、筆者適切だと判断する言葉を使って書くと表現の自由よりも重いのか。

何度考えても分からない。

note.mu/rikomuranaka/n...

タグ：

posted at 22:33:33

てんそるたん（Yuichiro Mori @ytueincshoirr

@taketake1w 議事録がないと非難していると，１年半以上もたってから議事要旨が公表されました。その上，ズブズブのCEFR作業部会が凝りもせず吉田主査の下で再度，今度は常設で開かれることになっていました。これ以上続けていたら，文科省も入試制度もどこまで堕ちていたことか。
twitter.com/KITspeakee/sta...

タグ：

posted at 22:37:59

ネーターはもっとずっと有名になっていいとおもいます。 twitter.com/mayapero/statu...

タグ：

posted at 22:48:55

reshape はコピー作らないんだ．へー pic.twitter.com/unUcxAxR2A

タグ：

posted at 22:53:20

#統計 #Julia言語 #MCMC #NUTS

JuliaでNUTSによるMCMCで遊びたければ

github.com/tpapp/DynamicH...

は結構おすすめかも。自分で尤度函数を書く仕様なので、Juliaに適した方法で計算速度に気を使うことができる。

使用例↓
nbviewer.jupyter.org/github/genkuro...
DynamicHMCExamples for DynamicHMC.jl v2.0.0

タグ： Julia言語 MCMC NUTS 統計

posted at 22:53:27

Notice that the return type of reshape is just an Array, one which happens to be serving as a view of a. However, some inputs cannot be represented as a view with an Array.

らしいので反例がある

タグ：

posted at 22:54:06

非公開

タグ：

posted at xx:xx:xx

Shuhei Kadowaki @kdwkshh

IJava, IHaskellとかいいよね。新しいカーネル入れる時ワクワクする。 twitter.com/sn0wyrabbit/st...

タグ：

posted at 23:02:55

暗黙の型宣言 @implict_none

お隣はJulialangという･･･

タグ：

posted at 23:12:04

匿本名太郎 @kaisekigakumoyo