黒木玄 Gen Kuroki(@genkuroki)/2017年06月15日

Pixiv論文騒動から半月、論文著者や人工知能学会が隠蔽した論文を再掲することもなく、なんかうやむやになってるっぽいですが。

当時の批判で「N=10じゃ少なすぎ」「手動処理ってダメすぎ」って声が多かったんで、ふと気が向いた素人がさくっと大量データ自動解析やってみました。

タグ：

posted at 00:02:15

Pixiv小説解析（松編）概要：
・タグに「松」を含む小説を一括取得(N=12000)
・mecabで形態素解析（辞書にキャラ名を追加）
・word2vecで松野六兄弟を200次元ベクトル解析、相互コサイン距離を算出
・D3.jsで2次元平面へ力学的プロット、関係性を図示

タグ：

posted at 00:05:53

Pixiv小説解析（松編）結果：
・タグに「松」を含む小説・12000作から松野六兄弟の関連性を算出、図示。
・丸の大きさは単語登場回数。
・関係の深さは、関連線の太さで見るのが正確。
・位置関係も指定したものの、全員が密接に関連するがんじがらめ力学構造なので、プロットは不正確。 pic.twitter.com/DvFewWUhM8

タグ：

posted at 00:12:58

Pixiv小説解析（松編）：
・無方向グラフ。A×B=B×Aが成立、つまり攻×受の区別不可。
・もっとも密接な関係は、おそ松-チョロ松。
・もっとも疎遠な関係は、おそ松-トド松。
・もっとも存在感が薄く、ぼっちなのは、トド松。
・ためしに「トッティ」をトド松に含めても焼け石に水。 pic.twitter.com/7NCmOH8lsO

タグ：

posted at 00:20:29

Pixiv小説解析（R-18編）：
・「R-18」タグの小説を一括取得(N=11934)
・mecab+ipadicで形態素解析
・word2vecで単語ベクトル自動解析

これぐらいは学者じゃないド素人でもほっといたら一晩でできたんだけど…いまいち面白い知見は導き出せず。

タグ：

posted at 00:34:13

Pixiv小説の大量ゲット＆単語の多次元ベクトル分析なんて、ぼく程度のド素人でも簡単にできる、現時点じゃいちばん基本のやつなんですが。

もし結果を公表すると、
「著作権侵害！」「プライバシー暴露！」「11,934作すべての小説作者に許可を取れ！」って批判されちゃうのかなあ。

タグ：

posted at 00:37:11

Pixiv小説をデータ分析に使用するときの注意点
・N=12000程度が、素直な手法で外部取得できるシステム的な限界。
・男性向けと女性向け、異性愛と同性愛の明確な区別はない。
・真面目にやるなら形態素解析辞書に大量の固有名詞登録が必要。
・法律とか関係ないレベルの批判に注意。

タグ：

posted at 00:43:34

非公開

タグ：

posted at xx:xx:xx

word2vecにpixiv R-18小説を11934件ぶっこんで計算しながら気づいたのですが。

実はpixiv運営自身が、小説94380件を解析したデータを配ってるんですね…。inside.pixiv.net/entry/2016/09/...
有害論文炎上中にあんまり話題にならなかったなあ。

タグ：

posted at 00:50:47

pixiv論文炎上中は「分析対象の小説作者全員に許可を取るのが当然」って意見をかなり見かけたんですが、pixiv運営は94380作の作者全員に個別許可は取ったりしてなさそうだよなあ。
inside.pixiv.net/entry/2016/09/...
規約がどうなってるのかはよく知りませんが。

タグ：

posted at 00:55:00

非公開

タグ：

posted at xx:xx:xx

S (ﾂｲｰﾄはｽﾚｯﾄﾞ全体をご確認く @esumii

うるさがたにも怒られない程度に、Pixiv小説 R-18タグ11934作の分析結果。

【比喩表現についての知見】（例の論文の補足）
・「バナナ」が単純自動解析で関連づくのは、食品のみ。猥褻用語と関連づくような比喩としての用法は確認できない。
→論文のように、人力処理が必要？ pic.twitter.com/cOKbus7rSc

タグ：

posted at 01:01:29

簡単のため、何もないとする*。しかし「何もない」という概念が存在する以上、これは矛盾である。よって何もないのではなく何かがある。

*「実際、何もなかった方が、なにかあるよりも簡単で容易であると言える。」（Leibniz, 1714）ja.wikipedia.org/wiki/%E3%81%AA...

タグ：

posted at 01:04:02

Pixiv小説 R-18タグ11934作の分析、補足。
「バナナ」の用例を目視確認すると
・猥褻表現の比喩、男性器という意味で使用される用例はほとんどない。
・ただし猥褻表現比喩は、炎上騒動で非公開にされた可能性はある。
・食べる以外には、物理的に性具として使用される用例が多い。

タグ：

posted at 01:06:05

非公開

タグ：

posted at xx:xx:xx

Pixiv小説 R-18タグ11934作の分析、比喩表現。
・「ソーセージ」「フランクフルト」「ウィンナー」、いずれも関連上位に来るのは食品ばかり。意外。
・「ポークビッツ」は用例ゼロ。
・ついでに「きりたんぽ」も用例ゼロ。 pic.twitter.com/dYx4cc6YvO

タグ：

posted at 01:20:07

ただし分析の母集団を「R-18タグ11934作」から「松タグ12000作（R-18,非R-18無差別）に切り替えると、Pixiv小説分析結果は激変。

R-18タグでは用例ゼロだが、松タグでは用例10件。
そして松タグの「ポークビッツ」は食品とは全く結びつかない。伊藤ハムすごい。 pic.twitter.com/mZ1kh8fDle

タグ：

posted at 01:28:33

Pixiv小説分析の食品比喩表現。
「ミルク」の場合は、母集団「松タグ12000作(R-18,非R-18無差別)」では食品と結びつき、「R-18タグ11934作」は食品以外と結びつく。「ポークビッツ」とは逆の傾向。 pic.twitter.com/HMd496WnLI

タグ：

posted at 01:35:19

Pixiv小説分析の食品比喩表現。
「蜜」の場合は、母集団「R-18タグ11934作」も「松タグ12000作(R-18,非R-18無差別)」も、ほぼ同じ傾向。食品というには微妙だけど。
ただよく見ると、男女無差別R-18ではなく、松タグのほうだけ「母乳」と関連。女体化…。 pic.twitter.com/aQSUDkCea0

タグ：

posted at 01:45:44

Pixiv小説分析、食品比喩表現でもっとも特徴的な単語は「トコロテン」だと思います。R-18タグも松タグも、ほぼ同傾向。後者のほうにヘテロ表現があるのは、女体化ものです。
そしてトコロテン出現回数は、R-18タグでは118回に対し、松タグ(R-18&全年齢)では74回。多い…。 pic.twitter.com/3yHNyVKrJZ

タグ：

posted at 01:57:20

そしてPixiv小説のword2vec分析のハイライトであるベクトル演算、単語の加減算。
これは面白い方程式を見つけるのがとても難しいです。見つけたのはこれぐらい。
・男－女＋オカズ＝オナニー
・陰茎－ゴム＋射精＝メスイキ
・夢－努力＋現実＝実現

タグ：

posted at 02:09:57

pixiv小説をド素人が大量機械分析してみて、pixiv炎上論文に補足。
・バナナの比喩は機械分析では見つけにくい。
・母集団により極端に結果が異なることがある。
・少数の執筆者が変な用例を頻発すると結果が偏る。
・松タグは性的表現が先鋭化している。目のつけどころは悪くなかった？

タグ：

posted at 02:20:01

Hideaki_npc @hgot07

簡単のため、寝る。 (¦3[___]

タグ：

posted at 02:27:19

Pixiv小説 R-18タグ11934作ベクトル分析のおまけ、オノマトペの近傍ベクトル抽出（類語一覧）。
「クチュクチュ」はPixiv公式が94380作で検証したのと同じ調査です。 pic.twitter.com/fjTmMQtdye

タグ：

posted at 02:31:54

Hiroyasu Kamo @kamo_hiroyasu

@themanfrombone 具体例です。www.amazon.co.jp/review/RG8IQ8G...

タグ：

posted at 05:09:13

将棋ワンストップ @shogi1com

知事に代わって職員が格闘80分　藤井四段の詰将棋:愛知:中日新聞(CHUNICHI Web) www.chunichi.co.jp/article/aichi/...

タグ：

posted at 07:41:43

@sekibunnteisuu @togetter_pr aera with kids ですが、安浪式指導法がひどいです。動画があります。 publications.asahi.com/kids/movie/ind...

タグ：

posted at 07:43:31

@sekibunnteisuu @togetter_pr 「立式の方法を覚える。はを＝におきかえる。」

タグ：

posted at 07:45:48

pixiv小説の大量自動解析、特定タグ12000作を対象にword2vecにぶっこむぐらいならばド素人にも簡単にできるし、アイデアしだいでやや面白い程度の結果は出せると思うので、pixiv研究論文を批判してた人も擁護してた人もみんな気軽にやってみるといいんじゃないでしょうか。 pic.twitter.com/J3ssTRhNPD

タグ：

posted at 07:55:25

ド素人くさく、2単語間の関係を「関連がある」とか雑な表現をしちゃったりしましたが、こういうのはコサイン距離が大きいとか、近傍クラスタに位置するとか、そういうのが正しいのかな。
学会に提出する論文じゃないので、そのへんのいいかげんさは御容赦を。

タグ：

posted at 08:00:40

publications.asahi.com/kids/movie/ind...
動画01 「計算カード」で数字感覚を身につける

これに関しては、単純計算に関してで、足し算の増加と合併の区別、などというおかしな世界の　＃超算数　とは異なるし、私自身もこのあたりは詳しくないので、確定的なことは言えないが疑問もある

タグ：超算数

posted at 08:13:03

#超算数　掛け算以外で、これが必要なのか？という疑問がある。あと、3つの数値を見せて記憶させると言っているが、混乱しないのか？
６＋３＝９　→　６，３，９
６ー３＝３　→　６，３，３
６×３＝１８　→　６，３，１８
６÷３＝２　→　６，３，２

私なら混乱してしまいそう。

タグ：超算数

posted at 08:17:32

#超算数　１３ー９を１５と答える場面がある。引き算だから１３より小さくならないとおかしいわけだが、こういう明らかにおかしい答えを言ってしまうというのは、「すぐに答えを言わないとならない」というプレッシャーの結果じゃないのかな？

タグ：超算数

posted at 08:21:00

#超算数　九九のような語呂合わせがあるのは、普通は掛け算だけ。７×８を足し算の繰り返しで求めるのは大変だから、覚えてしまうと言うのは合理的。加減や割り算でそれは必要ないだろう。このやり方だと、かけ算九九と同様、覚えることにもなりかねない。４つあるから混乱しかねない。

タグ：超算数

posted at 08:23:26

#超算数　４＋８　これを見て、私は、８が４から２を吸い込むようなイメージで、１２と出している。６÷３だと、６が３と３に分かれるイメージ。動画にあるような練習でこういうイメージができあがるのだろうか？ゆっくりでもいいから答えを出す、というのを繰り返すうちに速くなるのだと思うが。

タグ：超算数

posted at 08:28:09

#超算数　以上はざっと見た感想であって、もしかしたら動画のような指導がいいのかもしれない。私自身は計算力に関しては、人並みかそれ以下で、計算指導に関しては門外漢なので、そのあたりは差し引いて読んで欲しい。

タグ：超算数

posted at 08:30:44

#超算数　割合の換算をしっかりマスターしようpublications.asahi.com/kids/movie/ind...

「３００円の２割、皆さんはどう立式するか分かりますよね？　３００×０．２＝６０」

少なくとも私の頭の中では項は計算していない。２０の３倍、と考えている。

タグ：超算数

posted at 08:40:34

#超算数　「算数の言葉」だの「式の言葉」だの面倒臭いこと言っているね。
小数への換算って必須なのかね？

１００円の７％って、１００×０．０７って考えるかな？
５０％なんか、０．５と置き換えなくても半分と考えればいいと思うが。
togetter.com/li/1047129

タグ：超算数

posted at 08:47:44

#超算数　４割　→　０．４　という換算が出来ても　４割６分だと出来ないことがある。そのまま６を隣に書けばいいと教えればいい、というようなことを言っている。

４割７厘　というような言い方はしないで、４割０分７厘というのかな？

タグ：超算数

posted at 08:55:03

#超算数　ごちゃごちゃ言っているけど、混乱しそう。割合の概念そのものを理解した方が楽だと思う。

タグ：超算数

posted at 08:56:10

#超算数　この手の、百分率や歩合と小数の換算問題は、割合指導では定番らしい。
gakuen.gifu-net.ed.jp/~contents/tano...

私もこの手の問題が掲載されている市販の問題集を使って教えたことがある。
３０％と０．３％の違いが分からなくなって混乱してしまったことがある。

タグ：超算数

posted at 09:22:42

#超算数　割合だけでの1冊の問題集になっているもの。３７％→０．３７というような換算を延々やるから、機械的操作になってしまって、今から思うと、３０％と０．３％で混乱するのも無理もない。「これ1冊で割合は完璧」などという煽り文句を信じた私がバカだった。

タグ：超算数

posted at 09:26:43

@temmusu_n @genkuroki 分からないけど、休憩時間にでも実際に計算してみて、577／408になるか調べてみましょうか。Newton法なら最初の近似値は7／5ですかね。Newton以外に可能性があるとしたら連分数で計算したかもしれませんね。

タグ：

posted at 10:32:53

@temmusu_n @genkuroki あ、リンク先に計算のしかたが書いてあるではないですか。読んでみます。

タグ：

posted at 10:34:22

伊藤誠悟 @sorabethere

すでに大学をサボり始めている皆さんに朗報です pic.twitter.com/oI1qOSbxgs

タグ：

posted at 12:28:03

#超算数　割合の式の立て方（立式）を覚える
publications.asahi.com/kids/movie/ind...

公式に使われている「くらべる量」「もとにする量」というのがわかりにくいという話をしているが、「難しいから小学校に任せる」と言っている。

小学校でのその教え方が問題なんだが・・・

タグ：超算数

posted at 12:49:26

#超算数　「「の」は「×」「は」は「＝」と式を立てるだけだから簡単」などと言っている。やってはいけない典型的な方法なんだけど、小学校だと、これで答えが出せる問題しか出てこない。将来的な数学の能力が確実にそぎ落とされるのだが、それが顕在化するのはしばらく後なので、弊害に気づかない。

タグ：超算数

posted at 12:53:47

#超算数　「つめこみだと嫌う先生もいるが、こういうの（くらべる量がどーたらの公式）でつまずく子がいることを思えば、それよりもこっちの方がいい」とか言っている。

ものすごくレベルの低い２つを比べて、あっちよりこっちがいいだの言われても・・・

タグ：超算数

posted at 12:57:11

#超算数　（　）の25％は50g　　ここから（　）×0.25＝50の式にもってきて、（　）を求めるには50÷0.25とさせるように誘導尋問しているが、（　）の25％は50gだけみて、50gの4倍と発想できないなら割合の概念を理解していないのではないか？

タグ：超算数

posted at 13:05:00

#超算数　子供は割合の問題は加減ではなく乗除であることは経験的に分かっていることが多い。小数への換算もクリアしたとしよう。子供にとってこの問題は、50÷0.25、0.25÷50、50×0.25の三択問題。掛け算の順序を入れたら0.25×50を含めての四択問題である。

タグ：超算数

posted at 13:07:47

#超算数　で、ここで出てきた数値がとんでもない値であっても、そもそも割合の概念を理解していないのでその値がおかしいことに気づかない。50÷0.25を選択して計算間違いで一桁ずれても平気である。

映像の指導法ではこの傾向を防止できない。

タグ：超算数

posted at 13:11:06

#超算数　（　）×0.25＝50　（　）を求めさせるのに、２×３＝６で２を出すには？と子供に問い、６÷３で求まることに気づかせて、そこから50÷0.25に持って行く。
まあ悪くはないが、私なら「虱潰しでいいから当てはまる値を求めてみて、正解が分からないなら近い値でもいいよ」と言う

タグ：超算数

posted at 13:15:49

#超算数　勿論子供が、２×３＝６からの類推で割り算で求めればいいと分かればそれはそれで結構なことだが、それでも出てきた値を代入して成り立つことを確認させた方がいい。当てはまる数値を虱潰しに探す方法は、小数の割り算を知らなくてもかけ算が分かっていれば出来る。割り算への伏線にもなる。

タグ：超算数

posted at 13:19:24

#超算数　300mは400mの（　）割（　）分
割合が分かっていたら、計算式など立てることもなく、7割5分と分かるよね。

300＝400×（　）　で、（　）＝300÷400＝0.75　小数を歩合に換算して7割5分

こんな面倒なこと、少なくとも私はやらない。

タグ：超算数

posted at 13:23:48

#超算数　「適当」の誤用はご愛敬としよう

タグ：超算数

posted at 13:25:01

#超算数　ちょっと難しい□の入った
計算にチャレンジ！
publications.asahi.com/kids/movie/ind...

「世の中には、足す、引く、掛ける、割る、の４つしかない」と言っている。

どんな世界の住人なのか？

タグ：超算数

posted at 13:34:41

大橋拓文 @ohashihirofumi

午前の打ち合わせはマイナビでした。そして話題の「進化を続けるアルファ碁」を入手。洪道場の雰囲気がとてもよく出ていて楽しい本になっています。虎ちゃんの解説も秀逸。 pic.twitter.com/JcfwbKlVnu

タグ：

posted at 13:37:59

#超算数　文字じゃなく四角を使っているだけで要するに方程式なんだけど、こういう問題って試行錯誤して当てはまるのを探すことを繰り返すことで、効率的な求め方を見つけていった方がいいんじゃないかな？

タグ：超算数

posted at 13:40:17

#超算数　この先生の指示に従って解けば,この手の問題は解けるようになるだろうけど、ここから逸脱した問題は解けないだろう。累乗を習った後で、ｘ^2ー５ｘ＋６＝０などを解けるのか？虱潰しにやっていれば解くことが出来る。

タグ：超算数

posted at 13:42:02

しのあ @sino_a_fue

猫がスナック菓子の袋をかじるので、手の届かない場所へ吊るした結果･･･手が届いてしまった例 pic.twitter.com/7b5N3znlUI

タグ：

posted at 14:07:47

#超算数　割合チャレンジ問題　publications.asahi.com/kids/movie/ind...
【300円のケーキがある。はじめ値段の80％で売っていたが、更にその値段から25％引いてくれる。代金はいくらか？】（要約）

問題の意味が分からない。

タグ：超算数

posted at 14:32:26

#超算数　「値段の80％で売っていた」というのは、240円で売っていた、ということなのか？じゃあ最初の「300円のケーキ」の300円はなんなのか？定価が300円だけどこの日は特売で、とかの状況設定がないと、文意が取りにくい。

タグ：超算数

posted at 14:34:31

#超算数　「その値段から25％引き」も、240円からさらに、75円引いたという意味にも取れるし、240円を100％としたとして、75％つまり180円とも取れる。

タグ：超算数

posted at 14:37:30

#超算数　でもこれも「の」は「×」とかで解かせるようだから、問題の意味なんか理解しなくても、このマニュアルに当てはめて解くことになるから関係ないみたいだね。

25％が１／４と即座に分からない子にこの問題を出すこと自体が無謀に思えるが、マニュアルに当てはめるだけなので、心配無用？

タグ：超算数

posted at 14:42:25

日本将棋連盟【公式】 @shogi_jsa

#超算数　 #モルグリコ　速さの問題が得意になる2大ポイント
publications.asahi.com/kids/movie/ind...
「きはじ」ｷﾀ━━━(ﾟ∀ﾟ).━━━!!!

タグ：モルグリコ超算数

posted at 14:45:50

非公開

タグ：

posted at xx:xx:xx

本日の詰将棋（3手詰）です！
わかったら「いいね」ボタンをお願いします！
→ヒント、解答はこちら buff.ly/2rsGi6R
#詰将棋 #まいにち詰将棋 #3手詰 pic.twitter.com/pTIpY78ydh

タグ： 3手詰まいにち詰将棋詰将棋

posted at 15:00:21

#超算数　速さチャレンジ問題　publications.asahi.com/kids/movie/ind...
時速48kmで自動車がトンネルを通るのに4分かかった。
①　時速48kmは分速何mか？
②　トンネルの長さは？

講師曰わく、教科書の問題だから誘導になっているが、②だけの問題でも①をやらざるを得ない

タグ：超算数

posted at 15:07:17

#超算数　そんなことはない。48×4/60×1000で出来る。

3時間で180km進むと、6時間で何km進むか？を180×2と求めたらバツになって、正しくは180÷3＝60　60×6＝360　という事例を聞いたことがあるが、算数教育界では一旦速さを求める風習があるのかもしれない

タグ：超算数

posted at 15:10:25

天むす名古屋 Temmus @temmusu_n

#超算数　講師はこの方　artofeducation.co.jp/introduce/

タグ：超算数

posted at 15:28:45

天むす名古屋 Temmus @temmusu_n

@sunchanuiguru @genkuroki #数楽計算しました。初期値NR_0 = 3/2が与える次の近似値はNR_1 = 17/12でそこからNR_2 = 577/408が出てきました。メソポタミアの近似値はこれとNR_3 = 665857/470832と間にあります。NR_3はガラケーの電卓でも正しく計算できない。

タグ：数楽

posted at 16:53:59

@sunchanuiguru @genkuroki #数楽メソポタミアの方法は数学的にはニュートン・ラフソン法による平方根の近似と同等なのですが、計算が難しいです。大きな数同士の割算ゆえ。特に当時の人の持っていた手段では、割算は数表から逆数を持ってきてそれをかけることで演算していたので、それで精度の限界が課せられたと推測します。

タグ：数楽

posted at 17:02:51

前野［いろもの物理学者］昌弘 @irobutsu

【お知らせ】コミケに当選しました。よろしくお願いします。 ⇒貴サークルは日曜日東地区 "イ" ブロック 07bに配置されています。

タグ：

posted at 19:05:52

今日テーラー展開の授業やったんだけど、
「関数を定数に近似する」
「関数を１次関数（直線）に近似する」

をグラフと式を黒板に書いて

「でもこれじゃあ曲がった線との差がありすぎる」→「どうすれば曲りの部分も一緒になるかな？」

という流れにした。

タグ：

posted at 19:34:27

闇のapj @apj

苦労してやっている時点で勉強向きじゃないわけで……勉強だけできても、じゃなく、向いてないことに努力をしても、ってことじゃないかなあ。　＞　「真面目さ」なんて社会で1ミリも役に立たないと早く気付くべきだった www.wanabe.net/entry/majime

タグ：

posted at 21:12:32

はい、本気です。ただ、コミケは今回初参加なので、暑さ以外にも気をつけるべきことがあれば、どうか教えてください。 RT @nayumaki: えっ、本気ですか？いや正気ですか？
地獄の夏コミ、くれぐれも暑さ対策だけはぬかりなく、どうぞご無理なさらぬよう！

タグ：

posted at 22:04:12

そこはまだ内緒ということで（笑） RT @2kaitomi1: 経済本を出したりするんですか？

タグ：

posted at 22:10:12

都元ダイスケ @daisuke_m

マジウケるこの夫婦。 twitter.com/kuni02/status/...

タグ：

posted at 22:31:12

#数楽自分の Windows 機にちょっとした数値計算用に Julia と Anaconda (python 3.6 ver.版)を入れました。こういうことをやるのに Windows を使う人はまれだと思うので貴重な情報かも→ genkuroki.github.io/documents/Jupy...

タグ：数楽

posted at 22:35:47

しのあ @sino_a_fue

「天井に貼りつけたらどうなるのか」という質問をいただいていましたが、このように左足を離さなければ余裕なのです。と、猫が申しております pic.twitter.com/pMe6U2bw4S

タグ：

posted at 22:37:09

#数楽 Julia とか Python とか Anaconda とか Jupyter についてはググればたくさん情報が得られます。
www.google.co.jp/search?q=Julia...

タグ：数楽

posted at 22:38:02

#数楽 WindowsでJulia+Jupyter Notebookを使いたい人は私の他にもいるはずだと思ったので、以下のリンク先にインストールの仕方について書いておきました。
mathtod.online/@genkuroki/274...
genkuroki.github.io/documents/Jupy...

タグ：数楽

posted at 22:40:08

なんと、私にコスプレをせよと（違 RT @koumori_2011: 私のTLにある注意事項です。お気をつけて。/)｀；ω；´）twitter.com/hosimaki/statu...

タグ：

posted at 22:41:28