mattn @mattn_jp

15年4月24日

golang の handlerFunc でよくやる奴。よくまとまってる。 / “The http.HandlerFunc wrapper technique in #golang — Medium” htn.to/yWRhC

タグ： golang

posted at 22:48:05

x1 @iyunoriue

15年4月24日

Dremelの論文、社内の論文輪読会で読んだんですがおもしろかったです！
static.googleusercontent.com/media/research...
#bq_sushi

タグ： bq_sushi

posted at 22:07:32

ゆっけ @karahiyo_n

15年4月24日

今日のではないけど @nagachika さんのMAGELLAN関係の資料 #bq_sushi "Magellan on Google Cloud Platform #gcpja #magellan www.slideshare.net/nagachika/mage... @SlideShareさんから

タグ： bq_sushi gcpja magellan

posted at 21:22:19

s.hiruta @web_se

15年4月24日

SlidingWindows cloud.google.com/dataflow/model... #bq_sushi

タグ： bq_sushi

posted at 20:29:23

Yuki Yugui Sonoda @yugui

15年4月24日

You can process streaming data with Cloud Dataflow by just adding a windowing step just after the streaming input. #bq_sushi

タグ： bq_sushi

posted at 20:28:08

Kazuyuki Honda @hakobera

15年4月24日

Dataflow は Batch モードと、Streaming モードの2つのモードがある、これ前提知識な。今話してるのは Streaming モードの話 #bq_sushi

タグ： bq_sushi

posted at 20:26:12

Yuki Yugui Sonoda @yugui

15年4月24日

ah, Cloud Dataflow also supports streaming! #bq_sushi

タグ： bq_sushi

posted at 20:26:02

Yuki Yugui Sonoda @yugui

15年4月24日

Cloud Dataflow can run in various envs. Local in-memory runner, fully-managed cloud runner on GCE, Spark runner, ... #bq_sushi

タグ： bq_sushi

posted at 20:21:14

はるかさん @harukasan

15年4月24日

#bq_sushi / “cloudera/spark-dataflow · GitHub” htn.to/2eT1brnbb7

タグ： bq_sushi

posted at 20:20:54

x1 @iyunoriue

15年4月24日

Spark Runnerこれかあ。
blog.cloudera.com/blog/2015/01/n...
#bq_sushi

タグ： bq_sushi

posted at 20:20:30

najeira @najeira

15年4月24日

ローカルでテストしやすいのはいいですね #bq_sushi

タグ： bq_sushi

posted at 20:20:27

tagomoris @tagomoris

15年4月24日

そういえばDataflow SDKで書いたコードはApache FlinkやSparkでも走るんだっけ? と思ってたらそういうスライドが出てきた #bq_sushi

タグ： bq_sushi

posted at 20:19:53

tagomoris @tagomoris

15年4月24日

コードはイメージ的にはSpark DSLとほぼかぶるな #bq_sushi

タグ： bq_sushi

posted at 20:18:50

x1 @iyunoriue

15年4月24日

Google Cloud Dataflow, Sparkのジョブと超互換性高そう。
#bq_sushi

タグ： bq_sushi

posted at 20:18:45

非公開

タグ：

posted at xx:xx:xx

宮川 拓 @miyakawa_taku

15年4月24日

@atusi エラーのスタックトレースが大量に出た時に、行あたりのサイズで引っかかりました。 #bq_sushi

タグ： bq_sushi

posted at 20:10:16

Michael H. Oshita @ijin

15年4月24日

ストリーミングINSERTは最初のデータアクセスでwarm upが2分必要。これか。 cloud.google.com/bigquery/strea... #bq_sushi

タグ： bq_sushi

posted at 19:57:52

Yuki Yugui Sonoda @yugui

15年4月24日

Data inserted with streaming immediately gets available to query, but it takes 2 min when you first stream-insert to the table. #bq_sushi

タグ： bq_sushi

posted at 19:57:21

SKS rep @repeatedly

15年4月24日

階層、増やしてもアグリゲーションノードの段階が増えるだけなので、シンプルに横に増やして分散でシャッフルしたほうが、スケジューラはシンプルになりそう #bq_sushi

タグ： bq_sushi

posted at 19:48:07

非公開

タグ：

posted at xx:xx:xx

Kazuyuki Honda @hakobera

15年4月24日

Mixer と Shardの階層は固定のようです。データに応じて複数階層できるわけではないようだ。（＝横に並ぶ台数が増えるだけ）（と言っていたと思う） #bq_sushi

タグ： bq_sushi

posted at 19:42:33

Kazuyuki Honda @hakobera

15年4月24日

BigQuery の streaming inster のデータは Bigtable 上にバッファされるのか。知らんかった。Bigtable から定期的に Colossus に保存されるようだ。だから、一定時間遅れるんだね。 #bq_sushi

タグ： bq_sushi

posted at 19:37:39

tagomoris @tagomoris

15年4月24日

Streaming insertの仕組みはTD Plazmadbのrealtime storageとほぼ同じだな、というかそうならざるをえない #bq_sushi

タグ： bq_sushi

posted at 19:36:37

Google Cloud Japan @googlecloud_jp

15年4月24日

#BigQuery は、ストリーミング挿入レートを毎秒 10,000 行から毎秒 100,000 行に引き上げ、行サイズを 20KBから 1MB に増やす等、大幅に性能が向上！goo.gl/fUbQvp #gcpja pic.twitter.com/ZItySv3PtP

タグ： BigQuery gcpja

posted at 12:54:10

HAL @harukoto841

15年4月24日

【妖怪大戦】軍師ゆかり達の千年戦争 20年目【遠距離縛り実況】 (11:04) nico.ms/sm26096461 #sm26096461　こちらでOPイラスト描かせていただきました！(*'ω'*)ﾉｼ

タグ： sm26096461

posted at 09:44:26