しんめたる(@sinmetal)/Page 84

@a_know insertId自体は文字列何でも指定出来ます。bigqueryはおそらくそれを１分間キャッシュしていて、同じinsertIdが来たら追加しない、てなことをやってるのではないかと想像します。

タグ：

posted at 10:25:07

@hogedigo なるほど、「このカラムをinsertIdに」みたいな指定ができるのですね^^

タグ：

posted at 10:20:33

@a_know 1行に対してsetInsertIdできるので、レコードのkeyでも指定しておけばよいかと。

タグ：

posted at 10:18:17

@hogedigo そんな仕組みがあるんですかｗｗ insertIdってのは、streaming insert の際に一緒に指定できるパラメータ的な？（それともそういう名前でカラムを持たせておく？）

タグ：

posted at 10:01:57

@a_know 一応insertId指定しておくと1分間は重複排除してくれるらしいです。

タグ：

posted at 10:00:43

@hogedigo BigQueryだとどんどん追加ロードできますもんねぇ。たしかに、ユニークなカラムを用意しておいて、デフォルトでdistinctするようにしておいたほうがよさそうですね。

タグ：

posted at 09:59:45

@a_know あと、データ重複はありえるとドキュメントにも書かれているので、レコードにID振ってgroup byかdistinctする必要あるかも。検証した限りでは重複は出ませんでしたが。。

タグ：

posted at 09:57:54

@hogedigo データ比較もされてるんですね、結構大丈夫そう...^^　でもまぁたしかに、「BigQueryにしかない」というのはスースーしますねｗ

タグ：

posted at 09:54:14

@a_know １週間くらい動かしてデータ比較したカンジでは問題なさそうでしたが、厳密なデータにはdatastoreの方がいいかもしれませんね。streaming insertがどうというより、bigqueryにしかデータがないのがちょっと不安・・・

タグ：

posted at 09:52:28

@hogedigo おお。ちょうどぼくもいまBigQueryを触っているところではあるのですが...取りこぼしとかは大丈夫そうです？

タグ：

posted at 09:47:25

@a_know bigqueryのstreaming insertなかなかイイですよ！(^^)

タグ：

posted at 09:46:47

Permalink - 2014年05月08日

2014年05月05日(月)

@golangjp @golangjp

14年5月5日

チャネルの利用パターンいろいろ
link: "A Channel Compendium" / cdn.rawgit.com/gophercon/2014... #golangjp #golang

タグ： golang golangjp

posted at 22:14:36

Permalink - 2014年05月05日

2014年05月02日(金)

nullせ @narusemotoki

14年5月2日

ゴールデンウィークにmodeを返す高速なgoの関数作るわ

タグ：

posted at 14:25:18

おーはし(さんとりー) @soundTricker318

14年5月2日

goでは再入可能なプログラムを書くことを心がけないと。

タグ：

posted at 07:05:54

Permalink - 2014年05月02日

2014年04月30日(水)

こげねこ @suteneko1027

14年4月30日

TypeScript公式のサンプルJSをd.tsに自動変換してみた　js貼り付けて一番最後に変換したいオブジェクトを書くだけ！　gyazo.com/575e6475826f19...

タグ：

posted at 21:29:48

Yoshi Yamaguchi @ymotongpoo

14年4月30日

完全に牧さんが言ってることに同意。特にgoroutine、channelに対する理解とエラー周りの話。 #golangjp ▶ Rebuild.fm ep42の補足等 : D-7 <altijd in beweging> goo.gl/gCa0cZ

タグ： golangjp

posted at 10:35:22

Permalink - 2014年04月30日

2014年04月28日(月)

Jxck @Jxck_

14年4月28日

design pattern / “Go言語での構造体実装パターン - Thinking-megane” htn.to/GkYyez

タグ：

posted at 20:17:54

Jxck @Jxck_

14年4月28日

Go での例外処理は、例外処理を値に対する処理と大域脱出による復帰とを分けたのがでかいという理解。多値が返せることがメリットになった瞬間だと思った。

タグ：

posted at 19:36:43

Permalink - 2014年04月28日

2014年04月27日(日)

zunda @zundan

14年4月27日

アメリカにはところどころにFour-way stopっていう、信号が無くて全ての進入路が一時停止の交差点がある。早く着いた車が優先でいきたい方向に進む。交差点の信号が停電で使えなくなった時にはみんな自主的にFour-way stop運用にするのがなかなか良いので、日本でもやると良

タグ：

posted at 20:50:27

Kazunori Sato @kazunori_279

14年4月27日

Docker + GCE + etcd + ray tracing fplus.me/6N3b pic.twitter.com/u91KzYIfkh

タグ：

posted at 20:07:07

非公開

タグ：

posted at xx:xx:xx

Permalink - 2014年04月27日

2014年04月25日(金)

OZPA（おつぱし） @OZPA

14年4月25日

Sublime TextでMarkdownを快適に書くためのプラグインと設定 | OZPAの表4 ozpa-h4.com/2014/04/25/sub...

タグ：

posted at 12:08:20

Permalink - 2014年04月25日

2014年04月23日(水)

@u1aryz

14年4月23日

@ushi3_jp lauchctlでsetenvします

タグ：

posted at 19:18:32

Permalink - 2014年04月23日

2014年04月22日(火)

今日の資料です #gcpja // www.slideshare.net/soundTricker/g... @SlideShareさんから

タグ： gcpja

posted at 22:14:32

SKS rep @repeatedly

最近Fluentdのサイトのアクセス量は日本より海外の方が多くなってきてたりしてます :) #gcpja

タグ： gcpja

posted at 21:34:52

OMI Takekazu @takekazuomi

gsutil で、-m オプション付けて、Cloud Storage にアップロードすると速い #gcpja multi thread upload かな？

タグ： gcpja

posted at 19:49:34

tagomoris @tagomoris