DataflowJavaSDK Weekly

DataflowJavaSDK の更新を解説します。このブログは Google 社とは一切関係ありません。

2015-03-01から1ヶ月間の記事一覧

side inputs per window 再び, 用語の統一, Partial Group By Key with Combine Function

今週も 12 個ほどコミットがありました。そのなかから主要そうなものをピックアップします。 side inputs per window 再び 先週 32d07db でコミットされた side inputs の windowing 対応ですが、その後 90c811a で一旦 revert され、その後 Makes side inpu…

PCollectionView, Proto2Coder, Windows support, side inputs per window

今週も 21個ほどコミットが push されていました。そのなかから主に backword-incompatible とされている変更をピックアップしてみます。 PCollectionView の型変数削除 Remove unnecessary type parameter on PCollectionView. c919a29 PCollectionView<T,WT> と2</t,wt>…

contrib、Join Library、Thread Num、Combine.BinaryCombineFn、FileBasedSource<T>

今回は初回ということもあり3月上旬からの変更点のうち目についたものを取り挙げます。 contribディレクトリ導入 Setting up 'contrib' directory and rules. · 8a3e55d にて contrib ディレクトリが作成され、community からの contribution によるライブラ…

DataflowJavaSDK 更新解説をはじめます

Dataflow とは Google Cloud Platform のサービスのひとつ Cloud Dataflow のことです。大規模データのバッチ処理、リアルタイムでの集計、分析などをパイプライン形式のプログラミングモデルで記述して分散処理を行うサービスです。現在はアルファ版で申請…