Python3とJavaでクラスを書いてみた 静的言語ばかりやってきたが、機械学習とかやりたいので、Pythonの勉強を始めることにした。 これまでやってきたGo、Java、TypeScriptとはなかなか違うところが多くてカルチャーショックを受けている... とは言え、新しい…

PythonでFizz Buzz書いてみた 静的言語ばかりやってきたが、機械学習とかやりたいので、Pythonの勉強を始めることにした。 これまでやってきたGo、Java、TypeScriptとはなかなか違うところが多くてカルチャーショックを受けている... とは言え、新しい言語を…

Apache Beam with Google Cloud Dataflow(over 2.0.x系)入門~基本的なGroupByKey編~ Apache Beamの5つのCore Transformの内の1つ、GroupByKeyの基本的な使い方について記す。 CoGroupByKeyなどについては別の機会に書けたらなと思う。 Apache Beam や Cloud …

Apache Beam with Cloud Dataflow(over 2.0.0系)入門~基本部分~ParDoまで~ 何回に分けてApache Beam with dataflowについて書こうと思う。 今回は、基本的なこと~TransformのParDoまでを書く。 最後にローカルで動作するコードも書く。 Apache BeamとCloud D…

IntelliJとGradleで始めるApache Beam 2.0.x with Google Cloud Dataflow 基本的にドキュメントでは、Mavenでのクイックスタートしか書いていなかったので、Apache BeamをGradleとIntelliJで始める方法をメモする。 今回は、Pipelineに対するOptionを指定す…