2018-12-01から1ヶ月間の記事一覧

2018年振り返り

総括 今年は仕事の面でも、開発者としての面でも いろんな出来事があって全体的にものすごく忙しい一年だった(毎年なんですけど) blog.ytake.jp.net 登壇というアウトプットはしていた一年だったが、 ブログを書く時間を取れなかった。 が、開発に使う言語の…

PHPカンファレンス2018でApache Sparkの話をしました #phocon

2018年のペチコンも楽しかった! もう二週間前の話ですが、 PHPとApache Sparkで始めるデータ解析処理 という話をしました。 speakerdeck.com 現在公開されている動画はこちら youtu.be *分割されたものが公開されるらしい アプリケーションを成長させるため…

Kakfa ConnectでSinkが動かないときの確認メモ

Apache KafkaからHadoopのHDFS転送で、 うまく転送できないものがあり、忘れないようにするためのメモ アプリケーション自体はいわゆるWebアクセス系のトラッキング メタデータを付与したログデータをFluentdで収集 Apache Kafkaのtopicに格納 Kafka Streams…