Apache AirFlow で別コンテナを立ち上げて実行
業務でApache AirFlowを初めて触りました。既にコンテナ化していたスクリプトをパイプラインに組み込みたく色々調べたところ、AirFlowのオペレータにDockerOperatorがありました。個人的に詰まったポイントなど共有できればと思います AirFlowもDockerで実行する - まずAirFlowを…
業務でApache AirFlowを初めて触りました。既にコンテナ化していたスクリプトをパイプラインに組み込みたく色々調べたところ、AirFlowのオペレータにDockerOperatorがありました。個人的に詰まったポイントなど共有できればと思います AirFlowもDockerで実行する - まずAirFlowを…
なぜ Apache Superset? BI(ビジネスインテリジェンス)ツールを選定する時、いくつかの条件があると思います。 その中では「機能性」が用途に応えられるのかが選定条件の一つになると思います。 数多のBIツールから一つ一つ調査することになります。 最近の流行りだと ・Tableau ← 非常に優秀だが、ライ…
はじめに grasysの新井です。 直近の案件でkafkaを触る機会があったので、dockerでどうやって動かすのかをまとめてみました。 対象読者 - kafkaを初めて触る人 - dockerでkafkaを動かしてみたい人 構成図 - producer topicへデータを追加するクライアント。 - consume…
はじめに こんにちは。2023年09月に grasys に入社したミャンマー出身のスースーです。データベースについては以前リレーショナルデータベースを使った経験があります。例えば MySQL、PostgreSQL、Oracle Database、IBM Db2 など色々なデータベースを使ったことがあります。私は常に新…
(n‘∀‘)η ヤァーッホォー<2ヶ月ぶりの投稿だよ!grasysではプリチィ担当のどくまです♪ 今回はGKEでFluentクラスタを作った時の作業をまとめるよ!これができればあなたもGKEマスター? ぐらいな濃いめの内容になっています。 なので、初歩的なところははもろもろ省いちゃってますごめんなさい。 ゴール ワン…