higuchiの記事一覧
-
Materialized View を go で作る
BigQuery に Materialized View がβリリースされました。 https://cloud.google.com/bigquery/docs/materialized-views-intro go の […]
-
Cloud Functions のアクセス制御
○リカリさんのGCP記事って助かりますよね。「その記事、知ってます!!」と話がスムーズに流れたり。 [参考] Google Cloud (GCP) Functionsの関数コール権をIAMで管理するためのテクニックhtt […]
-
GCSのオブジェクトをS3にコピーする
先日、発表中に機材トラブルがあり地獄を見たので、次回から発表はフリップでやろうかと思っている人です。 gsutil で GCS から S3 にオブジェクトをコピーしたい時に、GCS → S3 でググると S3 → GCS […]
-
BigQueryのパフォーマンスを上げる方法
今春の新入社員に「えっ、なんでクラスター化してないですか？」と言われたくない人の為にクラスター化テーブルについて書きます。 2018/08にβ版がリリースされている機能です。 クラスター化テーブルの概要 文章が難解なので […]
-
BigQueryでお金を溶かさないコツ
BigQueryは従量課金なので、下手なクエリを打って無駄にお金を溶かしたくはないものです。 操作ミスで高いクエリを実行してしまう大きな理由として、パーティション指定のし忘れがあると思います。 パーティション指定をし忘れ […]
-
Data Studio でデータ統合できるってよ
BigQuery にデータがあるなら、同じGCPのプロダクトであるData Studio で可視化したいところです。無料ですしね。 現状、BigQuery のデータを Data Studio メインで可視化している企業は […]
-
Data Studio のレポートを可視化する
デブサミ2018で話してきた一部を書きます。無料のBIツール Google Data Studio の運用についてです。 Data Studioは データソースのキャッシュを自動で更新します。 なので、従量課金のデータソ […]
-
BigQueryでUDFを使用する
BigQueryはUDF(ユーザー定義の関数)をサポートしています。UDFはJavaScriptとSQL式で記述する事が出来ます。 サポートされる UDF 言語 今回はデータ型がSTRINGのカラムにJSON形式のデータ […]
-
課金エクスポートの移行
本日(10/13)、たまたまエクスポート先のテーブルを見る機会があったのですが、v1とかいうテーブルが増えました。 GCPには自動的に日次の課金データをBigQueryにエクスポートする機能があります。 GCPのコンソー […]