#bigqueryの記事一覧
-
Data Fusionでデータプラットフォームを作成する
こんにちは。エンジニアの山田です。 昨今ではAI（人工知能）の技術も進歩し、徐々に活用され始めていますが、例えば画像認識を使用したAIでは大量に蓄積された画像データから人の特徴や動作を学習（ディープラーニング）し、高い精 […]
-
BigQuery クエリコストについて
こんにちは、ATです。 最近、BigQueryのクエリを書いていて気になったことがあったのでメモしときます。(2022/03/18時点の内容) BigQueryをオンデマンドで使ってるとクエリ実行時の課金額が気になります […]
-
AWSのデータをBigQuery Omniでさわる
BigQuery Omniを使う機会がありせっかくなので手順や所感をまとめてみました。2022年2月8日時点の情報です。 つい最近のとある記事で「70年前の青森の写真」について取り上げられていましたが、誰の目にも触れられ […]
-
Materialized View を go で作る
BigQuery に Materialized View がβリリースされました。 https://cloud.google.com/bigquery/docs/materialized-views-intro go の […]
-
SQL の小ネタ
こんにちは、ATです。 新型コロナがなにかと世間を騒がしていますね。こういう時こそ冷静に行動したいです。(買い占めやめて、お願い！)というわけでネタに困ったときの小ネタ回です。 今回はSQLの小ネタを書いていきます。 と […]
-
BigQueryのパフォーマンスを上げる方法
今春の新入社員に「えっ、なんでクラスター化してないですか？」と言われたくない人の為にクラスター化テーブルについて書きます。 2018/08にβ版がリリースされている機能です。 クラスター化テーブルの概要 文章が難解なので […]
-
BigQueryでお金を溶かさないコツ
BigQueryは従量課金なので、下手なクエリを打って無駄にお金を溶かしたくはないものです。 操作ミスで高いクエリを実行してしまう大きな理由として、パーティション指定のし忘れがあると思います。 パーティション指定をし忘れ […]
-
BigQueryでUDFを使用する
BigQueryはUDF(ユーザー定義の関数)をサポートしています。UDFはJavaScriptとSQL式で記述する事が出来ます。 サポートされる UDF 言語 今回はデータ型がSTRINGのカラムにJSON形式のデータ […]
-
GKEでFluentクラスタを作っちゃおう！もちろんBigQueryにデータを叩き込むよVer
(n‘∀‘)η ﾔｧｰｯﾎｫｰ<２ヶ月ぶりの投稿だよ！grasysではプリチィ担当のどくまです♪ 今回はGKEでFluentクラスタを作った時の作業をまとめるよ！これができればあなたもGKEマスター？ ぐらいな濃い […]
