DuckDB を使ってクラウドストレージに置かれたデータを解析してみる
こんにちは kyuita です。 皆様はシステムエンジニアとして働いているとこんな場面に身に覚えがないでしょうか。 ・クラウドストレージ(GCS, S3 など)にログデータをアーカイブとして残している。だけど一度も中身を見たことない。 ・突然の依頼で大量のデータが納品されてデータの中身を把握しないといけない。 そんな…
こんにちは kyuita です。 皆様はシステムエンジニアとして働いているとこんな場面に身に覚えがないでしょうか。 ・クラウドストレージ(GCS, S3 など)にログデータをアーカイブとして残している。だけど一度も中身を見たことない。 ・突然の依頼で大量のデータが納品されてデータの中身を把握しないといけない。 そんな…
こんにちは、Yama です。 ChatGPT の登場から AI が民衆化して、業務の中でも広く使われるようになってきました。 AI サービスも日々進化し、ますますその性能は高くなっていますね。 本日は、文書検索の精度をさらに高める Google Cloud が提供する AI ソリューション「Vertex AI Sea…
こんにちは!この記事では、Kubernetes の基本である「Pod のライフサイクル」について解説します。 Pod は Kubernetes の中で最も基本的なコンポーネントで、アプリケーションを動かす「容器」のようなものです。この仕組みを理解することで、Kubernetes をより効果的に使えるようになります ま…
こんにちは。shirota です。 今回のテーマは WEB サーバーのオートスケールです。 本ブログを通して、以下の内容をお伝えできればと思います。 - オートスケールについて - Google Cloud でオートスケールを使用する方法 - WEB サーバー(Apache)の負荷状況でオートスケールをさせる方法 な…
こんにちは、エンジニアの角田です。 先日、Google Cloud Next Tokyo '24 にてバルス株式会社様と登壇させていただきました。 テーマはこちら、 「 事例から学ぶ GPU 活用術。インフラ効率化と安定化に向けた実践的アプローチ 」 実践的アプローチということで、 進行形のプロジェクトの試行錯誤をし…
65歳。Google Cloud 認定資格全冠がめでたい!もしかして最高齢?の続編です。現在の IT 関係者は Google Cloud や AWS、Azure のパブリッククラウド(以下クラウド)の便利さを知る方が増えていると思いますが、実際に触る機会のない方や一般の方にとってはクラウド IT は高度な知識や技術、…
毎月2回の歌舞伎座通いを欠かさない matt です。先日 Google Cloud 認定11資格を全て取得しました!65歳と2ヶ月での達成、Google Cloud 試験の詳細情報は非公開ですので最高齢記録かは不明です。人生で一番勉強したこの期間を blog で振り返ってみたいと思います。 全冠の軌跡 grasys…
2024年9月17日(火)、書籍『図解即戦力 Google Cloud のしくみと技術がこれ1冊でしっかりわかる教科書[改訂2版]』を株式会社技術評論社より出版しました。本書は、紙の書籍と電子書籍を合算して売上一万部突破した書籍の改訂版で、新たに AIサービスの章が追加されています。grasys の現役エンジニアが…
こんにちは、エンジニアの nishino です。 本日は、Vertex AI を使うと MLOps の設計が簡単になる、というお話をさせていただこうと思います。 MLOps とは MLOps は ML プロジェクト(機械学習プロジェクト)の開発から運用の流れを可視化した一連の全体像です。プロジェクト推進のために ML…
はじめに 初めまして kyuita です。 エンジニアの皆さんは普段どんなエディターを使っているでしょうか。 自分は VSCode を利用していますが、昨今クラウド IDE なるものが使われてる現場も増えていると聞きます。 今回は Google が開発しているクラウド IDE である「Project IDX」のβ版が…
Google Cloud Next Tokyo '24 登壇します 2024年8月1日(木)、2日(金)にパシフィコ横浜ノースで開催される Google Cloud Next Tokyo '24に、grasys から角田竜馬、バルス株式会社様より髙瀨 希望氏 による共同登壇をいたします。 ブースも出展いたしますので、…
初めまして、2024年1月に入社した yoshida です。 Google Cloud Next '24 で Cloud Run に関する最新情報がいくつか紹介されました。 その中でも Direct VPC Egress が GA( General Availability:一般公開の意) したとのことで、様々な方法…
初めまして i10 と申します。もしかしたら、この名前に見覚えのある方はお久しぶりかもです。かれこれ7年くらい前まで渋谷でインフラエンジニアをやっておりました。今は恵比寿でインフラエンジニアをやっております。いわゆる復帰勢というやつです。 先日、一ヶ月先輩のmoridy さんがAnsible に関する入門記事を書いて…
はじめまして、昨年の終わりにgrasysに入りましたmattです。先ずは自己紹介を兼ねて1、そして想定外に面白くて良く出来ている!と思った2、 最後に今思うことの3についてお話します。 このタイトルについて 私は昨年前職を定年退職後の継続雇用満了で退社。数年前から担当していたオープンソース製品の仕事でAWSクラウドを…
前書き こんにちは!! grasy新人エンジニアtokuraです。 8月にgrasysに入社して、毎日勉強することがいっぱいで充実している日々を過ごしています。 さて、最近私は負荷試験でサーバーを調整する業務を担当しました。 主に、負荷がかかるサーバーなどの性能の調整をしていたのですが、負荷試験ツールそのものについて…
はじめまして、shirotaです。 本記事では、 IaC(Infrastructure as Code)の利用で起こりうるドリフト(drift)という課題と、解決に役立つツール「driftctl」についてご紹介します。 IaCのメリットと課題 IaCとは、Infrastructure as Codeの略であり、日本語…
こんにちはtsunodaです。 Google Cloud Storage(GCS)の料金形態についてポイントまとめました。 とりあえずこれを読むと、 「GCSはここで料金かかるのかー!」 という大まかな知識が身につきます。 内容については 2023/09 時点のものです。 Google Cloud Storage(G…
この記事でわかること インフラ領域での脆弱性を突いた攻撃やマルウェアからシステムを守るために、それらを検出するセキュリティサービスをGoogle Cloud (GCP)、AWS、Azureそれぞれのクラウドごとにまとめていきます。 これからクラウドを活用していこうと決めたものの、それぞれのクラウドでセキュリティサービ…
今回は弊社代表の長谷川がGoogle Cloud (GCP)の最新の活用法を解説いたします! 是非ご視聴ください! 【タイトル】 Google Cloud (GCP)を駆使するエンジニア集団grasysの最新の活用法 【登壇者】 株式会社grasys 代表取締役 長谷川祐介 【講演内容】 Google Cloud (…
こんにちはtsunodaです。 まだbetaですが、GCEインスタンスの名前が変更できるようになりましたね。 tagは?disk nameはどうなんの?とか気になったので、どこまで変更してくれるのかやってみました。 検証環境 インスタンス名は、 tsunoda-test001 から tsunoda-alpha001…
こんにちは。加藤です。 業務では主に BigQuery を用いてデータ分析、 React、Laravel を使用してデータ分析基盤の保守・開発を行なっています。 2021年 11 月に Google Cloud (GCP) Professional Cloud Architect を取得していたのですが、 ベースとな…
こんにちは。エンジニアの山田です。 昨今ではAI(人工知能)の技術も進歩し、徐々に活用され始めていますが、例えば画像認識を使用したAIでは大量に蓄積された画像データから人の特徴や動作を学習(ディープラーニング)し、高い精度で個人を特定することができますし、ECサイトや動画配信サイトで使用されているAIでは個人の閲覧履…
はじめまして。grasys Marketingチームです。 最近はキャンプにハマっており、少しずつキャンプ道具が増えてきました。まだまだ知識も経験もないのでまずは安価なものから手をつけていますが、Youtubeでは道具レビューなどの動画がたくさんあり沼にハマる未来が見えてきています。 さてさて、今回はタイトルにある通りです…
クラウドインフラやデータ分析基盤を設計・構築・運用する株式会社 grasys(東京都渋谷区、代表取締役:長谷川祐介、以下 grasys)は、Google Cloud (GCP) Partner Advantage プログラムにおいてインフラストラクチャのスペシャライゼーション認定を取得しました。 specializa…
今年4月に入社した新井です。 Cloud IAMについて調べてみました。 IAMの役割 IAMは「誰が」「どのような操作を」「何に対して」行えるのかを設定して、他のリソースへのアクセスを防ぐ役割があります。IAMを使用することで最小権限のセキュリティ原則を導入することもできます。 IAMの構成 IAMは大きく3つの要…
こんにちはtsunodaです。 もう11月、、小さい頃は年末ってワクワクしましたよね!小さい頃は! GKEを触ってて思ったのが、 みんなyamlファイルどこにどう置いて管理してるの? です。 terraformのディレクトリ管理どうしてる?的な。 Dockerfile、cloudbuild.yaml、ingressや…
こんにちはエンジニアのいずみです。 Google Cloud (GCP)から2022/10/11にGAされたBatchを簡単に使ってみようと思います。 その前に正直なところBatchって、、、と思いませんでした?Cloud BatchでもなくBatchって??まぁその辺はGoogleさんに何かこだわりでもあるんでしょ…
とにかくGKE/K8sを触ってみたい方むけ! boom boom! Hello Cloud!どうも、しみちゃんでございます。 GKE が広く使われるようになってから久しいですね。 GKEについて、たくさんの入門記事がある中、改めて2022年度版の最新の入門記事を書こうと思います。 こんな方におすすめの記事になっている…
はじめに こんにちは、ATです。 Dataplexとは、Googleのデータファブリックなサービスです。データファブリックとはインテリジェントな自動システムを使用して、データを一元的に検出、管理するアーキテクチャや環境のことらしく、データファブリックであるDataplexはGoogleの各種サービスを組み合わせデータ…
こんにちは、スプラ3の前夜祭でトリカラバトルにて中間管理職的体験をし、ツイッターの同じ陣営に強く共感している高田です。 下克上の2色は担当アイドルからの声援?応援?があったようで…終わってから知りました…マンタローのエイエイオーな応援が欲しかったな… さて、今回のタイトルについて書くに至った経緯ですが ゲーム案件でし…