目次
第176回 Vortex: BigQueryのStorage APIを支えるStorageエンジン（パート1） (中井悦司)
この記事では、Google CloudのBigQueryを支える新しいストレージエンジン「Vortex」について詳しく解説されています。特に、BigQueryのストレージとクエリエンジンがどのように分離されているか、そしてVortexがそのストレージ部分で果たす役割について述べられています。Vortexの特徴として、バッチ処理とストリーミング処理の両方に対応する単一のAPIや、データのACID特性を維持しながら高いレイテンシでのデータ書き込みが可能な点が強調されていますね。
このような複雑なデータ処理を効率的に行うためのアーキテクチャ設計に、Googleの技術力の高さを感じます。特に、VortexがBigQueryの柔軟性をさらに向上させている点は、データエンジニアやアーキテクトにとって非常に興味深い内容です。最新技術を取り入れつつ、具体的な実装方法にも触れているので、技術者にとってはかなり参考になる記事です。
Google Cloud Next Tokyo ’24 速報レポート（プロジェクト間での分析を可能にした高セキュリティな企業データ分析基盤の構築と生成 AI の活用）
G-gen Tech Blog
Google Cloud Next Tokyo ’24 速報レポート（プロジェクト間での分析を可能にした高セキュリティな企業デー…
G-gen の堂原です。当記事では、Google Cloud Next Tokyo ’24 セッション「プロジェクト間での分析を可能にした高セキュリティな企業データ分析基盤の構築と生成 AI の活用…
この記事では、Google Cloud Next Tokyo ’24での三菱地所株式会社の事例を紹介。Google Cloudを用いた企業データ分析基盤の構築とセキュリティ強化、生成AI「Gemini 1.5 Pro」を活用した間取り解析を事例として共有しています。
個人的には「 膨大な規定に順守」するようにシステム構築の最初から意図して対応していることに驚きました。しかし構築時に大変ですがこのようなシステムを設計できれば、その後の保守にコストが増えずにすむため、非常に投資対効果のたかい対策だったのだなと分かりました。特に構築時の実例として、非常に参考になる内容です。