Tag

#BigQuery

11 件の記事 · ← all tags


Google Cloud BigQuery アーキテクチャ

BigQuery データ基盤の鮮度と加工品質を両立するアーキテクチャパターン

BigQuery データ基盤で取り込みと加工をレイヤーで分離する設計思想を軸に、Datastream・Pub/Sub・Storage Write API・Continuous Queries・Dataform の選択基準と東京リージョンのコスト構造を整理します。

2026年5月9日 · 20 min
Google Cloud 基礎 Dataform

Dataform 入門: Scheduled Queries の次に検討する宣言的アプローチ

Dataform は Scheduled Queries の完全置き換え先ではなく、宣言的アプローチへの入口です。依存関係・テスト・バージョン管理という Scheduled Queries の限界に直面したタイミングで、段階的に比重を移していける設計になっています。

2026年5月9日 · 12 min
Google Cloud Knowledge Catalog Dataplex

Knowledge Catalog の設計判断 ── Gemini・MCP・BigQuery を貫くコンテキストエンジンの使い方

2026-04-10 に改称した Knowledge Catalog のメタデータモデル (Entry / Aspect Type / Data Products)、MCP によるエージェント統合、旧 Data Catalog 廃止対応、BigQuery ネイティブメタデータの自動取り込みと追加レイヤーを整理します。

2026年5月5日 · 18 min
Google Cloud BigQuery Data Transfer Service Datastream

BigQuery Data Transfer Service の RDBMS コネクタと Datastream・Dataflow の使い分け

BigQuery Data Transfer Service の RDBMS コネクタ追加を起点に、Datastream・Dataflow との使い分けを DELETE 追跡・許容遅延・変換ロジックの 3 軸で整理します。東京リージョン基準のコスト感と設定前の注意点も解説します。

2026年5月5日 · 15 min
Google Cloud 中級 Vertex AI

Vector Search 2.0 が変えた設計思想 ── Agent Search とDB組込み型ベクトル検索の使い分け

Vertex AI Vector Search 2.0 (2026 年 3 月 GA) と Agent Search の使い分けを軸に、AlloyDB・Cloud SQL・Spanner・BigQuery・Firestore への同居構成と、ANN / KNN の課金体系を整理します。

2026年5月5日 · 22 min
Databricks Lakehouse

Databricks はニッチで強い ── BigQuery・Redshift・Snowflake と補完層として組み合わせる設計判断

Databricks は新規クラウド基盤の第一選択ではなく、既存 Spark 資産の移行・DS 中心組織の統合開発・宣言型 ETL・規制業界ガバナンスの 4 領域で DWH と共存させる補完層です。4 つの共存パターンと境界線の引き方を整理します。

2026年5月4日 · 24 min
Google Cloud Looker BigQuery

Looker Conversational Analytics の仕組みと設計判断 ── LookML セマンティックレイヤーが会話品質を決める理由

Looker Conversational Analytics が自然言語クエリを deterministic SQL に変換する仕組み、RBAC・行レベルセキュリティの継承構造、Known Limitations と LookML 整備度の関係、競合との構造的差分、トークン料金を整理します。

2026年5月4日 · 15 min
Google Cloud BigQuery Gemini

BigQuery Managed AI Functions ── SQL から Gemini を呼ぶ設計の転換点

2026-04-13 GA の BigQuery Managed AI Functions を解説。AI.IF / AI.SCORE / AI.CLASSIFY の呼び出し形式、ML.GENERATE_TEXT との設計上の違い、料金モデルと実務上の注意点を整理します。

2026年5月4日 · 15 min
Google Cloud Looker BigQuery

Looker 入門 ── LookML がデータ活用の「自由と統制の二択」を超える仕組み

Looker はダッシュボードツールではなく、LookML によるセマンティックレイヤー基盤です。データ活用が組織に広まらない真因と、Looker の設計思想・導入条件を整理します。

2026年5月4日 · 13 min
Google Cloud BigQuery 入門

BigQuery 入門 ── SQL ひとつで構造化・非構造化・ML・生成 AI まで届く統合分析基盤

BigQuery を「データウェアハウス」だけの製品として理解すると、SQL で扱える範囲を狭く見積もりがちです。列指向と分離アーキテクチャを起点に、SQL だけで非構造化データ・機械学習・生成 AI まで届く統合分析基盤としての世界観とコスト感を、東京リージョン基準で整理します。

2026年5月4日 · 13 min
Google Cloud BigQuery 入門

BigQuery のコストと仕組み 入門 ── DWH の速さと料金を表裏で理解する

BigQuery の速さは無料ではありません。カラム型ストレージとスキャン量課金の関係、東京リージョンの単価、無料枠、SELECT * フルスキャンなどの落とし穴を、コスト視点で整理します。安心して使い始める判断材料を提供します。

2026年5月3日 · 9 min