本文へスキップ

データ基盤 / Snowflake・AWS

製造ログを扱うデータ基盤の構築・拡張(AWS × Snowflake)

外資系コンサルティングファームの ITコンサルタントとして参画。AWS S3 に蓄積される製造ログを Snowflake へ連携する基盤の構築・拡張、AI を活用したメタデータ管理、CI/CD による自動化、Streamlit による業務自動化を担当しています。

Client
ゲーム業界 事業会社(NDA)
Period
2025 – · 継続中
Scale
全 10 名のプロジェクトにメンバーとして参画(提案・要件定義・開発)
製造ログを扱うデータ基盤の構成図。設備ログ・センサー・作業実績・各種システム → Amazon S3(レイク)→ Snowflake の RAW / TRANSFORM / MART → 可視化・アラート・レポート。CloudFormation / IAM / KMS / Secrets Manager / Route 53 によるガバナンスと運用

Challenge — 課題

データ量・ソースが増え続ける中で、取り込み基盤の拡張と同時に、メタデータ(定義・タグ・リネージ)の整備と運用負荷の低減を進める必要があった。手作業の設定やドキュメント更新がボトルネックになっていた。

Role — 担当範囲

  • データマネジメントの運用フロー設計
  • AI モデルを用いたメタデータ管理(タグ伝播・セマンティックビュー自動生成)の提案書作成と実装
  • AWS・Snowflake・GitHub を連携させるインフラ設計・構築と CI/CD 化
  • Snowflake Streamlit による業務自動化アプリの開発
  • Snowflake 新機能の検証とナレッジ展開(Zenn 連載として公開)

Outcome — 成果

  1. 01未経験領域ながら AWS / Snowflake / Databricks の認定資格を取得して短期間でキャッチアップし、要件定義から実装までを担当
  2. 02AI を活用したメタデータ管理アーキテクチャを提案・実装し、将来の運用工数削減に寄与
  3. 03取り組みを Zenn 連載「これからのメタデータ管理の話をしよう」として公開し、Snowflake ユーザーコミュニティ SnowVillage の配信で紹介
Contact

似たようなことで困っていませんか

メールか LINE をください。だいたい24時間以内に返します。 「こんなことできますか」の一行だけでも構いません。そこから一緒に整理していければと思います。

返信目安
24時間以内
拠点
宮城県仙台市
稼働状況:2026年9月〜 受託枠 残1