ミイダス株式会社 / 開発部 DIチーム / データエンジニア
データ抽出
他部署からの依頼に基づき、プロダクト(ミイダス)や社内システム(CRM 等)のデータを抽出・提供しています。 【担当内容・実績】 ・約 2,000 テーブル・数千万レコード規模の大規模環境でデータ抽出を実施 ・定期的な分析が必要なデータについて、DB 上にテーブルや View を作成し継続的な分析基盤を構築 【技術的な工夫】 ・複雑なシステム仕様を調査しながら適切なクエリを設計 ・個人情報の取り扱い、提供形態(集計データ / 生データ)を適切に判断 【利用ツール】 ・データベース / DWH:Amazon Aurora MySQL, Amazon Redshift, DuckDB ・ツール:dbt, Jupyter Notebook ・言語 / ライブラリ:Python(numpy, pandas, matplotlib)