データの基礎定義問題
データパイプラインの設計で「生データのままAzure Synapse Analyticsへロードし、Synapseの大規模並列処理エンジンで変換する」アプローチはETLとELTのどちらか?
A.ETL(Extract → Transform → Load)
✗ ETLは「変換してからロード」。ターゲットに生データをロードするELTとは順序が逆。
B.ELT(Extract → Load → Transform)← 正解
✓ 正解。ELT(Extract → Load → Transform)はまず生データをターゲットにロードし、ターゲットの強力なコンピュート(Synapseなど)で変換する。データレイクハウスアーキテクチャに適合。
C.CDC(Change Data Capture)
✗ CDCはソースの変更データを検出する技術であり、ETL/ELTどちらとも組み合わせて使える別の概念。
D.マイクロバッチETL
✗ マイクロバッチETLはバッチサイズを小さくしたETL。変換の順序はETLと同じで生データをそのままロードしない。
「データの基礎」の他の問題
ある製造工場がQC検査ラインで以下4種類のデータを収集しています。「半構造化データ」に分類されるのはどれか?ある銀行が2つのシステムを運用しています。①ATM出金処理(毎秒数千件・ACID保証必須・即時応答)と②全支店の月次収益…あるECサイトが「注文を受けた瞬間に在庫を引き当て、15秒以内に在庫不足アラートを送信する」要件を持っています。最も適し…ネット銀行が「A口座から1万円引き落とし」と「B口座に1万円入金」を同一トランザクション内で実行中にシステム障害が発生し…注文管理テーブルに「注文ID・顧客名・顧客住所・商品名・商品単価・数量」が1テーブルに入っており、同一顧客が別注文をする…「注文テーブル」に「顧客ID」列があり、「顧客テーブル」の主キーを参照しています。存在しない顧客IDの挿入を防ぐこの列を…
IT・クラウド の関連資格
AWS Certified Cloud Practitioner(CLF-C02)
AWSクラウドの入門資格。クラウドの概念・AWSのコアサービス・セキュリティ・料金モデルを問う。
AWS Certified Solutions Architect - Associate(SAA-C03)
AWSでのシステム設計能力を問うアソシエイト資格。高可用性・セキュリティ・コスト最適化の設計が中心。
AZ-900:Microsoft Azure Fundamentals
クラウドとAzureの基礎を問うMicrosoft認定資格。クラウドの概念、Azureの主要サービス、セキュリティ・コンプライアンス・料金を扱う。