データの基礎定義問題
「ELTがETLより有利になる条件」として正しいのはどれか?
A.ソースシステムが強力なコンピュートを持ち変換処理をソース側で実行できる場合
✗ ソース側でデータ変換するのはETLのパターン。ELTはターゲット側で変換する。
B.ターゲットがAzure Synapse等の大規模並列処理エンジンを持つDWで、そのコンピュートを変換に活用できる場合← 正解
✓ 正解。ELTはターゲット(例:Synapse)のMPPエンジンで変換することで、ソース側に負荷をかけずに高速な変換ができる。ターゲットに強力なコンピュートがある場合にELTが有利。
C.変換ルールが複雑すぎてターゲットのSQLで実装困難な場合
✗ 変換が複雑すぎてターゲットのSQLで対応できない場合はETL(ADF、Databricksなど)が有利。
D.データ量が少なく変換が単純な場合
✗ データ量が少ない場合はどちらでも大きな差はない。ELTが特に有利な条件ではない。
「データの基礎」の他の問題
ある製造工場がQC検査ラインで以下4種類のデータを収集しています。「半構造化データ」に分類されるのはどれか?ある銀行が2つのシステムを運用しています。①ATM出金処理(毎秒数千件・ACID保証必須・即時応答)と②全支店の月次収益…あるECサイトが「注文を受けた瞬間に在庫を引き当て、15秒以内に在庫不足アラートを送信する」要件を持っています。最も適し…データパイプラインの設計で「生データのままAzure Synapse Analyticsへロードし、Synapseの大規…ネット銀行が「A口座から1万円引き落とし」と「B口座に1万円入金」を同一トランザクション内で実行中にシステム障害が発生し…注文管理テーブルに「注文ID・顧客名・顧客住所・商品名・商品単価・数量」が1テーブルに入っており、同一顧客が別注文をする…
IT・クラウド の関連資格
AWS Certified Cloud Practitioner(CLF-C02)
AWSクラウドの入門資格。クラウドの概念・AWSのコアサービス・セキュリティ・料金モデルを問う。
AWS Certified Solutions Architect - Associate(SAA-C03)
AWSでのシステム設計能力を問うアソシエイト資格。高可用性・セキュリティ・コスト最適化の設計が中心。
AZ-900:Microsoft Azure Fundamentals
クラウドとAzureの基礎を問うMicrosoft認定資格。クラウドの概念、Azureの主要サービス、セキュリティ・コンプライアンス・料金を扱う。