Databricks Certified Data Engineer Associate Exam (Databricks-Certified-Data-Engineer-Associate日本語版) - Databricks-Certified-Data-Engineer-Associate日本語 Exam Practice Test
DatabricksにおけるAutoLoaderの機能は何ですか?
Correct Answer: A
Explanation: Only visible for ExamsLabs members. You can sign-up / login (it's free).
データエンジニアが、複数の変換処理で同じデータフレームに繰り返しアクセスするSparkジョブを実行しています。処理間で中間結果をメモリに保存することでパフォーマンスを向上させるには、どのSparkテクニックを使用すべきでしょうか?
Correct Answer: D
外部テーブルを使用するシナリオを特定します。
データ エンジニアは、Parquet Bronze テーブルを作成し、それが外部の場所の特定のパスに保存されるようにする必要があります。
このシナリオではどのテーブルを作成できますか?
データ エンジニアは、Parquet Bronze テーブルを作成し、それが外部の場所の特定のパスに保存されるようにする必要があります。
このシナリオではどのテーブルを作成できますか?
Correct Answer: D
Explanation: Only visible for ExamsLabs members. You can sign-up / login (it's free).
データエンジニアが個人のノートパソコンで作業しており、クラウドストレージ上のDelta Lakeに保存されているデータに対して複雑な変換処理を実行する必要があります。エンジニアはDatabricks Connectを使用してDatabricksクラスターと連携し、ローカルIDEで作業することにしました。Databricks Connectは、エンジニアがDatabricksクラスターと連携しながら、ローカルマシン上でコードの開発、テスト、デバッグをシームレスに行えるようにするには、どのような仕組みになっているのでしょうか?
Correct Answer: A
Explanation: Only visible for ExamsLabs members. You can sign-up / login (it's free).
データ エンジニアは、/path/to/csv にある CSV ファイルのデータを使用して、Databricks にテーブルを作成する必要があります。
次のコマンドを実行します。

次のコード行のうち、上記の空白を埋めてタスクを正常に完了するものはどれですか?
次のコマンドを実行します。

次のコード行のうち、上記の空白を埋めてタスクを正常に完了するものはどれですか?
Correct Answer: C
データエンジニアが、複雑な集計クエリを実行する必要のあるBIチーム向けに、ゴールドレイヤーテーブルを設計しています。要件では、ダッシュボードユーザーの低遅延を確保するためにデータは事前に計算されている必要がありますが、基となるデータは数時間に一度しか変更されません。これらの要件を満たすために、Unityカタログではどのオブジェクトタイプを実装すべきでしょうか?
Correct Answer: B
Explanation: Only visible for ExamsLabs members. You can sign-up / login (it's free).
新しいデータエンジニアリングチームがELTプロジェクトに割り当てられました。新しいデータエンジニアリングチームには、プロジェクトを完全に管理するために、salesテーブルに対する完全な権限が必要です。
新しいデータ エンジニアリング チームにデータベースに対する完全な権限を付与するには、次のコマンドのどれを使用できますか?
新しいデータ エンジニアリング チームにデータベースに対する完全な権限を付与するには、次のコマンドのどれを使用できますか?
Correct Answer: E
データエンジニアは、注文を一度も行ったことのない顧客をすべて見つける必要があります。顧客テーブルには、customer_id、customer_name、およびその他の顧客属性が含まれています。注文テーブルには、order_id、customer_id、およびその他の注文属性が含まれています。両方のテーブルは、customer_idを結合キーとして共有しています。結果には、注文関連の列を含めず、顧客列のみを含める必要があります。この要件を正確に満たす式はどれですか?
Correct Answer: B
Explanation: Only visible for ExamsLabs members. You can sign-up / login (it's free).
データエンジニアが、Azure Data Lake Storage (ADLS) に保存されているデータを参照する外部テーブルを Databricks に作成したいと考えています。目的は、Databricks が管理するストレージにデータを移動することなく、Databricks からこの外部データにアクセスしてクエリを実行できるようにすることです。外部テーブルを正常に作成するには、データエンジニアはどの手順を実行する必要がありますか?
Correct Answer: A
Explanation: Only visible for ExamsLabs members. You can sign-up / login (it's free).
データエンジニアは、ステータス列が等しいデルタテーブルからレコードを削除したいと考えています。
「非アクティブ」。この操作は、データセット全体を書き換えることなく、影響を受ける行のみを変更します。
どのSQLコマンドを使用すべきですか?
「非アクティブ」。この操作は、データセット全体を書き換えることなく、影響を受ける行のみを変更します。
どのSQLコマンドを使用すべきですか?
Correct Answer: A
データエンジニアが、クラウドオブジェクトストレージから生のJSONファイルをDelta LakeテーブルにロードするETLパイプラインをDatabricksで構築しています。このパイプラインは、ACIDトランザクションとスキーマの適用を保証すると同時に、複数の同時実行ジョブからのスケーラブルな読み書きをサポートする必要があります。エンジニアはどのストレージ形式を使用すべきでしょうか?
Correct Answer: C
データエンジニアとデータアナリストがデータパイプラインを共同で開発しています。データエンジニアはPythonを使用してパイプラインのraw、bronze、silverレイヤーを担当し、データアナリストはSQLを使用してパイプラインのgoldレイヤーを担当しています。パイプラインのrawソースはストリーミング入力です。彼らはパイプラインをDelta Live Tablesに移行することを検討しています。Delta Live Tablesへの移行時にパイプラインにどのような変更が必要になりますか?
Correct Answer: C
Explanation: Only visible for ExamsLabs members. You can sign-up / login (it's free).
データエンジニアには、パイプラインの迅速な反復開発に加え、データ取り込みの失敗後には確実にロールバックを行い、規制遵守のための監査証跡を確保し、AIとBIワークロードの両方に対して単一の信頼できる情報源への一貫したアクセスを提供する能力が求められます。
データエンジニアは、ニーズを満たすためにどのような戦略を採用すべきでしょうか?
データエンジニアは、ニーズを満たすためにどのような戦略を採用すべきでしょうか?
Correct Answer: B
Explanation: Only visible for ExamsLabs members. You can sign-up / login (it's free).
データエンジニアが、2つの異なるパイプライン障害のトラブルシューティングを行っています。
- パイプライン A が java.lang.OutOfMemoryError で失敗しました
100GBのデータに対してdisplay(df.collect())コマンドが呼び出された後にスローされる
データセット。
- パイプライン B が広範囲な変換中に失敗します (2 つの大規模なパイプラインの結合)
テーブル)に ExecutorLostFailure エラー メッセージが表示され、エグゼキュータが
シャッフル中のメモリ枯渇。
データエンジニアは、これら2つの問題を解決するためにどのような行動をとるべきでしょうか?
- パイプライン A が java.lang.OutOfMemoryError で失敗しました
100GBのデータに対してdisplay(df.collect())コマンドが呼び出された後にスローされる
データセット。
- パイプライン B が広範囲な変換中に失敗します (2 つの大規模なパイプラインの結合)
テーブル)に ExecutorLostFailure エラー メッセージが表示され、エグゼキュータが
シャッフル中のメモリ枯渇。
データエンジニアは、これら2つの問題を解決するためにどのような行動をとるべきでしょうか?
Correct Answer: C
Explanation: Only visible for ExamsLabs members. You can sign-up / login (it's free).