質問 1:A data engineer wants to join a stream of advertisement impressions (when an ad was shown) with another stream of user clicks on advertisements to correlate when impressions led to monetizable clicks.
In the code below, Impressions is a streaming DataFrame with a watermark ("event_time", "10 minutes")

The data engineer notices the query slowing down significantly.
Which solution would improve the performance?
A. Joining on event time constraint: clickTime >= impressionTime - interval 3 hours and removing watermarks
B. Joining on event time constraint: clickTime == impressionTime using a leftOuter join
C. Joining on event time constraint: clickTime + 3 hours < impressionTime - 2 hours
D. Joining on event time constraint: clickTime >= impressionTime AND clickTime <= impressionTime interval 1 hour
正解:D
質問 2:Two data engineers are working on the same Databricks notebook in separate branches. Both have edited the same section of code. When one tries to merge the other's branch into their own using the Databricks Git folders UI, a merge conflict occurs on that notebook file. The UI highlights the conflict and presents options for resolution. How should the data engineers resolve this merge conflict using Databricks Git folders?
A. Use the Git CLI in the cluster's web terminal to force-push the conflicted merge (git push -force), overriding the remote branch with the local version and discarding changes.
B. Use the Git folders UI to manually edit the notebook file, selecting the desired lines from both versions and removing the conflict markers, then mark the conflict as resolved.
C. Delete the conflicted notebook file via the Databricks workspace UI, commit the deletion, and recreate the notebook from scratch in a new commit to bypass the conflict entirely.
D. Abort the merge, discard all local changes, and try the merge operation again without reviewing the conflicting code.
正解:B
解説: (Topexam メンバーにのみ表示されます)
質問 3:A platform engineer needs to report the resource consumption, categorized by SKU tier, across all workspaces. The engineer decides to use the system.billing.usage system table to create a query. Which SQL query will accurately return the daily usage by product?
A.
B.
C.
D.
正解:B
解説: (Topexam メンバーにのみ表示されます)
質問 4:A facilities-monitoring team is building a near-real-time PowerBI dashboard off the Delta table device_readings:
Columns:
device_id (STRING, unique sensor ID)
event_ts (TIMESTAMP, ingestion timestamp UTC)
temperature_c (DOUBLE, temperature in °C)
Requirement:
For each sensor, generate one row per non-overlapping 5-minute
interval, offset by 2 minutes (e.g., 00:02-00:07, 00:07-00:12, ...).
Each row must include interval start, interval end, and average
temperature in that slice.
Downstream BI tools (e.g., Power BI) must use the interval timestamps
to plot time-series bars.
A. SELECT device_id,
event_ts,
AVG(temperature_c) OVER (
PARTITION BY device_id
ORDER BY event_ts
RANGE BETWEEN INTERVAL 5 MINUTES PRECEDING AND CURRENT ROW
) AS avg_temp_5m
FROM device_readings
WINDOW w AS (window(event_ts, '5 minutes', '2 minutes'));
B. SELECT device_id,
window.start AS bucket_start,
window.end AS bucket_end,
AVG(temperature_c) AS avg_temp_5m
FROM device_readings
GROUP BY device_id, window(event_ts, '5 minutes', '5 minutes', '2 minutes') ORDER BY device_id, bucket_start;
C. SELECT device_id,
date_trunc('minute', event_ts - INTERVAL 2 MINUTES) + INTERVAL 2 MINUTES AS bucket_start, date_trunc('minute', event_ts - INTERVAL 2 MINUTES) + INTERVAL 7 MINUTES AS bucket_end, AVG(temperature_c) AS avg_temp_5m FROM device_readings GROUP BY device_id, date_trunc('minute', event_ts - INTERVAL 2 MINUTES) ORDER BY device_id, bucket_start;
D. WITH buckets AS (
SELECT device_id,
window(event_ts, '5 minutes', '2 minutes', '5 minutes') AS win,
temperature_c
FROM device_readings
)
SELECT device_id,
win.start AS bucket_start,
win.end AS bucket_end,
AVG(temperature_c) AS avg_temp_5m
FROM buckets
GROUP BY device_id, win
ORDER BY device_id, bucket_start;
正解:D
解説: (Topexam メンバーにのみ表示されます)
質問 5:The following table consists of items found in user carts within an e-commerce website.

The following MERGE statement is used to update this table using an updates view, with schema evolution enabled on this table.

How would the following update be handled?
A. The new restored field is added to the target schema, and dynamically read as NULL for existing unmatched records.
B. The update is moved to separate ''restored'' column because it is missing a column expected in the target schema.
C. The update throws an error because changes to existing columns in the target schema are not supported.
D. The new nested field is added to the target schema, and files underlying existing records are updated to include NULL values for the new field.
正解:D
解説: (Topexam メンバーにのみ表示されます)
質問 6:The Databricks workspace administrator has configured interactive clusters for each of the data engineering groups. To control costs, clusters are set to terminate after 30 minutes of inactivity.
Each user should be able to execute workloads against their assigned clusters at any time of the day.
Assuming users have been added to a workspace but not granted any permissions, which of the following describes the minimal permissions a user would need to start and attach to an already configured cluster.
A. "Can Restart" privileges on the required cluster
B. Cluster creation allowed. "Can Restart" privileges on the required cluster
C. "Can Manage" privileges on the required cluster
D. Cluster creation allowed. "Can Attach To" privileges on the required cluster
E. Workspace Admin privileges, cluster creation allowed. "Can Attach To" privileges on the required cluster
正解:A
解説: (Topexam メンバーにのみ表示されます)
質問 7:A data engineering team uses Databricks Lakehouse Monitoring to track the percent_null metric for a critical column in their Delta table.
The profile metrics table (prod_catalog.prod_schema.customer_data_profile_metrics) stores hourly percent_null values.
The team wants to:
Trigger an alert when the daily average of percent_null exceeds 5% for
three consecutive days.
Ensure that notifications are not spammed during sustained issues.
A. WITH daily_avg AS (
SELECT DATE_TRUNC('DAY', window.end) AS day,
AVG(percent_null) AS avg_null
FROM prod_catalog.prod_schema.customer_data_profile_metrics
GROUP BY DATE_TRUNC('DAY', window.end)
)
SELECT day, avg_null
FROM daily_avg
ORDER BY day DESC
LIMIT 3
Alert Condition: ALL avg_null > 5 for the latest 3 rows
Notification Frequency: Just once
B. SELECT SUM(CASE WHEN percent_null > 5 THEN 1 ELSE 0 END) AS violation_days FROM prod_catalog.prod_schema.customer_data_profile_metrics WHERE window.end >= CURRENT_TIMESTAMP - INTERVAL '3' DAY Alert Condition: violation_days >= 3 Notification Frequency: Just once
C. SELECT AVG(percent_null) AS daily_avg
FROM prod_catalog.prod_schema.customer_data_profile_metrics
WHERE window.end >= CURRENT_TIMESTAMP - INTERVAL '3' DAY
Alert Condition: daily_avg > 5
Notification Frequency: Each time alert is evaluated
D. SELECT percent_null
FROM prod_catalog.prod_schema.customer_data_profile_metrics
WHERE window.end >= CURRENT_TIMESTAMP - INTERVAL '1' DAY
Alert Condition: percent_null > 5
Notification Frequency: At most every 24 hours
正解:A
解説: (Topexam メンバーにのみ表示されます)
質問 8:The data engineering team is migrating an enterprise system with thousands of tables and views into the Lakehouse. They plan to implement the target architecture using a series of bronze, silver, and gold tables. Bronze tables will almost exclusively be used by production data engineering workloads, while silver tables will be used to support both data engineering and machine learning workloads. Gold tables will largely serve business intelligence and reporting purposes. While personal identifying information (PII) exists in all tiers of data, pseudonymization and anonymization rules are in place for all data at the silver and gold levels.
The organization is interested in reducing security concerns while maximizing the ability to collaborate across diverse teams.
Which statement exemplifies best practices for implementing this system?
A. Because all tables must live in the same storage containers used for the database they're created in, organizations should be prepared to create between dozens and thousands of databases depending on their data isolation requirements.
B. Isolating tables in separate databases based on data quality tiers allows for easy permissions management through database ACLs and allows physical separation of default storage locations for managed tables.
C. Because databases on Databricks are merely a logical construct, choices around database organization do not impact security or discoverability in the Lakehouse.
D. Storinq all production tables in a single database provides a unified view of all data assets available throughout the Lakehouse, simplifying discoverability by granting all users view privileges on this database.
E. Working in the default Databricks database provides the greatest security when working with managed tables, as these will be created in the DBFS root.
正解:B
解説: (Topexam メンバーにのみ表示されます)
安全的な支払方式を利用しています
Credit Cardは今まで全世界の一番安全の支払方式です。少数の手続きの費用かかる必要がありますとはいえ、保障があります。お客様の利益を保障するために、弊社のCertified-Data-Engineer-Professional問題集は全部Credit Cardで支払われることができます。
領収書について:社名入りの領収書が必要な場合、メールで社名に記入していただき送信してください。弊社はPDF版の領収書を提供いたします。
弊社は無料Databricks Certified-Data-Engineer-Professionalサンプルを提供します
お客様は問題集を購入する時、問題集の質量を心配するかもしれませんが、我々はこのことを解決するために、お客様に無料Certified-Data-Engineer-Professionalサンプルを提供いたします。そうすると、お客様は購入する前にサンプルをダウンロードしてやってみることができます。君はこのCertified-Data-Engineer-Professional問題集は自分に適するかどうか判断して購入を決めることができます。
Certified-Data-Engineer-Professional試験ツール:あなたの訓練に便利をもたらすために、あなたは自分のペースによって複数のパソコンで設置できます。
TopExamは君にCertified-Data-Engineer-Professionalの問題集を提供して、あなたの試験への復習にヘルプを提供して、君に難しい専門知識を楽に勉強させます。TopExamは君の試験への合格を期待しています。
弊社のDatabricks Certified-Data-Engineer-Professionalを利用すれば試験に合格できます
弊社のDatabricks Certified-Data-Engineer-Professionalは専門家たちが長年の経験を通して最新のシラバスに従って研究し出した勉強資料です。弊社はCertified-Data-Engineer-Professional問題集の質問と答えが間違いないのを保証いたします。

この問題集は過去のデータから分析して作成されて、カバー率が高くて、受験者としてのあなたを助けて時間とお金を節約して試験に合格する通過率を高めます。我々の問題集は的中率が高くて、100%の合格率を保証します。我々の高質量のDatabricks Certified-Data-Engineer-Professionalを利用すれば、君は一回で試験に合格できます。
一年間の無料更新サービスを提供します
君が弊社のDatabricks Certified-Data-Engineer-Professionalをご購入になってから、我々の承諾する一年間の更新サービスが無料で得られています。弊社の専門家たちは毎日更新状態を検査していますから、この一年間、更新されたら、弊社は更新されたDatabricks Certified-Data-Engineer-Professionalをお客様のメールアドレスにお送りいたします。だから、お客様はいつもタイムリーに更新の通知を受けることができます。我々は購入した一年間でお客様がずっと最新版のDatabricks Certified-Data-Engineer-Professionalを持っていることを保証します。
弊社は失敗したら全額で返金することを承諾します
我々は弊社のCertified-Data-Engineer-Professional問題集に自信を持っていますから、試験に失敗したら返金する承諾をします。我々のDatabricks Certified-Data-Engineer-Professionalを利用して君は試験に合格できると信じています。もし試験に失敗したら、我々は君の支払ったお金を君に全額で返して、君の試験の失敗する経済損失を減少します。
Databricks Certified-Data-Engineer-Professional 試験シラバストピック:
| セクション | 目標 |
| 監視とアラート | - アラート
- 1. Workflows UIとJobs APIを使用して、ジョブのステータスやパフォーマンスの問題に関する通知を構成する
- 2. SQL Alertsを使用してデータ品質を監視する
- 監視
- 1. Query ProfileとSpark UIを使用してワークロードを監視する
- 2. Lakeflow Declarative Pipelinesのイベントログを使用してパイプラインを監視する
- 3. システムテーブルを使用して、リソース使用率、コスト、監査、およびワークロードの可観測性(オブザーバビリティ)を確保する
- 4. Databricks REST APIとDatabricks CLIを使用してジョブとパイプラインを監視する
|
| データモデリング | - データモデルの設計と最適化
- 1. パーティショニングやZ-Orderingに対するliquid clusteringのメリットを特定する
- 2. Delta Lakeを使用して、大規模なデータセットを管理するためのスケーラブルなデータモデルを設計および実装する
- 3. liquid clusteringを使用してデータレイアウトの決定を簡素化し、クエリパフォーマンスを最適化する
- 4. 効率的なクエリと集計を行う分析ワークロード向けのディメンショナルモデルを設計する
|
| データセキュリティとコンプライアンスの確保 | - データセキュリティメカニズムの適用
- 1. ACLを使用してワークスペースオブジェクトを保護し、最小権限の原則を適用する
- 2. ハッシュ化、トークン化、抑制、汎化を含む、匿名化および仮名化の手法を適用する
- 3. 行フィルターと列マスクを使用して、機密性の高いテーブルデータを保護する
- コンプライアンスの確保
- 1. PII(個人特定情報)を検出してマスクする、コンプライアンスに準拠したバッチおよびストリーミングパイプラインを実装する
- 2. データ保持ポリシーに準拠したデータパージ(削除)ソリューションを開発する
|
| PythonおよびSQLを使用したデータ処理コードの開発 | - Pythonおよび開発ツールの使用
- 1. Pandas/Python UDFを使用したユーザー定義関数の開発
- 2. PyPIパッケージ、ローカルのwheel、ソースアーカイブを含む、外部のサードパーティライブラリのインストールと依存関係の管理およびトラブルシューティングを行う
- 3. Databricks Asset Bundlesに最適化されたスケーラブルなPythonプロジェクト構造を設計および実装し、モジュール開発、デプロイ自動化、およびCI/CD統合を可能にする
- Lakeflow Declarative Pipelines、SQL、およびApache Sparkを使用したETLパイプラインの構築とテスト
- 1. assertDataFrameEqual、assertSchemaEqual、DataFrame.transform、テストフレームワーク、およびデバッグツールを使用して、単体テストおよび結合テストを開発する
- 2. APPLY CHANGES APIを使用して、Lakeflow Declarative PipelinesにおけるCDCを簡素化する
- 3. if/elseやforeachなどの制御フロー演算子を使用してパイプラインコンポーネントを作成する
- 4. Spark Structured StreamingとLakeflow Declarative Pipelinesを比較し、スケーラブルなETLパイプラインに最適なアプローチを決定する
- 5. マテリアライズドビューと比較したストリーミングテーブルのメリットとデメリットを説明する
- 6. UI、API、またはCLIを介してJobsを使用し、ETLワークロードを作成および自動化する
- 7. Lakeflow Declarative PipelinesとAuto Loaderを使用して、信頼性が高く本番環境に対応したバッチおよびストリーミングデータパイプラインを構築および管理する
- 8. 環境、依存関係、高メモリのノートブックタスク、および再試行動作に適した構成を選択する
|
| データの共有とフェデレーション | - データの共有とフェデレーション
- 1. Delta Sharingを使用して、Lakehouseのライブデータを任意のコンピューティングプラットフォームと共有する
- 2. Databricks間共有を使用したDatabricksデプロイメント間、またはオープン共有プロトコルを使用した外部プラットフォームとの安全なDelta Sharingを実証する
- 3. サポートされているソースシステム全体で、適切なガバナンスを備えたLakehouse Federationを構成する
|
| コストとパフォーマンスの最適化 | - コストとパフォーマンスの最適化
- 1. Unity Catalogの管理テーブルが運用オーバーヘッドとメンテナンスの負担を軽減する仕組みと理由を理解する
- 2. データスキップやファイルプルーニングを含む、大規模データセットに対するDatabricksのクエリ最適化手法を理解する
- 3. Change Data Feedを適用して、ストリーミングテーブルの制限に対処し、レイテンシを改善する
- 4. クエリプロファイリングを使用して、非効率な結合やデータシャッフルなどのボトルネックを特定する
- 5. deletion vectorsやliquid clusteringなどのDelta最適化手法を理解する
|
| データの取り込みと取得 | - データ取り込みパイプラインの設計と実装
- 1. Deltaを使用して、バッチデータとストリーミングデータの両方を処理できるアペンド専用のデータパイプラインを作成する
- 2. メッセージバスやクラウドストレージなどのソースから、Delta Lake、Parquet、ORC、AVRO、JSON、CSV、XML、テキスト、およびバイナリデータを含むフォーマットを取り込む
|
| デバッグとデプロイ | - デバッグとトラブルシューティング
- 1. Lakeflow Declarative PipelinesのイベントログとSpark UIを使用して、Lakeflow Declarative PipelinesおよびSparkパイプラインをデバッグする
- 2. Spark UI、クラスターログ、システムテーブル、およびクエリプロファイルを使用して診断情報を特定し、エラーのトラブルシューティングを行う
- 3. ジョブの修復(job repairs)とパラメータの上書きを使用して、エラーを分析し、失敗したジョブランを修復する
- CI/CDのデプロイ
- 1. ノートブックとコードのデプロイにDatabricks Gitフォルダーを使用し、GitベースのCI/CDワークフローを構成および統合する
- 2. Databricks Asset Bundlesを使用してDatabricksリソースを構築およびデプロイする
|
| データガバナンス | - エンタープライズデータのガバナンス
- 1. Unity Catalogの権限継承モデルの理解を実証する
- 2. エンタープライズデータに説明とメタデータを作成・追加して、検出可能性を向上させる
|
| データの変換、クレンジング、および品質 | - データの変換と検証
- 1. ウィンドウ関数、結合、集計を含む高度な変換を行うための、効率的なSpark SQLおよびPySparkコードを記述する
- 2. Lakeflow Declarative PipelinesまたはクラシックジョブのAuto Loaderを使用して、不正データの隔離(クアランティン)プロセスを開発する
|
Databricks Certified Data Engineer Professional 認定 Certified-Data-Engineer-Professional 試験問題:
問題 #1
Assuming that the Databricks CLI has been installed and configured correctly, which Databricks CLI command can be used to upload a custom Python Wheel to object storage mounted with the DBFS for use with a production job?
A. libraries
B. configure
C. workspace
D. fs
E. jobs
問題 #2
The DevOps team has configured a production workload as a collection of notebooks scheduled to run daily using the Jobs Ul. A new data engineering hire is onboarding to the team and has requested access to one of these notebooks to review the production logic. What are the maximum notebook permissions that can be granted to the user without allowing accidental changes to production code or data?
A. Can run
B. Can manage
C. Can edit
D. Can Read
問題 #3
A data engineer is using the AUTO CDC API in Lakeflow Spark Declarative Pipeline to propagate deletions from a source table (orders_source) to a target table (orders_target). The source has Change Data Feed (CDF) enabled, but some delete events arrive out of order due to upstream delays. How does the AUTO CDC API internally ensure deletions are applied correctly despite out-of-order events?
A. It runs VACUUM on the target table to purge conflicting records.
B. It manually sorts incoming events by timestamp before applying changes.
C. It ignores deletions if they arrive after updates for the same key.
D. It uses sequence_by to order events and retains tombstones for deleted rows until older sequences are processed.
問題 #4
A data engineering team uses Databricks Lakehouse Monitoring to track the percent_null metric for a critical column in their Delta table.
The profile metrics table (prod_catalog.prod_schema.customer_data_profile_metrics) stores hourly percent_null values.
The team wants to:
Trigger an alert when the daily average of percent_null exceeds 5% for
three consecutive days.
Ensure that notifications are not spammed during sustained issues.
A. WITH daily_avg AS (
SELECT DATE_TRUNC('DAY', window.end) AS day,
AVG(percent_null) AS avg_null
FROM prod_catalog.prod_schema.customer_data_profile_metrics
GROUP BY DATE_TRUNC('DAY', window.end)
)
SELECT day, avg_null
FROM daily_avg
ORDER BY day DESC
LIMIT 3
Alert Condition: ALL avg_null > 5 for the latest 3 rows
Notification Frequency: Just once
B. SELECT SUM(CASE WHEN percent_null > 5 THEN 1 ELSE 0 END) AS violation_days FROM prod_catalog.prod_schema.customer_data_profile_metrics WHERE window.end >= CURRENT_TIMESTAMP - INTERVAL '3' DAY Alert Condition: violation_days >= 3 Notification Frequency: Just once
C. SELECT AVG(percent_null) AS daily_avg
FROM prod_catalog.prod_schema.customer_data_profile_metrics
WHERE window.end >= CURRENT_TIMESTAMP - INTERVAL '3' DAY
Alert Condition: daily_avg > 5
Notification Frequency: Each time alert is evaluated
D. SELECT percent_null
FROM prod_catalog.prod_schema.customer_data_profile_metrics
WHERE window.end >= CURRENT_TIMESTAMP - INTERVAL '1' DAY
Alert Condition: percent_null > 5
Notification Frequency: At most every 24 hours
問題 #5
A Data Engineer is building a fraud detection pipeline that calls out to Open AI, via a Python library, and needs to include an access token when using the API. Which Databricks CLI command should the Data Engineer use to create the secret?
A. databricks tokens put-token KEY SCOPE; dbutils.secrets.get (KEY, SCOPE)
B. databricks secrets put-secret SCOPE KEY; dbutils.secrets.get (SCOPE, KEY)
C. databricks secrets put-secret KEY SCOPE; dbutils.secrets.get (KEY, SCOPE)
D. databricks tokens put-token SCOPE KEY; dbutils.tokens.get (SCOPE, KEY)
解説:
問題 #1 正解: D | 問題 #2 正解: D | 問題 #3 正解: D | 問題 #4 正解: A | 問題 #5 正解: B |