tencent cloud

Data Lake Compute

製品概要
プロダクト概要
製品の強み
適用シーン
購入ガイド
課金概要
返金説明
支払い期限切れ説明
設定調整費用の説明
クイックスタート
新規ユーザー開通フルプロセス
DLC データインポートガイド
DLCデータ分析の1分間入門
DLC権限管理の1分間入門
パーティションテーブル1分間入門
データ最適化をオンにする
クロスソース分析 EMR Hive データ
標準エンジン構成ガイド
操作ガイド
コンソール操作紹介
開発ガイド
実行環境
SparkJar ジョブ開発ガイド
PySparkジョブ開発ガイド
「クエリパフォーマンス最適化ガイド」
UDF 関数開発ガイド
システム制約
クライアントアクセス
JDBCアクセス
TDLC コマンドラインツールにアクセス
サードパーティソフトウェア連携
Python にアクセス
実践チュートリアル
DLC を Power BI に接続
テーブル作成の実践
Apache Airflowを使用してDLCエンジンのタスクをスケジュールして送信する
StarRocks は DLC 内部ストレージを直接クエリします
Spark の計算コスト最適化プラクティス
DATA + AI
ロールSSOを使用してDLCにアクセスする
SQL構文
SuperSQL構文
標準 Spark 構文概要
標準 Presto 構文の概要
予約語
API Documentation
History
Introduction
API Category
Making API Requests
Data Table APIs
Task APIs
Metadata APIs
Service Configuration APIs
Permission Management APIs
Database APIs
Data Source Connection APIs
Data Optimization APIs
Data Engine APIs
Resource Group for the Standard Engine APIs
Data Types
Error Codes
一般クラスリファレンス
エラーコード
クォータと制限
サードパーティソフトウェアでDLCに接続する操作ガイド
よくあるご質問
権限に関するよくあるご質問
エンジン類のよくある質問
機能に関するよくあるご質問
Sparkジョブクラスに関するよくある質問
DLC ポリシー
プライバシーポリシー
データプライバシーとセキュリティ契約
お問い合わせ

標準エンジンの紹介

PDF
フォーカスモード
フォントサイズ
最終更新日: 2025-12-24 16:43:15
標準エンジンはDLCが提供する計算リソースの一種で、ユーザーが一定の仕様の計算クラスターを迅速に起動できるように支援します。標準エンジンはネイティブの構文と動作に対する包括的なサポートを提供しており、ビッグデータエコシステムに精通したユーザーがより迅速に習熟し、簡単に使用できるようになります。

標準エンジンタイプ

ユーザーはニーズに応じて、さまざまな使用シナリオに対応するために異なる標準エンジンカーネルを選択できます。標準エンジンは以下のタイプに分かれています:
Spark:安定性と効率性に優れたオフラインSQLタスクや、Sparkネイティブのストリーミング/バッチデータジョブ処理に適しています。
Presto:機敏で迅速なインタラクティブクエリ分析に適しています。
ゲートウェイ:ゲートウェイは特殊な標準エンジンの一種で、ネイティブのKyuubiをベースに実装されています。ゲートウェイはユーザーがSpark/Presto計算エンジンに接続してタスクを送信するために使用され、他の計算エンジンを使用するための前提条件となります。
注意:
異なるエンジンタイプはエンジンの課金単価に影響しません。エンジンの詳細な価格については、課金概要を参照してください。

エンジンの弾力性

現在、年額契約のSpark標準エンジンのみが従量課金リソースの弾力性設定をサポートしています。



図に示すように、タスクとリソースグループはまず年額契約部分のリソースを優先的に使用します。ユーザーが提出したタスクが年額契約部分のリソースを使い果たした場合、引き続きタスクを提出すると、設定された従量課金の弾力性リソースが使用されます。図中のタスク03は、年額契約部分のリソースを使い切った後も不足する場合、従量課金部分のリソースを引き続き使用します。



注意:
1. 従量課金の弾性リソースは、実際に使用したコンピューティングリソースに基づいて課金されます。
2. 起動したタスクとリソースグループが従量課金リソースにスケジュールされた場合、年額/月額リソースの一部が解放されても、リソースグループは従量課金部分のリソースを引き続き使用します。リソースグループを再起動すると、年額/月額リソースにスケジュールされます。
3. 単一のSpark標準エンジンで設定できる弾性リソースの上限は、年額/月額リソース数を超えることはできません。つまり、128CUの年額/月額エンジンでは、最大128CUの弾性リソースを設定できます。より多くの弾性リソースを設定する必要がある場合は、チケットを通じてお問い合わせください。

標準エンジン関連用語

用語
説明
クラスタタイプ
標準Sparkエンジンは購入時にクラスタタイプを選択でき、標準型1CU ≈ 1コア4GB、メモリ型1CU ≈ 1コア8GBとなります。タイプによって単価が異なりますので、詳細は課金概要をご参照ください。
弹性クラスタ仕様
年間契約Sparkエンジンでは、ユーザーが弹性仕様を設定できます。年間契約リソースパッケージが使い切った後、システムはユーザーの設定に基づいて従量課金リソースの使用を自動的に開始します。
ゲートウェイ名
ゲートウェイの名前はグローバルに一意である必要があります。他のゲートウェイやコンピューティングエンジンと同じ名前にすることはできません。
エンジン名
エンジン名はグローバルに一意である必要があります。他のゲートウェイやコンピューティングエンジンと同じ名前にすることはできません。
エンジンタイプ
標準エンジンタイプは、PrestoエンジンとSparkエンジンに分かれており、ゲートウェイも一種の特殊な標準エンジンです。
エンジンステータス
標準エンジンの状態、クラスタは現在の稼働状況に応じて、起動中、実行中、準備完了、一時停止、一時停止中、構成変更中、隔離、隔離中、復旧中の8つの状態に分かれています。
起動中:このクラスターリソースは現在起動中であり、従量課金のエンジンはこの時点では課金されません。起動中のクラスターはデータ計算に選択して使用することはできません。
実行中:このクラスターは稼働中であり、データ計算に選択して使用することができます。
準備完了:実行中と同じ状態で、エンジンが使用可能であることを示します。
停止中:このクラスターは一時停止中であり、データ計算に選択して使用することはできません。
停止中:このクラスターは一時停止状態に切り替わっており、実行中のタスクに影響を与え、データ計算に選択して使用することはできません。
設定変更中:このクラスタは構成変更中であり、変更期間中はデータ計算に使用できません。
隔離:アカウントの未払いによりクラスタが隔離され、データ計算に選択して使用できません。
隔離中:アカウントの未払いにより、クラスタは隔離状態に切り替わっており、実行中のタスクに影響を与え、データ計算に選択して使用できません。
復旧中:アカウントのチャージにより未払いが解消された後、クラスタが隔離状態から実行状態に復旧する過程であり、データ計算に選択して使用できません。
リソースグループ数
標準Sparkにおける現在のリソースグループ数。
使用リソース/総リソース
エンジンの現在の使用リソースと利用可能な総リソースの数量。
総リソース数量は常駐リソース数と弾性リソース数を加えたものです。
使用リソースにはDLC展開サービスのシステム占用リソース統計が含まれます。
統計データには一定の遅延があります。
支払いタイプ
支払いタイプは年決め・月決め課金と従量課金に分かれます。
ゲートウェイは年決め・月決め課金モードのみをサポートします。
標準 Spark と Presto エンジンは年決め・月決め課金と従量課金をサポートします。
自動引き落とし
年決め・月決めエンジンの期限が近づいていますが、自動引き落としされますか。
エンジンスケール
エンジンの利用可能リソース総量、単位CU。
そのうち、年決め・月決めエンジンのスケールには、エンジンの常駐仕様と従量課金の弾性仕様が含まれます。
注意:
1. 年決め・月決めエンジンは購入時に一括で課金され、エンジンの状態が請求金額に影響を与えることはありません。
2. 従量課金エンジンはユーザーの使用量に応じて課金されます:
標準 Presto エンジンは一時停止後は課金されず、実行中に課金されます。ただし、エンジンの起動中には一部の費用が発生します。
標準 Spark エンジンは準備状態では課金されず、ユーザーがタスクを送信するかリソースグループを起動して実行した場合にのみ課金されます。


ヘルプとサポート

この記事はお役に立ちましたか?

フィードバック