CDP私有云基礎7.1.7發行說明

Cloudera 很高興地宣佈釋出 Cloudera 資料平臺 (CDP) 私有云 (PvC) 基礎版本 7.1.7 和 Cloudera Manager 版本 7.4.4。這些版本引入了從 CDH 6 到 CDP Private Cloud Base 的直接升級路徑，並彙總了先前版本的所有先前維護增強功能。

新功能的完整列表如下：

升級增強

CDH 6 升級

• CDH 6 客戶現在可以將他們的 CDH 6.1.x、6.2.x 和 6.3.x 叢集直接升級到 CDP Private Cloud Base，而無需構建新的叢集。此處提供了升級過程的完整詳細資訊。

回滾步驟的文件化

• 回滾步驟可用於支援從 CDH 6 升級到 CDP 7.1.7

• 回滾步驟可用於支援從 HDP 3 升級到 CDP 7.1.6

新的升級指南

• 入門

• 升級前任務

• 升級叢集

• 升級後任務

• 故障排除

• 現在 docs.cloudera.com 上提供了一個新的Upgrade Companion，為所有 CDP形態的所有升級相關活動提供一個集中的文件中心。Upgrade Companion 提供了一組內容選項卡，涵蓋了 CDP 升級過程的 5 個主要步驟中的每一個：

• Upgrade Companion 還包括一組過濾器，可幫助讀者將內容縮小到他們特定的配置要求。

• 注意：Upgrade Companion 旨在補充而不是替代現有的升級文件。

平臺支援的增強

新的作業系統支援

• CDP 私有云基礎現在支援 基於x86 和 PPC的RHEL/CENTOS 8.2

• CDP 私有云基礎現在支援基於X86的 Ubuntu 20

新的資料庫支援

• CDP 私有云基礎現在支援 MariaDB 10.3、MariaDB 10.4 和 Oracle 19c (19.9)

通用功能增強

Cloudera  Manager增強功能

• 通過升級 20 多個嵌入式的lib庫提供了大量 CVE/安全修復

• 啟用外部身份驗證時檢查 LDAP 連線的工具

• 任意服務的可擴充套件服役/退役的工作流程

• 服務監視器現在在可能的情況下適應低記憶體環境

• 用於 CSD 作者的 Atlas 金絲雀和可擴充套件金絲雀監控框架

• 可配置的 Kerberos 配置用於Ozone、YARN QM的檔案位置和Principal

• 更高效的機架拓撲評估（將 YARN 效能提高多達 20%）

• 一致的作業系統使用者/組 ID（無縫重新附加雲端儲存卷）

• 快照儲存現在包含在 HDFS 使用情況報告計算中

• 測試DB連線的工具現在支援Oracle RAC

SDX 增強功能

• 現在支援可點選 的UI 表格格式的過濾器

• 輕鬆的選擇稽核過濾器以顯示和展示完整的使用者訪問詳細資訊

• 用於指定 Ranger 稽核的最長保留天數的配置選項

• 用於 Hive 表建立的 Ranger 授權現在支援新的資源“storage-type”和“storage-url”，以及一種許可權“RW Storage“. 當 doAs = false 時，超級使用者“hive”將是在指定儲存中建立表的使用者，這會導致表建立獲得使用者 hive 的授權，而不是發出“create/alter table”命令的原始使用者的授權。

• 現在在 Ranger稽核中捕獲 HDFS 超級使用者操作

• Ranger稽核增強功能包括

• 當用戶和組從同步源（UNIX、LDAP、AD 或 PAM）中刪除時，Ranger 使用者同步服務將更新 Ranger。這可確保使用者和組及其相關的訪問許可權在從同步源中刪除時不會保留在 Ranger 中。

• CM中可配置Ranger稽核的最大保留天數屬性。現在，使用者可以在 Ranger 配置和重新整理配置中從 CM 更新 solr 文件過期 ranger.audit.solr.config.ttl 和 ranger.audit.solr.config.delete.trigger 引數並重新整理配置以獲得使用 ttl 更新的 Ranger稽核的 Solr 集合和刪除觸發器。

資料倉庫增強功能

• Impala 現在支援基於 Ranger 的行級過濾器策略。行級過濾策略類似於其他 Ranger 訪問策略，可以為特定使用者、組和條件設定過濾器。

平臺增強

• 支援配置了基於公平性排序的佇列的佇列內搶佔

• 支援 LazyPreemption，優化從佇列中選擇容器以進行搶佔

• 動態佇列排程 (TP) 功能使客戶能夠動態更改佇列資源分配

• Ozone 現在預設為完整的高可用性配置，可實現連續執行而不會出現任何單點故障風險

• Ozone節點退役使管理員可以更輕鬆地執行節點的作業系統升級、硬體維護和其他維護

• Ozone的安全刪除功能有助於防止意外刪除檔案和目錄。

• YARN 相容性增強

• Kudu 與 Hive Metastore 的整合現在可以通過 Cloudera Manager 進行配置

• Kudu 支援 INSERT 和 INSERT_IGNORE 操作（TP）的多行事務

流媒體增強

• 現在可以將 Kafka 服務配置為自動將主題元資料釋出到 Apache Atlas。Kafka 主題將在 Atlas 中顯示為單個實體以及資料沿襲圖。

• Streams Messaging Manager (SMM) 現在可以配置為使用外部 的Prometheus 指標儲存，而不是 Cloudera Manager 的內部指標儲存。這提高了具有大量主題、分割槽、消費者和生產者的大型 Kafka 部署的 SMM 可擴充套件性。

• 添加了Schema Registry功能，允許從 Confluent的Schema Registry的 Kafka 主題轉儲匯入模式。然後可以通過 REST 將模式作為檔案上傳。

• Streams Replication Manager 現在支援以安全方式儲存所有敏感資料。

• Cruise Control 現在公開 TLS 配置以支援 TLS 密碼和協議

Cloudera Runtime 元件版本

您必須熟悉 Cloudera Runtime 7.1.7 發行版中所有元件的版本，以確保這些元件與其他應用程式的相容性。您還必須瞭解可用的 Technical Preview 元件並僅在測試環境中使用它們。

Apache 元件

元件版本號由三部分組成，[**Apache 元件版本號**].[*執行時版本號*].[*執行時版本號*]。例如，如果列出的 Apache HBase 元件版本號為 2.2.3.7.1.7.0-551，2.2.3 是上游 Apache HBase 元件版本，7.1.5 是執行時版本，551 是執行時構建。您還可以在 Cloudera Manager 中檢視元件版本號。

Component	Version
Apache Arrow	0.8.0.7.1.7.0-551
Apache Atlas	2.1.0.7.1.7.0-551
Apache Calcite	1.19.0.7.1.7.0-551
Apache Avro	1.8.2.7.1.7.0-551
Apache Hadoop (Includes YARN and HDFS)	3.1.1.7.1.7.0-551
Apache HBase	2.2.3.7.1.7.0-551
Apache Hive	3.1.3000.7.1.7.0-551
Apache Impala	3.4.0.7.1.7.0-551
Apache Kafka	2.5.0.7.1.7.0-551
Apache Knox	1.3.0.7.1.7.0-551
Apache Kudu	1.15.0.7.1.7.0-551
Apache Livy	0.6.0.7.1.7.0-551
MapReduce	3.1.1.7.1.7.0-551
Apache Ozone	1.1.0.7.1.7.0-551
Apache Oozie	5.1.0.7.1.7.0-551
Apache ORC	1.5.1.7.1.7.0-551
Apache Parquet	1.10.99.7.1.7.0-551
Apache Phoenix	5.1.1.7.1.7.0-551
Apache Ranger	2.1.0.7.1.7.0-551
Apache Solr	8.4.1.7.1.7.0-551
Apache Spark	2.4.7.7.1.7.0-551
Apache Sqoop	1.4.7.7.1.7.0-551
Apache Tez	0.9.1.7.1.7.0-551
Apache Zeppelin	0.8.2.7.1.7.0-551
Apache ZooKeeper	3.5.5.7.1.7.0-551

Other Components

Component	Version
Cruise Control	2.0.100.7.1.7.0-551
Data Analytics Studio	1.4.2
GCS Connector	2.1.2.7.1.7.0-551
HBase Indexer	1.5.0.7.5.0-551
Hue	4.5.0.7.1.7.0-551
Search	1.0.0.7.1.7.0-551
Schema Registry	0.10.0.7.1.7.0-551
Streams Messaging Manager	2.1.0.7.1.7.0-551
Streams Replication Manager	1.0.0.7.1.7.0-551

Connectors and Encryption Components

Component	Version
HBase connectors	1.0.0.7.1.7.0-551
Hive Meta Store (HMS)	1.0.0
Hive on Tez	1.0.0
Hive Warehouse Connector	1.0.0.7.1.7.0-551
Spark Atlas Connector	0.1.0.7.1.7.0-551
Spark Schema Registry	1.1.0.7.1.7.0-551

原文來源：http://docs.cloudera.com/cdp-private-cloud/latest/release-summaries/topics/announcement-202108-717.html

http://docs.cloudera.com/cdp-private-cloud-base/7.1.7/runtime-release-notes/topics/rt-pvc-runtime-component-versions.html