From 364fd7de57c89ad5d71bed198efff0be3f63fba3 Mon Sep 17 00:00:00 2001 From: YuCheng Hu Date: Thu, 5 Aug 2021 16:14:11 -0400 Subject: [PATCH] =?UTF-8?q?=E6=9B=B4=E6=96=B0=E9=87=8D=E5=A4=8D=E4=B8=8D?= =?UTF-8?q?=E6=AD=A3=E7=A1=AE=E7=9A=84=E6=8E=92=E5=BA=8F=E5=92=8C=E5=86=85?= =?UTF-8?q?=E5=AE=B9?= MIME-Version: 1.0 Content-Type: text/plain; charset=UTF-8 Content-Transfer-Encoding: 8bit --- tutorials/cluster.md | 23 +++++------------------ 1 file changed, 5 insertions(+), 18 deletions(-) diff --git a/tutorials/cluster.md b/tutorials/cluster.md index e7864b9..00af024 100644 --- a/tutorials/cluster.md +++ b/tutorials/cluster.md @@ -249,27 +249,13 @@ druid.indexer.logs.directory=/druid/indexing-logs 请参考 [HDFS extension](../development/extensions-core/hdfs.md) 页面中的内容来获得更多的信息。 - -## Hadoop连接配置 - -如果要从Hadoop集群加载数据，那么此时应对Druid做如下配置： - -* 在`conf/druid/cluster/_common/common.runtime.properties`文件中更新`druid.indexer.task.hadoopWorkingPath`配置项，将其更新为您期望的一个用于临时文件存储的HDFS路径。 通常会配置为`druid.indexer.task.hadoopWorkingPath=/tmp/druid-indexing` -* 需要将Hadoop的配置文件（core-site.xml, hdfs-site.xml, yarn-site.xml, mapred-site.xml）放置在Druid进程的classpath中，可以将他们拷贝到`conf/druid/cluster/_common`目录中 - -请注意，您无需为了可以从Hadoop加载数据而使用HDFS深度存储。 - -更多信息可以看[基于Hadoop的数据摄取](../ingestion/hadoop.md)部分的文档。 - - -## Hadoop 的连接配置（可选） -如果你希望懂 Hadoop 集群中加载数据，那么你需要对你的 Druid 集群进行下面的一些配置： +## Hadoop 连接配置（可选） +如果你希望从 Hadoop 集群中加载数据，那么你需要对你的 Druid 集群进行下面的一些配置： - 更新 `conf/druid/cluster/middleManager/runtime.properties` 文件中的 `druid.indexer.task.hadoopWorkingPath` 配置选项。 -将 HDFS 配置路径文件更新到一个你期望使用的临时文件存储路径。`druid.indexer.task.hadoopWorkingPath=/tmp/druid-indexing` 为通常的配置。 - + 将 HDFS 配置路径文件更新到一个你期望使用的临时文件存储路径。`druid.indexer.task.hadoopWorkingPath=/tmp/druid-indexing` 为通常的配置。 - 将你的 Hadoop XMLs配置文件（core-site.xml, hdfs-site.xml, yarn-site.xml, mapred-site.xml）放到你的 Druid 进程中。 -你可以将 `conf/druid/cluster/_common/core-site.xml`, `conf/druid/cluster/_common/hdfs-site.xml` 拷贝到 `conf/druid/cluster/_common` 目录中。 + 你可以将 `conf/druid/cluster/_common/core-site.xml`, `conf/druid/cluster/_common/hdfs-site.xml` 拷贝到 `conf/druid/cluster/_common` 目录中。 请注意，你不需要为了从 Hadoop 中载入数据而使用 HDFS 深度存储。 @@ -277,6 +263,7 @@ druid.indexer.logs.directory=/druid/indexing-logs 有关更多的信息，请参考 [Hadoop-based ingestion](../ingestion/hadoop.md) 页面中的内容。 + ## 配置 Zookeeper 连接 在实际的生产环境中，我们建议你使用专用的 ZK 集群来进行部署。ZK 的集群与 Druid 的集群部署是分离的。