データ パイプライン

Error rendering macro 'includeplus'

User 'anonymous' does not have permission to view the page with ID 1026058464.

Error rendering macro 'includeplus'

User 'anonymous' does not have permission to view the page with ID 1077786100.

エクスポートされたデータのスキーマの詳細については、「データ パイプライン エクスポート スキーマ」を参照してください。

Error rendering macro 'includeplus'

User 'anonymous' does not have permission to view the page with ID 1063162914.

On this page:

要件

REST API を使用してデータのエクスポートをトリガーするには、次が必要です。

Considerations

開始する前に、多数のセキュリティとパフォーマンスへの影響を考慮する必要があります。

セキュリティ

Error rendering macro 'includeplus'

User 'anonymous' does not have permission to view the page with ID 1059684397.

エクスポート パフォーマンス

Error rendering macro 'includeplus'

User 'anonymous' does not have permission to view the page with ID 1077913664.

Error rendering macro 'includeplus'

User 'anonymous' does not have permission to view the page with ID 1077915100.

データ パイプラインにアクセスする

To access the data pipeline go to

Error rendering macro 'excerpt-include'

ユーザー 'null' にはこのページを表示する権限がありません。

 > Data pipeline.

定期エクスポートをスケジュール

Error rendering macro 'includeplus'

User 'anonymous' does not have permission to view the page with ID 1077910718.

エクスポートのステータスを確認する

Error rendering macro 'includeplus'

User 'anonymous' does not have permission to view the page with ID 1077910756.

エクスポートをキャンセルする

Error rendering macro 'includeplus'

User 'anonymous' does not have permission to view the page with ID 1077910731.

プロジェクトをエクスポートから除外する

Error rendering macro 'includeplus'

User 'anonymous' does not have permission to view the page with ID 1095766513.

自動データ エクスポート キャンセル

Error rendering macro 'includeplus'

User 'anonymous' does not have permission to view the page with ID 1077910735.

データ エクスポートの設定

次のシステム プロパティを使用して、エクスポート データの形式を設定できます。

Error rendering macro 'includeplus'

User 'anonymous' does not have permission to view the page with ID 1077910761.

データ パイプライン REST API を使用する

Error rendering macro 'includeplus'

User 'anonymous' does not have permission to view the page with ID 1077910767.

出力ファイル

Error rendering macro 'includeplus'

User 'anonymous' does not have permission to view the page with ID 1044791064.

エクスポートされたファイルの場所

エクスポートされたデータは個別の CSV ファイルとして保存されます。ファイルは次のディレクトリに保存されます。

  • Confluence をクラスタで実行している場合は <shared-home>/data-pipeline/export/<job-id>
  • <local-home>/data-pipeline/export/<job-id> クラスタ化されていない Confluence を使用している

<job-id> ディレクトリ内には次のファイルが表示されます。

  • users_job<job_id>_<schema_version>_<timestamp>.csv 

  • spaces_job<job_id>_<schema_version>_<timestamp>.csv

  • pages_job<job_id>_<schema_version>_<timestamp>.csv

  • comments_job<job_id>_<schema_version>_<timestamp>.csv

  • analytics_events_job<job_id>_<schema_version>_<timestamp>.csv

これらのファイルでデータをロードして変換するには、そのスキーマを理解する必要があります。「データ パイプライン エクスポート スキーマ」をご参照ください。

カスタム エクスポート パスを設定する

Error rendering macro 'includeplus'

User 'anonymous' does not have permission to view the page with ID 1077910843.

Spark と Hadoop のインポート設定の例

既存の Spark インスタンスまたは Hadoop インスタンスがある場合は、次の参照を使用してさらに変換するためにデータをインポートする方法を設定します。


Spark / Databricks...

Error rendering macro 'includeplus'

User 'anonymous' does not have permission to view the page with ID 1044791470.

Hadoop...

Error rendering macro 'includeplus'

User 'anonymous' does not have permission to view the page with ID 1044791473.

データ エクスポートに関する課題のトラブルシューティング

Error rendering macro 'includeplus'

User 'anonymous' does not have permission to view the page with ID 1044791075.

最終更新日: 2021 年 12 月 7 日

この内容はお役に立ちましたか?

はい
いいえ
この記事についてのフィードバックを送信する
Powered by Confluence and Scroll Viewport.