# Repro Export Integration

[Repro Import Integrationの詳細はこちら](/ja/int/repro-import-integration)をご覧ください。

新しいRepro Export Integrationコネクタを使用して、簡単な設定のためにカスタマイズされたパラメータでReproのAmazon S3バケットにファイルをエクスポートできます。

## 前提条件

- [TD Toolbelt](https://toolbelt.treasuredata.com/)を含むTreasure Dataの基本知識
- リージョンIDを持つS3バケット


## TD Consoleを使用した接続の作成

### 新しい接続の作成

データ接続を作成する際は、統合にアクセスするための認証情報を提供する必要があります。Treasure Dataでは、まず認証を設定してから、ソース情報を指定します。

1. **TD Console**を開きます。
2. **Integrations Hub** > **Catalog**に移動します。
3. **Repro**を検索して選択します。
4. 次のダイアログが開きます:


![](/assets/image-20200527-174615.08d784a00a2065469226cd549b48c639b2b021908418cef19738ea0c75f96075.686a3b9b.png)

1. 接続の名前を入力し、**Done**をクリックします。


![](/assets/image-20200527-174643.cd64d5a9d01a434f8d35d6333c8aaf3425bb92f09b437012efc940ef8ed6db55.686a3b9b.png)

### データ接続でエクスポート結果を設定する

このステップでは、クエリを作成または再利用します。クエリ内でデータ接続を設定します。クエリ内でカラムマッピングを定義する必要がある場合があります。

### パラメータを指定して接続を設定する

1. TD consoleを開きます。
2. **Data Workbench** > **Queries**に移動します。
3. データのエクスポートに使用する予定のクエリを選択します。
4. クエリエディタの上部にある**Export Results**をクリックします。Choose Integrationダイアログが開きます。結果をエクスポートするために使用する接続を選択する際には、既存の接続を使用するか、新しい接続を作成するかの2つのオプションがあります。


#### 既存の接続を使用する

1. 検索ボックスに接続名を入力してフィルタリングします。
2. 接続を選択します。


#### 新しいRepro Connectionを作成する

1. フィールドの値を入力して新しい接続を作成します。
2. 新しい接続に必要な認証情報を入力します。次のパラメータを設定します。


| **パラメータ** | **説明** |
|  --- | --- |
| **Use AWS S3 Server-Side Encryption** (オプション) | S3サーバーサイド暗号化を使用する |
| **Server-Side Encryption algorithm:** (オプション) | 暗号化に使用されるアルゴリズム |
| **Bucket** (必須) | s3のバケット名 |
| **File Path** (必須) | ファイル名と拡張子を含むファイルのフルパス、例: production/<app_id>/user-list/filename.csv.gz |
| **Format** (必須) | ファイルをcsvにエクスポートする、ファイルパスに拡張子が必須 |
| **Header line** (必須) | エクスポートファイルの最初の行にカラム名を含める |
| **Null String** (オプション) | ファイル内のnullを置き換える値 |
| **End-of-line character** (オプション) | ファイル内で行末として記されるマーカー文字 |
| **Quote Policy** (必須) | ファイルの引用符ポリシー |
| **Compression** (必須) | - ファイルをgzで圧縮する、ファイルパスに拡張子が必須 - PGP Encryption - ファイルはアップロード前に公開鍵を使用して暗号化される |
| **Public Key** | - ファイルがアップロードされる前に暗号化するために使用される公開鍵 |
| **Key Identifier** | - ファイルを保護するために使用される暗号化サブキーのKey IDを指定します。マスターキーは暗号化プロセスから除外されます。 |
| **Amor** | - ASCII armorを使用するかどうか |
| **Compression Type** | - ファイルの圧縮に使用される圧縮アルゴリズムを定義します。ファイルはSFTPサーバーにアップロードするために暗号化前に圧縮されます。 - **注意: ファイルを暗号化してアップロードする前に圧縮してください。復号化すると、ファイルは.gzや.bz2などの圧縮形式に戻ります。** |


サンプル設定は次のとおりです:

![](/assets/image-20200527-174915.6ac6a1bb1af93a0a780c9e6b6e57361b57f1c654cc3825ff8a99f14c5ee3c173.686a3b9b.png)

### Reproにデータを入力するクエリの例

Treasure Dataから、Repro用の接続にエクスポート結果を設定して次のクエリを実行します:

コード例


```sql
SELECT
 an_email_column AS EMAIL,
 another_phone_column AS PHONE
FROM
 your_table;
```

### (オプション) Query Export ジョブをスケジュールする

Scheduled Jobs と Result Export を使用して、指定したターゲット宛先に出力結果を定期的に書き込むことができます。

Treasure Data のスケジューラー機能は、高可用性を実現するために定期的なクエリ実行をサポートしています。

2 つの仕様が競合するスケジュール仕様を提供する場合、より頻繁に実行するよう要求する仕様が優先され、もう一方のスケジュール仕様は無視されます。

例えば、cron スケジュールが `'0 0 1 * 1'` の場合、「月の日」の仕様と「週の曜日」が矛盾します。前者の仕様は毎月 1 日の午前 0 時 (00:00) に実行することを要求し、後者の仕様は毎週月曜日の午前 0 時 (00:00) に実行することを要求するためです。後者の仕様が優先されます。

#### TD Console を使用してジョブをスケジュールする

1. **Data Workbench > Queries** に移動します
2. 新しいクエリを作成するか、既存のクエリを選択します。
3. **Schedule** の横にある None を選択します。
![](/assets/image2021-1-15_17-28-51.f1b242f6ecc7666a0097fdf37edd1682786ec11ef80eff68c66f091bc405c371.0f87d8d4.png)
4. ドロップダウンで、次のスケジュールオプションのいずれかを選択します:
![](/assets/image2021-1-15_17-29-47.45289a1c99256f125f4d887e501e204ed61f02223fde0927af5f425a89ace0c0.0f87d8d4.png)
| ドロップダウン値 | 説明 |
|  --- | --- |
| Custom cron... | [Custom cron... の詳細](#custom-cron-details)を参照してください。 |
| @daily (midnight) | 指定されたタイムゾーンで 1 日 1 回午前 0 時 (00:00 am) に実行します。 |
| @hourly (:00) | 毎時 00 分に実行します。 |
| None | スケジュールなし。 |


#### Custom cron... の詳細

![](/assets/image2021-1-15_17-30-23.0f94a8aa5f75ea03e3fec0c25b0640cd59ee48d1804a83701e5f2372deae466c.0f87d8d4.png)

| **Cron 値** | **説明** |
|  --- | --- |
| `0 * * * *` | 1 時間に 1 回実行します。 |
| `0 0 * * *` | 1 日 1 回午前 0 時に実行します。 |
| `0 0 1 * *` | 毎月 1 日の午前 0 時に 1 回実行します。 |
| "" | スケジュールされた実行時刻のないジョブを作成します。 |



```
 *    *    *    *    *
 -    -    -    -    -
 |    |    |    |    |
 |    |    |    |    +----- day of week (0 - 6) (Sunday=0)
 |    |    |    +---------- month (1 - 12)
 |    |    +--------------- day of month (1 - 31)
 |    +-------------------- hour (0 - 23)
 +------------------------- min (0 - 59)
```

次の名前付きエントリを使用できます:

- Day of Week: sun, mon, tue, wed, thu, fri, sat.
- Month: jan, feb, mar, apr, may, jun, jul, aug, sep, oct, nov, dec.


各フィールド間には単一のスペースが必要です。各フィールドの値は、次のもので構成できます:

| フィールド値  | 例  | 例の説明  |
|  --- | --- | --- |
| 各フィールドに対して上記で表示された制限内の単一の値。 |  |  |
| フィールドに基づく制限がないことを示すワイルドカード
`'*'`。 | `'0 0 1 * *'` | 毎月 1 日の午前 0 時 (00:00) に実行するようにスケジュールを設定します。 |
| 範囲 `'2-5'`
フィールドの許可される値の範囲を示します。 | `'0 0 1-10 * *'` | 毎月 1 日から 10 日までの午前 0 時 (00:00) に実行するようにスケジュールを設定します。 |
| カンマ区切りの値のリスト `'2,3,4,5'`
フィールドの許可される値のリストを示します。 | `0 0 1,11,21 * *'` | 毎月 1 日、11 日、21 日の午前 0 時 (00:00) に実行するようにスケジュールを設定します。 |
| 周期性インジケータ `'*/5'`
フィールドの有効な値の範囲に基づいて、
スケジュールが実行を許可される頻度を表現します。 | `'30 */2 1 * *'` | 毎月 1 日、00:30 から 2 時間ごとに実行するようにスケジュールを設定します。
`'0 0 */5 * *'` は、毎月 5 日から 5 日ごとに午前 0 時 (00:00) に実行するようにスケジュールを設定します。 |
| `'*'`
ワイルドカードを除く上記の
いずれかのカンマ区切りリストもサポートされています
`'2,*/5,8-10'` | `'0 0 5,*/10,25 * *'` | 毎月 5 日、10 日、20 日、25 日の午前 0 時 (00:00) に実行するようにスケジュールを設定します。 |


1. (オプション) Delay execution を有効にすることで、クエリの開始時刻を遅延させることができます。


### クエリを実行する

クエリに名前を付けて保存して実行するか、単にクエリを実行します。クエリが正常に完了すると、クエリ結果は指定された宛先に自動的にエクスポートされます。

設定エラーにより継続的に失敗するスケジュールジョブは、複数回通知された後、システム側で無効化される場合があります。

(オプション) Delay execution を有効にすることで、クエリの開始時刻を遅延させることができます。

## オプション: ワークフローでエクスポート結果を設定する

Treasure Workflow内で、このデータコネクタを使用してデータをエクスポートするように指定できます。


```yaml
timezone: UTC

_export:
  td:
    database: sample_datasets

+td-result-into-target:
  td>: queries/sample.sql
  result_connection: your_connections_name
  result_settings:
      type: repro
      bucket: bucket_name
      region: ap-northeast-2
      use_sse: true
      sse_algorithm: AES256
      auth_method: basic
      session_token: session_token
      path: /td-export-repro/file_output.csv
      access_key_id: access_id
      secret_access_key: secret_key
      formatter: {type: csv, delimiter: "\t", newline: CRLF, newline_in_field: LF, charset: UTF-8,
      quote_policy: MINIMAL, quote: '"', escape: \, null_string: \N, default_timezone: UTC}
      encoders: {type: gzip}
```

ワークフローでデータコネクタを使用してデータをエクスポートする方法の詳細については、[こちら](http://docs.treasuredata.com/display/PD/About+Using+Workflows+to+Export+Data+with+TD+Toolbelt)をクリックしてください。

## 参考資料

- Embulk-encoder-Encryptionドキュメント: [https://docs.treasuredata.com/articles/#!project-integrations/~embulk-encoder-encryption-pgp](/ja/int/embulk-encoder-encryption-pgp)