コンテンツにスキップ

当ページでは、CSA Data Uploader でのリリースバージョン毎の追加・対応機能の概要を紹介します。

リリースノート

v1.14.0(2022/03/14)

v1.13.0(2022/02/18)

  • ODBC入力指定時に「入力データソースの文字コード指定」が可能に：入力データソースの文字コードを指定出来るようになり、データの文字コードをUTF8(最近のデータウェアハウスで広く採用されているもの)に変換しやすくなりました。
  • 変換要素に「タイムゾーン項目のタイムゾーン情報変換処理を追加：指定項目のタイムゾーン情報変換が出来るようになりました。

v1.12.0(2021/10/13)

  • 出力要素に『Snowflake外部ステージ』を追加』：データアップロードジョブ及びファイルアップロードジョブの出力要素にSnowflakeの「外部ステージ」を指定出来るようになりました。
  • 変換要素に「日付」「タイムスタンプ」周りの処理を追加：以下の処理を新しく追加。日付やタイムスタンプのデータの取り回しが更に便利になりました。
    • 既存列を結合(日付作成)
    • 既存列を結合(タイムスタンプ作成)
    • 日付・タイムスタンプ書式統一

v1.11.0(2021/06/25)

  • アプリケーションで利用しているライブラリの更新を行いました
    • アプリケーション内部で利用しているライブラリの更新を行いました。
    • また、合わせて軽微な修正を幾つか含めています。

v1.10.0(2021/05/13)

  • 入力ファイルの圧縮形式に「zip」を追加：入力ファイル指定時の選択肢に、新しく「zip圧縮」が選べるようになりました。

v1.9.0(2021/02/12)

v1.8.0(2020/09/23)

  • 出力要素に『Google Cloud Storage』を追加：データアップロードジョブ及びファイルアップロードジョブの出力要素にGCPの「Google Cloud Storage」を指定出来るようになりました。
  • 変換要素に「カラム名変更」を追加：列(カラム)名称を任意の値に変更可能な変換要素が利用出来るようになりました。
  • 変換要素に「行列変換」を追加：入力値を指定の条件で行列変換出来る変換要素が利用出来るようになりました。
  • 変換要素に「行分割」を追加：入力値の任意の列(カラム)に対して条件を指定することで複数の行に分割出来る変換要素が利用出来るようになりました。
  • 変換要素に「列分割」を追加：入力値の任意の列(カラム)に対して条件を指定することで複数の列に分割出来る変換要素が利用出来るようになりました。

v1.7.0(2020/01/21)

  • Linux版Data Uploaderのリリース：従来Windows環境でのみ導入・利用可能だったData Uploaderに、新しくLinux版が利用出来るようになりました。(導入方法は異なりますが、機能面ではWindows版と同様です)
  • 入力要素に『Google Cloud Storage』を追加：データアップロードジョブの入力要素にGCPの「Google Cloud Storage」を指定出来るようになりました。
  • 入力要素に『Azure BLOB Storage(Beta)』を追加：データアップロードジョブの入力要素にAzureの「Azure BLOB Storage」を指定出来るようになりました。(※Beta版扱いの機能となります)
  • 変換要素の種類に『カラムの追加』を追加：所定の設定値を持つカラムを追加する処理が変換処理の機能として使えるようになりました。
  • ジョブの手動実行時にSNS通知設定をオフに出来るように：従来であれば必ずSNS通知が飛ぶ設定となっていましたが、OFFに出来るようになりました。

v1.6.0(2019/11/21)

  • 「Data Uploader フリー版」をリリースしました：ライセンスフリーで利用出来るData Uploaderを新しくリリースしました。この版には以下の機能制限があります。
    • ジョブのスケジュール実行が出来ない：全てのジョブは手動実行のみ可能となります。
  • JMC連携オプションを追加：ジョブのJMC連携を行う場合の挙動を選べるようになりました。

v1.5.0(2019/09/17)

  • 「ファイルアップロード」ジョブが利用可能に：入力ファイルをそのまま出力先へアップロードするジョブが新たに増えました。
  • ファイルのワイルドカード指定が可能に：ジョブの「入力」でテキストファイルを扱う際、「ファイルパス」の部分にワイルドカードが指定出来るようになりました。
  • ファイルパスのフォルダ指定が可能に：ジョブの「入力」でテキストファイルを扱う際、「ファイルパス」の指定でフォルダ指定が出来るようになりました。
  • 変換要素の種類に「パディング」を追加：指定カラムに対するパティング処理が変換処理の機能として使えるようになりました。
  • 変換要素の種類に「カラムの並べ替え」を追加：入力情報のカラムの位置を任意の順番に並べ替え出来る処理を変換処理の機能として使えるようになりました。

v1.4.2(2019/07/05)

  • 時刻情報取得オプションの追加：アプリでの時刻情報取得におけるオプションが指定可能となりました。

v1.4.1(2019/06/27)

  • JMC連携機能の追加：CSA JMCサーバとの連携(Data Uploaderでのジョブ実行後、そのジョブ終了後に任意のCSA JMC上のジョブを実行)が可能となりました。(※連携に対応しているCSA JMCサーバ環境が必要となります)
  • ジョブを実行出来るジョブ：従来のジョブでは「データ連携」及び「構成要素(SQL,Python)」のみが指定可能でしたが、新たに「任意のジョブを指定」して実行出来るようになりました。

v1.4.0(2019/06/03)

  • 入力要素に「FTP」を追加：データアップロードジョブの入力要素に「FTP接続」を指定出来るようになりました。
  • 入力要素に「SFTP」を追加：データアップロードジョブの入力要素に「SFTP接続」を指定出来るようになりました。
  • 入力要素に「S3」を追加：データアップロードジョブの入力要素に「S3接続」を指定出来るようになりました。
  • プロファイル指定の切替が可能に：データアップロードジョブの入力・出力設定でAmazon S3バケットを指定する際に用いる「プロファイル指定」が任意の値を指定出来るようになりました。予めプロファイル指定を行っておく必要がありますが、この対応でData Uploaderから複数のAWSアカウントに渡るS3バケットのデータを扱えるようになります。
  • 通知メール件名に任意のプレフィクス文字を指定可能に：指定文字列を設定する事で、配信されるメールの件名冒頭に任意の文字列を表示出来るようになり、連絡元の識別がし易くなりました。
  • S3出力時のファイル形式に「JSONL」を追加：データアップロードジョブの出力指定時のファイル形式で、新たに「JSONL」形式が選択出来るようになりました。

v1.3.0(2019/04/08)

  • 変換要素の種類に「部分抽出」を追加：『指定された文字位置にある指定された文字数の文字を、文字列から抽出して返す』変換処理が使えるようになりました。Amazon Redshiftにおけるsubstring関数と同様の仕様・挙動となっています。
  • 変換要素の種類に「先頭/末尾の文字列を削除」： 『データの先頭、末尾、または両方から文字を削除する』変換処理が使えるようになりました。Amazon Redshiftにおけるtrim関数と同様の仕様・挙動となっています。
  • 変換要素の種類に「置換」を追加：条件に合致する文字列の置換処理を変換処理の機能として使えるようになりました。
  • 変換要素の種類に「大文字へ変換」を追加：『対象文字列を全て大文字に変換する』変換処理が使えるようになりました。
  • 変換要素の種類に「小文字へ変換」を追加：『対象文字列を全て小文字に変換する』変換処理が使えるようになりました。
  • 変換要素の種類に「制御文字の削除」を追加：『データの中に含まれる制御文字を削除する』変換処理が使えるようになりました。
  • ジョブ一覧画面に、JMCの「実行履歴カウンター」を追加：ジョブ一覧画面に実行履歴カウンターが表示されるようになり、対象ジョブのこれまでの成功・失敗回数(累計)がわかるようになりました。