4.2. S3オブジェクトのアップロード (handson-cli-transcribe-source-XXXXXXXXXXXX)

作業の目的 [why]

S3バケット"handson-cli-transcribe-source-XXXXXXXXXXXX"にファイルをアップロードします。

完了条件/事前条件 [設計者用情報]

完了条件 [after]

主処理は、以下を満たしたときに成功したものとします。

完了条件1

S3バケット"handson-cli-transcribe-source-XXXXXXXXXXXX"にオブジェクト"handson-cli-transcribe-ja-JP.mp3"が存在する。

事前条件 [before]

主処理の実施は、以下の状態であることを前提とします。

事前条件1

転送対象ファイル用ディレクトリ"${HOME}/environment/tmp-handson-cli-transcribe"に転送対象ファイル"${HOME}/environment/tmp-handson-cli-transcribe/handson-cli-transcribe-ja-JP.mp3"が存在する。

事前条件2

S3バケット"handson-cli-transcribe-source-XXXXXXXXXXXX"が存在する。

事前条件3

S3バケット"handson-cli-transcribe-source-XXXXXXXXXXXX"にオブジェクト"handson-cli-transcribe-ja-JP.mp3"が存在しない。

作業対象 [what]

  • S3サービス

標準時間(合計)

8分

パラメータ設定

パラメータ設定の標準時間

2分

作業に必要なモノ・情報 [resource]

作業開始には、以下が全て揃っていることが必要です。

リソース1: 転送ファイル用ディレクトリ

転送対象ファイルが存在するディレクトリ"${HOME}/environment/tmp-handson-cli-transcribe"です。

リソース2: 転送対象ファイル

  • 転送対象となるファイルです。

  • 今回は"${HOME}/environment/tmp-handson-cli-transcribe/handson-cli-transcribe-ja-JP.mp3"とします。

リソース3: S3バケット名

  • ファイルの転送先となるS3バケットの名称です。

  • 今回は"handson-cli-transcribe-source-XXXXXXXXXXXX"とします。

リソース4: S3オブジェクト名

  • ファイルの転送先でのオブジェクト名(パス + ファイル名)です。

  • 今回は"handson-cli-transcribe-ja-JP.mp3"とします。

パラメータの指定

作業に必要なパラメータを変数に格納をします。

0.1. 転送対象ファイルの指定

変数の設定:

DIR_TARGET="${HOME}/environment/tmp-handson-cli-transcribe"

変数の設定:

FILE_TARGET="${DIR_TARGET}/handson-cli-transcribe-ja-JP.mp3" \
  && echo ${FILE_TARGET}

結果(例):

${HOME}/environment/tmp-handson-cli-transcribe/handson-cli-transcribe-ja-JP.mp3

0.2. S3バケット名の指定

変数の設定:

S3_BUCKET_PREFIX='handson-cli-transcribe-source'

コマンド:

AWS_ID=$( \
  aws sts get-caller-identity \
    --query 'Account' \
    --output text \
) \
  && echo ${AWS_ID}

結果(例):

XXXXXXXXXXXX

変数の設定:

S3_BUCKET_NAME="${S3_BUCKET_PREFIX}-${AWS_ID}" \
  && echo ${S3_BUCKET_NAME}

結果(例):

handson-cli-transcribe-source-XXXXXXXXXXXX

0.3. S3オブジェクト名

変数の設定:

S3_OBJECT_NAME='handson-cli-transcribe-ja-JP.mp3'

変数の設定:

URI_S3_OBJECT="s3://${S3_BUCKET_NAME}/${S3_OBJECT_NAME}" \
  && echo ${URI_S3_OBJECT}

結果(例):

s3://handson-cli-transcribe-source-XXXXXXXXXXXX/handson-cli-transcribe-ja-JP.mp3

パラメータの保存

設定されている変数の保存先となるファイル名を指定します。

変数の設定:

DIR_PARAMETER="${HOME}/tmp/parameter-handson-cli-transcribe"
FILE_PARAMETER="${DIR_PARAMETER}/$(date +%Y-%m-%d)-s3-object-create-expand-profile.env" \
  && echo ${FILE_PARAMETER}

結果(例):

${HOME}/tmp/parameter-handson-cli-transcribe/2019-11-22-s3-object-create-expand-profile.env

各変数に正しいパラメータ値が格納されていることを確認しながら保存します。

変数の確認:

cat << EOF > ${FILE_PARAMETER}

  # 0.a. AWS_DEFAULT_REGION:"ap-northeast-1"
         AWS_DEFAULT_REGION="${AWS_DEFAULT_REGION}"
  # 0.b. AWS_DEFAULT_PROFILE:"handson-cli-transcribe-transcribeMaint-user"
         AWS_DEFAULT_PROFILE="${AWS_DEFAULT_PROFILE}"

  # 0.1. FILE_TARGET:"${HOME}/environment/tmp-handson-cli-transcribe/handson-cli-transcribe-ja-JP.mp3"
         FILE_TARGET="${FILE_TARGET}"
  # 0.2. S3_BUCKET_NAME:"handson-cli-transcribe-source-XXXXXXXXXXXX"
         S3_BUCKET_NAME="${S3_BUCKET_NAME}"
  # 0.3. URI_S3_OBJECT:"s3://handson-cli-transcribe-source-XXXXXXXXXXXX/handson-cli-transcribe-ja-JP.mp3"
         URI_S3_OBJECT="${URI_S3_OBJECT}"

EOF

cat ${FILE_PARAMETER}

下段の変数が入っていない、もしくは上段と同等の値が入っていない場合は、それぞれの手順番号に戻って変数の設定を行います。

タスクの実施

タスク標準時間

6分

1. 前処理

処理対象の状態確認

主処理の実施は、以下の状態であることを前提とします。

前提と異なることが判明した場合、直ちに処理を中止します。

事前条件1: 転送対象ファイル用ディレクトリ"${HOME}/environment/tmp-handson-cli-transcribe"に転送対象ファイル"${HOME}/environment/tmp-handson-cli-transcribe/handson-cli-transcribe-ja-JP.mp3"が存在する。

「転送対象ファイル用ディレクトリ"${HOME}/environment/tmp-handson-cli-transcribe"に転送対象ファイル"${HOME}/environment/tmp-handson-cli-transcribe/handson-cli-transcribe-ja-JP.mp3"が存在する。」ことを確認します。

コマンド:

ls ${FILE_TARGET}

結果(例):

${HOME}/environment/tmp-handson-cli-transcribe/handson-cli-transcribe-ja-JP.mp3

事前条件2: S3バケット"handson-cli-transcribe-source-XXXXXXXXXXXX"が存在する。

「S3バケット"handson-cli-transcribe-source-XXXXXXXXXXXX"が存在する。」ことを確認します。

コマンド:

aws s3 ls s3://${S3_BUCKET_NAME} > /dev/null 2>&1

コマンド:

echo $?

結果(例):

0

事前条件3: S3バケット"handson-cli-transcribe-source-XXXXXXXXXXXX"にオブジェクト"handson-cli-transcribe-ja-JP.mp3"が存在しない。

「S3バケット"handson-cli-transcribe-source-XXXXXXXXXXXX"にオブジェクト"handson-cli-transcribe-ja-JP.mp3"が存在しない。」ことを確認します。

コマンド:

! aws s3 ls ${URI_S3_OBJECT}

結果(例):

(出力なし)

2. 主処理

S3バケットへのファイル転送

変数の確認:

cat << ETX

  # FILE_TARGET:"${HOME}/environment/tmp-handson-cli-transcribe/handson-cli-transcribe-ja-JP.mp3"
    FILE_TARGET="${FILE_TARGET}"
  # URI_S3_OBJECT:"s3://handson-cli-transcribe-source-XXXXXXXXXXXX/handson-cli-transcribe-ja-JP.mp3"
    URI_S3_OBJECT="${URI_S3_OBJECT}"

ETX

コマンド:

aws s3 cp ${FILE_TARGET} ${URI_S3_OBJECT}

結果(例):

upload: ${HOME}/environment/tmp-handson-cli-transcribe/handson-cli-transcribe-ja-JP.mp3 to s3://handson-cli-transcribe-source-XXXXXXXXXXXX/handson-cli-transcribe-ja-JP.mp3

3. 後処理

完了条件の確認

主処理は、以下を満たしたときに成功したものとします。

完了条件1: S3バケット"handson-cli-transcribe-source-XXXXXXXXXXXX"にオブジェクト"handson-cli-transcribe-ja-JP.mp3"が存在する。

「S3バケット"handson-cli-transcribe-source-XXXXXXXXXXXX"にオブジェクト"handson-cli-transcribe-ja-JP.mp3"が存在する。」ことを確認します。

コマンド:

aws s3 ls ${URI_S3_OBJECT}

結果(例):

2019-11-22 01:23:45 xxxxxxxx handson-cli-transcribe-ja-JP.mp3

完了