113 lines
7.6 KiB
Python
113 lines
7.6 KiB
Python
# environments(task settings file)
|
|
LOG_LEVEL = 'LOG_LEVEL' # ログ出力レベル。DEBUG, INFO, WARNING, ERRORの4つから指定する
|
|
CRM_AUTH_TIMEOUT = 'CRM_AUTH_TIMEOUT' # CRMへの認証処理のタイムアウト秒数
|
|
CRM_AUTH_MAX_RETRY_ATTEMPT = 'CRM_AUTH_MAX_RETRY_ATTEMPT' # CRMへの認証処理の最大リトライ試行回数
|
|
CRM_AUTH_RETRY_INTERVAL = 'CRM_AUTH_RETRY_INTERVAL' # CRMへの認証処理のリトライ時の初回待ち秒数
|
|
CRM_AUTH_RETRY_MIN_INTERVAL = 'CRM_AUTH_RETRY_MIN_INTERVAL' # CRMへの認証処理のリトライ時の最小待ち秒数
|
|
CRM_AUTH_RETRY_MAX_INTERVAL = 'CRM_AUTH_RETRY_MAX_INTERVAL' # CRMへの認証処理のリトライ時の最大待ち秒数
|
|
CRM_GET_RECORD_COUNT_TIMEOUT = 'CRM_GET_RECORD_COUNT_TIMEOUT' # CRMのレコード件数取得処理のタイムアウト秒数
|
|
CRM_GET_RECORD_COUNT_MAX_RETRY_ATTEMPT = 'CRM_GET_RECORD_COUNT_MAX_RETRY_ATTEMPT' # CRMのレコード件数取得処理の最大リトライ試行回数
|
|
CRM_GET_RECORD_COUNT_RETRY_INTERVAL = 'CRM_GET_RECORD_COUNT_RETRY_INTERVAL' # CRMのレコード件数取得処理のリトライ時の初回待ち秒数
|
|
CRM_GET_RECORD_COUNT_RETRY_MIN_INTERVAL = 'CRM_GET_RECORD_COUNT_RETRY_MIN_INTERVAL' # CRMのレコード件数取得処理のリトライ時の最小待ち秒数
|
|
CRM_GET_RECORD_COUNT_RETRY_MAX_INTERVAL = 'CRM_GET_RECORD_COUNT_RETRY_MAX_INTERVAL' # CRMのレコード件数取得処理のリトライ時の最大待ち秒数
|
|
CRM_FETCH_RECORD_TIMEOUT = 'CRM_FETCH_RECORD_TIMEOUT' # CRMのレコード取得処理のタイムアウト秒数
|
|
CRM_FETCH_RECORD_MAX_RETRY_ATTEMPT = 'CRM_FETCH_RECORD_MAX_RETRY_ATTEMPT' # CRMのレコード取得処理の最大リトライ試行回数
|
|
CRM_FETCH_RECORD_RETRY_INTERVAL = 'CRM_FETCH_RECORD_RETRY_INTERVAL' # CRMのレコード取得処理のリトライ時の初回待ち秒数
|
|
CRM_FETCH_RECORD_RETRY_MIN_INTERVAL = 'CRM_FETCH_RECORD_RETRY_MIN_INTERVAL' # CRMのレコード取得処理のリトライ時の最小待ち秒数
|
|
CRM_FETCH_RECORD_RETRY_MAX_INTERVAL = 'CRM_FETCH_RECORD_RETRY_MAX_INTERVAL' # CRMのレコード取得処理のリトライ時の最大待ち秒数
|
|
CONVERT_TZ = 'CONVERT_TZ' # CRMデータの日時を変換するときのタイムゾーン
|
|
|
|
# environments(ECS Task Environment)
|
|
CRM_AUTH_DOMAIN = 'CRM_AUTH_DOMAIN' # CRMのAPI実行のための認証エンドポイントのドメイン
|
|
CRM_USER_NAME = 'CRM_USER_NAME' # CRMのAPI実行用ユーザ名
|
|
CRM_USER_PASSWORD = 'CRM_USER_PASSWORD' # CRMのAPI実行用ユーザパスワード
|
|
CRM_USER_SECURITY_TOKEN = 'CRM_USER_SECURITY_TOKEN' # CRMのAPI実行用ユーザのセキュリティトークン
|
|
CRM_CONFIG_BUCKET = 'CRM_CONFIG_BUCKET' # CRMデータ取得用の設定ファイルを格納するバケット名
|
|
CRM_BACKUP_BUCKET = 'CRM_BACKUP_BUCKET' # CRMのバックアップデータを格納するバケット名
|
|
IMPORT_DATA_BUCKET = 'IMPORT_DATA_BUCKET' # CRMの取込データを格納するバケット名
|
|
OBJECT_INFO_FOLDER = 'OBJECT_INFO_FOLDER' # CRM取得対象オブジェクトの情報を格納するフォルダパス
|
|
OBJECT_INFO_FILENAME = 'OBJECT_INFO_FILENAME' # CRM取得対象オブジェクトの情報のファイル名
|
|
PROCESS_RESULT_FOLDER = 'PROCESS_RESULT_FOLDER' # CRMデータ取得結果を格納するフォルダパス
|
|
PROCESS_RESULT_FILENAME = 'PROCESS_RESULT_FILENAME' # CRMデータ取得結果を格納するファイル名
|
|
LAST_FETCH_DATE_FOLDER = 'LAST_FETCH_DATE_FOLDER' # CRMからの最終取得日時ファイルを格納するフォルダパス
|
|
CRM_IMPORT_DATA_FOLDER = 'CRM_IMPORT_DATA_FOLDER' # CRMから取得し、取込用に変換したデータを格納するフォルダ
|
|
LAST_FETCH_DATE_BACKUP_FOLDER = 'LAST_FETCH_DATE_BACKUP_FOLDER' # CRMからの最終取得日時ファイルのバックアップを格納するフォルダパス
|
|
RESPONSE_JSON_BACKUP_FOLDER = 'RESPONSE_JSON_BACKUP_FOLDER' # CRMから取得した生データのバックアップを格納するフォルダパス
|
|
CRM_IMPORT_DATA_BACKUP_FOLDER = 'CRM_IMPORT_DATA_BACKUP_FOLDER' # CRMから取得し、取込用に変換したデータのバックアップを格納するフォルダ
|
|
|
|
# 時刻フォーマット
|
|
# .000ZはUTCを表す。ミリ秒までの考慮は不要なので固定で指定
|
|
YYYYMMDDTHHMMSSTZ = '%Y-%m-%dT%H:%M:%S.000Z'
|
|
CRM_DATETIME_FORMAT = '%Y-%m-%dT%H:%M:%S.000%z'
|
|
YYYYMMDDHHMMSS = '%Y-%m-%d %H:%M:%S'
|
|
MILLISEC_FORMAT = '000Z'
|
|
|
|
# aws
|
|
AWS_RESOURCE_S3 = 's3'
|
|
S3_RESPONSE_BODY = 'Body'
|
|
S3_CHAR_CODE = 'utf-8'
|
|
|
|
# 正規表現チェック
|
|
EXCLUDE_SYMBOL = ['#', '/']
|
|
DATE_PATTERN_YYYYMMDDTHHMMSSTZ = r'[12]\d{3}-(0[1-9]|1[0-2])-(0[1-9]|[12][0-9]|3[01])T([01][0-9]|2[0-3]):[0-5][0-9]:[0-5][0-9]\.000Z'
|
|
DATE_PATTERN_EXPECTED_YYYYMMDDTHHMMSSTZ = 'YYYY-MM-DDTHH:MM:SS.000Z'
|
|
DATE_PATTERN_YYYYMMDDHHMMSSFFF_UTC = r'\d{4}-\d{2}-\d{2}T\d{2}:\d{2}:\d{2}\.000\+0000'
|
|
|
|
|
|
# logger
|
|
LOG_FORMAT = '[%(levelname)s]\t%(asctime)s\t%(message)s\n'
|
|
LOG_DATE_FORMAT = '%Y-%m-%d %H:%M:%S'
|
|
LOG_LEVEL_INFO = 'INFO'
|
|
|
|
# 処理名
|
|
PROCESS_JP_NAME = 'コントロール処理'
|
|
PRE_JP_NAME = 'データ取得準備処理'
|
|
CHK_JP_NAME = 'オブジェクト情報形式チェック処理'
|
|
DATE_JP_NAME = 'データ取得期間設定処理'
|
|
FETCH_JP_NAME = 'CRMデータ取得処理'
|
|
RESBK_JP_NAME = 'CRM電文データバックアップ処理'
|
|
CONV_JP_NAME = 'CSV変換処理'
|
|
CSVBK_JP_NAME = 'CSVバックアップ処理'
|
|
UPLD_JP_NAME = 'CSVアップロード処理'
|
|
UPD_JP_NAME = '前回取得日時ファイル更新'
|
|
END_JP_NAME = '取得処理実施結果アップロード処理'
|
|
|
|
# CSV
|
|
CSV_TRUE_VALUE = 1
|
|
CSV_FALSE_VALUE = 0
|
|
CSV_LINE_TERMINATOR = '\r\n'
|
|
CSV_DELIMITER = ','
|
|
CSV_QUOTE_CHAR = '"'
|
|
|
|
# システム変数
|
|
|
|
FILE_CHAR_CODE = 'utf-8'
|
|
FILE_MODE_WRITE = 'w'
|
|
TEMPORARY_FILENAME = 'temporary_file'
|
|
|
|
|
|
# CRM_取得オブジェクト情報ファイル関連
|
|
OBJECTS_KEY = 'objects'
|
|
OBJECTS_TYPE = list
|
|
OBJECT_NAME_KEY = 'object_name'
|
|
OBJECT_NAME_TYPE = str
|
|
COLUMNS_KEY = 'columns'
|
|
COLUMNS_TYPE = list
|
|
IS_SKIP_KEY = 'is_skip'
|
|
IS_SKIP_TYPE = bool
|
|
IS_UPDATE_LAST_FETCH_DATETIME_KEY = 'is_update_last_fetch_datetime'
|
|
IS_UPDATE_LAST_FETCH_DATETIME_TYPE = bool
|
|
LAST_FETCH_DATETIME_FILE_NAME_KEY = 'last_fetch_datetime_file_name'
|
|
LAST_FETCH_DATETIME_FILE_NAME_TYPE = str
|
|
UPLOAD_FILE_NAME_KEY = 'upload_file_name'
|
|
UPLOAD_FILE_NAME_TYPE = str
|
|
DATETIME_COLUMN_KEY = 'datetime_column'
|
|
DATETIME_COLUMN_TYPE = str
|
|
DATETIME_COLUMN_DEFAULT_VALUE = 'SystemModstamp'
|
|
|
|
# 前回取得日時ファイル関連
|
|
LAST_FETCH_DATETIME_TO_KEY = 'last_fetch_datetime_to'
|
|
LAST_FETCH_DATETIME_TO_TYPE = str
|
|
LAST_FETCH_DATETIME_FROM_KEY = 'last_fetch_datetime_from'
|
|
LAST_FETCH_DATETIME_FROM_TYPE = str
|