-
Notifications
You must be signed in to change notification settings - Fork 1
/
reference_builder_itself_standalone.sh
executable file
·229 lines (179 loc) · 13.8 KB
/
reference_builder_itself_standalone.sh
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
152
153
154
155
156
157
158
159
160
161
162
163
164
165
166
167
168
169
170
171
172
173
174
175
176
177
178
179
180
181
182
183
184
185
186
187
188
189
190
191
192
193
194
195
196
197
198
199
200
201
202
203
204
205
206
207
208
209
210
211
212
213
214
215
216
217
218
219
220
221
222
223
224
225
226
227
228
229
#!/bin/bash
################################################################################
SCRIPT_NAME="reference_builder.sh"
PIPELINE_NAME="BuildAndPush"
################################################################################
inventory="$1"
product="$2"
username="$3"
password="$4"
apps="$5"
type_of_run="$6"
typeofcloud="$7"
vault_pass="$8"
ansible_global_gitlab_registry_site_name="$9"
gitlab_project_name="${10}"
gitlab_project_group="${11}"
version_ansible_build_id="${12}"
deploy_environment_security_configuration="${13}"
cluster_type="${14}"
registry_username="${15}"
registry_token="${16}"
ANSIBLE_COMMIT_SHA="${17}"
ANSIBLE_BUILD_ID="${18}"
extended_datacenter_zone="${19}"
extra_args_type_of_run="${20}"
force_requirements_reinstall="${21}"
remap_target_to_link_inventory_name="${22}"
################################################################################
export apps="$apps"
export gitlab_project_name="$gitlab_project_name"
export gitlab_project_group="$gitlab_project_group"
export typeofcloud="$typeofcloud"
export username="$username"
export inventory="$inventory"
export product="$product"
export ansible_global_gitlab_registry_site_name="$ansible_global_gitlab_registry_site_name"
export type_of_run="$type_of_run"
export registry_username="$registry_username"
export registry_token="$registry_token"
export version_ansible_build_id="$version_ansible_build_id"
export deploy_environment_security_configuration="$deploy_environment_security_configuration"
export password="$password"
export vault_pass="$vault_pass"
export cluster_type="$cluster_type"
export ANSIBLE_COMMIT_SHA="$ANSIBLE_COMMIT_SHA"
export ANSIBLE_BUILD_ID="$ANSIBLE_BUILD_ID"
export force_requirements_reinstall="$force_requirements_reinstall"
export remap_target_to_link_inventory_name="$remap_target_to_link_inventory_name"
################################################################################
clear
EXEC_TIMESTAMP=`date +%s`
START_TIME=`date +%Y-%m-%d`
LOG_LEVEL_WRAPPER="short" # debug / trace / info / short
export LOG_LEVEL_WRAPPER $LOG_LEVEL_WRAPPER
# Have fun when you use that! =)
# Becareful, you need known what you doing =)
# . "$ansible_dir"/scripts/libsh/head/colors.sh
pipelinename=$PIPELINE_NAME
LOG_FILE_NAME="./CI/logs/${pipelinename}-${USER}-${START_TIME}-${EXEC_TIMESTAMP}.log"
uname=$(uname)
runpath=`pwd`
ansible_dir="${runpath}/ansible"
ansible_dir=$(echo "$runpath" | sed -e "s/ansible\/ansible/ansible/g")
root_path_dir=`echo $runpath | sed -e 's/\/ansible//g'`
LOCAL_DIRECTORY="$root_path_dir/.local"
export LOCAL_DIRECTORY="$LOCAL_DIRECTORY"
export root_path_dir="$root_path_dir"
# LOAD COLORS
. "$ansible_dir"/scripts/libsh/head/colors.sh
# LOAD MAIN FUNCTIONS
. "$ansible_dir"/scripts/libsh/functions_ng.sh
# DETERMINATE THE RUNTIME VARIABLES
# . "$ansible_dir"/scripts/libsh/head_ng.sh "$SCRIPT_NAME"
####################################################################################################################################################################
# REUIREMENTS FOR PIP FORCE REINSTALL SECTION
####################################################################################################################################################################
terminal_custom_logging "
Application Set $apps
VCS Project Name: $gitlab_project_name
VCS Project Group: $gitlab_project_group
Type of cloud: $typeofcloud
Username: $username
Inventory: $inventory
Product: $product
Registry site URL: $ansible_global_gitlab_registry_site_name
Type of run: $type_of_run
Registry Username: $registry_username
Registry Token: $registry_token
Ansible Build ID $version_ansible_build_id
Environment Security Configuration: $deploy_environment_security_configuration
Password: $password
Vault password: $vault_pass
Cluster Type: $cluster_type
CI Commit SHA: $ANSIBLE_COMMIT_SHA
CI Build ID: $ANSIBLE_BUILD_ID
Reinstall requirements flag: $force_requirements_reinstall
Remapping target inventory from same zero template source to: $remap_target_to_link_inventory_name
SCRIPT_NAME: $SCRIPT_NAME
LOG_FILE_NAME: $LOG_FILE_NAME
LOCAL_DIRECTORY: $LOCAL_DIRECTORY
START_TIME: $START_TIME
EXEC_TIMESTAMP: $EXEC_TIMESTAMP
" "info"
####################################################################################################################################################################
if [ ! -z $force_requirements_reinstall ]; then
terminal_custom_logging "
Start force reinstall/check requirements installed
" "info"
uname=`uname -s`
run_req "$typeofcloud" "$uname" "$ansible_dir"
else
terminal_custom_logging "
Not defined to force reinstalling/checking requirements installed
" "info"
fi
####################################################################################################################################################################
terminal_custom_logging " RUN REQUIREMENTS HELPER: ПРОВЕРКА ВСЕХ ТРЕБУЕМЫХ ПАРАМЕТРОВ НЕОБХОДИМЫХ ДЛЯ ОСУЩЕСТВЛЕНИЯ СЦЕНАРИЯ НЕПРЕРЫВНОЙ ИНТЕГРАЦИИ И ПРОЦЕССОВ НЕПРЕРЫВНОЙ ДОСТАВКИ" "trace"
####################################################################################################################################################################
run_req_function "$inventory" "$product" "$username" "$password" "$apps" "$type_of_run" "$typeofcloud" "$vault_pass" "$ansible_global_gitlab_registry_site_name" "$gitlab_project_name" "$gitlab_project_group" "$version_ansible_build_id" "$deploy_environment_security_configuration" "$cluster_type" "$registry_username" "$registry_token" "$ANSIBLE_COMMIT_SHA" "$ANSIBLE_BUILD_ID"
# . "$ansible_dir"/scripts/libsh/deploy/req_help.sh
####################################################################################################################################################################
terminal_custom_logging " DECRYPT VAULT ARCHIVE: ПОЛУЧЕНИЕ И РАСШИФРОВКА ПЕРСОНАЛЬНОГО ХРАНИЛИЩА ДАННЫХ (АУТЕНТИФИКАЦИОННЫЕ, ИНЫЕ ПАРАМЕТРЫ И СЛОВАРИ) ПОЛЬЗОВАТЕЛЯ И АДАПТЕРА" "trace"
####################################################################################################################################################################
vault_ng "$vault_pass" "$username" "decrypt" "$product" "$typeofcloud" "$inventory" "$root_path_dir" "$ansible_dir" "$LOCAL_DIRECTORY";
####################################################################################################################################################################
terminal_custom_logging " PIPELINE: НАЧАЛО ВЫПОЛНЕНИЯ ЭТАПОВ СЦЕНАРИЯ КОНВЕЙРА" "trace"
####################################################################################################################################################################
terminal_custom_logging "PARENT INVENTORY SOURCE: $inventory" "trace"
#echo "remap_target_to_link_inventory_name: $remap_target_to_link_inventory_name"
ANSIBLE_COMMIT_SHA_SHORT=`echo $ANSIBLE_COMMIT_SHA | head -c 8`
DATE_YEAR=`date '+%Y'`
DATE_MOUTH=`date '+%m'`
ANSIBLE_CI_VERSION="${DATE_YEAR}.${DATE_MOUTH}.$ANSIBLE_BUILD_ID-${ANSIBLE_COMMIT_SHA_SHORT}"
terminal_custom_logging "
ANSIBLE CI VERSION: $ANSIBLE_CI_VERSION
" "info"
if [ ! -z $remap_target_to_link_inventory_name ]; then
terminal_custom_logging "REMAPPED RESULT TRARGET IS(remap_target_to_link_inventory_name) $remap_target_to_link_inventory_name" "trace"
####################################################################################################################################################################
terminal_custom_logging " # GO INFRA PHASE I: УРОВЕНЬ РАЗВЕРТЫВАНИЯ И ВАЛИДАЦИИ ВИРТУАЛЬНЫХ МАШИН" "trace"
####################################################################################################################################################################
# development_run_bootstrap_and_check_infra "$typeofcloud" "$ansible_dir" "$product" "$inventory" "$ansible_datacenter";
####################################################################################################################################################################
terminal_custom_logging " # GO BETWEEN PHASE I/II: СОЗДАНИЕ КОНЕЧНОГО ИНВЕНТАРЯ" "trace"
####################################################################################################################################################################
terminal_custom_logging "INVENTORY TO REMAP: $remap_target_to_link_inventory_name" "trace"
terminal_custom_logging "PARENT INVENTORY SOURCE: $inventory" "trace"
# echo -e " INVENTORY TO REMAP: $remap_target_to_link_inventory_name"
# echo -e " PARENT INVENTORY SOURCE: $inventory"
####################################################################################################################################################################
terminal_custom_logging " # CUSTOM TARGET LINKED INVENTORY PIPE SHORT TASKS: ВЫПОЛНЕНИЕ ДОПОЛНИТЕЛЬНОГО СЦЕНАРИЯ ДЛЯ ПОТОМКА ОСНОВНОГО ИНВЕНТАРЯ ВНУТРИ ПРОДУКТА" "trace"
####################################################################################################################################################################
inventory="$remap_target_to_link_inventory_name"
####################################################################################################################################################################
terminal_custom_logging " # TO_WIP: CURRENTLY ONLY DNS UPDATE ON THIS FLOW, NEED TALKS ABOUT WHAT WE REALLY NEED WHEN THIS CASE RUN" "trace"
####################################################################################################################################################################
terminal_custom_logging " # DOCKER BUILD ALL" "trace"
prepare_ci "$username" "$product" "$typeofcloud" "$inventory" "$root_path_dir" "$ansible_dir" "$runpath" "$LOCAL_DIRECTORY" "$ANSIBLE_CI_VERSION" "$ANSIBLE_BUILD_ID";
docker_build_function "$username" "$product" "$typeofcloud" "$inventory" "$root_path_dir" "$ansible_dir" "$runpath" "$LOCAL_DIRECTORY" "$registry_username" "$registry_token";
# target_inventory_link_devops_service_zone_live "$typeofcloud" "$ansible_dir" "$product" "$remap_target_to_link_inventory_name" "$ansible_datacenter";
else
####################################################################################################################################################################
terminal_custom_logging " # GO INFRA PHASE I: УРОВЕНЬ РАЗВЕРТЫВАНИЯ И ВАЛИДАЦИИ ВИРТУАЛЬНЫХ МАШИН" "trace"
####################################################################################################################################################################
# development_run_bootstrap_and_check_infra "$typeofcloud" "$ansible_dir" "$product" "$inventory" "$ansible_datacenter";
####################################################################################################################################################################
terminal_custom_logging " # GO BETWEEN PHASE I/II: СОЗДАНИЕ КОНЕЧНОГО ИНВЕНТАРЯ" "trace"
####################################################################################################################################################################
. "$ansible_dir"/scripts/libsh/development_cloud_api_gen.sh "$runpath" "$ansible_dir" "$inventory"
####################################################################################################################################################################
terminal_custom_logging " # PRIMARY TARGET LINKED INVENTORY PIPE FULL CHAIN PLAYBOOKS WITH MULTIPLE ROLES AND TASKS: ВЫПОЛНЕНИЕ ДОПОЛНИТЕЛЬНОГО СЦЕНАРИЯ ДЛЯ ПОТОМКА ОСНОВНОГО ИНВЕНТАРЯ ВНУТРИ ПРОДУКТА" "trace"
####################################################################################################################################################################
terminal_custom_logging " # DOCKER BUILD ALL" "trace"
prepare_ci "$username" "$product" "$typeofcloud" "$inventory" "$root_path_dir" "$ansible_dir" "$runpath" "$LOCAL_DIRECTORY" "$ANSIBLE_CI_VERSION" "$ANSIBLE_BUILD_ID";
docker_build_function "$username" "$product" "$typeofcloud" "$inventory" "$root_path_dir" "$ansible_dir" "$runpath" "$LOCAL_DIRECTORY" "$registry_username" "$registry_token" "$ansible_global_gitlab_registry_site_name" "$gitlab_project_group" "$gitlab_project_name";
# devops_service_zone_live "$typeofcloud" "$ansible_dir" "$product" "$inventory" "$ansible_datacenter";
fi
# SHOW RUN INFO
last_info_show ${EXEC_TIMESTAMP}