-
Notifications
You must be signed in to change notification settings - Fork 16
/
Copy pathcross_job.sh
159 lines (147 loc) · 12.8 KB
/
cross_job.sh
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
152
153
154
155
156
157
158
159
#!/bin/bash
# Using K80 GPU
# ./cross_job.sh -g 0 -d K -c C -c L -c N -l mixed > Ktrained-crossCLN-mixed-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 1 -c K -d C -c L -c N -l mixed > Ctrained-crossKLN-mixed-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 2 -c K -c C -d L -c N -l mixed > Ltrained-crossKCN-mixed-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 3 -c K -c C -c L -d N -l mixed > Ntrained-crossKCL-mixed-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 4 -d K -d C -c L -c N -l mixed > KCtrained-crossLN-mixed-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 5 -d K -c C -d L -c N -l mixed > KLtrained-crossCN-mixed-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 6 -d K -c C -c L -d N -l mixed > KNtrained-crossCL-mixed-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 7 -c K -d C -d L -c N -l mixed > CLtrained-crossKN-mixed-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 8 -c K -d C -c L -d N -l mixed > Ntrained-crossKL-mixed-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 9 -c K -c C -d L -d N -l mixed > Ltrained-crossKL-mixed-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 10 -d K -d C -d L -c N -l mixed > KCLtrained-crossN-mixed-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 11 -d K -d C -c L -d N -l mixed > KCNtrained-crossL-mixed-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 12 -c K -d C -d L -d N -l mixed > CLNtrained-crossK-mixed-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 13 -d K -c C -d L -d N -l mixed > KLNtrained-crossC-mixed-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 0 -d K -c C -c L -c N -l naive > Ktrained-crossCLN-naive-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 1 -c K -d C -c L -c N -l naive > Ctrained-crossKLN-naive-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 2 -c K -c C -d L -c N -l naive > Ltrained-crossKCN-naive-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 3 -c K -c C -c L -d N -l naive > Ntrained-crossKCL-naive-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 4 -d K -d C -c L -c N -l naive > KCtrained-crossLN-naive-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 5 -d K -c C -d L -c N -l naive > KLtrained-crossCN-naive-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 6 -d K -c C -c L -d N -l naive > KNtrained-crossCL-naive-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 7 -c K -d C -d L -c N -l naive > CLtrained-crossKN-naive-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 8 -c K -d C -c L -d N -l naive > Ntrained-crossKL-naive-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 9 -c K -c C -d L -d N -l naive > Ltrained-crossKL-naive-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 10 -d K -d C -d L -c N -l naive > KCLtrained-crossN-naive-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 11 -d K -d C -c L -d N -l naive > KCNtrained-crossL-naive-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 12 -c K -d C -d L -d N -l naive > CLNtrained-crossK-naive-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 13 -d K -c C -d L -d N -l naive > KLNtrained-crossC-naive-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 0 -d K -c C -c L -c N -l naive0 > Ktrained-crossCLN-naive0-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 1 -c K -d C -c L -c N -l naive0 > Ctrained-crossKLN-naive0-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 2 -c K -c C -d L -c N -l naive0 > Ltrained-crossKCN-naive0-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 3 -c K -c C -c L -d N -l naive0 > Ntrained-crossKCL-naive0-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 4 -d K -d C -c L -c N -l naive0 > KCtrained-crossLN-naive0-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 5 -d K -c C -d L -c N -l naive0 > KLtrained-crossCN-naive0-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 6 -d K -c C -c L -d N -l naive0 > KNtrained-crossCL-naive0-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 7 -c K -d C -d L -c N -l naive0 > CLtrained-crossKN-naive0-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 8 -c K -d C -c L -d N -l naive0 > Ntrained-crossKL-naive0-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 9 -c K -c C -d L -d N -l naive0 > Ltrained-crossKL-naive0-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 10 -d K -d C -d L -c N -l naive0 > KCLtrained-crossN-naive0-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 11 -d K -d C -c L -d N -l naive0 > KCNtrained-crossL-naive0-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 12 -c K -d C -d L -d N -l naive0 > CLNtrained-crossK-naive0-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 13 -d K -c C -d L -d N -l naive0 > KLNtrained-crossC-naive0-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 0 -d K -c C -c L -c N -l l1 > Ktrained-crossCLN-l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 1 -c K -d C -c L -c N -l l1 > Ctrained-crossKLN-l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 2 -c K -c C -d L -c N -l l1 > Ltrained-crossKCN-l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 3 -c K -c C -c L -d N -l l1 > Ntrained-crossKCL-l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 4 -d K -d C -c L -c N -l l1 > KCtrained-crossLN-l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 5 -d K -c C -d L -c N -l l1 > KLtrained-crossCN-l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 6 -d K -c C -c L -d N -l l1 > KNtrained-crossCL-l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 7 -c K -d C -d L -c N -l l1 > CLtrained-crossKN-l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 8 -c K -d C -c L -d N -l l1 > Ntrained-crossKL-l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 9 -c K -c C -d L -d N -l l1 > Ltrained-crossKL-l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 10 -d K -d C -d L -c N -l l1 > KCLtrained-crossN-l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 11 -d K -d C -c L -d N -l l1 > KCNtrained-crossL-l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 12 -c K -d C -d L -d N -l l1 > CLNtrained-crossK-l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 13 -d K -c C -d L -d N -l l1 > KLNtrained-crossC-l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 0 -d K -c C -c L -c N -l rank > Ktrained-crossCLN-rank-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 1 -c K -d C -c L -c N -l rank > Ctrained-crossKLN-rank-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 2 -c K -c C -d L -c N -l rank > Ltrained-crossKCN-rank-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 3 -c K -c C -c L -d N -l rank > Ntrained-crossKCL-rank-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 4 -d K -d C -c L -c N -l rank > KCtrained-crossLN-rank-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 5 -d K -c C -d L -c N -l rank > KLtrained-crossCN-rank-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 6 -d K -c C -c L -d N -l rank > KNtrained-crossCL-rank-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 7 -c K -d C -d L -c N -l rank > CLtrained-crossKN-rank-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 8 -c K -d C -c L -d N -l rank > Ntrained-crossKL-rank-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 9 -c K -c C -d L -d N -l rank > Ltrained-crossKL-rank-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 10 -d K -d C -d L -c N -l rank > KCLtrained-crossN-rank-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 11 -d K -d C -c L -d N -l rank > KCNtrained-crossL-rank-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 12 -c K -d C -d L -d N -l rank > CLNtrained-crossK-rank-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 13 -d K -c C -d L -d N -l rank > KLNtrained-crossC-rank-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 0 -d K -c C -c L -c N -l plcc > Ktrained-crossCLN-plcc-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 1 -c K -d C -c L -c N -l plcc > Ctrained-crossKLN-plcc-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 2 -c K -c C -d L -c N -l plcc > Ltrained-crossKCN-plcc-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 3 -c K -c C -c L -d N -l plcc > Ntrained-crossKCL-plcc-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 4 -d K -d C -c L -c N -l plcc > KCtrained-crossLN-plcc-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 5 -d K -c C -d L -c N -l plcc > KLtrained-crossCN-plcc-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 6 -d K -c C -c L -d N -l plcc > KNtrained-crossCL-plcc-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 7 -c K -d C -d L -c N -l plcc > CLtrained-crossKN-plcc-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 8 -c K -d C -c L -d N -l plcc > Ntrained-crossKL-plcc-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 9 -c K -c C -d L -d N -l plcc > Ltrained-crossKL-plcc-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 10 -d K -d C -d L -c N -l plcc > KCLtrained-crossN-plcc-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 11 -d K -d C -c L -d N -l plcc > KCNtrained-crossL-plcc-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 12 -c K -d C -d L -d N -l plcc > CLNtrained-crossK-plcc-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 13 -d K -c C -d L -d N -l plcc > KLNtrained-crossC-plcc-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 0 -d K -c C -c L -c N -l rank+l1 > Ktrained-crossCLN-rank+l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 1 -c K -d C -c L -c N -l rank+l1 > Ctrained-crossKLN-rank+l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 2 -c K -c C -d L -c N -l rank+l1 > Ltrained-crossKCN-rank+l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 3 -c K -c C -c L -d N -l rank+l1 > Ntrained-crossKCL-rank+l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 4 -d K -d C -c L -c N -l rank+l1 > KCtrained-crossLN-rank+l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 5 -d K -c C -d L -c N -l rank+l1 > KLtrained-crossCN-rank+l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 6 -d K -c C -c L -d N -l rank+l1 > KNtrained-crossCL-rank+l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 7 -c K -d C -d L -c N -l rank+l1 > CLtrained-crossKN-rank+l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 8 -c K -d C -c L -d N -l rank+l1 > Ntrained-crossKL-rank+l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 9 -c K -c C -d L -d N -l rank+l1 > Ltrained-crossKL-rank+l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 10 -d K -d C -d L -c N -l rank+l1 > KCLtrained-crossN-rank+l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 11 -d K -d C -c L -d N -l rank+l1 > KCNtrained-crossL-rank+l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 12 -c K -d C -d L -d N -l rank+l1 > CLNtrained-crossK-rank+l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 13 -d K -c C -d L -d N -l rank+l1 > KLNtrained-crossC-rank+l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 15 -d K -c C -c L -c N -l plcc+l1 > Ktrained-crossCLN-plcc+l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 14 -c K -d C -c L -c N -l plcc+l1 > Ctrained-crossKLN-plcc+l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 13 -c K -c C -d L -c N -l plcc+l1 > Ltrained-crossKCN-plcc+l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 12 -c K -c C -c L -d N -l plcc+l1 > Ntrained-crossKCL-plcc+l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 11 -d K -d C -c L -c N -l plcc+l1 > KCtrained-crossLN-plcc+l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 10 -d K -c C -d L -c N -l plcc+l1 > KLtrained-crossCN-plcc+l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 9 -d K -c C -c L -d N -l plcc+l1 > KNtrained-crossCL-plcc+l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 8 -c K -d C -d L -c N -l plcc+l1 > CLtrained-crossKN-plcc+l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 7 -c K -d C -c L -d N -l plcc+l1 > Ntrained-crossKL-plcc+l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 6 -c K -c C -d L -d N -l plcc+l1 > Ltrained-crossKL-plcc+l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 5 -d K -d C -d L -c N -l plcc+l1 > KCLtrained-crossN-plcc+l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 4 -d K -d C -c L -d N -l plcc+l1 > KCNtrained-crossL-plcc+l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 3 -c K -d C -d L -d N -l plcc+l1 > CLNtrained-crossK-plcc+l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 2 -d K -c C -d L -d N -l plcc+l1 > KLNtrained-crossC-plcc+l1-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 0 -d K -c C -c L -c N -l correlation > Ktrained-crossCLN-correlation-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 1 -c K -d C -c L -c N -l correlation > Ctrained-crossKLN-correlation-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 2 -c K -c C -d L -c N -l correlation > Ltrained-crossKCN-correlation-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 3 -c K -c C -c L -d N -l correlation > Ntrained-crossKCL-correlation-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 4 -d K -d C -c L -c N -l correlation > KCtrained-crossLN-correlation-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 5 -d K -c C -d L -c N -l correlation > KLtrained-crossCN-correlation-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 6 -d K -c C -c L -d N -l correlation > KNtrained-crossCL-correlation-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 7 -c K -d C -d L -c N -l correlation > CLtrained-crossKN-correlation-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 8 -c K -d C -c L -d N -l correlation > Ntrained-crossKL-correlation-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 9 -c K -c C -d L -d N -l correlation > Ltrained-crossKL-correlation-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 10 -d K -d C -d L -c N -l correlation > KCLtrained-crossN-correlation-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 11 -d K -d C -c L -d N -l correlation > KCNtrained-crossL-correlation-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 12 -c K -d C -d L -d N -l correlation > CLNtrained-crossK-correlation-exp-0-10.log 2>&1 &
# ./cross_job.sh -g 13 -d K -c C -d L -d N -l correlation > KLNtrained-crossC-correlation-exp-0-10.log 2>&1 &
loss=mixed
start_id=0
end_id=10
while getopts "g:d:l:s:e:c:" opt; do
case $opt in
g) gpu_id=("$OPTARG");; # gpu_id
d) datasets+=("$OPTARG");; # trained datasets
l) loss=("$OPTARG");; # loss
s) start_id=("$OPTARG");;
e) end_id=("$OPTARG");;
c) cross_datasets+=("$OPTARG");; # trained datasets
esac
done
shift $((OPTIND -1))
source activate reproducibleresearch
for ((i=$start_id; i<$end_id; i++)); do
CUDA_VISIBLE_DEVICES=$gpu_id python cross_dataset_evaluation.py --exp_id=$i --loss=$loss --trained_datasets ${datasets[@]} --cross_datasets ${cross_datasets[@]}
done
source deactivate