-
Notifications
You must be signed in to change notification settings - Fork 1
/
args.py
62 lines (47 loc) · 2.9 KB
/
args.py
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
import argparse
def add_training_args(parser: argparse.ArgumentParser) -> argparse.ArgumentParser:
"""Add training arguments to the parser"""
parser.add_argument("--seed", type=int, default=42)
parser.add_argument("--flag", type=str, default=None)
parser.add_argument("--save_dir", type=str, default='saved/')
parser.add_argument("--disable_wandb", action='store_true')
parser.add_argument("--disable_tqdm", action='store_true')
parser.add_argument("--batch_size", type=int, default=64)
parser.add_argument("--epochs", type=int, default=100)
parser.add_argument("--lr", type=float, default=1e-3)
parser.add_argument("--momentum", type=float, default=0.9)
parser.add_argument("--weight_decay", type=float, default=1e-4)
parser.add_argument("--optimizer_type", type=str, default="adamw")
parser.add_argument("--log_every", type=int, default=1)
parser.add_argument("--save_every", type=int, default=10)
parser.add_argument("--eval_every", type=int, default=1)
parser.add_argument("--alpha", type=float, default=0.2, help="alpha for loss function")
parser.add_argument("--ewc_lambda", type=float, default=0.0, help="lambda for EWC")
parser.add_argument("--use_swa", action='store_true')
return parser
def add_model_args(parser: argparse.ArgumentParser) -> argparse.ArgumentParser:
"""Add model arguments to the parser"""
parser.add_argument("--model_type", type=str, default="siamese", choices=["siamese", "dragonnet"])
parser.add_argument("--backbone_type", type=str, default="tcn", choices=["tcn", "lstm", "gru"])
parser.add_argument("--pool_type", type=str, default="last")
parser.add_argument("--no_positional_embedding", action='store_true')
parser.add_argument("--flipped_embedding", action='store_true')
parser.add_argument("--no_embedding", action='store_true')
parser.add_argument("--embedding_dim", type=int, default=16)
parser.add_argument("--feature_dim", type=int, default=64)
parser.add_argument("--num_layers", type=int, default=10)
parser.add_argument("--dropout", type=float, default=0.2)
parser.add_argument("--pretrained_path", type=str, default=None)
return parser
def add_dataset_args(parser: argparse.ArgumentParser) -> argparse.ArgumentParser:
"""Add dataset arguments to the parser"""
# parser.add_argument("--data_root", type=str, required=True)
parser.add_argument("--dataset_path", type=str, nargs='+', required=True)
parser.add_argument("--test_path", type=str, nargs='+', required=False)
parser.add_argument("--dataset_seed", type=int, default=42)
parser.add_argument("--max_length", type=int, default=1024)
parser.add_argument("--val_ratio", type=float, default=0.2)
# 0: within 3 hours, 1: within 6 hours, 2: within 12 hours
parser.add_argument("--train_y_idx", type=int, default=0)
parser.add_argument("--test_y_idx", type=int, default=0)
return parser