[Refactor] 升级ark-nlp代码结构 #80

xiangking · 2022-09-15T13:31:14Z

PR types

Refactor

PR changes

整体代码结构升级

Description

代码结构升级，规范化参数变量名称
升级save方法，增加保存最佳模型的策略
增加early_stopping策略 Closes 能否考虑下支持EarlyStopping #78
增加数据处理进度 Closes New Feature: dataset增加数据处理进度 #41

…e_model的task

This reverts commit 3697dcf.

This reverts commit e2f20d3.

王翔 and others added 30 commits July 31, 2022 11:53

refactor(task): 修改变量名称和注释

60cb70d

refactor(*): 修改dataset和task注释, 删去pure多余的代码

4c164ad

fix(model): 修复指针类模型在评估阶段的计算问题

0de1601

refactor(*): 调整大部分注释

2e0b79a

refactor(task): 调整Task类中方法和参数的命名

fa3ebe1

refactor(task): 规范化bio_named_entity_recognition和prompt_masked_languag…

dbfe935

…e_model的task

refactor(task): 更改evaluate_logs的input_length为sequence_length

389388d

refactor(task): 同步修改

a75bf27

refactor(*): 按规范对task变量命名进行修正

6827340

refactor(*): 代码变量规范化

35b487e

refactor(test): 格式调整成适合规范形式

1215e67

refactor(task): 更改方法的结构

23d46d3

refactor(task): 持续代码结构变更

6a11d3c

refactor(task): 将目前库中的task都改为新形式

72de15c

refactor(task): 持续代码结构变更

356658a

refactor(task): 对casrel task格式进行规范化

f0752a0

refactor(task): 持续代码结构变更

c0a38ca

feature(early_stopping): 新增early_stopping，目前只支持global_point

3697dcf

Revert "feature(early_stopping): 新增early_stopping，目前只支持global_point"

2b56dec

This reverts commit 3697dcf.

refactor(dataset): 更新dataset格式，并添加处理进度显示

7f7946f

Merge branch 'refactor' of github.com:xiangking/ark-nlp into refactor

7d746f7

fix(logs): 修复训练过程中评估指标累计未置0的问题

b30bea3

feat(task): 持续更新-新增step评估和按最优指标保存的功能

1bd096e

feat(*): 使用handler去控制全局的过程和状态

71c3f0a

feat(*): 新增metric逻辑，并将TCTask更改为适配该逻辑的结构

325c1a9

refactor(task): 根据新增的metric更改task结构

bacb723

feat(crf task): 更新crf task的代码结构

6e0de67

refactor(span task): 更新span task的代码结构

90fca74

refactor(global pointer task): 更新global pointer task的代码结构

db9d910

refactor(task): 更新w2ner和pure的代码结构

0f4f695

xiangking and others added 12 commits August 29, 2022 20:51

fix(*): 冲突解决

1f4b861

refactor(casrel task): 更新casrel task代码格式

44af93e

refactor(simcse task): 更新simcse task代码结构

d950885

refactor(prgc task): 更新prgc task代码结构

cec8238

refactor(attack): 更新攻击的代码结构

cfe60a4

refactor(uie task): 更新uie task的代码结构

4b0e5ba

fix(w2ner): 修复w2ner更新产生的bug

139b93d

feat(simcse): 添加有监督版本

be16cff

feat(early_stopping): 新增early_stopping

9b95215

feat(*): 新增Sentence-BERT(sbert)模型

71b552c

feat(*): 新增tensorboar和wandb进行记录

9af9939

Merge branch 'refactor' of github.com:xiangking/ark-nlp into refactor

a33d310

xiangking added the refactor label Sep 15, 2022

xiangking requested review from km1994, powerycy and jimme0421 September 15, 2022 13:31

xiangking self-assigned this Sep 15, 2022

jimme0421 approved these changes Sep 15, 2022

View reviewed changes

xiangking merged commit e2f20d3 into develop Sep 15, 2022

xiangking pushed a commit that referenced this pull request Sep 15, 2022

Revert "[Refactor] 升级ark-nlp代码结构 (#80)"

f9aac9f

This reverts commit e2f20d3.

Provide feedback

Saved searches

Use saved searches to filter your results more quickly

[Refactor] 升级ark-nlp代码结构 #80

[Refactor] 升级ark-nlp代码结构 #80

xiangking commented Sep 15, 2022

[Refactor] 升级ark-nlp代码结构 #80

[Refactor] 升级ark-nlp代码结构 #80

Conversation

xiangking commented Sep 15, 2022