位置插值训练数据相关

[KyrieXu11]

各位大佬好，

我这边有个模型现在有8k的上下文长度，如果我想扩展到16k的长度，已经使用ntk直接推理测试过，但是想用线性插值训练一下模型测试看看

所以想请教一下下面的几个问题：

1. 添加位置插值之后，训练的方式是sft还是增量预训练？
2. 添加位置插值之后，训练的语料长度一般为多少更合适？
3. 训练的数据如果是开源的话，请问能给个地址吗？

@ymcui @iMountTai 求大佬解答一下