当前环境

The output of `python collect_env.py`

我注意到动态ntk的实现为所有长度重新计算了基础参数，这与transformers的实现不一致？

🐛 描述bug

def _compute_cos_sin_cache(self) -> torch.Tensor:

NOTE(woosuk): self.max_position_embeddings是应用rope缩放之前的原始最大长度。

因此，在应用rope缩放后的最大长度为self.max_position_embeddings * self.scaling_factor。