标点符号和基于 bert 的模型

Question

我想知道使用标点符号对基于 Bert 的模型是否有用！ 为了详细说明，我想在数据集上微调我的 bert 网络，然后对看不见的数据集进行分类