关于context-base strategy的疑问

[Lucas-Yang1]

我想请问一下，当文本过长的时候（超过512的时候）如何计算$A_i^S$。（Entity对文本的attention_weight)

• 直接将超过长度的部分attention_weight设为0
• 只计算512长度部分的attention_weight（将长句子分成每个部分都是512的长度。“有重叠部分")，然后只算Entity对当前截断句子的attention_weight。

感谢您的答疑！:)