如何理解SelfAttention

1. 如何理解attention html attention能夠理解爲一種soft方式的用key找value web a. Key找Value: 是有了key，就找出對應的value b. soft方式的 Key找Value: Query*key ->value, attention是Key要結合着Query，而後看在多大程度上使用value c.除了上述公式，也能夠用別的Query和key的計

>>阅读原文<<