PLuG: Pairwise Logit Gating for Expressive Attention Modulation in Vision Transformers
Despite its widespread success on vision tasks, standard attention employs a shared dot-product mechanism that uniformly scores all query–key interactions before applying softmax. In this paper, we hypothesize that explicitly controlling the amplification or suppression of individual query-ke...
Đã lưu trong:
| Những tác giả chính: | , , , |
|---|---|
| Định dạng: | Artigo |
| Ngôn ngữ: | Inglês |
| Được phát hành: |
IEEE
2026-01-01
|
| Loạt: | IEEE Access |
| Những chủ đề: | |
| Truy cập trực tuyến: | https://ieeexplore.ieee.org/document/11554332/ |
| Các nhãn: |
Không có thẻ, Là người đầu tiên thẻ bản ghi này!
|