신뢰성에 대한 고려를 포함한 Pair 중요성 distillation
arXiv:2609.05481v1 발표 유형: 새로운 abstract 예시 간 관계 학습은 교사 의 표현 공간을 예시 간의 관계를 매칭하여 미니 배치 내에서 전달합니다. 모든 Pair를 계산하는 것은 배치 크기에 대해 이차 복잡도를 가지며, 균일 Subsampling은 효율적으로 Relation Budget를 사용하지 못할 수 있습니다. 우리는 신뢰성 aware Pair Importance