개념

어텐션

C6

입력 중 어떤 부분을 더 중요하게 볼지 가중치를 주는 메커니즘.

'그것'이 문장 속 어떤 단어를 더 중요하게 보는지 가중치로 잇는 어텐션 그 동물이 길을 건넜다 그것은?
어텐션 개념도

핵심 포인트

입력 중 어떤 부분을 더 중요하게 볼지 가중치를 주는 메커니즘.

관련 개념

트랜스포머

역링크