AI Glossary

Attention Mechanism

Letter A

Definition

Técnica em redes neurais que permite ao modelo focar em partes relevantes dos dados de entrada. É a base da arquitetura Transformer usada em GPT, BERT e outros LLMs.

Related Terms

See also

Browse by letter: