Переходьте в офлайн за допомогою програми Player FM !
[QA] Token Erasure as a Footprint of Implicit Vocabulary Items in LLMs
Manage episode 426507867 series 3524393
LLMs process text with tokens, but individual tokens may not relate to word meanings. This study explores how LLMs convert tokens into higher-level representations, revealing an "erasure" effect.
https://arxiv.org/abs//2406.20086
YouTube: https://www.youtube.com/@ArxivPapers
TikTok: https://www.tiktok.com/@arxiv_papers
Apple Podcasts: https://podcasts.apple.com/us/podcast/arxiv-papers/id1692476016
Spotify: https://podcasters.spotify.com/pod/show/arxiv-papers
--- Support this podcast: https://podcasters.spotify.com/pod/show/arxiv-papers/support
1236 епізодів
Manage episode 426507867 series 3524393
LLMs process text with tokens, but individual tokens may not relate to word meanings. This study explores how LLMs convert tokens into higher-level representations, revealing an "erasure" effect.
https://arxiv.org/abs//2406.20086
YouTube: https://www.youtube.com/@ArxivPapers
TikTok: https://www.tiktok.com/@arxiv_papers
Apple Podcasts: https://podcasts.apple.com/us/podcast/arxiv-papers/id1692476016
Spotify: https://podcasters.spotify.com/pod/show/arxiv-papers
--- Support this podcast: https://podcasters.spotify.com/pod/show/arxiv-papers/support
1236 епізодів
Усі епізоди
×Ласкаво просимо до Player FM!
Player FM сканує Інтернет для отримання високоякісних подкастів, щоб ви могли насолоджуватися ними зараз. Це найкращий додаток для подкастів, який працює на Android, iPhone і веб-сторінці. Реєстрація для синхронізації підписок між пристроями.