# tokenization
4 artikelengetagd met “tokenization”
Tokenisatie en de beveiligingsimplicaties ervan
Hoe BPE- en SentencePiece-tokenizers werken, en hoe het gedrag van een tokenizer exploiteerbare aanvalsoppervlakken creëert, waaronder grensaanvallen, homoglyphen en encoding-trucs.
tokenizationbpesecurityencodingintermediate
Tokenisatie en de beveiligingsimplicaties ervan
Hoe tokenisatie werkt en waarom het beveiligingsrelevant gedrag in taalmodellen veroorzaakt.
foundationstokenizationsecurityencoding
Op tokenisatie gebaseerde aanvallen
Hoe het gedrag van tokenizers misbruikbare gaten creëert tussen voor mensen leesbare tekst en de interne representaties van het model, waardoor filteromzeiling en obfuscatie van payloads mogelijk worden.
tokenizationbpesentencepiecefilter-bypassexploit-primitives
Token smuggling
Exploiting LLM tokenization quirks to smuggle harmful content past safety filters by manipulating how text is split into tokens at the subword level.
jailbreakingtokenizationtoken-smugglingBPEsubwordcontent-filter-bypassred-teaming