| Текст: Бля ну я ебал | |
| Сырое: ['<bos>', 'Б', '▁ля', 'ну', 'я', 'е', '▁бал', '<eos>'] | |
| Чистое: ['<bos>', 'Б', 'ля', 'ну', 'я', 'е', 'бал', '<eos>'] | |
| Декод: <bos> Б ▁ля ну я е ▁бал <eos> | |
| на выходе : Бля ну я ебал |
| Текст: Бля ну я ебал | |
| Сырое: ['<bos>', 'Б', '▁ля', 'ну', 'я', 'е', '▁бал', '<eos>'] | |
| Чистое: ['<bos>', 'Б', 'ля', 'ну', 'я', 'е', 'бал', '<eos>'] | |
| Декод: <bos> Б ▁ля ну я е ▁бал <eos> | |
| на выходе : Бля ну я ебал |