diff --git a/charabia/src/separators.rs b/charabia/src/separators.rs index 91436d3..c821204 100644 --- a/charabia/src/separators.rs +++ b/charabia/src/separators.rs @@ -60,7 +60,7 @@ pub const DEFAULT_SEPARATORS: &[&str] = &[ "๐‘ช ", "๐‘ชก", "๐‘ชข", "๐‘ฑ", "๐‘ฑ‚", "๐‘ฑƒ", "๐‘ฑ„", "๐‘ฑ…", "๐‘ฑฐ", "๐‘ฑฑ", "๐‘ปท", "๐‘ปธ", "๐‘ฟฟ", "๐’‘ฐ", "๐’‘ฑ", "๐’‘ฒ", "๐’‘ณ", "๐’‘ด", "๐–ฉฎ", "๐–ฉฏ", "๐–ซต", "๐–ฌท", "๐–ฌธ", "๐–ฌน", "๐–ฌบ", "๐–ฌป", "๐–ญ„", "๐–บ—", "๐–บ˜", "๐–บ™", "๐–บš", "๐–ฟข", "๐›ฒŸ", "๐ช‡", "๐ชˆ", "๐ช‰", "๐ชŠ", "๐ช‹", "๐žฅž", "๐žฅŸ", "\n", "\r", "\u{2029}", " ", "แš€", "โ€‚", "โ€ƒ", "โ€‚", "โ€ƒ", "โ€„", "โ€…", "โ€†", "โ€‡", "โ€ˆ", "โ€‰", - "โ€Š", "ใ€€", "`", "\t" "+", "-", "ยฑ", "ร—", "รท", "โˆ’", "โˆ“", "โˆ”", "โˆ•", "โˆ–", "โˆ—", "โˆ˜", "โˆ™", "โˆš", "โˆ›", + "โ€Š", "ใ€€", "`", "\t", "+", "-", "ยฑ", "ร—", "รท", "โˆ’", "โˆ“", "โˆ”", "โˆ•", "โˆ–", "โˆ—", "โˆ˜", "โˆ™", "โˆš", "โˆ›", "โˆœ", "โˆ", "โˆž", "โˆŸ", "โˆ ", "โˆก", "โˆข", "โˆฃ", "โˆค", "โˆฅ", "โˆง", "โˆจ", "โˆฉ", "โˆช", "โˆซ", "โˆฌ", "โˆญ", "โˆฎ", "โˆฏ", "โˆฐ", "โˆฑ", "โˆฒ", "โˆณ", "โˆด", "โˆต", "โˆถ", "โˆท", "โˆธ", "โˆน", "โˆบ", "โˆป", "โˆผ", "โˆฝ", "โˆพ", "โˆฟ", "โ‰€", "โ‰", "โ‰‚", "โ‰ƒ", "โ‰„", "โ‰…", "โ‰†", "โ‰‡", "โ‰ˆ", "โ‰‰", "โ‰Š", "โ‰‹", "โ‰Œ", "โ‰", "โ‰Ž", "โ‰", "โ‰", "โ‰‘", "โ‰’", "โ‰“", "โ‰”", "โ‰•",