Update tests
This commit is contained in:
parent
1a984427ab
commit
7b81034625
2 changed files with 62 additions and 0 deletions
|
|
@ -0,0 +1,37 @@
|
||||||
|
---
|
||||||
|
source: src/tokenizer/line_tokenizer.rs
|
||||||
|
assertion_line: 78
|
||||||
|
expression: "line_tokenizer(\"Mixed\\r\\nand\\rbare\")"
|
||||||
|
---
|
||||||
|
[
|
||||||
|
Token {
|
||||||
|
normalized: "Mixed",
|
||||||
|
original: "Mixed",
|
||||||
|
is_left_joinable: true,
|
||||||
|
is_right_joinable: true,
|
||||||
|
},
|
||||||
|
Token {
|
||||||
|
normalized: "\r\n",
|
||||||
|
original: "\r\n",
|
||||||
|
is_left_joinable: true,
|
||||||
|
is_right_joinable: true,
|
||||||
|
},
|
||||||
|
Token {
|
||||||
|
normalized: "and",
|
||||||
|
original: "and",
|
||||||
|
is_left_joinable: true,
|
||||||
|
is_right_joinable: true,
|
||||||
|
},
|
||||||
|
Token {
|
||||||
|
normalized: "\r",
|
||||||
|
original: "\r",
|
||||||
|
is_left_joinable: true,
|
||||||
|
is_right_joinable: true,
|
||||||
|
},
|
||||||
|
Token {
|
||||||
|
normalized: "bare",
|
||||||
|
original: "bare",
|
||||||
|
is_left_joinable: true,
|
||||||
|
is_right_joinable: true,
|
||||||
|
},
|
||||||
|
]
|
||||||
|
|
@ -0,0 +1,25 @@
|
||||||
|
---
|
||||||
|
source: src/tokenizer/markdown_tokenizer.rs
|
||||||
|
assertion_line: 199
|
||||||
|
expression: "markdown_tokenizer(\"## Sub heading\")"
|
||||||
|
---
|
||||||
|
[
|
||||||
|
Token {
|
||||||
|
normalized: "## Sub",
|
||||||
|
original: "## Sub",
|
||||||
|
is_left_joinable: false,
|
||||||
|
is_right_joinable: true,
|
||||||
|
},
|
||||||
|
Token {
|
||||||
|
normalized: " heading",
|
||||||
|
original: " ",
|
||||||
|
is_left_joinable: true,
|
||||||
|
is_right_joinable: true,
|
||||||
|
},
|
||||||
|
Token {
|
||||||
|
normalized: "heading",
|
||||||
|
original: "heading",
|
||||||
|
is_left_joinable: true,
|
||||||
|
is_right_joinable: true,
|
||||||
|
},
|
||||||
|
]
|
||||||
Loading…
Add table
Add a link
Reference in a new issue