Compare commits
2 Commits
| Author | SHA1 | Date | |
|---|---|---|---|
| ab175180d6 | |||
| c7affac8e3 |
@@ -5,7 +5,7 @@ go 1.19
|
|||||||
replace asciigoat.org/core => ../core
|
replace asciigoat.org/core => ../core
|
||||||
|
|
||||||
require (
|
require (
|
||||||
asciigoat.org/core v0.3.4
|
asciigoat.org/core v0.3.2
|
||||||
github.com/mgechev/revive v1.3.3
|
github.com/mgechev/revive v1.3.3
|
||||||
)
|
)
|
||||||
|
|
||||||
|
|||||||
@@ -1,69 +0,0 @@
|
|||||||
package parser
|
|
||||||
|
|
||||||
import (
|
|
||||||
"log"
|
|
||||||
|
|
||||||
"asciigoat.org/core/lexer"
|
|
||||||
)
|
|
||||||
|
|
||||||
// Run parses the source
|
|
||||||
func (p *Parser) Run() error {
|
|
||||||
p.pos.Reset()
|
|
||||||
return lexer.Run(p.lexStart)
|
|
||||||
}
|
|
||||||
|
|
||||||
func (p *Parser) lexStart() (lexer.StateFn, error) {
|
|
||||||
for {
|
|
||||||
r, _, err := p.src.ReadRune()
|
|
||||||
switch {
|
|
||||||
case err != nil:
|
|
||||||
// read error
|
|
||||||
log.Printf("%s: %s: %s", p.pos, "error", err)
|
|
||||||
return nil, err
|
|
||||||
case IsNewLine(r):
|
|
||||||
// new line
|
|
||||||
p.src.UnreadRune()
|
|
||||||
p.lexNewLine()
|
|
||||||
|
|
||||||
p.src.Discard()
|
|
||||||
p.pos.StepLine()
|
|
||||||
case IsSpace(r):
|
|
||||||
// whitespace
|
|
||||||
p.src.Discard()
|
|
||||||
p.pos.Step()
|
|
||||||
default:
|
|
||||||
// token
|
|
||||||
p.src.UnreadRune()
|
|
||||||
return p.lexToken, nil
|
|
||||||
}
|
|
||||||
}
|
|
||||||
}
|
|
||||||
|
|
||||||
func (p *Parser) lexToken() (lexer.StateFn, error) {
|
|
||||||
p.src.AcceptAll(IsNotSpace)
|
|
||||||
|
|
||||||
s := p.src.Emit()
|
|
||||||
log.Printf("%s: %s: %q", p.pos, "token", s)
|
|
||||||
p.pos.StepN(len(s))
|
|
||||||
|
|
||||||
return p.lexStart, nil
|
|
||||||
}
|
|
||||||
|
|
||||||
func (p *Parser) lexNewLine() {
|
|
||||||
// r1 is warrantied to be either \n or \r
|
|
||||||
r1, _, _ := p.src.ReadRune()
|
|
||||||
r2, _, err := p.src.ReadRune()
|
|
||||||
|
|
||||||
switch {
|
|
||||||
case r1 == '\r' && r2 == '\n':
|
|
||||||
// CR LN
|
|
||||||
case r1 == '\r' && err == nil:
|
|
||||||
// CR
|
|
||||||
p.src.UnreadRune()
|
|
||||||
case r2 == '\r':
|
|
||||||
// LN CR
|
|
||||||
case err == nil:
|
|
||||||
// LN
|
|
||||||
p.src.UnreadRune()
|
|
||||||
}
|
|
||||||
}
|
|
||||||
@@ -1,14 +0,0 @@
|
|||||||
package parser
|
|
||||||
|
|
||||||
import "asciigoat.org/core/lexer"
|
|
||||||
|
|
||||||
var (
|
|
||||||
// IsNewLine tells if a rune represents a line break or the start of one
|
|
||||||
IsNewLine = lexer.NewIsIn("\n\r")
|
|
||||||
// IsSpace tells if a rune is considered whitespace by unicode
|
|
||||||
IsSpace = lexer.IsSpace
|
|
||||||
// IsNotNewLine tells if a rune is anything other than line breaks
|
|
||||||
IsNotNewLine = lexer.NewIsNot(IsNewLine)
|
|
||||||
// IsNotSpace tells if a rune is anything other than whitespace
|
|
||||||
IsNotSpace = lexer.NewIsNot(IsSpace)
|
|
||||||
)
|
|
||||||
@@ -10,8 +10,6 @@ import (
|
|||||||
// Parser parses a dosini-style document
|
// Parser parses a dosini-style document
|
||||||
type Parser struct {
|
type Parser struct {
|
||||||
src *lexer.Reader
|
src *lexer.Reader
|
||||||
|
|
||||||
pos lexer.Position
|
|
||||||
}
|
}
|
||||||
|
|
||||||
// NewParser creates a dosini-style parser using
|
// NewParser creates a dosini-style parser using
|
||||||
|
|||||||
Reference in New Issue
Block a user