Alejandro Mery
1 year ago
3 changed files with 105 additions and 0 deletions
@ -0,0 +1,2 @@
|
||||
// Package parser implements some common logic of asciigoat based parsers
|
||||
package parser |
@ -0,0 +1,72 @@
|
||||
package parser |
||||
|
||||
import ( |
||||
"bytes" |
||||
"io" |
||||
"strings" |
||||
|
||||
"asciigoat.org/core/lexer" |
||||
) |
||||
|
||||
// TextParser ...
|
||||
type TextParser struct { |
||||
src *lexer.Reader |
||||
pos lexer.Position |
||||
} |
||||
|
||||
// Position ...
|
||||
func (p *TextParser) Position() lexer.Position { |
||||
return p.pos |
||||
} |
||||
|
||||
// StepLine ...
|
||||
func (p *TextParser) StepLine() { |
||||
p.src.Discard() |
||||
p.pos.StepLine() |
||||
} |
||||
|
||||
// Step ...
|
||||
func (p *TextParser) Step() { |
||||
s := p.src.Emit() |
||||
p.pos.StepN(len(s)) |
||||
} |
||||
|
||||
// Emit ...
|
||||
func (p *TextParser) Emit() Token { |
||||
t := Token{ |
||||
Value: p.src.Emit(), |
||||
Position: p.pos, |
||||
} |
||||
|
||||
p.pos.StepN(t.Len()) |
||||
return t |
||||
} |
||||
|
||||
// Peek ...
|
||||
func (p *TextParser) Peek() string { |
||||
return p.src.String() |
||||
} |
||||
|
||||
// NewTextParser ...
|
||||
func NewTextParser(r io.Reader) *TextParser { |
||||
if r == nil { |
||||
r = strings.NewReader("") |
||||
} |
||||
|
||||
p := &TextParser{ |
||||
src: lexer.NewReader(r), |
||||
} |
||||
p.pos.Reset() |
||||
|
||||
return p |
||||
} |
||||
|
||||
// NewTextParserBytes ...
|
||||
func NewTextParserBytes(b []byte) *TextParser { |
||||
return NewTextParser(bytes.NewReader(b)) |
||||
} |
||||
|
||||
// NewTextParserString ...
|
||||
func NewTextParserString(s string) *TextParser { |
||||
return NewTextParser(strings.NewReader(s)) |
||||
} |
@ -0,0 +1,31 @@
|
||||
package parser |
||||
|
||||
import ( |
||||
"fmt" |
||||
|
||||
"asciigoat.org/core/lexer" |
||||
) |
||||
|
||||
// Token ...
|
||||
type Token struct { |
||||
lexer.Position |
||||
|
||||
Type uint |
||||
Value string |
||||
} |
||||
|
||||
// Len ...
|
||||
func (t Token) Len() int { |
||||
return len(t.Value) |
||||
} |
||||
|
||||
// String generates the '%v' value
|
||||
func (t Token) String() string { |
||||
return t.Value |
||||
} |
||||
|
||||
// GoString generates the '%#v' value
|
||||
func (t Token) GoString() string { |
||||
return fmt.Sprintf("Token{Position{%v,%v}, %v, %q}", |
||||
t.Line, t.Column, t.Type, t.Value) |
||||
} |
Loading…
Reference in new issue