]> git.lizzy.rs Git - micro.git/blobdiff - cmd/micro/highlight/highlighter.go
Add support for lookbehind in region regexes
[micro.git] / cmd / micro / highlight / highlighter.go
index 8ccefe6ad1951d296d2f41200d3e1e61b463b4d9..ed312f0fdb44ac1fd4c4f3c6da60fccaffb3c582 100644 (file)
@@ -3,6 +3,8 @@ package highlight
 import (
        "regexp"
        "strings"
+
+       "github.com/dlclark/regexp2"
 )
 
 func combineLineMatch(src, dst LineMatch) LineMatch {
@@ -18,8 +20,10 @@ func combineLineMatch(src, dst LineMatch) LineMatch {
        return dst
 }
 
+// A State represents the region at the end of a line
 type State *Region
 
+// LineStates is an interface for a buffer-like object which can also store the states and matches for every line
 type LineStates interface {
        LineData() [][]byte
        State(lineN int) State
@@ -27,20 +31,24 @@ type LineStates interface {
        SetMatch(lineN int, m LineMatch)
 }
 
+// A Highlighter contains the information needed to highlight a string
 type Highlighter struct {
        lastRegion *Region
        def        *Def
 }
 
+// NewHighlighter returns a new highlighter from the given syntax definition
 func NewHighlighter(def *Def) *Highlighter {
        h := new(Highlighter)
        h.def = def
        return h
 }
 
+// LineMatch represents the syntax highlighting matches for one line. Each index where the coloring is changed is marked with that
+// color's group (represented as one byte)
 type LineMatch map[int]uint8
 
-func FindIndex(regex *regexp.Regexp, str []byte, canMatchStart, canMatchEnd bool) []int {
+func findIndex(regex *regexp2.Regexp, str []byte, canMatchStart, canMatchEnd bool) []int {
        regexStr := regex.String()
        if strings.Contains(regexStr, "^") {
                if !canMatchStart {
@@ -52,10 +60,14 @@ func FindIndex(regex *regexp.Regexp, str []byte, canMatchStart, canMatchEnd bool
                        return nil
                }
        }
-       return regex.FindIndex(str)
+       match, _ := regex.FindStringMatch(string(str))
+       if match == nil {
+               return nil
+       }
+       return []int{match.Index, match.Index + match.Length}
 }
 
-func FindAllIndex(regex *regexp.Regexp, str []byte, canMatchStart, canMatchEnd bool) [][]int {
+func findAllIndex(regex *regexp.Regexp, str []byte, canMatchStart, canMatchEnd bool) [][]int {
        regexStr := regex.String()
        if strings.Contains(regexStr, "^") {
                if !canMatchStart {
@@ -71,14 +83,20 @@ func FindAllIndex(regex *regexp.Regexp, str []byte, canMatchStart, canMatchEnd b
 }
 
 func (h *Highlighter) highlightRegion(start int, canMatchEnd bool, lineNum int, line []byte, region *Region) LineMatch {
+       fullHighlights := make([]uint8, len([]rune(string(line))))
+       for i := 0; i < len(fullHighlights); i++ {
+               fullHighlights[i] = region.group
+       }
+
        highlights := make(LineMatch)
 
        if start == 0 {
                highlights[0] = region.group
        }
 
-       loc := FindIndex(region.end, line, start == 0, canMatchEnd)
+       loc := findIndex(region.end, line, start == 0, canMatchEnd)
        if loc != nil {
+               highlights[start+loc[1]-1] = region.group
                if region.parent == nil {
                        highlights[start+loc[1]] = 0
                        return combineLineMatch(highlights,
@@ -102,7 +120,7 @@ func (h *Highlighter) highlightRegion(start int, canMatchEnd bool, lineNum int,
        firstLoc := []int{len(line), 0}
        var firstRegion *Region
        for _, r := range region.rules.regions {
-               loc := FindIndex(r.start, line, start == 0, canMatchEnd)
+               loc := findIndex(r.start, line, start == 0, canMatchEnd)
                if loc != nil {
                        if loc[0] < firstLoc[0] {
                                firstLoc = loc
@@ -118,11 +136,17 @@ func (h *Highlighter) highlightRegion(start int, canMatchEnd bool, lineNum int,
        }
 
        for _, p := range region.rules.patterns {
-               matches := FindAllIndex(p.regex, line, start == 0, canMatchEnd)
+               matches := findAllIndex(p.regex, line, start == 0, canMatchEnd)
                for _, m := range matches {
-                       highlights[start+m[0]] = p.group
-                       if _, ok := highlights[start+m[1]]; !ok {
-                               highlights[start+m[1]] = region.group
+                       for i := m[0]; i < m[1]; i++ {
+                               fullHighlights[i] = p.group
+                       }
+               }
+       }
+       for i, h := range fullHighlights {
+               if i == 0 || h != fullHighlights[i-1] {
+                       if _, ok := highlights[start+i]; !ok {
+                               highlights[start+i] = h
                        }
                }
        }
@@ -135,6 +159,7 @@ func (h *Highlighter) highlightRegion(start int, canMatchEnd bool, lineNum int,
 }
 
 func (h *Highlighter) highlightEmptyRegion(start int, canMatchEnd bool, lineNum int, line []byte) LineMatch {
+       fullHighlights := make([]uint8, len(line))
        highlights := make(LineMatch)
        if len(line) == 0 {
                if canMatchEnd {
@@ -146,7 +171,7 @@ func (h *Highlighter) highlightEmptyRegion(start int, canMatchEnd bool, lineNum
        firstLoc := []int{len(line), 0}
        var firstRegion *Region
        for _, r := range h.def.rules.regions {
-               loc := FindIndex(r.start, line, start == 0, canMatchEnd)
+               loc := findIndex(r.start, line, start == 0, canMatchEnd)
                if loc != nil {
                        if loc[0] < firstLoc[0] {
                                firstLoc = loc
@@ -162,11 +187,17 @@ func (h *Highlighter) highlightEmptyRegion(start int, canMatchEnd bool, lineNum
        }
 
        for _, p := range h.def.rules.patterns {
-               matches := FindAllIndex(p.regex, line, start == 0, canMatchEnd)
+               matches := findAllIndex(p.regex, line, start == 0, canMatchEnd)
                for _, m := range matches {
-                       highlights[start+m[0]] = p.group
-                       if _, ok := highlights[start+m[1]]; !ok {
-                               highlights[start+m[1]] = 0
+                       for i := m[0]; i < m[1]; i++ {
+                               fullHighlights[i] = p.group
+                       }
+               }
+       }
+       for i, h := range fullHighlights {
+               if i == 0 || h != fullHighlights[i-1] {
+                       if _, ok := highlights[start+i]; !ok {
+                               highlights[start+i] = h
                        }
                }
        }
@@ -178,6 +209,10 @@ func (h *Highlighter) highlightEmptyRegion(start int, canMatchEnd bool, lineNum
        return highlights
 }
 
+// HighlightString syntax highlights a string
+// Use this function for simple syntax highlighting and use the other functions for
+// more advanced syntax highlighting. They are optimized for quick rehighlighting of the same
+// text with minor changes made
 func (h *Highlighter) HighlightString(input string) []LineMatch {
        lines := strings.Split(input, "\n")
        var lineMatches []LineMatch
@@ -195,49 +230,52 @@ func (h *Highlighter) HighlightString(input string) []LineMatch {
        return lineMatches
 }
 
-func (h *Highlighter) Highlight(input LineStates, startline int) {
+// HighlightStates correctly sets all states for the buffer
+func (h *Highlighter) HighlightStates(input LineStates) {
        lines := input.LineData()
 
-       for i := startline; i < len(lines); i++ {
+       for i := 0; i < len(lines); i++ {
                line := []byte(lines[i])
 
-               var match LineMatch
                if i == 0 || h.lastRegion == nil {
-                       match = h.highlightEmptyRegion(0, true, i, line)
+                       h.highlightEmptyRegion(0, true, i, line)
                } else {
-                       match = h.highlightRegion(0, true, i, line, h.lastRegion)
+                       h.highlightRegion(0, true, i, line, h.lastRegion)
                }
 
                curState := h.lastRegion
 
-               input.SetMatch(i, match)
                input.SetState(i, curState)
        }
 }
 
-func (h *Highlighter) ReHighlightLine(input LineStates, lineN int) {
+// HighlightMatches sets the matches for each line in between startline and endline
+// It sets all other matches in the buffer to nil to conserve memory
+// This assumes that all the states are set correctly
+func (h *Highlighter) HighlightMatches(input LineStates, startline, endline int) {
        lines := input.LineData()
 
-       line := []byte(lines[lineN])
-
-       h.lastRegion = nil
-       if lineN > 0 {
-               h.lastRegion = input.State(lineN - 1)
-       }
+       for i := 0; i < len(lines); i++ {
+               if i >= startline && i < endline {
+                       line := []byte(lines[i])
+
+                       var match LineMatch
+                       if i == 0 || input.State(i-1) == nil {
+                               match = h.highlightEmptyRegion(0, true, i, line)
+                       } else {
+                               match = h.highlightRegion(0, true, i, line, input.State(i-1))
+                       }
 
-       var match LineMatch
-       if lineN == 0 || h.lastRegion == nil {
-               match = h.highlightEmptyRegion(0, true, lineN, line)
-       } else {
-               match = h.highlightRegion(0, true, lineN, line, h.lastRegion)
+                       input.SetMatch(i, match)
+               } else {
+                       input.SetMatch(i, nil)
+               }
        }
-       curState := h.lastRegion
-
-       input.SetMatch(lineN, match)
-       input.SetState(lineN, curState)
 }
 
-func (h *Highlighter) ReHighlight(input LineStates, startline int) {
+// ReHighlightStates will scan down from `startline` and set the appropriate end of line state
+// for each line until it comes across the same state in two consecutive lines
+func (h *Highlighter) ReHighlightStates(input LineStates, startline int) {
        lines := input.LineData()
 
        h.lastRegion = nil
@@ -247,16 +285,15 @@ func (h *Highlighter) ReHighlight(input LineStates, startline int) {
        for i := startline; i < len(lines); i++ {
                line := []byte(lines[i])
 
-               var match LineMatch
+               // var match LineMatch
                if i == 0 || h.lastRegion == nil {
-                       match = h.highlightEmptyRegion(0, true, i, line)
+                       h.highlightEmptyRegion(0, true, i, line)
                } else {
-                       match = h.highlightRegion(0, true, i, line, h.lastRegion)
+                       h.highlightRegion(0, true, i, line, h.lastRegion)
                }
                curState := h.lastRegion
                lastState := input.State(i)
 
-               input.SetMatch(i, match)
                input.SetState(i, curState)
 
                if curState == lastState {
@@ -264,3 +301,26 @@ func (h *Highlighter) ReHighlight(input LineStates, startline int) {
                }
        }
 }
+
+// ReHighlightLine will rehighlight the state and match for a single line
+func (h *Highlighter) ReHighlightLine(input LineStates, lineN int) {
+       lines := input.LineData()
+
+       line := []byte(lines[lineN])
+
+       h.lastRegion = nil
+       if lineN > 0 {
+               h.lastRegion = input.State(lineN - 1)
+       }
+
+       var match LineMatch
+       if lineN == 0 || h.lastRegion == nil {
+               match = h.highlightEmptyRegion(0, true, lineN, line)
+       } else {
+               match = h.highlightRegion(0, true, lineN, line, h.lastRegion)
+       }
+       curState := h.lastRegion
+
+       input.SetMatch(lineN, match)
+       input.SetState(lineN, curState)
+}