-
Notifications
You must be signed in to change notification settings - Fork 108
/
block.go
247 lines (216 loc) · 5.55 KB
/
block.go
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
152
153
154
155
156
157
158
159
160
161
162
163
164
165
166
167
168
169
170
171
172
173
174
175
176
177
178
179
180
181
182
183
184
185
186
187
188
189
190
191
192
193
194
195
196
197
198
199
200
201
202
203
204
205
206
207
208
209
210
211
212
213
214
215
216
217
218
219
220
221
222
223
224
225
226
227
228
229
230
231
232
233
234
235
236
237
238
239
240
241
242
243
244
245
246
247
// SPDX-License-Identifier: MIT
package lang
import (
"bytes"
"unicode"
)
// 接口定义了解析代码块的所有操作
type blocker interface {
// 确定 l 的当前位置是否匹配 Blocker 的起始位置。
beginFunc(l *parser) bool
// 确定 l 的当前位置是否匹配 Blocker 的结束位置
//
// data 表示匹配的内容,如果不使用返回的内容,可以返回空值。
// 比如字符串,只需要返回 true,以确保找到了结束位置,但是 data 可以直接返回 nil。
//
// 如果在到达文件末尾都没有找到结束符,则应该返回 nil, false
endFunc(l *parser) (data []byte, ok bool)
}
type (
stringBlock struct {
begin, end, escape string
}
singleComment struct {
begin string
begins []byte
}
multipleComment struct {
begin, end string
begins, ends, prefix []byte
}
)
func newString(begin, end, escape string) blocker {
return &stringBlock{
begin: begin,
end: end,
escape: escape,
}
}
func newSingleComment(begin string) blocker {
return &singleComment{
begin: begin,
begins: []byte(begin),
}
}
func newMultipleComment(begin, end, prefix string) blocker {
return &multipleComment{
begin: begin,
end: end,
prefix: []byte(prefix),
begins: []byte(begin),
ends: []byte(end),
}
}
func (b *stringBlock) beginFunc(l *parser) bool {
return l.Match(b.begin)
}
// 从 l 的当前位置开始往后查找,直到找到 b 中定义的 end 字符串,
// 将 l 中的指针移到该位置。
// 正常找到结束符的返回 true,否则返回 false。
//
// 第一个返回参数无用,仅是为了统一函数签名
func (b *stringBlock) endFunc(l *parser) (data []byte, ok bool) {
for {
switch {
case l.AtEOF():
return nil, false
case (len(b.escape) > 0) && l.Match(b.escape):
l.Next(1)
case l.Match(b.end):
return nil, true
default:
l.Next(1)
}
} // end for
}
func (b *singleComment) beginFunc(l *parser) bool {
return l.Match(b.begin)
}
// 从 l 的当前位置往后开始查找连续的相同类型单行代码块。
func (b *singleComment) endFunc(l *parser) (data []byte, ok bool) {
data = make([]byte, 0, 120)
for {
data = append(data, b.begins...)
bs, found := l.Delim('\n', true)
if !found { // 找不到换行符,直接填充到末尾
data = append(data, l.All()...)
break
}
data = append(data, bs...)
data = append(data, l.Spaces('\n')...)
if !l.Match(b.begin) { // 不是接连着的注释块了,结束当前的匹配
break
}
}
return convertSingleCommentToXML(data, b.begins), true
}
func (b *multipleComment) beginFunc(l *parser) bool {
return l.Match(b.begin)
}
// 从 l 的当前位置一直到定义的 b.End 之间的所有字符。
// 会对每一行应用 filterSymbols 规则。
func (b *multipleComment) endFunc(l *parser) (data []byte, ok bool) {
data, found := l.DelimString(b.end, true)
if !found { // 没有找到结束符号,直接到达文件末尾
return nil, false
}
raw := make([]byte, 0, len(b.begins)+len(data))
raw = append(append(raw, b.begins...), data...)
return convertMultipleCommentToXML(raw, b.begins, b.ends, b.prefix), true
}
// 转换单行注释为一个合法的 XML
//
// 主要是去掉了注释符号,比如
// // xx
// 会被转换成
// xx
func convertSingleCommentToXML(lines, begin []byte) []byte {
data := make([]byte, 0, len(lines))
newline := true
start := -1 // 零是一个有效的数组下标
for index, b := range lines {
switch {
case b == '\n':
if start > -1 {
for i := 0; i < index-start; i++ {
data = append(data, ' ')
}
start = -1
}
data = append(data, b)
newline = true
case newline:
switch {
case bytes.IndexByte(begin, b) >= 0 && start == -1:
start = index
case unicode.IsSpace(rune(b)) && start == -1:
data = append(data, b)
case bytes.IndexByte(begin, b) < 0:
if start > -1 {
for i := 0; i < index-start; i++ { // 替换之前字符为空格
data = append(data, ' ')
}
start = -1
}
data = append(data, b)
newline = false
}
default:
data = append(data, b)
}
}
return data
}
// 转换成合法的 XML 格式
//
// 功能与 convertSingleCommentToXML,针对多行注释
func convertMultipleCommentToXML(data, begin, end, chars []byte) []byte {
ret := make([]byte, len(data))
copy(ret, data)
index := bytes.Index(data, begin)
if index >= 0 {
for i := range begin {
ret[index+i] = ' '
}
}
index = bytes.LastIndex(data, end)
if index >= 0 {
for i := range end {
ret[index+i] = ' '
}
}
return replaceSymbols(ret, chars)
}
// 替换特殊的符号为空格,使 lines 的内容为一个合法的 xml 文档
func replaceSymbols(lines, chars []byte) []byte {
data := make([]byte, 0, len(lines))
newline := true
start := -1 // 零是一个有效的数组下标
for index, b := range lines {
switch {
case b == '\n':
if start > -1 {
for i := 0; i < index-start; i++ {
data = append(data, ' ')
}
start = -1
}
data = append(data, b)
newline = true
case newline:
switch {
case bytes.IndexByte(chars, b) >= 0 && start == -1:
start = index
case unicode.IsSpace(rune(b)):
if start > -1 {
for i := 0; i < index-start; i++ { // 替换之前字符为空格
data = append(data, ' ')
}
start = -1
newline = false
}
data = append(data, b)
case bytes.IndexByte(chars, b) < 0:
if start > -1 {
data = append(data, lines[start:index]...)
start = -1
}
data = append(data, b)
newline = false
}
default:
data = append(data, b)
}
}
return data
}