Line data Source code
1 : // Copyright 2019 The LevelDB-Go and Pebble Authors. All rights reserved. Use
2 : // of this source code is governed by a BSD-style license that can be found in
3 : // the LICENSE file.
4 :
5 : package metamorphic
6 :
7 : import (
8 : "bytes"
9 : "fmt"
10 : "go/scanner"
11 : "go/token"
12 : "reflect"
13 : "slices"
14 : "strconv"
15 :
16 : "github.com/cockroachdb/errors"
17 : "github.com/cockroachdb/pebble"
18 : )
19 :
20 : type methodInfo struct {
21 : constructor func() op
22 : validTags uint32
23 : }
24 :
25 1 : func makeMethod(i interface{}, tags ...objTag) *methodInfo {
26 1 : var validTags uint32
27 1 : for _, tag := range tags {
28 1 : validTags |= 1 << tag
29 1 : }
30 :
31 1 : t := reflect.TypeOf(i)
32 1 : return &methodInfo{
33 1 : constructor: func() op {
34 1 : return reflect.New(t).Interface().(op)
35 1 : },
36 : validTags: validTags,
37 : }
38 : }
39 :
40 : // args returns the receiverID, targetID and arguments for the op. The
41 : // receiverID is the ID of the object the op will be applied to. The targetID
42 : // is the ID of the object for assignment. If the method does not return a new
43 : // object, then targetID will be nil.
44 : //
45 : // The argument list returns pointers to operation fields that map to arguments
46 : // for the operation. The last argument can be a pointer to a slice,
47 : // corresponding to a variable number of arguments.
48 1 : func opArgs(op op) (receiverID *objID, targetID *objID, args []interface{}) {
49 1 : switch t := op.(type) {
50 1 : case *applyOp:
51 1 : return &t.writerID, nil, []interface{}{&t.batchID}
52 1 : case *checkpointOp:
53 1 : return &t.dbID, nil, []interface{}{&t.spans}
54 1 : case *closeOp:
55 1 : return &t.objID, nil, nil
56 1 : case *compactOp:
57 1 : return &t.dbID, nil, []interface{}{&t.start, &t.end, &t.parallelize}
58 1 : case *batchCommitOp:
59 1 : return &t.batchID, nil, nil
60 1 : case *dbRatchetFormatMajorVersionOp:
61 1 : return &t.dbID, nil, []interface{}{&t.vers}
62 1 : case *dbRestartOp:
63 1 : return &t.dbID, nil, nil
64 1 : case *deleteOp:
65 1 : return &t.writerID, nil, []interface{}{&t.key}
66 1 : case *deleteRangeOp:
67 1 : return &t.writerID, nil, []interface{}{&t.start, &t.end}
68 1 : case *downloadOp:
69 1 : return &t.dbID, nil, []interface{}{&t.spans}
70 1 : case *iterFirstOp:
71 1 : return &t.iterID, nil, nil
72 1 : case *flushOp:
73 1 : return &t.db, nil, nil
74 1 : case *getOp:
75 1 : return &t.readerID, nil, []interface{}{&t.key}
76 1 : case *ingestOp:
77 1 : return &t.dbID, nil, []interface{}{&t.batchIDs}
78 1 : case *ingestAndExciseOp:
79 1 : return &t.dbID, nil, []interface{}{&t.batchID, &t.exciseStart, &t.exciseEnd}
80 1 : case *ingestExternalFilesOp:
81 1 : return &t.dbID, nil, []interface{}{&t.objs}
82 1 : case *initOp:
83 1 : return nil, nil, []interface{}{&t.dbSlots, &t.batchSlots, &t.iterSlots, &t.snapshotSlots, &t.externalObjSlots}
84 1 : case *iterLastOp:
85 1 : return &t.iterID, nil, nil
86 1 : case *logDataOp:
87 1 : return &t.writerID, nil, []interface{}{&t.data}
88 1 : case *mergeOp:
89 1 : return &t.writerID, nil, []interface{}{&t.key, &t.value}
90 1 : case *newBatchOp:
91 1 : return &t.dbID, &t.batchID, nil
92 1 : case *newIndexedBatchOp:
93 1 : return &t.dbID, &t.batchID, nil
94 1 : case *newIterOp:
95 1 : return &t.readerID, &t.iterID, []interface{}{&t.lower, &t.upper, &t.keyTypes, &t.filterMin, &t.filterMax, &t.useL6Filters, &t.maskSuffix}
96 1 : case *newIterUsingCloneOp:
97 1 : return &t.existingIterID, &t.iterID, []interface{}{&t.refreshBatch, &t.lower, &t.upper, &t.keyTypes, &t.filterMin, &t.filterMax, &t.useL6Filters, &t.maskSuffix}
98 1 : case *newSnapshotOp:
99 1 : return &t.dbID, &t.snapID, []interface{}{&t.bounds}
100 1 : case *newExternalObjOp:
101 1 : return &t.batchID, &t.externalObjID, nil
102 1 : case *iterNextOp:
103 1 : return &t.iterID, nil, []interface{}{&t.limit}
104 1 : case *iterNextPrefixOp:
105 1 : return &t.iterID, nil, nil
106 1 : case *iterCanSingleDelOp:
107 1 : return &t.iterID, nil, []interface{}{}
108 1 : case *iterPrevOp:
109 1 : return &t.iterID, nil, []interface{}{&t.limit}
110 1 : case *iterSeekLTOp:
111 1 : return &t.iterID, nil, []interface{}{&t.key, &t.limit}
112 1 : case *iterSeekGEOp:
113 1 : return &t.iterID, nil, []interface{}{&t.key, &t.limit}
114 1 : case *iterSeekPrefixGEOp:
115 1 : return &t.iterID, nil, []interface{}{&t.key}
116 1 : case *setOp:
117 1 : return &t.writerID, nil, []interface{}{&t.key, &t.value}
118 1 : case *iterSetBoundsOp:
119 1 : return &t.iterID, nil, []interface{}{&t.lower, &t.upper}
120 1 : case *iterSetOptionsOp:
121 1 : return &t.iterID, nil, []interface{}{&t.lower, &t.upper, &t.keyTypes, &t.filterMin, &t.filterMax, &t.useL6Filters, &t.maskSuffix}
122 1 : case *singleDeleteOp:
123 1 : return &t.writerID, nil, []interface{}{&t.key, &t.maybeReplaceDelete}
124 1 : case *rangeKeyDeleteOp:
125 1 : return &t.writerID, nil, []interface{}{&t.start, &t.end}
126 1 : case *rangeKeySetOp:
127 1 : return &t.writerID, nil, []interface{}{&t.start, &t.end, &t.suffix, &t.value}
128 1 : case *rangeKeyUnsetOp:
129 1 : return &t.writerID, nil, []interface{}{&t.start, &t.end, &t.suffix}
130 1 : case *replicateOp:
131 1 : return &t.source, nil, []interface{}{&t.dest, &t.start, &t.end}
132 : }
133 0 : panic(fmt.Sprintf("unsupported op type: %T", op))
134 : }
135 :
136 : var methods = map[string]*methodInfo{
137 : "Apply": makeMethod(applyOp{}, dbTag, batchTag),
138 : "Checkpoint": makeMethod(checkpointOp{}, dbTag),
139 : "Clone": makeMethod(newIterUsingCloneOp{}, iterTag),
140 : "Close": makeMethod(closeOp{}, dbTag, batchTag, iterTag, snapTag),
141 : "Commit": makeMethod(batchCommitOp{}, batchTag),
142 : "Compact": makeMethod(compactOp{}, dbTag),
143 : "Delete": makeMethod(deleteOp{}, dbTag, batchTag),
144 : "DeleteRange": makeMethod(deleteRangeOp{}, dbTag, batchTag),
145 : "Download": makeMethod(downloadOp{}, dbTag),
146 : "First": makeMethod(iterFirstOp{}, iterTag),
147 : "Flush": makeMethod(flushOp{}, dbTag),
148 : "Get": makeMethod(getOp{}, dbTag, batchTag, snapTag),
149 : "Ingest": makeMethod(ingestOp{}, dbTag),
150 : "IngestAndExcise": makeMethod(ingestAndExciseOp{}, dbTag),
151 : "IngestExternalFiles": makeMethod(ingestExternalFilesOp{}, dbTag),
152 : "Init": makeMethod(initOp{}, dbTag),
153 : "Last": makeMethod(iterLastOp{}, iterTag),
154 : "LogData": makeMethod(logDataOp{}, dbTag, batchTag),
155 : "Merge": makeMethod(mergeOp{}, dbTag, batchTag),
156 : "NewBatch": makeMethod(newBatchOp{}, dbTag),
157 : "NewIndexedBatch": makeMethod(newIndexedBatchOp{}, dbTag),
158 : "NewIter": makeMethod(newIterOp{}, dbTag, batchTag, snapTag),
159 : "NewSnapshot": makeMethod(newSnapshotOp{}, dbTag),
160 : "NewExternalObj": makeMethod(newExternalObjOp{}, batchTag),
161 : "Next": makeMethod(iterNextOp{}, iterTag),
162 : "NextPrefix": makeMethod(iterNextPrefixOp{}, iterTag),
163 : "InternalNext": makeMethod(iterCanSingleDelOp{}, iterTag),
164 : "Prev": makeMethod(iterPrevOp{}, iterTag),
165 : "RangeKeyDelete": makeMethod(rangeKeyDeleteOp{}, dbTag, batchTag),
166 : "RangeKeySet": makeMethod(rangeKeySetOp{}, dbTag, batchTag),
167 : "RangeKeyUnset": makeMethod(rangeKeyUnsetOp{}, dbTag, batchTag),
168 : "RatchetFormatMajorVersion": makeMethod(dbRatchetFormatMajorVersionOp{}, dbTag),
169 : "Replicate": makeMethod(replicateOp{}, dbTag),
170 : "Restart": makeMethod(dbRestartOp{}, dbTag),
171 : "SeekGE": makeMethod(iterSeekGEOp{}, iterTag),
172 : "SeekLT": makeMethod(iterSeekLTOp{}, iterTag),
173 : "SeekPrefixGE": makeMethod(iterSeekPrefixGEOp{}, iterTag),
174 : "Set": makeMethod(setOp{}, dbTag, batchTag),
175 : "SetBounds": makeMethod(iterSetBoundsOp{}, iterTag),
176 : "SetOptions": makeMethod(iterSetOptionsOp{}, iterTag),
177 : "SingleDelete": makeMethod(singleDeleteOp{}, dbTag, batchTag),
178 : }
179 :
180 : type parser struct {
181 : opts parserOpts
182 : fset *token.FileSet
183 : s scanner.Scanner
184 : objs map[objID]bool
185 : }
186 :
187 : type parserOpts struct {
188 : allowUndefinedObjs bool
189 : }
190 :
191 1 : func parse(src []byte, opts parserOpts) (_ []op, err error) {
192 1 : // Various bits of magic incantation to set up a scanner for Go compatible
193 1 : // syntax. We arranged for the textual format of ops (e.g. op.String()) to
194 1 : // look like Go which allows us to use the Go scanner for parsing.
195 1 : p := &parser{
196 1 : opts: opts,
197 1 : fset: token.NewFileSet(),
198 1 : objs: map[objID]bool{makeObjID(dbTag, 1): true, makeObjID(dbTag, 2): true},
199 1 : }
200 1 : file := p.fset.AddFile("", -1, len(src))
201 1 : p.s.Init(file, src, nil /* no error handler */, 0)
202 1 : return p.parse()
203 1 : }
204 :
205 1 : func (p *parser) parse() (_ []op, err error) {
206 1 : defer func() {
207 1 : if r := recover(); r != nil {
208 0 : var ok bool
209 0 : if err, ok = r.(error); ok {
210 0 : return
211 0 : }
212 0 : err = errors.Errorf("%v", r)
213 : }
214 : }()
215 :
216 1 : var ops []op
217 1 : for {
218 1 : op := p.parseOp()
219 1 : if op == nil {
220 1 : computeDerivedFields(ops)
221 1 : return ops, nil
222 1 : }
223 1 : ops = append(ops, op)
224 : }
225 : }
226 :
227 1 : func (p *parser) parseOp() op {
228 1 : destPos, destTok, destLit := p.s.Scan()
229 1 : if destTok == token.EOF {
230 1 : return nil
231 1 : }
232 1 : if destTok != token.IDENT {
233 0 : panic(p.errorf(destPos, "unexpected token: %s %q", destTok, destLit))
234 : }
235 1 : if destLit == "Init" {
236 1 : // <op>(<args>)
237 1 : return p.makeOp(destLit, makeObjID(dbTag, 1), 0, destPos)
238 1 : }
239 :
240 1 : destID := p.parseObjID(destPos, destLit)
241 1 :
242 1 : pos, tok, lit := p.s.Scan()
243 1 : switch tok {
244 1 : case token.PERIOD:
245 1 : // <obj>.<op>(<args>)
246 1 : if !p.objs[destID] {
247 0 : if p.opts.allowUndefinedObjs {
248 0 : p.objs[destID] = true
249 0 : } else {
250 0 : panic(p.errorf(destPos, "unknown object: %s", destID))
251 : }
252 : }
253 1 : _, methodLit := p.scanToken(token.IDENT)
254 1 : return p.makeOp(methodLit, destID, 0, destPos)
255 :
256 1 : case token.ASSIGN:
257 1 : // <obj> = <obj>.<op>(<args>)
258 1 : srcPos, srcLit := p.scanToken(token.IDENT)
259 1 : srcID := p.parseObjID(srcPos, srcLit)
260 1 : if !p.objs[srcID] {
261 0 : if p.opts.allowUndefinedObjs {
262 0 : p.objs[srcID] = true
263 0 : } else {
264 0 : panic(p.errorf(srcPos, "unknown object %q", srcLit))
265 : }
266 : }
267 1 : p.scanToken(token.PERIOD)
268 1 : _, methodLit := p.scanToken(token.IDENT)
269 1 : p.objs[destID] = true
270 1 : return p.makeOp(methodLit, srcID, destID, srcPos)
271 : }
272 0 : panic(p.errorf(pos, "unexpected token: %q", p.tokenf(tok, lit)))
273 : }
274 :
275 1 : func (p *parser) parseObjID(pos token.Pos, str string) objID {
276 1 : id, err := parseObjID(str)
277 1 : if err != nil {
278 0 : panic(p.errorf(pos, "%s", err))
279 : }
280 1 : return id
281 : }
282 :
283 1 : func unquoteBytes(lit string) []byte {
284 1 : s, err := strconv.Unquote(lit)
285 1 : if err != nil {
286 0 : panic(err)
287 : }
288 1 : if len(s) == 0 {
289 1 : return nil
290 1 : }
291 1 : return []byte(s)
292 : }
293 :
294 1 : func (p *parser) parseArgs(op op, methodName string, args []interface{}) {
295 1 : pos, list := p.parseList()
296 1 : p.scanToken(token.SEMICOLON)
297 1 :
298 1 : // The last argument can have variable length.
299 1 : var varArg interface{}
300 1 : if len(args) > 0 {
301 1 : switch args[len(args)-1].(type) {
302 1 : case *[]objID, *[]pebble.KeyRange, *[]pebble.CheckpointSpan, *[]pebble.DownloadSpan, *[]externalObjWithBounds:
303 1 : varArg = args[len(args)-1]
304 1 : args = args[:len(args)-1]
305 : }
306 : }
307 :
308 1 : if len(list) < len(args) {
309 0 : panic(p.errorf(pos, "%s: not enough arguments", methodName))
310 : }
311 1 : if len(list) > len(args) && varArg == nil {
312 0 : panic(p.errorf(pos, "%s: too many arguments", methodName))
313 : }
314 :
315 1 : for i := range args {
316 1 : elem := list[i]
317 1 : switch t := args[i].(type) {
318 1 : case *uint32:
319 1 : elem.expectToken(p, token.INT)
320 1 : val, err := strconv.ParseUint(elem.lit, 10, 32)
321 1 : if err != nil {
322 0 : panic(p.errorf(elem.pos, "error parsing %q: %s", elem.lit, err))
323 : }
324 1 : *t = uint32(val)
325 :
326 1 : case *uint64:
327 1 : elem.expectToken(p, token.INT)
328 1 : val, err := strconv.ParseUint(elem.lit, 10, 64)
329 1 : if err != nil {
330 0 : panic(p.errorf(elem.pos, "error parsing %q: %s", elem.lit, err))
331 : }
332 1 : *t = val
333 :
334 1 : case *[]byte:
335 1 : elem.expectToken(p, token.STRING)
336 1 : *t = unquoteBytes(elem.lit)
337 :
338 1 : case *bool:
339 1 : elem.expectToken(p, token.IDENT)
340 1 : b, err := strconv.ParseBool(elem.lit)
341 1 : if err != nil {
342 0 : panic(p.errorf(elem.pos, "error parsing %q: %s", elem.lit, err))
343 : }
344 1 : *t = b
345 :
346 1 : case *objID:
347 1 : elem.expectToken(p, token.IDENT)
348 1 : *t = p.parseObjID(elem.pos, elem.lit)
349 :
350 1 : case *pebble.FormatMajorVersion:
351 1 : elem.expectToken(p, token.INT)
352 1 : val, err := strconv.ParseUint(elem.lit, 10, 64)
353 1 : if err != nil {
354 0 : panic(p.errorf(elem.pos, "error parsing %q: %s", elem.lit, err))
355 : }
356 1 : *t = pebble.FormatMajorVersion(val)
357 :
358 0 : default:
359 0 : panic(p.errorf(pos, "%s: unsupported arg[%d] type: %T", methodName, i, args[i]))
360 : }
361 : }
362 :
363 1 : if varArg != nil {
364 1 : list = list[len(args):]
365 1 : switch t := varArg.(type) {
366 1 : case *[]objID:
367 1 : *t = p.parseObjIDs(list)
368 1 : case *[]pebble.KeyRange:
369 1 : *t = p.parseKeyRanges(list)
370 1 : case *[]pebble.CheckpointSpan:
371 1 : *t = p.parseCheckpointSpans(list)
372 1 : case *[]pebble.DownloadSpan:
373 1 : *t = p.parseDownloadSpans(list)
374 1 : case *[]externalObjWithBounds:
375 1 : *t = p.parseExternalObjsWithBounds(list)
376 0 : default:
377 0 : // We already checked for these types when we set varArgs.
378 0 : panic("unreachable")
379 : }
380 : }
381 : }
382 :
383 : type listElem struct {
384 : pos token.Pos
385 : tok token.Token
386 : lit string
387 : }
388 :
389 1 : func (e listElem) expectToken(p *parser, expTok token.Token) {
390 1 : if e.tok != expTok {
391 0 : panic(p.errorf(e.pos, "unexpected token: %q", p.tokenf(e.tok, e.lit)))
392 : }
393 : }
394 :
395 : // pop checks that the first element of the list matches the expected token,
396 : // removes it from the list and returns the literal.
397 1 : func (p *parser) pop(list *[]listElem, expTok token.Token) string {
398 1 : (*list)[0].expectToken(p, expTok)
399 1 : lit := (*list)[0].lit
400 1 : (*list) = (*list)[1:]
401 1 : return lit
402 1 : }
403 :
404 : // parseKeyRange parses an arbitrary number of comma separated STRING/IDENT/INT
405 : // tokens surrounded by parens.
406 1 : func (p *parser) parseList() (token.Pos, []listElem) {
407 1 : p.scanToken(token.LPAREN)
408 1 : var list []listElem
409 1 : for {
410 1 : pos, tok, lit := p.s.Scan()
411 1 : if len(list) == 0 && tok == token.RPAREN {
412 1 : return pos, nil
413 1 : }
414 :
415 1 : switch tok {
416 1 : case token.STRING, token.IDENT, token.INT:
417 1 : list = append(list, listElem{
418 1 : pos: pos,
419 1 : tok: tok,
420 1 : lit: lit,
421 1 : })
422 1 : pos, tok, lit = p.s.Scan()
423 1 : switch tok {
424 1 : case token.COMMA:
425 1 : continue
426 1 : case token.RPAREN:
427 1 : return pos, list
428 : }
429 : }
430 0 : panic(p.errorf(pos, "unexpected token: %q", p.tokenf(tok, lit)))
431 : }
432 : }
433 :
434 1 : func (p *parser) parseObjIDs(list []listElem) []objID {
435 1 : res := make([]objID, len(list))
436 1 : for i, elem := range list {
437 1 : res[i] = p.parseObjID(elem.pos, elem.lit)
438 1 : }
439 1 : return res
440 : }
441 :
442 1 : func (p *parser) parseKeys(list []listElem) [][]byte {
443 1 : res := make([][]byte, len(list))
444 1 : for i := range res {
445 1 : res[i] = unquoteBytes(p.pop(&list, token.STRING))
446 1 : }
447 1 : return res
448 : }
449 :
450 1 : func (p *parser) parseKeyRanges(list []listElem) []pebble.KeyRange {
451 1 : keys := p.parseKeys(list)
452 1 : if len(keys)%2 != 0 {
453 0 : panic(p.errorf(list[0].pos, "expected even number of keys"))
454 : }
455 1 : res := make([]pebble.KeyRange, len(keys)/2)
456 1 : for i := range res {
457 1 : res[i].Start = keys[2*i]
458 1 : res[i].End = keys[2*i+1]
459 1 : }
460 1 : return res
461 : }
462 :
463 1 : func (p *parser) parseCheckpointSpans(list []listElem) []pebble.CheckpointSpan {
464 1 : keys := p.parseKeys(list)
465 1 : if len(keys)%2 == 1 {
466 0 : panic(p.errorf(list[0].pos, "expected even number of keys"))
467 : }
468 1 : if len(keys) == 0 {
469 1 : // Necessary for round-trip tests which differentiate between nil and empty slice.
470 1 : return nil
471 1 : }
472 1 : res := make([]pebble.CheckpointSpan, len(keys)/2)
473 1 : for i := range res {
474 1 : res[i] = pebble.CheckpointSpan{
475 1 : Start: keys[i*2],
476 1 : End: keys[i*2+1],
477 1 : }
478 1 : }
479 1 : return res
480 : }
481 :
482 1 : func (p *parser) parseDownloadSpans(list []listElem) []pebble.DownloadSpan {
483 1 : if len(list)%3 != 0 {
484 0 : panic(p.errorf(list[0].pos, "expected 3k args"))
485 : }
486 1 : res := make([]pebble.DownloadSpan, len(list)/3)
487 1 : for i := range res {
488 1 : res[i] = pebble.DownloadSpan{
489 1 : StartKey: unquoteBytes(p.pop(&list, token.STRING)),
490 1 : EndKey: unquoteBytes(p.pop(&list, token.STRING)),
491 1 : ViaBackingFileDownload: p.pop(&list, token.IDENT) == "true",
492 1 : }
493 1 : }
494 1 : return res
495 : }
496 :
497 1 : func (p *parser) parseExternalObjsWithBounds(list []listElem) []externalObjWithBounds {
498 1 : const numArgs = 5
499 1 : if len(list)%5 != 0 {
500 0 : panic(p.errorf(list[0].pos, "expected number of arguments to be multiple of %d", numArgs))
501 : }
502 1 : objs := make([]externalObjWithBounds, len(list)/numArgs)
503 1 : for i := range objs {
504 1 : pos := list[0].pos
505 1 : objs[i] = externalObjWithBounds{
506 1 : externalObjID: p.parseObjID(pos, p.pop(&list, token.IDENT)),
507 1 : bounds: pebble.KeyRange{
508 1 : Start: unquoteBytes(p.pop(&list, token.STRING)),
509 1 : End: unquoteBytes(p.pop(&list, token.STRING)),
510 1 : },
511 1 : }
512 1 : if syntheticSuffix := unquoteBytes(p.pop(&list, token.STRING)); len(syntheticSuffix) > 0 {
513 1 : objs[i].syntheticSuffix = syntheticSuffix
514 1 : }
515 :
516 1 : syntheticPrefix := unquoteBytes(p.pop(&list, token.STRING))
517 1 : if len(syntheticPrefix) > 0 {
518 1 : if !bytes.HasPrefix(objs[i].bounds.Start, syntheticPrefix) {
519 0 : panic(fmt.Sprintf("invalid synthetic prefix %q %q", objs[i].bounds.Start, syntheticPrefix))
520 : }
521 1 : if !bytes.HasPrefix(objs[i].bounds.End, syntheticPrefix) {
522 0 : panic(fmt.Sprintf("invalid synthetic prefix %q %q", objs[i].bounds.End, syntheticPrefix))
523 : }
524 1 : objs[i].syntheticPrefix = syntheticPrefix
525 : }
526 : }
527 1 : return objs
528 : }
529 :
530 1 : func (p *parser) scanToken(expected token.Token) (pos token.Pos, lit string) {
531 1 : pos, tok, lit := p.s.Scan()
532 1 : if tok != expected {
533 0 : panic(p.errorf(pos, "unexpected token: %q", p.tokenf(tok, lit)))
534 : }
535 1 : return pos, lit
536 : }
537 :
538 1 : func (p *parser) makeOp(methodName string, receiverID, targetID objID, pos token.Pos) op {
539 1 : info := methods[methodName]
540 1 : if info == nil {
541 0 : panic(p.errorf(pos, "unknown op %s.%s", receiverID, methodName))
542 : }
543 1 : if info.validTags&(1<<receiverID.tag()) == 0 {
544 0 : panic(p.errorf(pos, "%s.%s: %s is not a method on %s",
545 0 : receiverID, methodName, methodName, receiverID))
546 : }
547 :
548 1 : op := info.constructor()
549 1 : receiver, target, args := opArgs(op)
550 1 :
551 1 : // The form of an operation is:
552 1 : // [target =] receiver.method(args)
553 1 : //
554 1 : // The receiver is the object the operation will be called on, which can be
555 1 : // any valid ID. Certain operations such as Ingest are only valid on the DB
556 1 : // object. That is indicated by opArgs returning a nil receiver.
557 1 : if receiver != nil {
558 1 : *receiver = receiverID
559 1 : } else if receiverID.tag() != dbTag {
560 0 : panic(p.errorf(pos, "unknown op %s.%s", receiverID, methodName))
561 : }
562 :
563 : // The target is the object that will be assigned the result of an object
564 : // creation operation such as newBatchOp or newIterOp.
565 1 : if target != nil {
566 1 : // It is invalid to not have a targetID for a method which generates a new
567 1 : // object.
568 1 : if targetID == 0 {
569 0 : panic(p.errorf(pos, "assignment expected for %s.%s", receiverID, methodName))
570 : }
571 : // It is invalid to try to assign to the DB object.
572 1 : if targetID.tag() == dbTag {
573 0 : panic(p.errorf(pos, "cannot use %s as target of assignment", targetID))
574 : }
575 1 : *target = targetID
576 1 : } else if targetID != 0 {
577 0 : panic(p.errorf(pos, "cannot use %s.%s in assignment", receiverID, methodName))
578 : }
579 :
580 1 : p.parseArgs(op, methodName, args)
581 1 : return op
582 : }
583 :
584 0 : func (p *parser) tokenf(tok token.Token, lit string) string {
585 0 : if tok.IsLiteral() {
586 0 : return lit
587 0 : }
588 0 : return tok.String()
589 : }
590 :
591 0 : func (p *parser) errorf(pos token.Pos, format string, args ...interface{}) error {
592 0 : return errors.New("metamorphic test internal error: " + p.fset.Position(pos).String() + ": " + fmt.Sprintf(format, args...))
593 0 : }
594 :
595 : // computeDerivedFields makes one pass through the provided operations, filling
596 : // any derived fields. This pass must happen before execution because concurrent
597 : // execution depends on these fields.
598 1 : func computeDerivedFields(ops []op) {
599 1 : iterToReader := make(map[objID]objID)
600 1 : objToDB := make(map[objID]objID)
601 1 : for i := range ops {
602 1 : switch v := ops[i].(type) {
603 1 : case *newSnapshotOp:
604 1 : objToDB[v.snapID] = v.dbID
605 1 : case *newIterOp:
606 1 : iterToReader[v.iterID] = v.readerID
607 1 : dbReaderID := v.readerID
608 1 : if dbReaderID.tag() != dbTag {
609 1 : dbReaderID = objToDB[dbReaderID]
610 1 : }
611 1 : objToDB[v.iterID] = dbReaderID
612 1 : v.derivedDBID = dbReaderID
613 1 : case *newIterUsingCloneOp:
614 1 : v.derivedReaderID = iterToReader[v.existingIterID]
615 1 : iterToReader[v.iterID] = v.derivedReaderID
616 1 : objToDB[v.iterID] = objToDB[v.existingIterID]
617 1 : case *iterSetOptionsOp:
618 1 : v.derivedReaderID = iterToReader[v.iterID]
619 1 : case *iterFirstOp:
620 1 : v.derivedReaderID = iterToReader[v.iterID]
621 1 : case *iterLastOp:
622 1 : v.derivedReaderID = iterToReader[v.iterID]
623 1 : case *iterSeekGEOp:
624 1 : v.derivedReaderID = iterToReader[v.iterID]
625 1 : case *iterSeekPrefixGEOp:
626 1 : v.derivedReaderID = iterToReader[v.iterID]
627 1 : case *iterSeekLTOp:
628 1 : v.derivedReaderID = iterToReader[v.iterID]
629 1 : case *iterNextOp:
630 1 : v.derivedReaderID = iterToReader[v.iterID]
631 1 : case *iterNextPrefixOp:
632 1 : v.derivedReaderID = iterToReader[v.iterID]
633 1 : case *iterCanSingleDelOp:
634 1 : v.derivedReaderID = iterToReader[v.iterID]
635 1 : case *iterPrevOp:
636 1 : v.derivedReaderID = iterToReader[v.iterID]
637 1 : case *newBatchOp:
638 1 : objToDB[v.batchID] = v.dbID
639 1 : case *newIndexedBatchOp:
640 1 : objToDB[v.batchID] = v.dbID
641 1 : case *applyOp:
642 1 : if derivedDBID, ok := objToDB[v.batchID]; ok && v.writerID.tag() != dbTag {
643 1 : objToDB[v.writerID] = derivedDBID
644 1 : }
645 1 : case *getOp:
646 1 : if derivedDBID, ok := objToDB[v.readerID]; ok {
647 1 : v.derivedDBID = derivedDBID
648 1 : }
649 1 : case *batchCommitOp:
650 1 : v.dbID = objToDB[v.batchID]
651 1 : case *closeOp:
652 1 : if v.objID.tag() == dbTag {
653 1 : // Find all objects that use this db.
654 1 : v.affectedObjects = nil
655 1 : for obj, db := range objToDB {
656 1 : if db == v.objID {
657 1 : v.affectedObjects = append(v.affectedObjects, obj)
658 1 : }
659 : }
660 : // Sort so the output is deterministic.
661 1 : slices.Sort(v.affectedObjects)
662 1 : } else if dbID, ok := objToDB[v.objID]; ok {
663 1 : v.affectedObjects = objIDSlice{dbID}
664 1 : }
665 1 : case *dbRestartOp:
666 1 : // Find all objects that use this db.
667 1 : v.affectedObjects = nil
668 1 : for obj, db := range objToDB {
669 1 : if db == v.dbID {
670 1 : v.affectedObjects = append(v.affectedObjects, obj)
671 1 : }
672 : }
673 : // Sort so the output is deterministic.
674 1 : slices.Sort(v.affectedObjects)
675 1 : case *ingestOp:
676 1 : v.derivedDBIDs = make([]objID, len(v.batchIDs))
677 1 : for i := range v.batchIDs {
678 1 : v.derivedDBIDs[i] = objToDB[v.batchIDs[i]]
679 1 : }
680 1 : case *ingestAndExciseOp:
681 1 : v.derivedDBID = objToDB[v.batchID]
682 1 : case *deleteOp:
683 1 : derivedDBID := v.writerID
684 1 : if v.writerID.tag() != dbTag {
685 1 : derivedDBID = objToDB[v.writerID]
686 1 : }
687 1 : v.derivedDBID = derivedDBID
688 : }
689 : }
690 : }
|
