suite check: реализована проверка целостности набора

- разбор документа по языку конвенций: шапка, области правил, блоки под метками
- проверки формы правила, распространения, ссылок и самого suite.toml
- словарь языка живёт в бинаре реестром «версия × естественный язык», темы и
  префиксы берутся только из манифеста
This commit is contained in:
av
2026-07-27 09:53:07 +03:00
parent c557e72c79
commit ccf046fb7b
19 changed files with 2828 additions and 0 deletions
+317
View File
@@ -0,0 +1,317 @@
package check_test
import (
"os"
"path/filepath"
"strings"
"testing"
"git.vakhrushev.me/av/convy/internal/check"
"git.vakhrushev.me/av/convy/internal/suite"
)
// versionLine — строка о версии языка. Она перечисляет ключевые слова набора,
// поэтому единственная законно несёт модальные слова вне правил.
const versionLine = `Ключевые слова ДОЛЖЕН, НЕ ДОЛЖЕН, СЛЕДУЕТ, НЕ СЛЕДУЕТ, ДОПУСКАЕТСЯ и метки
ПОЧЕМУ, ПРИМЕРЫ, МЕХАНИЗИРОВАНО и СНЯТО толкуются как описано в языке
конвенций версии 1 — тогда и только тогда, когда написаны заглавными.`
const baseManifest = `
[language]
version = 1
description = "LANGUAGE.md"
reading = "READING.md"
[topics.live]
time = "время: хранение, зоны, форматы"
[topics.retired]
[prefixes.live]
TIME = "conventions/time.md"
[prefixes.retired]
`
const baseTime = `---
topic: time
prefix: TIME
---
# Время
Как приложение записывает моменты.
` + versionLine + `
## Правила
### TIME-1. Момент записывается в UTC
**ДОЛЖЕН.** Момент времени записывается с суффиксом Z.
**ПОЧЕМУ.** Без явного смещения не видно, в какой зоне запись сделана.
`
// files — содержимое набора: путь от корня к тексту файла. Пустая строка
// значит «файла нет»: так тест снимает файл, который есть в основе.
type files map[string]string
func base() files {
return files{
"suite.toml": baseManifest,
"LANGUAGE.md": "# Язык конвенций\n\nОписание языка.\n",
"READING.md": "# Как читать конвенцию\n\nКоротко.\n",
"conventions/time.md": baseTime,
}
}
// run записывает набор во временную директорию и прогоняет проверки.
func run(t *testing.T, f files) []check.Finding {
t.Helper()
root := t.TempDir()
for name, content := range f {
if content == "" {
continue
}
path := filepath.Join(root, filepath.FromSlash(name))
if err := os.MkdirAll(filepath.Dir(path), 0o755); err != nil {
t.Fatal(err)
}
if err := os.WriteFile(path, []byte(content), 0o644); err != nil {
t.Fatal(err)
}
}
s, err := suite.Load(root)
if err != nil {
t.Fatalf("загрузка набора: %v", err)
}
return check.Suite(s).Findings()
}
func messages(findings []check.Finding) string {
var b strings.Builder
for _, f := range findings {
b.WriteString(f.Path)
b.WriteString(": ")
b.WriteString(f.Msg)
b.WriteString("\n")
}
return b.String()
}
func TestCleanSuite(t *testing.T) {
if got := run(t, base()); len(got) != 0 {
t.Fatalf("исправный набор дал находки:\n%s", messages(got))
}
}
// rule собирает правило целиком, чтобы тесты не повторяли его форму.
func rule(id, title, norm, rationale string) string {
return "\n### " + id + ". " + title + "\n\n**ДОЛЖЕН.** " + norm + "\n\n**ПОЧЕМУ.** " + rationale + "\n"
}
func TestChecks(t *testing.T) {
cases := []struct {
name string
setup func(files)
want string
}{{
name: "префикс в шапке расходится с манифестом",
setup: func(f files) {
f["conventions/time.md"] = strings.Replace(baseTime, "prefix: TIME", "prefix: GTIM", 1)
},
want: "префикс в шапке — GTIM, а манифест объявляет за этим файлом TIME",
}, {
name: "заголовок правила несёт чужой префикс",
setup: func(f files) {
f["conventions/time.md"] = strings.Replace(baseTime, "### TIME-1.", "### GTIM-1.", 1)
},
want: "использует префикс GTIM, а файлу принадлежит TIME",
}, {
name: "нумерация с дырой",
setup: func(f files) {
f["conventions/time.md"] = baseTime + rule("TIME-3", "Третье", "Норма.", "Причина.")
},
want: "нумерация не сплошная",
}, {
name: "номер занят дважды",
setup: func(f files) {
f["conventions/time.md"] = baseTime + rule("TIME-1", "Ещё раз первое", "Норма.", "Причина.")
},
want: "номер TIME-1 занят дважды",
}, {
name: "правило без обоснования",
setup: func(f files) {
f["conventions/time.md"] = strings.Replace(baseTime,
"**ПОЧЕМУ.** Без явного смещения не видно, в какой зоне запись сделана.", "", 1)
},
want: "нет блока ПОЧЕМУ: обоснование обязательно",
}, {
name: "правило без нормы и без заглушки",
setup: func(f files) {
f["conventions/time.md"] = strings.Replace(baseTime,
"**ДОЛЖЕН.** Момент времени записывается с суффиксом Z.", "Просто текст.", 1)
},
want: "нет ни блока нормы, ни заглушки СНЯТО",
}, {
name: "две нормы под одним номером",
setup: func(f files) {
f["conventions/time.md"] = strings.Replace(baseTime,
"**ПОЧЕМУ.**", "**СЛЕДУЕТ.** Вторая норма.\n\n**ПОЧЕМУ.**", 1)
},
want: "две нормы (ДОЛЖЕН и СЛЕДУЕТ)",
}, {
name: "обоснование стоит раньше нормы",
setup: func(f files) {
f["conventions/time.md"] = strings.Replace(baseTime,
"**ДОЛЖЕН.** Момент времени записывается с суффиксом Z.\n\n**ПОЧЕМУ.** Без явного смещения не видно, в какой зоне запись сделана.",
"**ПОЧЕМУ.** Причина вперёд.\n\n**ДОЛЖЕН.** Момент времени записывается с суффиксом Z.", 1)
},
want: "обоснование стоит раньше нормы",
}, {
name: "примеры стоят раньше обоснования",
setup: func(f files) {
f["conventions/time.md"] = strings.Replace(baseTime,
"**ПОЧЕМУ.**", "**ПРИМЕРЫ.** Иллюстрация.\n\n**ПОЧЕМУ.**", 1)
},
want: "блок ПРИМЕРЫ стоит раньше обоснования",
}, {
name: "заглушка снятого без даты",
setup: func(f files) {
f["conventions/time.md"] = strings.Replace(baseTime,
"**ДОЛЖЕН.** Момент времени записывается с суффиксом Z.\n\n**ПОЧЕМУ.** Без явного смещения не видно, в какой зоне запись сделана.",
"**СНЯТО.** Правило убрано за ненадобностью.", 1)
},
want: "не несёт даты снятия",
}, {
name: "у снятого правила осталась норма",
setup: func(f files) {
f["conventions/time.md"] = baseTime +
"\n### TIME-2. Снятое\n\n**СНЯТО 2026-07-26.** Причина снятия.\n\n**ДОЛЖЕН.** Остаток нормы.\n"
},
want: "остался блок нормы",
}, {
name: "нет строки о версии языка",
setup: func(f files) {
f["conventions/time.md"] = strings.Replace(baseTime, versionLine, "Просто вводная проза.", 1)
},
want: "нет строки о версии языка",
}, {
name: "строка о версии называет чужую версию",
setup: func(f files) {
f["conventions/time.md"] = strings.Replace(baseTime, "конвенций версии 1", "конвенций версии 2", 1)
},
want: "не называет версию 1",
}, {
name: "модальное слово вне области правила",
setup: func(f files) {
f["conventions/time.md"] = strings.Replace(baseTime,
"Как приложение записывает моменты.", "Приложение ДОЛЖЕН писать моменты.", 1)
},
want: "стоит вне области правила",
}, {
name: "слово чужого словаря",
setup: func(f files) {
f["conventions/time.md"] = strings.Replace(baseTime,
"**ПОЧЕМУ.** Без явного", "**ПОЧЕМУ.** Здесь MUST не к месту. Без явного", 1)
},
want: `слово MUST принадлежит словарю "en"`,
}, {
name: "ссылка на несуществующее правило",
setup: func(f files) {
f["conventions/time.md"] = strings.Replace(baseTime,
"Без явного смещения", "Смотри TIME-9. Без явного смещения", 1)
},
want: "ссылка TIME-9 не разрешается",
}, {
name: "ссылка на неизвестный префикс",
setup: func(f files) {
f["conventions/time.md"] = strings.Replace(baseTime,
"Без явного смещения", "Смотри ZZZZ-1. Без явного смещения", 1)
},
want: "префикс ZZZZ, которого в манифесте набора нет",
}, {
name: "тема не объявлена в манифесте",
setup: func(f files) {
f["conventions/time.md"] = strings.Replace(baseTime, "topic: time", "topic: clocks", 1)
},
want: `тема "clocks" не объявлена`,
}, {
name: "тема значится среди выбывших",
setup: func(f files) {
f["suite.toml"] = strings.Replace(baseManifest,
"[topics.retired]", `[topics.retired]`+"\ntime = \"снята 2026-07-01\"", 1)
},
want: "значится и среди живых, и среди выбывших",
}, {
name: "у живой темы нет слоёв",
setup: func(f files) {
f["suite.toml"] = strings.Replace(baseManifest,
`time = "время: хранение, зоны, форматы"`,
`time = "время"`+"\nlogging = \"логирование\"", 1)
},
want: `тема "logging" объявлена живой, а слоёв у неё в наборе нет`,
}, {
name: "объявленного файла нет",
setup: func(f files) {
f["suite.toml"] = strings.Replace(baseManifest,
`TIME = "conventions/time.md"`,
`TIME = "conventions/time.md"`+"\nSLOG = \"conventions/logging.md\"", 1)
},
want: `префикс SLOG объявлен за файлом "conventions/logging.md", а файла в наборе нет`,
}, {
name: "файл не зарегистрирован в манифесте",
setup: func(f files) {
f["conventions/logging.md"] = "---\ntopic: logging\nprefix: SLOG\n---\n\n# Логирование\n"
},
want: "в манифесте набора не объявлен",
}, {
name: "префикс начинается на X",
setup: func(f files) {
f["suite.toml"] = strings.Replace(baseManifest,
`TIME = "conventions/time.md"`, `XTIM = "conventions/time.md"`, 1)
f["conventions/time.md"] = strings.ReplaceAll(baseTime, "TIME", "XTIM")
},
want: "зарезервирована за локальными правилами потребителей",
}, {
name: "на один файл объявлено два префикса",
setup: func(f files) {
f["suite.toml"] = strings.Replace(baseManifest,
`TIME = "conventions/time.md"`,
`TIME = "conventions/time.md"`+"\nGTIM = \"conventions/time.md\"", 1)
},
want: "объявлено несколько префиксов",
}, {
name: "ключ манифеста неизвестен",
setup: func(f files) {
f["suite.toml"] = baseManifest + "\n[extra]\nkey = 1\n"
},
want: "инструменту неизвестен",
}, {
name: "метка механизации в тексте конвенции",
setup: func(f files) {
f["conventions/time.md"] = strings.Replace(baseTime,
"Без явного смещения", "Правило МЕХАНИЗИРОВАНО линтером. Без явного смещения", 1)
},
want: "её место — запись о механизации в локальной части копии",
}, {
name: "путь канона в тексте конвенции",
setup: func(f files) {
f["conventions/time.md"] = strings.Replace(baseTime,
"Без явного смещения", "Смотри conventions/time.md. Без явного смещения", 1)
},
want: "стоит путь файла канона",
}}
for _, tc := range cases {
t.Run(tc.name, func(t *testing.T) {
f := base()
tc.setup(f)
got := messages(run(t, f))
if !strings.Contains(got, tc.want) {
t.Fatalf("проверка не сработала\nждали: %s\nполучили:\n%s", tc.want, got)
}
})
}
}
+337
View File
@@ -0,0 +1,337 @@
package check
import (
"regexp"
"sort"
"strconv"
"strings"
"git.vakhrushev.me/av/convy/internal/doc"
"git.vakhrushev.me/av/convy/internal/lang"
"git.vakhrushev.me/av/convy/internal/manifest"
"git.vakhrushev.me/av/convy/internal/suite"
)
// checkForm проверяет форму правила разбором текста. Применяется к любому
// файлу, который язык употребляет, — и к конвенциям, и к документу, которым
// набор ведёт себя сам.
func checkForm(s *suite.Suite, d *doc.Document, rep *Report) {
prefix := checkFilePrefix(s, d, rep)
checkHeadings(d, prefix, rep)
checkNumbering(d, prefix, rep)
checkRules(s, d, rep)
versionFrom, versionTo := checkVersionLine(s, d, rep)
checkModalsOutside(s, d, versionFrom, versionTo, rep)
checkForeignVocabulary(s, d, rep)
}
// checkFilePrefix сверяет префикс в шапке с манифестом и возвращает префикс,
// которым файлу положено пользоваться.
func checkFilePrefix(s *suite.Suite, d *doc.Document, rep *Report) string {
declared, _ := s.Manifest.PrefixOf(d.Path)
if !d.Front.Present {
rep.Errorf(Form, d.Path, 1, "у файла нет шапки, а манифест объявляет за ним префикс %s", declared)
return declared
}
if d.Front.Prefix == "" {
rep.Errorf(Form, d.Path, 1, "шапка не несёт ключа prefix")
return declared
}
at := d.Front.At["prefix"]
if d.Front.Prefix != declared {
rep.Errorf(Form, d.Path, at,
"префикс в шапке — %s, а манифест объявляет за этим файлом %s", d.Front.Prefix, declared)
}
if err := manifest.ValidPrefix(d.Front.Prefix); err != nil {
rep.Errorf(Form, d.Path, at, "%s", err)
}
if s.Manifest.PrefixRetired(d.Front.Prefix) {
rep.Errorf(Form, d.Path, at, "префикс %s значится среди выбывших", d.Front.Prefix)
}
for _, key := range d.Front.Unknown {
rep.Warnf(Form, d.Path, d.Front.At[key], "ключ шапки %q инструменту неизвестен", key)
}
return declared
}
// checkHeadings проверяет форму заголовков правил: собственный префикс файла,
// третий уровень, точка после идентификатора, название.
func checkHeadings(d *doc.Document, prefix string, rep *Report) {
for _, r := range d.Rules {
if r.Prefix != prefix {
rep.Errorf(Form, d.Path, r.Line,
"заголовок правила использует префикс %s, а файлу принадлежит %s", r.Prefix, prefix)
}
if r.HeadingLevel != 3 {
rep.Errorf(Form, d.Path, r.Line,
"заголовок правила %s стоит на уровне %d, а правило — заголовок третьего уровня", r.ID(), r.HeadingLevel)
}
if r.Malformed != "" {
rep.Errorf(Form, d.Path, r.Line, "%s: %s", r.ID(), r.Malformed)
}
}
}
// checkNumbering проверяет сплошную нумерацию: от единицы до наибольшего без
// пропусков и без повторов (META-31). Дыра неотличима от опечатки в номере и
// от правила, которое забыли дописать, — поэтому её нет никогда, а снятое
// правило остаётся заглушкой.
func checkNumbering(d *doc.Document, prefix string, rep *Report) {
seen := make(map[int][]int)
for _, r := range d.Rules {
if r.Prefix != prefix {
continue
}
seen[r.Num] = append(seen[r.Num], r.Line)
}
if len(seen) == 0 {
return
}
nums := make([]int, 0, len(seen))
highest := 0
for n := range seen {
nums = append(nums, n)
highest = max(highest, n)
}
sort.Ints(nums)
for _, n := range nums {
if lines := seen[n]; len(lines) > 1 {
rep.Errorf(Form, d.Path, lines[1],
"номер %s занят дважды: строки %s", ruleID(prefix, n), joinInts(lines))
}
}
var gaps []int
for n := 1; n <= highest; n++ {
if _, ok := seen[n]; !ok {
gaps = append(gaps, n)
}
}
if len(gaps) > 0 {
rep.Errorf(Form, d.Path, d.Rules[0].Line,
"нумерация не сплошная: наибольший номер %d, пропущены %s — снятое правило остаётся заглушкой, а не исчезает",
highest, joinInts(gaps))
}
}
var dateRe = regexp.MustCompile(`\d{4}-\d{2}-\d{2}`)
// checkRules проверяет состав правила: либо норма с обоснованием, либо
// заглушка снятого. Ни норма, ни обоснование не удаляются никогда
// (META-8, META-10).
func checkRules(s *suite.Suite, d *doc.Document, rep *Report) {
v := s.Vocab
for _, r := range d.Rules {
if retired, ok := r.Block(lang.Retired); ok {
checkRetired(d, r, retired, rep)
continue
}
norms := r.Norms()
switch len(norms) {
case 0:
rep.Errorf(Form, d.Path, r.Line,
"у правила %s нет ни блока нормы, ни заглушки %s", r.ID(), v.MarkWord(lang.Retired))
case 1:
if norms[0].Rest == "" {
rep.Errorf(Form, d.Path, norms[0].Start,
"у правила %s метка %s не открывает нормы: за ней пусто", r.ID(), norms[0].Word)
}
default:
rep.Errorf(Form, d.Path, norms[1].Start,
"у правила %s две нормы (%s и %s): норма — одна фраза, иначе нарушение одной её половины нечем адресовать",
r.ID(), norms[0].Word, norms[1].Word)
}
rationale, ok := r.Block(lang.Rationale)
if !ok {
rep.Errorf(Form, d.Path, r.Line,
"у правила %s нет блока %s: обоснование обязательно", r.ID(), v.MarkWord(lang.Rationale))
} else if len(norms) > 0 && rationale.Start < norms[0].Start {
rep.Errorf(Form, d.Path, rationale.Start,
"у правила %s обоснование стоит раньше нормы: порядок блоков — норма, %s, %s",
r.ID(), v.MarkWord(lang.Rationale), v.MarkWord(lang.Examples))
}
if examples, ok := r.Block(lang.Examples); ok {
switch {
case len(r.Blocks) > 0 && r.Blocks[0].Start == examples.Start:
rep.Errorf(Form, d.Path, examples.Start,
"у правила %s блок %s открывает правило: порядок блоков — норма, %s, %s",
r.ID(), v.MarkWord(lang.Examples), v.MarkWord(lang.Rationale), v.MarkWord(lang.Examples))
case ok && rationale.Start > examples.Start:
rep.Errorf(Form, d.Path, examples.Start,
"у правила %s блок %s стоит раньше обоснования: сначала требование, потом причина, потом иллюстрация",
r.ID(), v.MarkWord(lang.Examples))
}
}
}
}
// checkRetired проверяет заглушку снятого правила: дата и причина.
func checkRetired(d *doc.Document, r doc.Rule, retired doc.Block, rep *Report) {
if len(r.Norms()) > 0 {
rep.Errorf(Form, d.Path, retired.Start,
"у снятого правила %s остался блок нормы: норму с обоснованием заменяет заглушка", r.ID())
}
if !dateRe.MatchString(d.Line(retired.Start)) {
rep.Errorf(Form, d.Path, retired.Start,
"заглушка правила %s не несёт даты снятия", r.ID())
}
if strings.TrimSpace(retired.Rest) == "" {
rep.Errorf(Form, d.Path, retired.Start,
"заглушка правила %s не несёт причины снятия", r.ID())
}
}
// checkVersionLine ищет во вводной прозе строку о версии языка и возвращает
// границы абзаца, который её несёт.
//
// Строка перечисляет ключевые слова набора и сама несёт правило заглавных —
// поэтому она единственное место вне правил, где модальные слова законны.
func checkVersionLine(s *suite.Suite, d *doc.Document, rep *Report) (from, to int) {
p, ok := versionParagraph(s, d)
if !ok {
start, _ := d.Preamble()
rep.Errorf(Form, d.Path, start,
"во вводной прозе нет строки о версии языка: она перечисляет ключевые слова набора и без неё конвенция в чужом репозитории теряет ключ к собственному тексту")
return 0, 0
}
version := strconv.Itoa(s.Manifest.Language.Version)
if !containsNumber(p.Text(), version) {
rep.Errorf(Form, d.Path, p.Start,
"строка о версии языка не называет версию %s, объявленную манифестом набора", version)
}
return p.Start, p.End
}
// versionParagraph ищет во вводной прозе абзац, несущий строку о версии языка:
// тот, где перечислены все ключевые слова набора. Ничего не сообщает — о его
// отсутствии говорит checkVersionLine, и говорить дважды незачем.
func versionParagraph(s *suite.Suite, d *doc.Document) (doc.Paragraph, bool) {
from, to := d.Preamble()
words := s.Vocab.Words()
for _, p := range d.Paragraphs(from, to) {
if containsAll(p.Text(), words) {
return p, true
}
}
return doc.Paragraph{}, false
}
// checkModalsOutside ищет заглавные модальные слова вне областей правил.
// Область — от заголовка правила до следующего заголовка; всё остальное проза,
// а проза нормой не является никогда.
func checkModalsOutside(s *suite.Suite, d *doc.Document, versionFrom, versionTo int, rep *Report) {
words := modalWords(s.Vocab)
d.Prose(func(n int, text string) bool {
if d.InRule(n) || n >= versionFrom && n <= versionTo {
return true
}
for _, w := range words {
if !containsWord(text, w) {
continue
}
rep.Errorf(Form, d.Path, n,
"модальное слово %s стоит вне области правила: заглавное написание нормативно, и в прозе его быть не может", w)
break
}
return true
})
}
// checkForeignVocabulary ищет слова чужого словаря той же версии языка.
// Словарь один на набор: две формы записи одного требования удваивают каждую
// проверку.
func checkForeignVocabulary(s *suite.Suite, d *doc.Document, rep *Report) {
foreign := lang.Foreign(s.Manifest.Language.Version, s.Manifest.Language.Lang)
if len(foreign) == 0 {
return
}
words := make([]string, 0, len(foreign))
for w := range foreign {
words = append(words, w)
}
sort.Strings(words)
d.Prose(func(n int, text string) bool {
for _, w := range words {
if containsWord(text, w) {
rep.Errorf(Form, d.Path, n,
"слово %s принадлежит словарю %q, а набор объявляет словарь %q",
w, foreign[w], s.Manifest.Language.Lang)
}
}
return true
})
}
func modalWords(v lang.Vocabulary) []string {
out := make([]string, 0, len(v.Modals))
for w := range v.Modals {
out = append(out, w)
}
sort.Strings(out)
return out
}
func containsAll(text string, words []string) bool {
for _, w := range words {
if !strings.Contains(text, w) {
return false
}
}
return true
}
// containsWord ищет слово как целое: «ДОЛЖЕНСТВОВАНИЕ» словом ДОЛЖЕН не
// является, а «ДОЛЖЕН.» — является.
func containsWord(text, word string) bool {
for i := 0; ; {
j := strings.Index(text[i:], word)
if j < 0 {
return false
}
start := i + j
end := start + len(word)
if !letterBefore(text, start) && !letterAt(text, end) {
return true
}
i = start + len(word)
if i >= len(text) {
return false
}
}
}
func containsNumber(text, number string) bool {
for i := 0; ; {
j := strings.Index(text[i:], number)
if j < 0 {
return false
}
start := i + j
end := start + len(number)
if !digitBefore(text, start) && !digitAt(text, end) {
return true
}
i = end
if i >= len(text) {
return false
}
}
}
func ruleID(prefix string, num int) string {
return prefix + "-" + strconv.Itoa(num)
}
func joinInts(nums []int) string {
parts := make([]string, len(nums))
for i, n := range nums {
parts[i] = strconv.Itoa(n)
}
return strings.Join(parts, ", ")
}
+236
View File
@@ -0,0 +1,236 @@
package check_test
import (
"strings"
"testing"
)
// Набор с двумя слоями одной темы: базовый арх-слой и языковой поверх него.
// На нём проверяется всё, что про оси, extends и границу самодостаточности
// нормы, — на одном слое эти проверки выразить нечем.
const layeredManifest = `
[language]
version = 1
description = "LANGUAGE.md"
reading = "READING.md"
[topics.live]
time = "время"
logging = "логирование"
[topics.retired]
[prefixes.live]
TIME = "conventions/arch/time.md"
GTIM = "conventions/lang/go/time.md"
SLOG = "conventions/arch/logging.md"
[prefixes.retired]
`
const archTime = `---
topic: time
prefix: TIME
---
# Время
Как приложение записывает моменты.
` + versionLine + `
## Правила
### TIME-1. Момент записывается в UTC
**ДОЛЖЕН.** Момент времени записывается с суффиксом Z.
**ПОЧЕМУ.** Без явного смещения не видно, в какой зоне запись сделана.
`
const goTime = `---
topic: time
prefix: GTIM
lang: go
extends: arch/time.md
---
# Время: реализация на Go
Как требования базового слоя выполняются в Go-коде.
` + versionLine + `
## Правила
### GTIM-1. «Сейчас» берётся у слоя хранилища
**ДОЛЖЕН.** Текущее время приходит из store.Now().
**ПОЧЕМУ.** Единая точка даёт гарантированный UTC.
`
const archLogging = `---
topic: logging
prefix: SLOG
---
# Логирование
Как приложение пишет записи.
` + versionLine + `
## Правила
### SLOG-1. Уровень выбирается по адресату
**ДОЛЖЕН.** Уровень отвечает на вопрос «кому сообщение».
**ПОЧЕМУ.** Адресат — единственный воспроизводимый признак.
`
func layered() files {
return files{
"suite.toml": layeredManifest,
"LANGUAGE.md": "# Язык конвенций\n\nОписание языка.\n",
"READING.md": "# Как читать конвенцию\n\nКоротко.\n",
"conventions/arch/time.md": archTime,
"conventions/lang/go/time.md": goTime,
"conventions/arch/logging.md": archLogging,
}
}
func TestLayeredSuiteIsClean(t *testing.T) {
if got := run(t, layered()); len(got) != 0 {
t.Fatalf("исправный многослойный набор дал находки:\n%s", messages(got))
}
}
func TestLayeredChecks(t *testing.T) {
cases := []struct {
name string
setup func(files)
want string
}{{
name: "ось в шапке расходится с путём",
setup: func(f files) {
f["conventions/lang/go/time.md"] = strings.Replace(goTime, "lang: go", "lang: python", 1)
},
want: `путь кладёт файл на ось lang=go, а шапка объявляет lang="python"`,
}, {
name: "extends ведёт в чужую тему",
setup: func(f files) {
f["conventions/lang/go/time.md"] = strings.Replace(goTime,
"extends: arch/time.md", "extends: arch/logging.md", 1)
},
want: `с темой "logging", а файл несёт тему "time"`,
}, {
name: "extends ведёт в несуществующий файл",
setup: func(f files) {
f["conventions/lang/go/time.md"] = strings.Replace(goTime,
"extends: arch/time.md", "extends: arch/clocks.md", 1)
},
want: `а такого файла в наборе нет`,
}, {
name: "у темы два слоя без ключей оси",
setup: func(f files) {
f["suite.toml"] = strings.Replace(layeredManifest,
`GTIM = "conventions/lang/go/time.md"`,
`GTIM = "conventions/second/time.md"`, 1)
f["conventions/lang/go/time.md"] = ""
f["conventions/second/time.md"] = strings.Replace(
strings.Replace(goTime, "lang: go\n", "", 1),
"extends: arch/time.md\n", "", 1)
},
want: "больше одного слоя без ключей оси",
}, {
name: "норма ссылается на префикс чужой темы",
setup: func(f files) {
f["conventions/lang/go/time.md"] = strings.Replace(goTime,
"**ДОЛЖЕН.** Текущее время приходит из store.Now().",
"**ДОЛЖЕН.** Текущее время приходит из store.Now() и пишется по SLOG-1.", 1)
},
want: `ссылается на SLOG-1 из чужой темы "logging"`,
}, {
name: "норма ссылается на неба́зовый слой своей темы",
setup: func(f files) {
f["conventions/arch/time.md"] = strings.Replace(archTime,
"**ДОЛЖЕН.** Момент времени записывается с суффиксом Z.",
"**ДОЛЖЕН.** Момент времени записывается с суффиксом Z, как требует GTIM-1.", 1)
},
want: "слой своей темы, но не базовый",
}}
for _, tc := range cases {
t.Run(tc.name, func(t *testing.T) {
f := layered()
tc.setup(f)
got := messages(run(t, f))
if !strings.Contains(got, tc.want) {
t.Fatalf("проверка не сработала\nждали: %s\nполучили:\n%s", tc.want, got)
}
})
}
}
// TestNoFalsePositives собирает случаи, в которых проверка обязана промолчать.
// Ложное срабатывание здесь дороже пропуска: проверку, которая краснеет на
// исправном файле, выключают целиком.
func TestNoFalsePositives(t *testing.T) {
cases := []struct {
name string
setup func(files)
}{{
name: "идентификатор в бэктиках — образец записи, а не ссылка",
setup: func(f files) {
f["conventions/arch/time.md"] = strings.Replace(archTime,
"Без явного смещения",
"На правило ссылаются идентификатором (`TIME-99`). Без явного смещения", 1)
},
}, {
name: "модальное слово внутри огороженного блока кода",
setup: func(f files) {
f["conventions/arch/time.md"] = archTime +
"\n## Связано\n\n```\nДОЛЖЕН это не норма, а строка примера\n```\n"
},
}, {
name: "заглавное SQL-слово в примере кода",
setup: func(f files) {
f["conventions/arch/time.md"] = strings.Replace(archTime,
"**ПОЧЕМУ.** Без явного смещения не видно, в какой зоне запись сделана.",
"**ПОЧЕМУ.** Без явного смещения не видно зоны.\n\n```sql\nSELECT 1 WHERE a AND b OR c\n```", 1)
},
}, {
name: "норма языкового слоя ссылается на базовый слой своей темы",
setup: func(f files) {
f["conventions/lang/go/time.md"] = strings.Replace(goTime,
"**ДОЛЖЕН.** Текущее время приходит из store.Now().",
"**ДОЛЖЕН.** Текущее время приходит из store.Now() в форме TIME-1.", 1)
},
}, {
name: "упоминание ступени в обосновании — не вторая норма",
setup: func(f files) {
f["conventions/arch/time.md"] = strings.Replace(archTime,
"**ПОЧЕМУ.** Без явного смещения не видно, в какой зоне запись сделана.",
"**ПОЧЕМУ.** Для ступени СЛЕДУЕТ это было бы честно, но здесь ломается сортировка.", 1)
},
}, {
name: "заглушка снятого правила с датой и причиной",
setup: func(f files) {
f["conventions/arch/time.md"] = archTime +
"\n### TIME-2. Ширина строки фиксируется\n\n**СНЯТО 2026-07-26.** Правило переехало в GTIM-1.\n"
},
}}
for _, tc := range cases {
t.Run(tc.name, func(t *testing.T) {
f := layered()
tc.setup(f)
if got := run(t, f); len(got) != 0 {
t.Fatalf("проверка сработала там, где не должна:\n%s", messages(got))
}
})
}
}
+114
View File
@@ -0,0 +1,114 @@
package check
import (
"regexp"
"strconv"
"strings"
"git.vakhrushev.me/av/convy/internal/doc"
"git.vakhrushev.me/av/convy/internal/suite"
)
// refRe ловит идентификатор правила: четыре заглавные латинские буквы, дефис,
// номер и необязательный номер строки таблицы.
var refRe = regexp.MustCompile(`\b([A-Z]{4})-(\d+)(?:\.(\d+))?`)
// Ref — ссылка на правило, найденная в тексте.
type Ref struct {
Prefix string
Num int
Sub int
Line int
Text string
}
// refsIn собирает ссылки в диапазоне строк документа. Инлайн-код вырезан: в
// бэктиках идентификатор стоит образцом записи, а не ссылкой на утверждение, —
// иначе строка «на конкретное правило ссылаются идентификатором (`SLOG-27`)»
// требовала бы, чтобы правило SLOG-27 существовало.
func refsIn(d *doc.Document, from, to int) []Ref {
var out []Ref
for n := from; n <= to; n++ {
if d.Fenced(n) {
continue
}
out = append(out, refsInLine(n, doc.StripInline(d.Line(n)))...)
}
return out
}
func refsInLine(n int, text string) []Ref {
var out []Ref
for _, m := range refRe.FindAllStringSubmatch(text, -1) {
num, err := strconv.Atoi(m[2])
if err != nil {
continue
}
ref := Ref{Prefix: m[1], Num: num, Line: n, Text: m[0]}
if m[3] != "" {
ref.Sub, _ = strconv.Atoi(m[3])
}
out = append(out, ref)
}
return out
}
// checkLinks проверяет, что каждая ссылка разрешается. Неразрешённый
// идентификатор всегда ошибка: с заглушками на месте снятых правил третьего
// исхода нет — ссылка ведёт либо к правилу, либо к объяснению, почему его
// сняли (META-31, META-32).
func checkLinks(s *suite.Suite, d *doc.Document, rep *Report) {
for _, ref := range refsIn(d, d.Body, d.Len()) {
if strings.HasPrefix(ref.Prefix, "X") {
// Префикс потребителя: локальные правила чужого репозитория
// набору не видны и разрешению не подлежат.
continue
}
if s.Manifest.PrefixRetired(ref.Prefix) {
rep.Errorf(Links, d.Path, ref.Line,
"ссылка %s ведёт на выбывший префикс %s", ref.Text, ref.Prefix)
continue
}
target, ok := s.ByPrefix[ref.Prefix]
if !ok {
if _, declared := s.Manifest.PathOf(ref.Prefix); declared {
// Файл объявлен, но не прочитан — о нём уже сказано
// проверкой манифеста, второй раз не повторяем.
continue
}
rep.Errorf(Links, d.Path, ref.Line,
"ссылка %s ведёт на префикс %s, которого в манифесте набора нет", ref.Text, ref.Prefix)
continue
}
rule, ok := ruleByNum(target, ref.Num)
if !ok {
rep.Errorf(Links, d.Path, ref.Line,
"ссылка %s не разрешается: в %s правила с номером %d нет", ref.Text, target.Path, ref.Num)
continue
}
if ref.Sub > 0 && !mentions(target, rule, ref.Text) {
rep.Errorf(Links, d.Path, ref.Line,
"ссылка %s не разрешается: в области %s такой строки нет", ref.Text, rule.ID())
}
}
}
// mentions отвечает, встречается ли текст ссылки в области правила. Так
// проверяется номер строки таблицы: сама строка его и несёт.
func mentions(d *doc.Document, rule doc.Rule, text string) bool {
for n := rule.Line; n <= rule.End; n++ {
if strings.Contains(d.Line(n), text) {
return true
}
}
return false
}
func ruleByNum(d *doc.Document, num int) (doc.Rule, bool) {
for _, r := range d.Rules {
if r.Num == num {
return r, true
}
}
return doc.Rule{}, false
}
+106
View File
@@ -0,0 +1,106 @@
// Package check прогоняет проверки целостности набора.
//
// Деление на семейства взято из языка и сохранено в коде: форма правила
// проверяется в любом файле, который язык употребляет; распространение — только
// в файлах конвенций, потому что эти проверки о том, что документ уезжает к
// потребителю. Третья часть списка — взаимоисключительность строк таблицы,
// покрытие области действия, самодостаточность нормы — сюда не входит: она не
// даётся разбором текста и остаётся работой читателя.
package check
import (
"fmt"
"sort"
)
// Severity различает ошибку и предупреждение. Ошибка — нарушение, названное
// правилом набора; предупреждение — то, что стоит посмотреть глазами.
type Severity int
const (
Error Severity = iota + 1
Warning
)
func (s Severity) String() string {
if s == Warning {
return "предупреждение"
}
return "ошибка"
}
// Family — семейство проверок, из которого пришла находка.
type Family string
const (
Manifest Family = "манифест"
Form Family = "форма"
Spread Family = "распространение"
Links Family = "ссылки"
)
// Finding — одна находка.
type Finding struct {
Severity Severity
Family Family
// Path — путь файла от корня набора; пусто, если находка о наборе целиком.
Path string
// Line — строка файла; ноль, если находка не привязана к строке.
Line int
Msg string
}
// Report накапливает находки одного прогона.
type Report struct {
findings []Finding
}
// Errorf записывает ошибку.
func (r *Report) Errorf(f Family, path string, line int, format string, args ...any) {
r.add(Error, f, path, line, format, args...)
}
// Warnf записывает предупреждение.
func (r *Report) Warnf(f Family, path string, line int, format string, args ...any) {
r.add(Warning, f, path, line, format, args...)
}
func (r *Report) add(s Severity, f Family, path string, line int, format string, args ...any) {
r.findings = append(r.findings, Finding{
Severity: s,
Family: f,
Path: path,
Line: line,
Msg: fmt.Sprintf(format, args...),
})
}
// Findings отдаёт находки в порядке файла и строки. Находки о наборе целиком
// идут первыми: пока манифест не сходится, остальное читать рано.
func (r *Report) Findings() []Finding {
out := make([]Finding, len(r.findings))
copy(out, r.findings)
sort.SliceStable(out, func(i, j int) bool {
if out[i].Path != out[j].Path {
return out[i].Path < out[j].Path
}
return out[i].Line < out[j].Line
})
return out
}
// Errors считает находки уровня ошибки.
func (r *Report) Errors() int {
n := 0
for _, f := range r.findings {
if f.Severity == Error {
n++
}
}
return n
}
// Warnings считает предупреждения.
func (r *Report) Warnings() int {
return len(r.findings) - r.Errors()
}
+180
View File
@@ -0,0 +1,180 @@
package check
import (
"path"
"regexp"
"strings"
"git.vakhrushev.me/av/convy/internal/doc"
"git.vakhrushev.me/av/convy/internal/lang"
"git.vakhrushev.me/av/convy/internal/suite"
)
// checkSpread проверяет то, что относится к отъезду документа к потребителю.
// Применяется только к файлам конвенций: документ, которым набор ведёт себя
// сам, не уезжает никуда, и путь канона в нём законен.
func checkSpread(s *suite.Suite, d *doc.Document, rep *Report) {
checkTopic(s, d, rep)
checkAxis(d, rep)
checkExtends(s, d, rep)
checkMechanized(s, d, rep)
checkCanonPaths(s, d, rep)
checkForeignTopicPrefix(s, d, rep)
}
// checkTopic сверяет тему из шапки с манифестом (META-28, META-29).
func checkTopic(s *suite.Suite, d *doc.Document, rep *Report) {
topic := d.Front.Topic
at := d.Front.At["topic"]
switch {
case s.Manifest.TopicRetired(topic):
rep.Errorf(Spread, d.Path, at,
"тема %q значится среди выбывших: снятое имя другой теме не выдаётся", topic)
case !s.Manifest.TopicLive(topic):
rep.Errorf(Spread, d.Path, at,
"тема %q не объявлена в манифесте набора", topic)
}
}
// checkAxis сверяет объявленную ось с путём файла. Ось объявляется в шапке, а
// не выводится из пути (META-38); но если директории осей используются,
// расхождение означает переезд файла без правки шапки.
func checkAxis(d *doc.Document, rep *Report) {
parts := strings.Split(path.Dir(d.Path), "/")
for i := 0; i+1 < len(parts); i++ {
var declared, key string
switch parts[i] {
case "lang":
declared, key = d.Front.Lang, "lang"
case "stack":
declared, key = d.Front.Stack, "stack"
default:
continue
}
if declared == parts[i+1] {
continue
}
at := d.Front.At[key]
if at == 0 {
at = d.Front.At["prefix"]
}
rep.Errorf(Spread, d.Path, at,
"путь кладёт файл на ось %s=%s, а шапка объявляет %s=%q", key, parts[i+1], key, declared)
}
}
// checkExtends проверяет, что объявленная база существует и принадлежит той же
// теме. Ключ документирует связь слоёв для человека — документация, которая
// врёт, хуже отсутствующей.
func checkExtends(s *suite.Suite, d *doc.Document, rep *Report) {
if d.Front.Extends == "" {
return
}
at := d.Front.At["extends"]
target := resolveExtends(s, d.Front.Extends)
if target == nil {
rep.Errorf(Spread, d.Path, at,
"extends указывает на %q, а такого файла в наборе нет", d.Front.Extends)
return
}
if target.Front.Topic != d.Front.Topic {
rep.Errorf(Spread, d.Path, at,
"extends указывает на %q с темой %q, а файл несёт тему %q: слои одной темы объявляют одно имя",
d.Front.Extends, target.Front.Topic, d.Front.Topic)
}
if target.Front.Axis() {
rep.Errorf(Spread, d.Path, at,
"extends указывает на %q, а это не базовый слой: у него объявлена ось", d.Front.Extends)
}
}
// resolveExtends ищет документ по пути, записанному в extends. Путь даётся от
// директории конвенций, поэтому пробуем и его, и путь от корня набора.
func resolveExtends(s *suite.Suite, ref string) *doc.Document {
ref = path.Clean(strings.TrimPrefix(ref, "./"))
for _, d := range s.Docs {
if d.Path == ref || strings.HasSuffix(d.Path, "/"+ref) {
return d
}
}
return nil
}
// checkMechanized ищет метку механизации в тексте конвенции. Механизирована
// норма или нет — свойство репозитория, а не набора, поэтому место отметки —
// локальная часть копии (META-7).
func checkMechanized(s *suite.Suite, d *doc.Document, rep *Report) {
word := s.Vocab.MarkWord(lang.Mechanized)
if word == "" {
return
}
version, hasVersion := versionParagraph(s, d)
d.Prose(func(n int, text string) bool {
if hasVersion && n >= version.Start && n <= version.End {
return true
}
if containsWord(text, word) {
rep.Errorf(Spread, d.Path, n,
"метка %s стоит в тексте конвенции: её место — запись о механизации в локальной части копии", word)
}
return true
})
}
// mdPathRe ловит то, что выглядит путём к файлу набора.
var mdPathRe = regexp.MustCompile(`[\w./-]+\.md`)
// checkCanonPaths ищет путь файла канона в тексте конвенции (META-21). В
// репозитории потребителя конвенция лежит собранной, слои одной темы — секции
// одного файла, и путь `lang/go/logging.md` там не существует: ссылка на него
// умирает при сборке, причём молча — текст остаётся связным.
//
// Инлайн-код здесь не вырезается: путь в бэктиках — тоже путь.
func checkCanonPaths(s *suite.Suite, d *doc.Document, rep *Report) {
for n := d.Body; n <= d.Len(); n++ {
if d.Fenced(n) {
continue
}
for _, candidate := range mdPathRe.FindAllString(d.Line(n), -1) {
target := resolveExtends(s, candidate)
if target == nil && !s.Exists(candidate) {
continue
}
rep.Errorf(Spread, d.Path, n,
"в тексте стоит путь файла канона %q: ссылаются именем темы или идентификатором правила", candidate)
}
}
}
// checkForeignTopicPrefix ищет префикс чужой темы в блоке нормы (META-20).
// Норму правила можно исполнить, имея один этот файл: репозиторий подписывается
// на произвольное подмножество конвенций, и графа зависимостей у него нет.
// Префикс базового слоя своей темы там допустим (META-24) — собранный файл
// начинается с него независимо от выбранных языка и стека.
func checkForeignTopicPrefix(s *suite.Suite, d *doc.Document, rep *Report) {
own := s.Prefix(d)
for _, r := range d.Rules {
for _, norm := range r.Norms() {
for _, ref := range refsIn(d, norm.Start, norm.End) {
if ref.Prefix == own || strings.HasPrefix(ref.Prefix, "X") {
continue
}
target, ok := s.ByPrefix[ref.Prefix]
if !ok {
continue
}
if target.Front.Topic != d.Front.Topic {
rep.Errorf(Spread, d.Path, ref.Line,
"норма %s ссылается на %s из чужой темы %q: наружу смотрит только обоснование",
r.ID(), ref.Text, target.Front.Topic)
continue
}
if target.Front.Axis() {
rep.Errorf(Spread, d.Path, ref.Line,
"норма %s ссылается на %s — слой своей темы, но не базовый: в копию он попадает по манифесту, и гарантии, что он рядом, нет",
r.ID(), ref.Text)
}
}
}
}
}
+118
View File
@@ -0,0 +1,118 @@
package check
import (
"sort"
"git.vakhrushev.me/av/convy/internal/manifest"
"git.vakhrushev.me/av/convy/internal/suite"
)
// Suite прогоняет все проверки набора и возвращает отчёт.
func Suite(s *suite.Suite) *Report {
rep := &Report{}
checkManifest(s, rep)
checkBaseLayers(s, rep)
for _, d := range s.Docs {
checkForm(s, d, rep)
checkLinks(s, d, rep)
if d.Front.Topic != "" {
checkSpread(s, d, rep)
}
}
return rep
}
// checkManifest проверяет сам манифест: форму префиксов, непересечение живого
// с выбывшим, наличие объявленных файлов и отсутствие незарегистрированных.
func checkManifest(s *suite.Suite, rep *Report) {
m := s.Manifest
for _, key := range m.Undecoded {
rep.Warnf(Manifest, manifest.Name, 0, "ключ %s инструменту неизвестен", key)
}
for _, name := range []string{m.Language.Description, m.Language.Reading} {
if name != "" && !s.Exists(name) {
rep.Errorf(Manifest, manifest.Name, 0, "секция [language] объявляет документ %q, а файла нет", name)
}
}
byPath := make(map[string][]string)
for _, prefix := range m.LivePrefixes() {
if err := manifest.ValidPrefix(prefix); err != nil {
rep.Errorf(Manifest, manifest.Name, 0, "%s", err)
}
if m.PrefixRetired(prefix) {
rep.Errorf(Manifest, manifest.Name, 0,
"префикс %s значится и среди живых, и среди выбывших: выбывший не выдаётся повторно", prefix)
}
path := m.Prefixes.Live[prefix]
byPath[path] = append(byPath[path], prefix)
}
for _, path := range sortedKeys(byPath) {
if prefixes := byPath[path]; len(prefixes) > 1 {
sort.Strings(prefixes)
rep.Errorf(Manifest, manifest.Name, 0,
"на файл %q объявлено несколько префиксов (%v): префикс принадлежит файлу", path, prefixes)
}
}
for prefix := range m.Prefixes.Retired {
if err := manifest.ValidPrefix(prefix); err != nil {
rep.Errorf(Manifest, manifest.Name, 0, "среди выбывших: %s", err)
}
}
for _, prefix := range sortedKeys(s.Missing) {
rep.Errorf(Manifest, manifest.Name, 0,
"префикс %s объявлен за файлом %q, а файла в наборе нет", prefix, s.Missing[prefix])
}
for _, path := range s.Unregistered {
rep.Errorf(Manifest, path, 1,
"файл записан языком конвенций, но в манифесте набора не объявлен: для набора его нет")
}
for _, err := range s.Broken {
rep.Errorf(Manifest, manifest.Name, 0, "%s", err)
}
for _, topic := range m.LiveTopics() {
if m.TopicRetired(topic) {
rep.Errorf(Manifest, manifest.Name, 0,
"тема %q значится и среди живых, и среди выбывших", topic)
}
if len(s.Layers(topic)) == 0 {
rep.Errorf(Manifest, manifest.Name, 0,
"тема %q объявлена живой, а слоёв у неё в наборе нет: тема живёт, пока есть хотя бы один слой", topic)
}
}
}
// checkBaseLayers проверяет, что у темы не больше одного слоя без ключей оси.
// Базовый слой единственный: он попадает в копию всегда, и второй такой
// означал бы два базовых текста в одном собранном файле.
func checkBaseLayers(s *suite.Suite, rep *Report) {
for _, topic := range s.Manifest.LiveTopics() {
var base []string
for _, d := range s.Layers(topic) {
if !d.Front.Axis() {
base = append(base, d.Path)
}
}
if len(base) > 1 {
sort.Strings(base)
for _, path := range base[1:] {
rep.Errorf(Spread, path, 1,
"у темы %q больше одного слоя без ключей оси: базовый слой единственный, остальные — %v",
topic, base)
}
}
}
}
func sortedKeys[V any](m map[string]V) []string {
keys := make([]string, 0, len(m))
for k := range m {
keys = append(keys, k)
}
sort.Strings(keys)
return keys
}
+41
View File
@@ -0,0 +1,41 @@
package check
import (
"unicode"
"unicode/utf8"
)
// letterAt отвечает, стоит ли по смещению i буква или цифра. Кириллица в UTF-8
// занимает два байта, поэтому решать по одному байту нельзя.
func letterAt(text string, i int) bool {
if i >= len(text) {
return false
}
r, _ := utf8.DecodeRuneInString(text[i:])
return unicode.IsLetter(r) || unicode.IsDigit(r)
}
// letterBefore отвечает, стоит ли перед смещением i буква или цифра.
func letterBefore(text string, i int) bool {
if i <= 0 {
return false
}
r, _ := utf8.DecodeLastRuneInString(text[:i])
return unicode.IsLetter(r) || unicode.IsDigit(r)
}
func digitAt(text string, i int) bool {
if i >= len(text) {
return false
}
r, _ := utf8.DecodeRuneInString(text[i:])
return unicode.IsDigit(r)
}
func digitBefore(text string, i int) bool {
if i <= 0 {
return false
}
r, _ := utf8.DecodeLastRuneInString(text[:i])
return unicode.IsDigit(r)
}