Приём: гард дедуп-дозаписи хешей (F1) и апгрейд catched-magnet до torrent (F6)
Два дефекта дедуп-веток приёма (ревью Fable 2026-07-08), оба про инвариант
«≤1 активная загрузка на infohash» и сохранность источника.
F1: дедуп-ветка CreateDownloadIfNoActive дописывала все хеши входящего
источника в найденную активную задачу без пер-хеш гарда владения (в отличие
от AddInfohashes). Гибрид {v1,v2}, дедупнувшись на задачу B (владелец v2),
крал v1 у активной A → две активные владели v1. Теперь дозапись под тем же
гардом: хеш, которым владеет другая активная задача, не дописывается.
F6: при дедупе .torrent-байт на пойманную magnet-задачу (catched) байты
выбрасывались, source_type оставался magnet → worker добавлял по magnet-URL →
вечный metaDL → failed (magnet закрытого трекера без DHT метаданные не
докачает). Новый guarded-метод UpgradeCatchedMagnetToTorrent атомарно
сохраняет байты и меняет source_type magnet→torrent, но только пока задача в
catched (worker источник ещё не отдал). Ingest зовёт апгрейд на обоих
дедуп-путях. Это целевое исключение из правила спеки «при дедупе байты не
сохраняем» — оформлено MODIFIED-дельтой ingest.
Схема БД не меняется (download_torrent и source_type уже есть).
Co-Authored-By: Claude Opus 4.8 (1M context) <noreply@anthropic.com>
This commit is contained in:
@@ -65,3 +65,110 @@ func TestTorrentBlobMissing(t *testing.T) {
|
||||
t.Errorf("ожидался ErrNotFound, got %v", err)
|
||||
}
|
||||
}
|
||||
|
||||
// F6: апгрейд пойманного magnet до torrent сохраняет байты и меняет source_type.
|
||||
func TestUpgradeCatchedMagnetToTorrent(t *testing.T) {
|
||||
st := newTestStore(t)
|
||||
ctx := context.Background()
|
||||
d := &Download{SourceType: SourceMagnet, SourceRef: "magnet:?xt=urn:btih:" + hashN(1), State: StateCatched}
|
||||
if _, err := st.CreateDownloadIfNoActive(ctx, d, []string{hashN(1)}, nil); err != nil {
|
||||
t.Fatalf("create: %v", err)
|
||||
}
|
||||
|
||||
blob := []byte("d8:announce…real torrent")
|
||||
upgraded, err := st.UpgradeCatchedMagnetToTorrent(ctx, d.ID, blob)
|
||||
if err != nil || !upgraded {
|
||||
t.Fatalf("upgrade: upgraded=%v err=%v", upgraded, err)
|
||||
}
|
||||
|
||||
got, err := st.GetDownload(ctx, d.ID)
|
||||
if err != nil {
|
||||
t.Fatalf("get: %v", err)
|
||||
}
|
||||
if got.SourceType != SourceTorrent {
|
||||
t.Errorf("source_type = %q, want torrent", got.SourceType)
|
||||
}
|
||||
data, err := st.GetTorrentData(ctx, d.ID)
|
||||
if err != nil {
|
||||
t.Fatalf("get torrent data: %v", err)
|
||||
}
|
||||
if string(data) != string(blob) {
|
||||
t.Errorf("blob = %q, want %q", data, blob)
|
||||
}
|
||||
}
|
||||
|
||||
// Апгрейд применим только в catched: уже добавленный (downloading) magnet не
|
||||
// трогаем — его судьба решается retry/сверкой, а не приёмом.
|
||||
func TestUpgradeSkippedWhenNotCatched(t *testing.T) {
|
||||
st := newTestStore(t)
|
||||
ctx := context.Background()
|
||||
d := &Download{SourceType: SourceMagnet, SourceRef: "m", State: StateDownloading}
|
||||
if _, err := st.CreateDownloadIfNoActive(ctx, d, []string{hashN(2)}, nil); err != nil {
|
||||
t.Fatalf("create: %v", err)
|
||||
}
|
||||
|
||||
upgraded, err := st.UpgradeCatchedMagnetToTorrent(ctx, d.ID, []byte("bytes"))
|
||||
if err != nil {
|
||||
t.Fatalf("upgrade: %v", err)
|
||||
}
|
||||
if upgraded {
|
||||
t.Error("downloading-magnet апгрейдить не должны")
|
||||
}
|
||||
got, err := st.GetDownload(ctx, d.ID)
|
||||
if err != nil {
|
||||
t.Fatalf("get: %v", err)
|
||||
}
|
||||
if got.SourceType != SourceMagnet {
|
||||
t.Errorf("source_type сменился на %q, а не должен", got.SourceType)
|
||||
}
|
||||
if _, err := st.GetTorrentData(ctx, d.ID); !errors.Is(err, ErrNotFound) {
|
||||
t.Errorf("байты не должны сохраняться, got err=%v", err)
|
||||
}
|
||||
}
|
||||
|
||||
// Не-magnet источник апгрейд не трогает (гард source_type=magnet), байты не
|
||||
// перезаписывает.
|
||||
func TestUpgradeSkippedForTorrentSource(t *testing.T) {
|
||||
st := newTestStore(t)
|
||||
ctx := context.Background()
|
||||
d := &Download{SourceType: SourceTorrent, SourceRef: "Rel", State: StateCatched}
|
||||
if _, err := st.CreateDownloadIfNoActive(ctx, d, []string{hashN(3)}, []byte("orig")); err != nil {
|
||||
t.Fatalf("create: %v", err)
|
||||
}
|
||||
|
||||
upgraded, err := st.UpgradeCatchedMagnetToTorrent(ctx, d.ID, []byte("new"))
|
||||
if err != nil {
|
||||
t.Fatalf("upgrade: %v", err)
|
||||
}
|
||||
if upgraded {
|
||||
t.Error("torrent-источник апгрейдить не нужно")
|
||||
}
|
||||
data, err := st.GetTorrentData(ctx, d.ID)
|
||||
if err != nil {
|
||||
t.Fatalf("get torrent data: %v", err)
|
||||
}
|
||||
if string(data) != "orig" {
|
||||
t.Errorf("байты перезаписаны: %q", data)
|
||||
}
|
||||
}
|
||||
|
||||
// Пустые байты — защитный no-op.
|
||||
func TestUpgradeEmptyBlobNoOp(t *testing.T) {
|
||||
st := newTestStore(t)
|
||||
ctx := context.Background()
|
||||
d := &Download{SourceType: SourceMagnet, SourceRef: "m", State: StateCatched}
|
||||
if _, err := st.CreateDownloadIfNoActive(ctx, d, []string{hashN(4)}, nil); err != nil {
|
||||
t.Fatalf("create: %v", err)
|
||||
}
|
||||
upgraded, err := st.UpgradeCatchedMagnetToTorrent(ctx, d.ID, nil)
|
||||
if err != nil || upgraded {
|
||||
t.Fatalf("пустой блоб: upgraded=%v err=%v", upgraded, err)
|
||||
}
|
||||
got, err := st.GetDownload(ctx, d.ID)
|
||||
if err != nil {
|
||||
t.Fatalf("get: %v", err)
|
||||
}
|
||||
if got.SourceType != SourceMagnet {
|
||||
t.Errorf("source_type сменился на %q при пустом блобе", got.SourceType)
|
||||
}
|
||||
}
|
||||
|
||||
Reference in New Issue
Block a user