56a8ea09be
Some checks failed
QA Gate (P0/P1) / Test affected app (pull_request) Has been cancelled
Faz 1 / adım 2 (analiz: /home/s/ss/plv2.md, bulgular consumers_jobs-03/06/07,
deploy_ops-13).
SORUN: İki PL24 hesap banı da günde 5-7 bin kategori yazan (≈10 bin+ istek)
otomatik drill dalgalarının ardından geldi; gerçek kullanıcı decode'u ≤14/gün.
Mevcut korumaların hepsi iş-seviyesinde (iş/dk, iş/gün) — HTTP isteği sayan
hiçbir tavan yoktu. Üstelik PL24 çağrıları `proxy_logs`'a hiç yazılmıyordu
(yalnız pcat/emex), bu yüzden hacim ancak ban'dan SONRA, DB satır sayılarından
geriye dönük çıkarılabildi. Kill switch de yalnız decodeVin'i kapatıyordu; drill,
backfill ve katalog gezinmesi "kapalı" kaynağa istek atmaya devam ediyordu.
DEĞİŞİKLİK:
- Yeni `PL24BudgetService`: tüm PL24 upstream trafiği için tek geçit.
- Günlük sayaç `pl24:http:<gün>` (Redis, 8 gün TTL); tavan `PL24_HTTP_DAILY_MAX`
(varsayılan 1200).
- Kullanıcı rezervi `PL24_HTTP_USER_RESERVE` (varsayılan %40): backfill tavanın
%60'ında durur, kullanıcı decode'u sonuna kadar akar — kaçak bir backfill
müşteriyi asla aç bırakamaz. Lane ayrımı mevcut `isBackfillContext()` ile.
- Reddedilen çağrı ağa hiç çıkmaz ve telemetriye yazılmaz.
- Redis düşerse fail-open (auth/katalog telemetri yüzünden bloklanmaz).
- Telemetri: `ProxyServiceLeg` += `pl24_http`, `pl24_auth`. Login, authorize ve
tüm katalog fetch'leri `proxy_logs`'a yazıyor (provider dataimpulse/none,
sessionKey=hesap, status, süre, 403/429 → banned, taşıma hatası sınıflandırma).
Artık "hangi gün kaç istek attık, ilk 401/403 ne zaman başladı" sorusu
ban'dan ÖNCE yanıtlanabilir.
- Kill switch yayıldı: `kill-source-pl24` artık `budgetedFetch` içinde, yani
decode + drill + backfill + browse + görsel indirme dahil TÜM katalog trafiğini
kapatıyor (eskiden yalnız decodeVin).
- `fetchWithRetry` 401 çaresi netleşti: yalnız servis token'ı tazelenir; oturumun
kendisi gerekirse auth katmanında düşürülür.
Test: yeni `pl24-budget.service.spec.ts` (9 test: tavan, kullanıcı rezervi,
reddedilen çağrının ağa çıkmaması, Redis fail-open, telemetri biçimi/leg ayrımı,
ban sinyali, taşıma hatası sınıflandırma). Etkilenen paketler: 197 test geçti.
tsc + biome temiz.
Co-Authored-By: Claude Opus 5 (1M context) <noreply@anthropic.com>
31 lines
981 B
TypeScript
31 lines
981 B
TypeScript
import { Module } from "@nestjs/common";
|
|
import { ProxyTelemetryModule } from "../proxy-telemetry/proxy-telemetry.module";
|
|
import { PL24AuthService } from "./pl24-auth.service";
|
|
import { PL24BudgetService } from "./pl24-budget.service";
|
|
import { PL24FordLegacyService } from "./pl24-ford-legacy.service";
|
|
import { PL24FordService } from "./pl24-ford.service";
|
|
import { PL24HyundaiKiaService } from "./pl24-hyundai-kia.service";
|
|
import { PL24OpelService } from "./pl24-opel.service";
|
|
import { PL24PsaService } from "./pl24-psa.service";
|
|
import { PL24VolvoService } from "./pl24-volvo.service";
|
|
import { PL24Service } from "./pl24.service";
|
|
|
|
const PL24_PROVIDERS = [
|
|
PL24Service,
|
|
PL24AuthService,
|
|
PL24BudgetService,
|
|
PL24FordLegacyService,
|
|
PL24PsaService,
|
|
PL24VolvoService,
|
|
PL24FordService,
|
|
PL24OpelService,
|
|
PL24HyundaiKiaService,
|
|
];
|
|
|
|
@Module({
|
|
imports: [ProxyTelemetryModule],
|
|
providers: PL24_PROVIDERS,
|
|
exports: PL24_PROVIDERS,
|
|
})
|
|
export class PL24Module {}
|