nico/metalfrom.eu
1
0
Fork 0
Code Issues Pull requests Projects Releases Packages Wiki Activity Actions 1
Metal from Europe — carte interactive des groupes de metal européens (frontend statique + API Node.js + PostgreSQL/PostGIS + geocoder)
34 commits 2 branches 0 tags 4.4 MiB
JavaScript 52.3%
HTML 20.2%
CSS 16.3%
Python 9.9%
PLpgSQL 0.8%
Other 0.5%
Find a file
Nicolas Fryder ca45697207 feat(crawler): priority queue + délais réduits (1.5-2.5s) + limit 500 
- BAND_MIN_DELAY: 2.5→1.5s, BAND_MAX_DELAY: 5.0→2.5s (avg 2s/band)
- ENRICH_LIMIT: 200→500 (configurable via CRAWLER_ENRICH_LIMIT)
- get_bands_to_enrich: remplace la queue FIFO simple par une file de
  priorité à 4 niveaux :
    1. Nouveaux bands (band_page absent)
    2. Modifiés depuis dernier enrichissement (updated_at > crawled_at + 1min)
    3. Héritage ancien scraper (crawled_at IS NULL, band_page présent)
    4. Stale (crawled_at < now() - 30 days)
- Suppression de get_bands_stale() (logique absorbée par la queue)

Objectif : ~17 jours pour réenrichir les 103k bands
(6000 bands/jour à raison de 500/run × 12 runs/24h)

Co-Authored-By: Claude Sonnet 4.6 <noreply@anthropic.com>
2026-06-30 21:05:17 +02:00
apps feat(crawler): priority queue + délais réduits (1.5-2.5s) + limit 500 2026-06-30 21:05:17 +02:00
infra feat(db): système de migrations SQL + refonte schéma 2026-06-27 15:09:35 +02:00
.gitignore fix: exclure .claude du tracking git 2026-06-27 11:35:14 +02:00
docker-compose.dev.yml fix(network): remettre coolify external network + compose_parsing_version=5 2026-06-27 16:44:09 +02:00
docker-compose.yml fix(network): remettre coolify external network + compose_parsing_version=5 2026-06-27 16:44:09 +02:00
README.md test deploy 4 2026-06-27 14:05:50 +02:00

README.md

Stack metalfrom.eu

test 4