mrwnslz
bbe5f6c5c2
- Bedingter Abruf: ETag/Last-Modified werden nach einer 200 gespeichert und als If-None-Match/If-Modified-Since mitgeschickt. Bei 304 wird nichts geparst und keine Folge geschrieben, nur last_refreshed_at aktualisiert und der Fehler gelöscht. Teilen sich mehrere Abos eine URL, gehen die Validatoren nur mit, wenn alle schon einmal abgerufen wurden und dieselben haben. - Fehler (Netz, HTTP >= 400, kein Feed) landen in last_error, last_error_at und error_count; ein erfolgreicher Abruf setzt sie zurück. Feed-Liste und /podcasts/state/ liefern die drei Felder mit. - Dauerhafte Weiterleitungen (301/308 am Anfang der Kette) ändern rss_url, außer der Nutzer hat die neue URL schon abonniert; 302/307 ändern nichts. - Backoff im stündlichen Job: ab 3 Fehlern in Folge nur alle 2, 4, 8, 16, höchstens 24 Stunden. „Alle aktualisieren“ und --feed-id versuchen es trotzdem (max_age gilt weiter). - _fetch_feed liefert jetzt ein FeedFetch-Objekt bzw. wirft FeedFetchError. - Migration 0007_feed_http_cache. Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
34 lines
1.3 KiB
Python
34 lines
1.3 KiB
Python
from django.core.management.base import BaseCommand
|
|
from django.utils import timezone
|
|
|
|
from podcasts.models import PodcastFeed
|
|
from podcasts.views import _in_backoff_q, _refresh_feeds
|
|
|
|
|
|
class Command(BaseCommand):
|
|
help = 'Refresh podcast feeds (fetch new episodes from RSS)'
|
|
|
|
def add_arguments(self, parser):
|
|
parser.add_argument('--feed-id', type=int, help='Refresh only this feed ID (even when backing off)')
|
|
parser.add_argument('--limit', type=int, default=0, help='Max number of feeds to refresh')
|
|
|
|
def handle(self, *args, **options):
|
|
qs = PodcastFeed.objects.all().order_by('last_refreshed_at')
|
|
|
|
if options['feed_id']:
|
|
qs = qs.filter(pk=options['feed_id'])
|
|
else:
|
|
# A feed failing 3+ times in a row is tried every 2, 4, 8, 16,
|
|
# at most 24 hours instead of every hour.
|
|
qs = qs.exclude(_in_backoff_q(timezone.now()))
|
|
|
|
if options['limit']:
|
|
qs = qs[: options['limit']]
|
|
|
|
if not qs.exists():
|
|
self.stdout.write('No feeds to refresh.')
|
|
return
|
|
|
|
# Parallel downloads, one per distinct feed URL (see _refresh_feeds).
|
|
refreshed, failed, new = _refresh_feeds(qs)
|
|
self.stdout.write(f'{refreshed} feeds refreshed, {failed} failed, +{new} episodes')
|