ranger/core/search.py
Valentin 6e6703d012 Fix: "0 résultats" intermittent — budget de recherche + cache vide trop long
Audit complet du dépôt suite à un signalement de résultats vides
intermittents qui se résolvaient tout seuls après plusieurs minutes.
Deux causes racines identifiées et corrigées :

1. run_search() attendait TOUS les trackers (asyncio.gather sans budget)
   avant de renvoyer quoi que ce soit. Chaque tracker a son propre timeout
   (10-20s), mais un seul tracker capricieux qui va au bout du sien retarde
   toute la réponse — combiné à la récupération des métadonnées (jusqu'à
   20s) et la vérification de disponibilité débrideur (jusqu'à 20s), la
   latence totale pouvait dépasser ce que Stremio tolère côté client,
   donnant un "0 résultat" trompeur qui se résout dès que le tracker
   redevient rapide. Ajout d'un budget global de 15s (asyncio.wait) : les
   trackers pas encore revenus sont abandonnés pour cette requête sans
   bloquer les autres, même principe que le budget déjà en place sur la
   vérification débrideur.

2. Un résultat de recherche VIDE (tracker qui répond 200 avec 0 item lors
   d'un accroc passager, pas une exception) était mis en cache pour le
   TTL_SEARCH complet (30 min par défaut) — verrouillant "aucun résultat"
   pour TOUT LE MONDE sur cette instance partagée jusqu'à expiration, même
   une fois le tracker redevenu normal. Nouveau TTL_SEARCH_EMPTY (3 min par
   défaut, RANGER_TTL_SEARCH_EMPTY) appliqué uniquement aux résultats vides.

Durcissement additionnel (trouvé en auditant les autres appels réseau) :
- Aucune instance aiohttp.ClientSession n'avait de timeout par défaut au
  niveau session ; plusieurs appels dans alldebrid.py/torbox.py/
  stremthru.py/realdebrid.py/debridlink.py (chemin /resolve, au clic sur
  lecture) n'avaient pas de timeout par appel non plus, héritant du défaut
  aiohttp de 300s. Ajout d'un timeout de session par défaut (20s) partout,
  qui n'écrase pas les timeouts par-appel déjà présents.
- Suppression de services/tmdb.py (code mort, jamais importé — remplacé
  depuis le début par core/metadata.py).

Le ping /health toutes les 30s dans les logs est le HEALTHCHECK Docker
normal (urllib.request, cf. Dockerfile), pas un souci.

Co-Authored-By: Claude Fable 5 <noreply@anthropic.com>
2026-07-20 09:30:49 +02:00

209 lines
9.6 KiB
Python

"""
Orchestrateur de recherche : lance en parallèle tous les trackers activés,
avec cache SQLite par tracker. Retourne une liste brute de torrents normalisés.
"""
import asyncio
import logging
from core import cache
from services.unit3d import Unit3DService
from services.ygg import YggService
from services.abn import ABNService
from services.c411 import C411Service
from services.torr9 import Torr9Service
from services.tr4ker import Tr4kerService
from services.nekobt import NekoBTService
from services.nyaa import NyaaService
from services.apibay import ApibayService
from services.eztv import EztvService
from services.torznab import TorznabService
def _search_cache_key(source, stream_type, imdb_id, season, episode, fingerprint=""):
part = f"{stream_type}:{imdb_id}"
if stream_type == "series":
part += f":{season}:{episode}"
if fingerprint:
part = f"{fingerprint}:{part}"
return f"search:{source}:{part}"
async def _cached_search(source, coro_factory, stream_type, imdb_id, season, episode, fingerprint=""):
"""Exécute une recherche avec mise en cache SQLite du résultat brut."""
key = _search_cache_key(source, stream_type, imdb_id, season, episode, fingerprint)
cached = cache.get_search(key)
if cached is not None:
logging.info(f"[{source}] {len(cached)} résultats (cache)")
return cached
try:
results = await coro_factory()
except Exception as e:
logging.error(f"[{source}] erreur: {e}")
return []
results = results or []
for r in results:
r.setdefault("source", source)
cache.set_search(key, results)
logging.info(f"[{source}] {len(results)} résultats (frais)")
return results
async def run_search(config, media_info, stream_type, imdb_id, tmdb_id, season, episode, absolute_episode):
"""Lance toutes les recherches activées et retourne la liste fusionnée brute."""
trackers = set(config.get("trackers") or [])
keys = config.get("tracker_keys") or {}
title = (media_info or {}).get("title", "")
original_title = (media_info or {}).get("original_title", "")
year = (media_info or {}).get("year", "")
is_anime = (media_info or {}).get("is_anime", False)
tasks = []
abn_service = None # référence pour fermeture propre
def add(source, factory, fingerprint=""):
# Enveloppé en Task tout de suite (pas juste une coroutine) : c'est
# nécessaire pour pouvoir annuler les tâches encore en cours si le
# budget global de recherche est dépassé, cf. plus bas.
tasks.append(asyncio.ensure_future(
_cached_search(source, factory, stream_type, imdb_id, season, episode, fingerprint)
))
# NB : chaque lambda binde son service via `s=<svc>` (argument par défaut).
# Sans ce binding, toutes les closures partageraient la même variable et
# taperaient le dernier tracker construit (bug de capture par référence).
# --- UNIT3D (multi-trackers privés) ---
unit3d_cfg = [
{"url": t["url"].rstrip("/"), "token": t.get("key", ""), "categories": []}
for t in (config.get("unit3d") or []) if t.get("url") and t.get("key")
]
if unit3d_cfg:
s = Unit3DService(unit3d_cfg)
fp = cache.fingerprint(*(t["token"] for t in unit3d_cfg))
add("unit3d", lambda s=s: s.search_all(
tmdb_id=tmdb_id, imdb_id=imdb_id, type=stream_type, season=season, episode=episode), fingerprint=fp)
# --- YGG (public, relais Nostr yggleak) ---
if "ygg" in trackers:
s = YggService()
if stream_type == "movie":
add("ygg", lambda s=s: s.search_movie(title, year, original_title=original_title, imdb_id=imdb_id, tmdb_id=tmdb_id))
else:
add("ygg", lambda s=s: s.search_series(title, season, episode, original_title=original_title, imdb_id=imdb_id, tmdb_id=tmdb_id))
# --- ABN (login/mot de passe) ---
abn_cfg = config.get("abn") or {}
if abn_cfg.get("username") and abn_cfg.get("password"):
abn_service = ABNService(username=abn_cfg["username"], password=abn_cfg["password"])
fp = cache.fingerprint(abn_cfg["username"], abn_cfg["password"])
if stream_type == "movie":
add("abn", lambda s=abn_service: s.search_movie(title, year, original_title=original_title), fingerprint=fp)
else:
add("abn", lambda s=abn_service: s.search_series(title, season, episode, original_title=original_title), fingerprint=fp)
# --- C411 (clé API) ---
if "c411" in trackers and keys.get("c411"):
s = C411Service(keys["c411"])
fp = cache.fingerprint(keys["c411"])
if stream_type == "movie":
add("c411", lambda s=s: s.search_movie(title, year, imdb_id=imdb_id, tmdb_id=tmdb_id), fingerprint=fp)
else:
add("c411", lambda s=s: s.search_series(title, season, episode, imdb_id=imdb_id, tmdb_id=tmdb_id), fingerprint=fp)
# --- Torr9 (passkey Torznab) ---
if "torr9" in trackers and keys.get("torr9"):
s = Torr9Service(keys["torr9"])
fp = cache.fingerprint(keys["torr9"])
if stream_type == "movie":
add("torr9", lambda s=s: s.search_movie(title, year, imdb_id=imdb_id, tmdb_id=tmdb_id), fingerprint=fp)
else:
add("torr9", lambda s=s: s.search_series(title, season, episode, imdb_id=imdb_id, tmdb_id=tmdb_id), fingerprint=fp)
# --- Tr4ker (clé API) ---
if "tr4ker" in trackers and keys.get("tr4ker"):
s = Tr4kerService(keys["tr4ker"])
fp = cache.fingerprint(keys["tr4ker"])
if stream_type == "movie":
add("tr4ker", lambda s=s: s.search_movie(title, year, imdb_id=imdb_id, tmdb_id=tmdb_id), fingerprint=fp)
else:
add("tr4ker", lambda s=s: s.search_series(title, season, episode, imdb_id=imdb_id, tmdb_id=tmdb_id), fingerprint=fp)
# --- apibay / ThePirateBay (public, VO) ---
if "apibay" in trackers:
s = ApibayService()
if stream_type == "movie":
add("apibay", lambda s=s: s.search_movie(title, year, original_title=original_title, imdb_id=imdb_id, tmdb_id=tmdb_id))
else:
add("apibay", lambda s=s: s.search_series(title, season, episode, original_title=original_title, imdb_id=imdb_id, tmdb_id=tmdb_id))
# --- EZTV (public, séries VO) ---
if "eztv" in trackers and stream_type == "series":
s = EztvService()
add("eztv", lambda s=s: s.search_series(title, season, episode, imdb_id=imdb_id, tmdb_id=tmdb_id))
# --- Torznab (Jackett/Prowlarr : trackers publics & privés) ---
torznab_cfg = config.get("torznab") or []
if torznab_cfg:
s = TorznabService(torznab_cfg)
fp = cache.fingerprint(*(t.get("url", "") + t.get("apikey", "") for t in torznab_cfg))
if stream_type == "movie":
add("torznab", lambda s=s: s.search_movie(title, year, original_title=original_title, imdb_id=imdb_id, tmdb_id=tmdb_id), fingerprint=fp)
else:
add("torznab", lambda s=s: s.search_series(title, season, episode, original_title=original_title, imdb_id=imdb_id, tmdb_id=tmdb_id), fingerprint=fp)
# --- Trackers anime (uniquement si le média est un anime) ---
if is_anime:
if "nekobt" in trackers and keys.get("nekobt"):
s = NekoBTService(keys["nekobt"])
fp = cache.fingerprint(keys["nekobt"])
if stream_type == "movie":
add("nekobt", lambda s=s: s.search_movie(title, year, imdb_id=imdb_id, tmdb_id=tmdb_id), fingerprint=fp)
else:
add("nekobt", lambda s=s: s.search_series(title, season, episode, imdb_id=imdb_id, tmdb_id=tmdb_id, absolute_episode=absolute_episode), fingerprint=fp)
if "nyaa" in trackers:
s = NyaaService()
if stream_type == "movie":
add("nyaa", lambda s=s: s.search_movie(title, year, imdb_id=imdb_id, tmdb_id=tmdb_id))
else:
add("nyaa", lambda s=s: s.search_series(title, season, episode, imdb_id=imdb_id, tmdb_id=tmdb_id, absolute_episode=absolute_episode))
if not tasks:
return []
# Budget global : chaque tracker a déjà son propre timeout (10-20s), mais
# asyncio.gather attend TOUS les trackers avant de renvoyer quoi que ce
# soit — un seul tracker lent qui va au bout de son timeout retarde toute
# la réponse, même si les autres ont déjà répondu en 1s. Ça peut pousser
# la latence totale (métadonnées + recherche + dispo débrideur) au-delà
# de ce que Stremio tolère côté client, avec un "0 résultat" trompeur qui
# se résout tout seul dès que le tracker capricieux redevient rapide.
# On coupe donc court à 15s : les trackers pas encore revenus sont
# abandonnés pour cette requête (ils redeviendront rapides tout seuls
# au prochain essai), les autres résultats sont quand même renvoyés.
try:
done, pending = await asyncio.wait(tasks, timeout=15)
for t in pending:
t.cancel()
results_list = []
for t in tasks:
if t in done:
try:
results_list.append(t.result())
except Exception as e:
results_list.append(e)
else:
results_list.append(TimeoutError("budget de recherche dépassé"))
finally:
if abn_service:
await abn_service.close()
merged = []
for results in results_list:
if isinstance(results, Exception):
logging.error(f"Tâche de recherche échouée: {results}")
continue
merged.extend(results)
logging.info(f"Recherche totale : {len(merged)} torrents bruts")
return merged