Proxy para Reddit

Qué hace Reddit ahora

• Rechaza de plano la ruta JSON sin autenticar. Lo probamos desde una dirección de centro de datos: la página normal del subreddit devolvió 200 mientras que la misma ruta con .json añadido devolvió 403, tres veces seguidas, tanto con un user agent de navegador como con uno descriptivo. La dirección estaba bien. El endpoint está cerrado. Puedes repetirlo con dos comandos curl.
• Prohíbe todo rastreo en robots.txt. El archivo contiene ahora mismo una regla con user-agent comodín y un disallow sobre el sitio entero, y remite a una política de contenido público. Eso es una postura declarada, no un obstáculo técnico, y rotar direcciones no la toca en absoluto.
• Cuenta el uso de la API contra tu cliente OAuth registrado, y sus normas se reservan el derecho de fijar y aplicar esos límites. El uso comercial, o la investigación por encima de los límites, está redactado como algo que exige un acuerdo aparte con Reddit.
• Te exige que no ocultes quién eres. Las normas de la Data API dicen que debes usar los datos de acceso que te entregaron y que no debes tergiversar ni enmascarar el user agent ni la identidad OAuth. Esa frase merece leerse dos veces antes de comprar nada de esta página.

Cómo configurarlo

Reddit no tiene ajuste de proxy. El proxy va en tu cliente de API, o en el perfil de navegador que aloja la cuenta.

# Un cliente de API registrado, PRAW, a través de una dirección estática:
# PRAW usa requests, así que valen las variables de entorno habituales
export HTTPS_PROXY="http://login:password@198.51.100.20:50100"

# Reddit pide un user agent descriptivo y sus normas prohíben falsearlo:
# platform:app-id:version (by /u/your-username)

# La prueba de la sección anterior, repítela tú:
curl -o /dev/null -w "%{http_code}\n" https://www.reddit.com/r/programming/
curl -o /dev/null -w "%{http_code}\n" https://www.reddit.com/r/programming/hot.json

# Perfil de navegador antidetect para una cuenta, un número de sesión cada una:
socks5://login_c_US_s_9_ttl_1h:password@proxy.sotaproxy.com:10000

• Una dirección por cuenta si deben estar desconectadas. Esta es la parte de un montaje en Reddit que un proxy arregla de verdad.
• Pon un user agent honesto y descriptivo en cualquier cliente de API. Reddit lo pide y sus normas prohíben enmascararlo, así que no hay nada que ganar siendo listo aquí.
• Mantén cada cuenta en el país en que se creó, y ajusta a él el perfil del navegador.
• No planifiques un presupuesto de recolección alrededor del endpoint JSON. Verifica antes el comportamiento actual tú mismo con los dos comandos de arriba.

Lo que un proxy no hará aquí

No reabrirá el endpoint JSON sin autenticar, no subirá un límite contado contra tu cliente OAuth, no cambiará lo que dice robots.txt y no hará admisible enmascarar tu identidad cuando las normas que aceptaste lo prohíben. Lo que sí hace es mantener separadas cuentas distintas y llevarte a Reddit desde redes que lo bloquean. Ese es su alcance honesto. Esto no es asesoramiento legal, y las fuentes de abajo están para que compruebes la postura en lugar de aceptar la nuestra.

Preguntas que la gente escribe de verdad

De dónde salen las afirmaciones de arriba

Una de las afirmaciones de esta página es una medición nuestra y no un documento, y se señala como tal en el texto. Todo lo demás es Reddit describiendo su propia postura.

• robots.txt de RedditLo bastante corto como para leerlo entero. Una regla con user-agent comodín y un disallow sobre el sitio completo, más un puntero a la política de contenido público. Merece abrirse antes de planificar cualquier recolección, porque es el sitio diciéndoles a los clientes automáticos qué quiere.
• Normas de la Reddit Data APILa sección 2.8 exige usar los datos de acceso que te entregaron y no tergiversar ni enmascarar el user agent ni la identidad OAuth. La 3.2 prohíbe sortear o exceder los límites documentados. La 3.1 deja el uso comercial, y la investigación por encima de los límites, detrás de un acuerdo aparte con Reddit.
• Referencia de la API de RedditLa documentación de los endpoints. Útil para confirmar qué ofrece la ruta oficial, que es la comparación que merece hacerse antes de decidir esquivarla.