DoorDash Dataset: Kit de datos del sector de la comida para llevar

¿Es difícil recopilar datos sobre la comida para llevar?

Cualquiera que tenga un negocio de comida a domicilio sabe que es más difícil que nunca llegar al fondo de tus competidores. Especialmente en plataformas como DoorDash, donde la protección de datos es muy estricta. La semana pasada, un antiguo cliente de una pizzería se quejó conmigo de que su operación familiar transcribía manualmente la información de los competidores y, como resultado, la cuenta se bloqueó al día siguiente, por lo que estaba ansioso por saltar directamente a sus pies.

Es hora de sacar nuestroIP proxyEl arma mágica. Por ejemplo, si quieres recoger el rango de entrega de las hamburgueserías de la ciudad, si utilizas tu propia red para hacer solicitudes repetidamente, la prevención de incendios de DoorDash te etiquetará como "robot" en cuestión de minutos. Pero si cambias tu dirección IP cada vez que haces una petición, es como si una persona diferente visitara la tienda, y la plataforma ni siquiera notará la anomalía.

importar peticiones
from ipipgo import get_proxy Aquí se llama al SDK de ipipgo.

def fetch_menu(tienda_id):
    proxies = {
        "http": get_proxy("residencial"), usar proxy residencial para más realismo
        "https": get_proxy("residencial")
    }
    url = f "https://api.doordash.com/v2/stores/{store_id}/menu"
    headers = {"User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64)"}

    try: response = requests.get(url)
        response = requests.get(url, headers=cabeceras, proxies=proxies, timeout=10)
        return respuesta.json()
    except Exception as e.
        print(f "Error de rastreo: {str(e)}")
        return Ninguno

Mala elección de la IP proxy, la recogida de datos es en vano.

Proveedores de servicios proxy en el mercado son una bolsa mixta, he visto la más lamentable es una cierta pretensión de millones de IP de la piscina, el resultado es que 15 de cada 20 solicitudes son identificados por DoorDash. Más tarde, he cambiadoipipgo(utilizado como expresión nominal)IP residencial dinámicaEl efecto es inmediato. Tienen un truco único - control de tiempo de supervivencia IP es el mismo que los usuarios reales, no habrá acaba de registrar en el pie delantero después de que el pie desconectado vergüenza.

Caso práctico: supervisión de platos emergentes con ipipgo

El año pasado, ayudé a una cadena de sushi a realizar un análisis de la competencia y querían controlar en tiempo real todos los restaurantes de hibachi situados en un radio de 10 km.Nuevos productos en las estanteríasresponder cantandoPromociones. Funcionamos así:

1. Adopción de ipipgo'sPosicionamiento IP a nivel de ciudadLos siguientes son algunos ejemplos de cómo garantizar que cada solicitud proceda de la zona destinataria
2. Configura la dirección IP para que cambie cada 5 minutos
3. Con la tecnología de camuflaje de huellas dactilares del navegador (más sobre esto la próxima vez)
4. Identificación automática de los cambios de menú y activación de alertas por correo electrónico

Resultó que la semana siguiente pillamos a nuestros competidores empujandoPaquete de 9,90El cliente ajustó inmediatamente su oferta de mediodía y la facturación aumentó en 23% ese mes.

Una sesión de GC imprescindible para principiantes

P: ¿Es legal recopilar datos con una IP proxy?
R: Mientras no craquees el sitio web ni robes información de los usuarios, recopilar datos públicos es como mirar una calle a través de un telescopio, y está perfectamente bien. Por supuesto, depende de los términos y condiciones de la plataforma, y se recomienda consultar a un asesor legal antes de la recopilación.

P: ¿Por qué recomienda ipipgo?
R: Tres razones de peso: ① Su reserva de IP cubre.Más de 200 países②En exclusivaGarantía de éxito de las solicitudesEl número de horas es menor que 95% automáticamente ③ respuesta de servicio al cliente es más rápido que la comida para llevar, el último problema 3 am orden de trabajo, 5 minutos para recibir la solución.

P: ¿A qué detalles debo prestar atención al cobrar?
R: ¡Concéntrate! ① controlar la frecuencia de las solicitudes, que no parezca un ataque DDoS ② aleatorización del intervalo de funcionamiento, el orden real que no es tan puntual ③ limpieza regular Cookies, no dejes que la plataforma para recordar sus "huellas digitales".

Guía para evitar trampas: No pise estas minas

Recientemente, he descubierto que algunos de mis compañeros han caído presa de laPureza IPSobre. Un amigo que hacía análisis de datos compró un proxy barato de segunda mano, y como resultado la cuenta de DoorDash se bloqueó en masa. Más tarde cambió a ipipgo'sPaquete IP exclusivoEs la única manera de solucionar el problema, es más caro pero te ahorras la pérdida de estar bloqueado.

Un último consejo: no crea a los que dicen ser"Permanentemente eficaz"de IPs proxy, simplemente no hay un método único en este negocio. Se recomienda elegir un proxy como ipipgo que puedeCambio de IP en tiempo realEl servicio es como poner una campana de oro a la recogida de datos, que es segura y sin complicaciones.