Fournisseur de données financières|Stock Forex Historical Data API

Quiconque travaille avec des données financières sait que vous avez déjà marché dans l'un de ces nids-de-poule ?

Un ami qui fait du trading quantitatif s'est récemment plaint à moi que lorsqu'il utilisait l'API d'un fournisseur de données pour télécharger des cotations historiques, il était déconnecté trois fois de suite. Ce qui est encore plus ennuyeux, c'est qu'il a changé le réseau de trois sites différents de son entreprise, et que tous ont été reconnus comme étant le même utilisateur - il s'est avéré que le fournisseur de données avait bloqué l'IP du segment de réseau de l'ensemble de l'entreprise.

Cette situation n'est que trop fréquente. De nombreuses plateformes de données financières sont chargées deSystème intelligent de contrôle des risquesIl s'agit d'un organisme spécialisé dans la surveillance de ces questions :
- Récupération fréquente de données à partir de la même adresse IP
- Plusieurs comptes partagent l'IP
- Demandes de données en dehors des heures normales
- Saut IP intergéographique

L'année dernière, un ami de la stratégie d'arbitrage sur le marché des changes a connu une situation encore pire, car l'adresse IP révèle l'emplacement du bureau, ce qui a conduit le fournisseur de données à suspendre directement son compte d'entreprise, la raison étant "suspecté de violation de l'utilisation des données à travers la région".

Que peut vraiment faire un proxy IP ? Ne vous fiez pas au nom.

Beaucoup de gens pensent que l'IP proxy est un outil qui permet de changer l'armure du cheval, mais en fait, dans le domaine des données financières, on peut jouer avec ce genre de choses. Prenons l'exemple du service à domicile d'ipipgo.IP résidentielle statique de longue duréeIl est particulièrement adapté aux scénarios qui nécessitent un accès stable aux données historiques.

La semaine dernière, pour aider un fonds d'investissement privé avec ses services, j'ai trouvé un détail : les IP d'ipipgo sont avec les attributs réels du haut débit domestique, ajustant l'API lorsque les empreintes digitales de l'appareil du côté du fournisseur de données sont plus "propres", il n'est pas facile de déclencher le contrôle de l'énergie éolienne.

Choisissez une IP proxy en examinant ces portes d'entrée

Il existe une pléthore de fournisseurs de services proxy sur le marché, mais vous ne pouvez vraiment pas vous contenter de l'élément de données financières. Examinons quelques points sur lesquels il est facile de s'appuyer :

1) Le niveau d'anonymat est insuffisant :L'année dernière, j'ai vu une plateforme utiliser un proxy transparent, ce qui a eu pour effet de révéler l'adresse IP réelle lorsque l'API a été accordée, et elle a été directement occultée par le fournisseur de données.

2. les questions de pureté de l'IP :Certaines adresses IP de proxy bon marché sont depuis longtemps considérées comme des "adresses IP de centre de données" par les grandes plateformes de données, et ce type d'API de réglage des adresses IP équivaut à un suicide.

3. une prise en charge incomplète du protocole :Il est important d'avoir un double support de protocole pour socks5 et https comme ipipgo's home, les API de certains fournisseurs de données ne reconnaissent que des protocoles spécifiques.

Voici la solution utilisée par notre équipe : ipipgo'sCanal dédié aux données financières. Ils disposent d'une fonction très intéressante : le service d'échauffement de l'IP. Simulez le comportement normal de l'utilisateur pour augmenter le nombre avant que la nouvelle IP ne soit activée, et attendez que le système de contrôle des vents du fournisseur de données relâche sa vigilance avant de commencer à ajuster formellement les données.

Apprenez à faire correspondre l'agent à l'API !

Si l'on prend l'exemple de l'appel Python à l'API Forex Historical Data, il est en fait très facile d'utiliser le service proxy d'ipipgo :

demandes d'importation

proxies = {
    'http' : 'http://用户名:密码@gateway.ipipgo.com:端口',
    'https' : 'http://用户名:密码@gateway.ipipgo.com:端口'
}

response = requests.get(
    'https://api.financedata.com/v1/historical',
    proxies=proxies, params={'symbol' : 'EURUSD', 'interval' : '1h'}
    params={'symbol' : 'EURUSD', 'interval' : '1h'}
)

Il est essentiel de noter ces points :
1) IP d'exportation fixe pour chaque compte de données
2. contrôler la fréquence des demandes pour qu'elle ne soit pas trop régulière (il est recommandé d'ajouter des délais aléatoires)
3. remplacement périodique des en-têtes User-Agent
4. les opérations importantes utilisent le protocole HTTPS

L'arrière-plan d'ipipgo permet de voir l'état du proxy en temps réel, ce qui est particulièrement utile pour le dépannage. La dernière fois, un client a toujours perdu des données futures, et a découvert par la suite que le problème provenait de l'opérateur local, ce qui a permis de passer immédiatement au nœud de secours d'ipipgo.

Foire aux questions QA

Q : Dois-je maintenir mon propre pool d'adresses IP ?
R : Ce n'est pas nécessaire, l'arrière-plan d'ipipgo peut gérer automatiquement le cycle de vie de l'IP, atteindre le nombre d'appels ou la durée sera automatiquement remplacé, mais conservera également la liste blanche commune de l'IP.

Q : Est-il légal d'utiliser une procuration ?
R : L'utilisation d'une adresse IP proxy n'est pas illégale tant que vous respectez les règles d'appel API du fournisseur de données. Cependant, n'utilisez pas de proxy pour contourner la validation payante !

Q : Combien de demandes simultanées peuvent être prises en charge ?
R : La version entreprise d'ipipgo prend en charge le polling multi-IP, et nous avons testé qu'un seul compte avec 20 requêtes par seconde a fonctionné de manière stable pendant 3 heures sans être soumis au contrôle des vents.

Q : Quels sont les nœuds régionaux pris en charge ?
R : Outre les nœuds européens et américains communs, la famille dispose de ressources exclusives en Asie du Sud-Est, et les amis qui souhaitent obtenir des données sur les marchés émergents peuvent se concentrer sur cette région.

Enfin, un cas concret : une équipe quantitative utilisant des agents ordinaires pour ajuster des données boursières a vu son compte bloqué 17 fois en l'espace de trois mois. Après le passage à la solution personnalisée d'ipipgo, non seulement il n'y avait aucune trace de blocage, mais la vitesse de réponse de l'API était également plus rapide de 40%. Parfois, les choses professionnelles doivent vraiment être laissées aux outils professionnels.