Je vais créer votre web scraper sur-mesure

0 vente

Proposé par YacineTouati Professionnel 4 ventes au total Disponible sur ComeUp Direct

## PLAT PRINCIPAL: LA DONNEE EN SOURCE OUVERTE

Le web est la base de donnée ouverte la plus importante au Monde, étant développeur fullstack depuis 6 ans, je peux vous aider à récolter la donnée dont vous avez besoin pour votre piloter votre activité !

En tant que consultant informatique, je constate que les business qui ont le plus chances de se démarquer de la concurrence sont ceux qui ont la donnée de la meilleure qualité et au meilleur moment... A cet effet, je vais:

- créer pour vous un scraper qui extraira des données en source ouverte sur 5 URLs de votre choix (par exemple sitea/url1, siteb/url, sitea/url2, etc.)
- programmer la fréquence à laquelle il doit être exécuté (toutes les minutes, heures, etc.)
- sauvegarder les données scrapées dans une base de données de votre choix (MongoDB, PostgreSQL, etc.)
- implémenter un système de backups régulier, sur un bucket Cloud (type AWS S3, GCP bucket, etc.), de vos données extraites

Les prérequis pour vous permettre dès aujourd'hui de collecter de la donnée de qualité sont:

- que vous disposiez des ressources nécessaires en termes de compute (que ce soit du serverless, un VPS, etc.) afin que je puisse déployer votre scraper
- que vous disposiez d'une base de données hébergée par vos soins ou via le Cloud afin que je puisse y sauvegarder les données extraites par votre scraper
- que les URLs que vous voulez scraper ne soient pas derrière un mécanisme anti-bots type CloudFlare
- que votre scraping soit éthique, c'est-à-dire que le nombre de requêtes effectuées sur le site dont les données sont extraites ne soient pas excessif, et que vous respectiez les règles de copyright applicables audit site
- (optionnel): une clé API d'IA (OpenAI, Gemini, Claude, etc.) pour accélérer le processus de scraping

## AJOUTEZ UNE PINCEE d'IA et d'automatisation

En option, je peux vous aider à:

- créer ou configurer le déploiement de votre scraper (VPS ou setup de Cloud Run sur la Google Cloud Platform) et la création d'une instance de base de données relationnelle ou document pour persister les données => 1h de formation/assistance incluse
- augmenter les données extraites en y ajoutant un champ "sentiment", qui va vous permettre de labelliser chaque item scrapé avec un sentiment parmi un jeu de sentiments de votre choix (cette option requiert que vous ayez une clé API chez l'un des providers connus d'IA type OpenAI ou bien que vous ayez un serveur assez puissant pour faire tourner llama3)
- augmenter votre scraper avec un comportement "agentique": la donnée scrapée à l'instant T répond à un critère X ? le scraper l'élément scrapé en tant que JSON à un webhook de votre choix (cette option requiert aussi une clé d'API d'IA)
- une autre automation agentique en option: si la donnée scrapée à l'instant T répond à un critère X, vous recevez un email ou un SMS (le prérequis pour cela est que vous disposiez d'une clé d'API de messagerie)
- un créneau d'1h avec vous en visioconférence via ComeUp Direct pour vous guider dans la création de votre serveur ou de votre container serverless sur le GCP, la configuration de votre base de données, et répondre à vos questions sur le produit livré

Souhaitez-vous augmenter les données extraites par votre scraper ?
Je peux vous aider en utilisant un LLM (comme ChatGPT) pour effectuer des tâches de classification de sentiment, déclencher une action dans votre système, envoyer un message, etc. lorsque vous collectez de la donnée.
Par exemple, vous souhaitez classifier le sentiment des actualités vis-à-vis de telle marque à chaque fois que ces actualités sont collectées ? je peux implémenter un champ spécifiant le sentiment dans le funnel d'extraction de données en utilisant l'un des nombreux LLMs du marché.

Je vais créer votre web scraper sur-mesure

  • 135,00 €

Options supplémentaires

Tous les prix sont H.T et hors frais bancaires. Le prix définitif est calculé sur la page de paiement.

  1. Commandez le
    service de votre choix
    à l’un de nos vendeurs
  2. Échangez par chat sur le
    site jusqu’à la livraison en toute sécurité
  3. Le vendeur n’est payé que\ lorsque vous validez la livraison

À propos du vendeur

YacineTouati Il y a 20 heures

“Je suis un développeur de logiciels optimiste et passionné par le Futur, la résolution de problèmes, la technologie, l'IA, le génie logiciel et le développement web.”

  • Vendeur professionnel
  • Temps de réponse moy. —
  • Commande en cours 0
  • Ventes au total 4
  • Vendeur depuis Janv. 2022
En savoir plus