Passer au contenu principal

​
Vue d’ensemble

Devin est votre assistant infatigable pour le web scraping. Il peut créer des scrapers web ou même effectuer lui‑même des tâches répétitives de recherche et de collecte d’informations sur le web !

​
Cas d’usage

  1. Web scraping et collecte de données
  2. Extraction automatisée de données
  3. Conversion des données extraites en formats structurés
  4. Prise en charge de contenu web statique et dynamique
  5. Automatisation du navigateur pour les tâches répétitives
  6. Création de pipelines automatisés de collecte de données à l’aide de la référence de l’API

​
Exemples de prompts

Extraire des emojis
Utilisez ce dépôt (https://github.com/muan/unicode-emoji-json) pour écrire une fonction qui convertit une chaîne comme https://www.gstatic.com/android/keyboard/emojikitchen/20201001/u1f600/u1f600_u2615.png en "grinning_face_warm_beverage", en extrayant les 2 emojis (u1f600, u2615) et en les convertissant en emojis réels.
Scraper un site web
## Présentation
Ce guide peut être utilisé pour scraper un site web et renvoyer les résultats à l’utilisateur, ainsi que les scripts de scraping côté client et côté serveur utilisés pour générer ces résultats.
Télécharger des logos
Veuillez rechercher et télécharger les logos de 50 entreprises du classement Fortune 500.

​
Exemples de sessions

​
Traitement des données d’emojis

Extraction d’emojis Découvrez comment analyser et convertir les données Unicode d’emojis provenant de dépôts GitHub en formats lisibles. Cette session montre comment travailler avec des sources de données JSON et la manipulation de chaînes de caractères pour le traitement des emojis. https://app.devin.ai/sessions/4f8a7b129820493b9c0ca140cddede50

​
Extraction de contenu YouTube

Extraction d’une playlist YouTube Découvrez comment extraire par programmation les métadonnées des vidéos à partir de playlists YouTube. Cette session explique comment utiliser Python pour accéder aux titres, descriptions et autres informations de playlist, tout en respectant les conditions d’utilisation de YouTube. https://app.devin.ai/sessions/8c6edbbb0bce4b70acd09255e1994c0b

​
Collecte de données e-commerce

Extraction de données eBay Découvrez des techniques pour collecter des informations sur les produits à partir des annonces eBay à grande échelle. Cette session explore des approches de web scraping automatisé pour recueillir les prix, les descriptions et les informations sur les vendeurs, tout en gérant la pagination et les limitations de débit. https://app.devin.ai/sessions/dc70fe0649cb4041852da384e65d42be