Transformez n'importe quelle page web en texte propre.
Danubia est une API de scraping et d'extraction de contenu pour développeurs. Envoyez une URL et recevez du markdown propre, à la demande ou en lot.
Une requête. Du texte propre en retour.
Requête
curl -X POST https://app.danubia.tech/api/v1/demo \ -H "Content-Type: application/json" \ -d '{"url": "https://github.com/trending"}'Réponse en direct
Appuyez sur Lancer pour récupérer une vraie page.
Des données prêtes pour les LLM
Le contenu principal de la page en markdown propre, en HTML ou en texte brut, accompagné de métadonnées structurées, prêt à nourrir vos modèles, index et agents.
Poli par conception
robots.txt respecté et appliqué, avec des limites de concurrence strictes par domaine. Nous crawlons comme les sites veulent être crawlés.
Conçu dans l'UE 🇪🇺
Des serveurs dans l'Union européenne, conformes au RGPD par défaut. Vos données ne quittent jamais l'Union.
Cas d'usage
Ce que vous pouvez construire avec Danubia
Si votre produit a besoin de contenu web, Danubia le récupère et le nettoie pour le RAG, l'agrégation et les jeux de données.
Alimentez votre pipeline RAG
Envoyez une URL et recevez du markdown propre, débarrassé des pubs, de la navigation et des contenus répétitifs — exactement ce dont vos embeddings et agents ont besoin.
Agrégez du contenu de partout
Rassemblez des articles propres depuis des dizaines de sources dans un seul flux, sans écrire de scraper par site.
Créez des jeux de données
Envoyez un lot d'URL et recevez un jeu de données complet de texte propre, sans construire ni gérer votre propre infrastructure de crawl.
Comment ça marche
De l'URL au texte propre en trois étapes
Vous envoyez des URL. Nous nous chargeons de l'extraction.
01
Envoyez une URL
Appelez l'API avec une URL, ou placez-en des milliers dans la file de traitement par batches.
02
Nous l'extrayons
Un worker récupère la page, suit les redirections et extrait le contenu principal.
03
Recevez du texte propre
Vous obtenez du markdown et des métadonnées structurées dans une seule réponse.
FAQ
Questions, réponses
La version courte. Besoin de plus de détails ? Écrivez-nous à [email protected].
Commencez à extraire dès aujourd'hui.
Obtenez votre clé API, envoyez votre première URL et recevez du texte propre en retour.
Les nouveaux comptes reçoivent 500 crédits offerts.
Conçu & hébergé dans l'UE · prêt pour le RGPD · aucun entraînement sur vos données