Maison
Wikipedia donne aux développeurs de l'IA ses données pour repousser les grattoirs de bot

La nouvelle stratégie de Wikipédia pour gérer l'extraction de données par l'IA
Wikipédia, par l'intermédiaire de la Wikimedia Foundation, prend des mesures proactives pour gérer l'impact de l'extraction de données par l'IA sur ses serveurs. Mercredi, ils ont annoncé une collaboration avec Kaggle, une plateforme appartenant à Google et dédiée à la science des données et à l'apprentissage automatique, pour lancer un ensemble de données bêta. Cet ensemble de données contient du "contenu structuré de Wikipédia en anglais et en français", conçu spécifiquement pour les besoins de formation de l'IA.
L'ensemble de données, maintenant disponible sur Kaggle, a été conçu en pensant aux développeurs d'IA, simplifiant le processus d'accès aux données d'articles lisibles par machine. Cela inclut tout, des résumés de recherche et des descriptions courtes aux liens d'images, aux données des infobox et aux différentes sections d'articles. De manière importante, ces données sont sous licence ouverte et n'incluent pas de références ou d'éléments non textuels comme des fichiers audio, garantissant qu'elles sont optimisées pour des cas d'utilisation de l'IA tels que la modélisation, l'ajustement fin et l'évaluation des performances.
L'approche de Wikimedia propose un format JSON bien structuré du contenu de Wikipédia, qu'ils espèrent être une option plus attrayante pour les développeurs d'IA par rapport à la méthode traditionnelle d'extraction ou d'analyse du texte brut des articles. Cette initiative répond en partie à la pression exercée par les bots d'IA sur les serveurs de Wikipédia en raison de leur consommation de bande passante.
Déjà, Wikimedia a établi des accords de partage de contenu avec des géants comme Google et l'Internet Archive. Cependant, le partenariat avec Kaggle devrait rendre ces données plus accessibles aux petites entreprises et aux scientifiques de données indépendants, élargissant ainsi la portée et l'utilité du contenu de Wikipédia.
Ce que Kaggle apporte à la table
Brenda Flynn, responsable des partenariats chez Kaggle, a exprimé son enthousiasme à l'idée d'héberger les données de Wikimedia. "En tant que lieu où la communauté de l'apprentissage automatique vient chercher des outils et des tests, Kaggle est extrêmement enthousiaste d'être l'hôte des données de la Wikimedia Foundation", a-t-elle déclaré. Le rôle de Kaggle est crucial pour maintenir ces données non seulement accessibles, mais aussi pertinentes et utiles pour la communauté de l'apprentissage automatique.
Cette démarche stratégique de Wikipédia vise non seulement à réduire la charge sur ses serveurs, mais également à favoriser une relation plus structurée et bénéfique avec les communautés de l'IA et de l'apprentissage automatique.
Article connexe
Warner Music acquiert l'entreprise de démarrage Sureel AI spécialisée dans l'attribution par intelligence artificielle
Warner Music Group (WMG) a confirmé mercredi qu’elle acquiert Sureel AI, une startup spécialisée dans l’attribution par intelligence artificielle. La technologie propriétaire de Sureel génère une « ADN IA » pour les titres musicaux, en décomposant ce
Amazon présente Alexa pour les achats tout en reléguant Rufus au second plan
Amazon a lancé Alexa for Shopping, fusionnant son chatbot de shopping Rufus avec Alexa+ sur l’application, le site web et les appareils Echo Show.L’assistant répond aux requêtes sur les produits, compare les articles, suit les prix et prend en charg
Microsoft, Azure et les technologies d'IA luttent contre les risques d'incendies de forêt en Californie
Microsoft investit dans la détection des feux de forêt grâce à l'IA ; Juan Lavista Ferres, vice-président corporatif et responsable scientifique des données, évoque les stratégies visant à atténuer le
Recommandations de sujets spéciaux liés
commentaires (3)
Me pregunto si esto realmente resolverá el problema de los scrapers 🤔. Wikipedia dando sus datos podría ser un arma de doble filo, pero al menos están intentando algo diferente. ¡Bravo por la iniciativa!
Wow, Wikipedia teaming up with Kaggle to tackle AI scrapers? Smart move! It's like building a digital fortress to protect their data. Curious how this will impact AI model training in the long run. 🛡️

La nouvelle stratégie de Wikipédia pour gérer l'extraction de données par l'IA
Wikipédia, par l'intermédiaire de la Wikimedia Foundation, prend des mesures proactives pour gérer l'impact de l'extraction de données par l'IA sur ses serveurs. Mercredi, ils ont annoncé une collaboration avec Kaggle, une plateforme appartenant à Google et dédiée à la science des données et à l'apprentissage automatique, pour lancer un ensemble de données bêta. Cet ensemble de données contient du "contenu structuré de Wikipédia en anglais et en français", conçu spécifiquement pour les besoins de formation de l'IA.
L'ensemble de données, maintenant disponible sur Kaggle, a été conçu en pensant aux développeurs d'IA, simplifiant le processus d'accès aux données d'articles lisibles par machine. Cela inclut tout, des résumés de recherche et des descriptions courtes aux liens d'images, aux données des infobox et aux différentes sections d'articles. De manière importante, ces données sont sous licence ouverte et n'incluent pas de références ou d'éléments non textuels comme des fichiers audio, garantissant qu'elles sont optimisées pour des cas d'utilisation de l'IA tels que la modélisation, l'ajustement fin et l'évaluation des performances.
L'approche de Wikimedia propose un format JSON bien structuré du contenu de Wikipédia, qu'ils espèrent être une option plus attrayante pour les développeurs d'IA par rapport à la méthode traditionnelle d'extraction ou d'analyse du texte brut des articles. Cette initiative répond en partie à la pression exercée par les bots d'IA sur les serveurs de Wikipédia en raison de leur consommation de bande passante.
Déjà, Wikimedia a établi des accords de partage de contenu avec des géants comme Google et l'Internet Archive. Cependant, le partenariat avec Kaggle devrait rendre ces données plus accessibles aux petites entreprises et aux scientifiques de données indépendants, élargissant ainsi la portée et l'utilité du contenu de Wikipédia.
Ce que Kaggle apporte à la table
Brenda Flynn, responsable des partenariats chez Kaggle, a exprimé son enthousiasme à l'idée d'héberger les données de Wikimedia. "En tant que lieu où la communauté de l'apprentissage automatique vient chercher des outils et des tests, Kaggle est extrêmement enthousiaste d'être l'hôte des données de la Wikimedia Foundation", a-t-elle déclaré. Le rôle de Kaggle est crucial pour maintenir ces données non seulement accessibles, mais aussi pertinentes et utiles pour la communauté de l'apprentissage automatique.
Cette démarche stratégique de Wikipédia vise non seulement à réduire la charge sur ses serveurs, mais également à favoriser une relation plus structurée et bénéfique avec les communautés de l'IA et de l'apprentissage automatique.
Warner Music acquiert l'entreprise de démarrage Sureel AI spécialisée dans l'attribution par intelligence artificielle
Warner Music Group (WMG) a confirmé mercredi qu’elle acquiert Sureel AI, une startup spécialisée dans l’attribution par intelligence artificielle. La technologie propriétaire de Sureel génère une « ADN IA » pour les titres musicaux, en décomposant ce
Microsoft, Azure et les technologies d'IA luttent contre les risques d'incendies de forêt en Californie
Microsoft investit dans la détection des feux de forêt grâce à l'IA ; Juan Lavista Ferres, vice-président corporatif et responsable scientifique des données, évoque les stratégies visant à atténuer le
Me pregunto si esto realmente resolverá el problema de los scrapers 🤔. Wikipedia dando sus datos podría ser un arma de doble filo, pero al menos están intentando algo diferente. ¡Bravo por la iniciativa!
Wow, Wikipedia teaming up with Kaggle to tackle AI scrapers? Smart move! It's like building a digital fortress to protect their data. Curious how this will impact AI model training in the long run. 🛡️











