| Les deux révisions précédentes Révision précédente Prochaine révision | Révision précédente |
| txs:autre:map_p18:intro [2020/02/14 15:22] – ↷ Page déplacée de txs:map_p18:intro à txs:autre:map_p18:intro qduchemi | txs:autre:map_p18:intro [2020/09/16 11:24] (Version actuelle) – modification externe 127.0.0.1 |
|---|
| |
| Dans une première partie bibliographique, mon travail s'est organisé autour de deux points points : | Dans une première partie bibliographique, mon travail s'est organisé autour de deux points points : |
| - [[txs:map_p18:bibliomap|Analyse de la carte de Ruslan Enikeev et des autres cartes du web existantes]] | - [[txs:autre:map_p18:bibliomap|Analyse de la carte de Ruslan Enikeev et des autres cartes du web existantes]] |
| - [[txs:map_p18:biblioalexa|Etudes des possibilités offertes par Alexa et son API]] | - [[txs:autre:map_p18:biblioalexa|Etudes des possibilités offertes par Alexa et son API]] |
| |
| De cette analyse, j'en ai conclu que pour réaliser une carte similaire, seulement trois sources de données sont légalement envisageables : | De cette analyse, j'en ai conclu que pour réaliser une carte similaire, seulement trois sources de données sont légalement envisageables : |
| Il a été décidé de réaliser un prototype d'application en se basant sur les données de la plateforme Alexa. Cette application avait pour but de réaliser une carte similaire à la "internet-map" présentée plus tôt. Le choix s'est porté sur la plateforme Alexa afin que les cartes obtenues puissent être directement comparables, en terme de source de données, avec celles réalisées en 2011. | Il a été décidé de réaliser un prototype d'application en se basant sur les données de la plateforme Alexa. Cette application avait pour but de réaliser une carte similaire à la "internet-map" présentée plus tôt. Le choix s'est porté sur la plateforme Alexa afin que les cartes obtenues puissent être directement comparables, en terme de source de données, avec celles réalisées en 2011. |
| L'application a été développée en plusieurs étapes au fur et à mesure de l'avancement de la TX afin de contourner les limitations imposées par la plateforme Alexa : | L'application a été développée en plusieurs étapes au fur et à mesure de l'avancement de la TX afin de contourner les limitations imposées par la plateforme Alexa : |
| - [[txs:map_p18:protoscrap|Premier concept d'application]] pour scraper à l'aide d'un crawler basique le maximum de données disponibles directement sur l'interface web "top 500 sites" d'Alexa | - [[txs:autre:map_p18:protoscrap|Premier concept d'application]] pour scraper à l'aide d'un crawler basique le maximum de données disponibles directement sur l'interface web "top 500 sites" d'Alexa |
| - [[txs:map_p18:capimongodb|Ajout d'une base de données]] pour filtrer et capitaliser plus efficacement les données récupérées avec le concept d'application précédent | - [[txs:autre:map_p18:capimongodb|Ajout d'une base de données]] pour filtrer et capitaliser plus efficacement les données récupérées avec le concept d'application précédent |
| - [[txs:map_p18:carto|Cartographie]] des données à l'aide de Gephi | - [[txs:autre:map_p18:carto|Cartographie]] des données à l'aide de Gephi |
| - [[txs:map_p18:extendedscrap|Extension de la cartographie]] par la réalisation d'un crawler plus intelligent | - [[txs:map_p18:extendedscrap|Extension de la cartographie]] par la réalisation d'un crawler plus intelligent |
| |