Un moteur de recherche communautaire pour organiser Internet ?

Est-il possible d’indexer tout Internet avec un nouveau moteur de recherche ? Nous ne le savons pas. Mais nous avons essayé en construisant un moteur de recherche collaboratif fonctionnant sur le modèle de GitHub et Wikipedia.

Dans les moteurs de recherche du Web, la pertinence et l'ordre des résultats sont gérés par le nombre de liens, la qualité et la conformité avec certaines règles, et un peu de personnalisation. Les sites e-commerce classent et filtrent les résultats au moyen d'algorithmes business. En entreprise, la pertinence des résultats peut être configurée par les experts et expertes des différents domaines. D'un autre côté, les réseaux sociaux fournissent une expérience basée principalement sur la notoriété : les préférences et le suivi des autres utilisateurs. Nous tentons de regrouper le meilleur de ces mondes en créant all.site - un moteur de recherche collaboratif dont le contenu et la pertinence seraient proposés par la communauté à la manière de Wikipedia ou GitHub. Dans cette présentation nous partagerons avec vous l’expérience de cette aventure : ce que nous avons essayé, ce que nous avons appris, les limites que nous avons rencontrées et les étapes à venir. Nous vous présenterons le fonctionnement interne d'un moteur de recherche avec ses différentes étapes, l’architecture et l’infrastructure d’une telle plateforme, les notions de sécurité, le passage à l’échelle et la performance.