Illustration de l'article : SimHash : trouver les pages qui se ressemblent

Il y a quelques semaines, j’ai eu besoin de détecter du contenu dupliqué dans le crawler de redirection.io. Pas du dupliqué à la virgule près, ça c’est facile, mais du dupliqué « en gros, c’est la même page ».

Commentaires

Vous devez vous inscrire ou vous connecter pour poster un commentaire