Crawl d’un domaine :
Server https://www.marseo.fr
Crawler plusieurs sous domaines, en exclure (NoMatch). Les expressions régulières sont autorisées (Regex).
Realm Regex ^https://.*sousdomaine.*\.marseo.fr Realm NoMatch https://*sousdomaine*.marseo.fr
Crawl d’un site et d’un autre site avec ses sous domaines :
Server https://www.marseo.fr Realm http://*.domaine2.fr/*
Crawl d’un site en partant d’une page interne :
Server site https://www.marseo.fr/mnogosearch-configurer-les-domaines-a-crawler/
Crawl d’une seule page (pourquoi pas) :
Server page https://www.marseo.fr/mnogosearch-configurer-les-domaines-a-crawler/
Crawl d’un répertoire :
Server https://www.marseo.fr/theme/outils/mnogosearch/
