Spazio ai contenuti di valore
Un crawler efficiente, l'intelligenza artificiale correttamente applicata, un valido motore di ricerca interno ed una buona grafica ci aiuteranno a raggiungere il nostro scopo.
Per l'attività di "crawling" e di "indexing", utilizziamo l'user agent "h-star-bot", proveniente dall'indirizzo IP 209.227.230.63 ed individuabile nei log di accesso con la dicitura "Mozilla/5.0 (compatible; h-star-bot; https://h-star.it)". Il nostro amico h-star-bot segue le direttive presenti su robots.txt e pertanto non segue i percorsi a lui preclusi.
Per informazioni: paolo@h-star.it