Come trovare una pagina di seme "buona" per un crawler web? [Chiuso

Question

Ho iniziato a costruire un crawler web e ho letto da qualche parte che è un problema molto difficile trovare una buona pagina di semi per il crawler. Qualcuno può spiegarmi se c'è qualche procedura/ guida predefinita per trovare una buona pagina di semi? O come dici che una pagina particolare è una buona pagina di semi?