Exemple #1
0
def main():

    product = Product('EpocaCosmeticos', 'https://www.epocacosmeticos.com.br',
                      r'https://www\.epocacosmeticos\.com\.br/.+',
                      r'^https://www.epocacosmeticos.com.br/.+/p$',
                      'meta[property="og:title"]', '.skuBestPrice')

    #product.addTermToExclude('?PS=')
    product.addTermToExclude('/checkout/')
    product.addTermToExclude('centralatendimento')
    crawler = Crawler(product)
    crawler.crawl('https://www.epocacosmeticos.com.br')