Exemplo n.º 1
0
Arquivo: pipes.py Projeto: vrde/harvey 
 def do(self):
     origin, urls = self.queue.get()
     timeit(self.frontier.add, origin, origin, urls)
Exemplo n.º 2
0
Arquivo: pipes.py Projeto: vrde/harvey 
 def do(self):
     origin, urls = self.queue.get()
     timeit(self.frontier.add, origin, origin, urls)
Exemplo n.º 3
0
Arquivo: pipes.py Projeto: vrde/harvey 
 def do(self):
     url = timeit(self.frontier.pop, 'feeder')
     if not url:
         sleep(5)
     else:
         self.queue.put(url)
Exemplo n.º 4
0
Arquivo: pipes.py Projeto: vrde/harvey 
 def do(self):
     url = timeit(self.frontier.pop, 'feeder')
     if not url:
         sleep(5)
     else:
         self.queue.put(url)