コード例 #1
0
ファイル: lookup.py プロジェクト: JeffAMcGee/localcrawl
 def __init__(self):
     LocalProc.__init__(self,"lookup")
     self.scores = Scores()
     if settings.lookup_in:
         self.scores.read(settings.lookup_in)
     self.lookups = self.scores.count_lookups()
     self.halt = False
コード例 #2
0
ファイル: lookup.py プロジェクト: maxcuban/localcrawl
 def __init__(self):
     LocalProc.__init__(self, "lookup")
     self.scores = Scores()
     if settings.lookup_in:
         self.scores.read(settings.lookup_in)
     self.lookups = self.scores.count_lookups()
     self.halt = False
コード例 #3
0
 def __init__(self, slave_id, todo, done):
     LocalProc.__init__(self, 'crawl', slave_id)
     self.twitter = TwitterResource()
     self.todo = todo
     self.done = done
コード例 #4
0
 def __init__(self):
     LocalProc.__init__(self, "crawl")
     self.waiting = set()
     self.todo = multiprocessing.JoinableQueue(30)
     self.done = multiprocessing.Queue()
コード例 #5
0
ファイル: crawl.py プロジェクト: JeffAMcGee/localcrawl
 def __init__(self, slave_id, todo, done):
     LocalProc.__init__(self,'crawl', slave_id)
     self.twitter = TwitterResource()
     self.todo = todo
     self.done = done
コード例 #6
0
ファイル: crawl.py プロジェクト: JeffAMcGee/localcrawl
 def __init__(self):
     LocalProc.__init__(self,"crawl")
     self.waiting = set()
     self.todo = multiprocessing.JoinableQueue(30)
     self.done = multiprocessing.Queue()
コード例 #7
0
ファイル: lookup.py プロジェクト: JeffAMcGee/localcrawl
 def __init__(self,slave_id):
     LocalProc.__init__(self,'lookup',slave_id)
     self.twitter = TwitterResource()
     self.gisgraphy = GisgraphyResource()
     self.orig_db = CouchDB(settings.couchdb_root+"orig_houtx")
コード例 #8
0
ファイル: lookup.py プロジェクト: JeffAMcGee/friendloc
 def __init__(self,slave_id):
     LocalProc.__init__(self,'lookup',slave_id)
     self.twitter = TwitterResource()
     self.gisgraphy = GisgraphyResource()
コード例 #9
0
ファイル: lookup.py プロジェクト: maxcuban/localcrawl
 def __init__(self, slave_id):
     LocalProc.__init__(self, 'lookup', slave_id)
     self.twitter = TwitterResource()
     self.gisgraphy = GisgraphyResource()
     self.orig_db = CouchDB(settings.couchdb_root + "orig_houtx")