Beispiel #1
0
 def __init__(self):
     SimpleTask.__init__(self, 'MoveFiles')
 def __init__(self):
     SimpleTask.__init__(self, "MoveFiles")
Beispiel #3
0
 def __init__(self):
     SimpleTask.__init__(self, "CheckIP")
 def __init__(self, file_prefix):
     SimpleTask.__init__(self, "PrepareDirectories")
     self.file_prefix = file_prefix
Beispiel #5
0
	def __init__(self, file_prefix):
		SimpleTask.__init__(self, "PrepareDirectories")
		self.file_prefix = file_prefix
 def __init__(self, warc_prefix):
     SimpleTask.__init__(self, "PrepareDirectories")
     self.warc_prefix = warc_prefix
 def __init__(self):
     SimpleTask.__init__(self, "DeleteFiles")
Beispiel #8
0
 def __init__(self):
     SimpleTask.__init__(self, "Deduplicate")
Beispiel #9
0
 def __init__(self):
     SimpleTask.__init__(self, "CheckLocalWebserver")
 def __init__(self):
     SimpleTask.__init__(self, "PrepareDirectories")
Beispiel #11
0
 def __init__(self, target_directory):
     SimpleTask.__init__(self, "MoveFiles")
     self.target_directory = target_directory
Beispiel #12
0
 def __init__(self):
     SimpleTask.__init__(self, 'CompressLogIfNoMetaWarc')
 def __init__(self):
     SimpleTask.__init__(self, "CleanUpDirectories")
 def __init__(self):
     SimpleTask.__init__(self, "CheckIP")
     self._counter = 0
	def __init__(self):
		SimpleTask.__init__(self, "PrepareDirectories")
Beispiel #16
0
 def __init__(self):
     SimpleTask.__init__(self, 'ExtraItemParams')
Beispiel #17
0
 def __init__(self):
     SimpleTask.__init__(self, 'SetBadUrls')
Beispiel #18
0
 def __init__(self):
     SimpleTask.__init__(self, 'CheckIP')
     self._counter = 0
Beispiel #19
0
 def __init__(self):
   SimpleTask.__init__(self, "Login")
Beispiel #20
0
 def __init__(self, defaults=None, file_groups=None, id_function=None):
     SimpleTask.__init__(self, "PrepareStatsForTracker")
     self.defaults = defaults or {}
     self.file_groups = file_groups or {}
     self.id_function = id_function
Beispiel #21
0
 def __init__(self):
     SimpleTask.__init__(self, "Sample")
Beispiel #22
0
 def __init__(self):
     SimpleTask.__init__(self, 'SetFetchDepth')
Beispiel #23
0
 def __init__(self):
     SimpleTask.__init__(self, 'SelectUserAgent')
Beispiel #24
0
 def __init__(self):
     SimpleTask.__init__(self, 'WriteInfo')
Beispiel #25
0
 def __init__(self, warc_prefix):
     SimpleTask.__init__(self, "CheckIP")
     self._counter = 0
Beispiel #26
0
 def __init__(self, defaults=None, file_groups=None, id_function=None):
     SimpleTask.__init__(self, "PrepareStatsForTracker")
     self.defaults = defaults or {}
     self.file_groups = file_groups or {}
     self.id_function = id_function
Beispiel #27
0
 def __init__(self):
     SimpleTask.__init__(self, "Deduplicate")
Beispiel #28
0
 def __init__(self):
     SimpleTask.__init__(self, 'CheckIP')
     self._counter = 0
Beispiel #29
0
 def __init__(self):
     SimpleTask.__init__(self, "StupidTask")
 def __init__(self):
     SimpleTask.__init__(self, "DeduplicateWarcExtProc")
Beispiel #31
0
 def __init__(self):
     SimpleTask.__init__(self, 'SetFetchDepth')
Beispiel #32
0
 def __init__(self, warc_prefix):
     SimpleTask.__init__(self, 'PrepareDirectories')
     self.warc_prefix = warc_prefix
Beispiel #33
0
 def __init__(self):
     SimpleTask.__init__(self, 'PreparePaths')
Beispiel #34
0
 def __init__(self):
     SimpleTask.__init__(self, "CleanUpItemDir")
Beispiel #35
0
 def __init__(self):
     SimpleTask.__init__(self, 'WriteInfo')
Beispiel #36
0
 def __init__(self):
     SimpleTask.__init__(self, 'MoveFiles')
Beispiel #37
0
 def __init__(self):
     SimpleTask.__init__(self, 'StopHeartbeat')
Beispiel #38
0
 def __init__(self):
     SimpleTask.__init__(self, "Sample")
Beispiel #39
0
 def __init__(self, control):
     SimpleTask.__init__(self, 'StartHeartbeat')
     self.control = control
Beispiel #40
0
	def __init__(self):
		SimpleTask.__init__(self, "CleanUpDirectories")
Beispiel #41
0
 def __init__(self):
     SimpleTask.__init__(self, 'Deduplicate')
 def __init__(self):
     SimpleTask.__init__(self, "CheckIP")
     self._counter = 0
Beispiel #43
0
 def __init__(self):
     SimpleTask.__init__(self, "Bouncer")
Beispiel #44
0
 def __init__(self, control):
     SimpleTask.__init__(self, 'StartHeartbeat')
     self.control = control
Beispiel #45
0
 def __init__(self):
     SimpleTask.__init__(self, 'CheckBan')
Beispiel #46
0
 def __init__(self):
     SimpleTask.__init__(self, 'PreparePaths')
Beispiel #47
0
 def __init__(self):
     SimpleTask.__init__(self, "Bouncer")
Beispiel #48
0
 def __init__(self):
     SimpleTask.__init__(self, "MoveFiles")
Beispiel #49
0
 def __init__(self):
     SimpleTask.__init__(self, "CheckIP")
Beispiel #50
0
 def __init__(self):
     SimpleTask.__init__(self, 'StopHeartbeat')
Beispiel #51
0
 def __init__(self):
     SimpleTask.__init__(self, 'JoinWarcs')