def process_sources(self, rdd: RDD):
return rdd.mapValues(self._process_source)
def process_targets(self, rdd: RDD):
return TargetRDD(
rdd.mapValues(self._process_target).persist(
StorageLevel.MEMORY_AND_DISK))
def process_data(self, rdd: RDD):
return rdd.mapValues(self._process_source_and_target)
def process_targets(self, rdd: RDD):
return rdd.mapValues(self._process_target)
def process_wav(self, rdd: RDD):
return rdd.mapValues(self._process_wav)
