コード例 #1
0
 def __init__(self):
     self.file = open('chinadrugtrials.csv', 'wb')
     self.exporter = CsvItemExporter(self.file)
     self.exporter.start_exporting()
コード例 #2
0
ファイル: pipelines.py プロジェクト: zy723/Spider_scrapy
 def open_spider(self, spider):
     self.file = open('aqi.csv', 'wb')
     self.writer = CsvItemExporter(self.file)
     self.writer.start_exporting()
コード例 #3
0
 def _get_exporter(self, **kwargs):
     return CsvItemExporter(self.output, **kwargs)
コード例 #4
0
ファイル: pipelines.py プロジェクト: Happyscavenger/my_code
 def open_spider(self, spider):
     #爬去到的文件保成csv文件
     self.file = open("./js.csv", "wb")
     self.exporter = CsvItemExporter(
         self.file, fields_to_export=["ID", "展示时间", "标题内容", "链接"])
     self.exporter.start_exporting()
コード例 #5
0
 def spider_opened(self, spider):
     self.file = open(self.output_file, 'w+b')
     self.exporter = CsvItemExporter(self.file)
     self.exporter.start_exporting()
コード例 #6
0
ファイル: pipelines.py プロジェクト: sjham/myproject
 def spider_opened(self, spider):
     file = open(spider.tmpFile, 'w+b')
     self.files[spider] = file
     self.exporter = CsvItemExporter(file)
     self.exporter.fields_to_export = ['area', 'title', 'source', 'visit', 'datestamp', 'comment', 'carea', 'ctitle', 'csource', 'ccount', 'cdatestamp']
     self.exporter.start_exporting()
コード例 #7
0
 def open_spider(self, spider):
     self.csvfile = open(self.filename,
                         'wb')  #'wb' = write in binary ab= append in binary
     self.exporter = CsvItemExporter(self.csvfile)
     self.exporter.start_exporting()
コード例 #8
0
 def open_spider(self, spider):
     filename = "maoyan_movie_scrapy_m.csv"
     f = open(filename, 'wb')
     self.exporter = CsvItemExporter(f)
コード例 #9
0
 def spider_opened(self, spider):
     file = open('%s_links.csv' % spider.name, 'w+b')
     self.files[spider] = file
     self.exporter = CsvItemExporter(file)
     self.exporter.start_exporting()
コード例 #10
0
 def spider_opened(self, spider):
     file = open('%s_items.csv' % spider.name, 'w+b')
     self.files[spider] = file
     self.exporter = CsvItemExporter(file)
     self.exporter.fields_to_export = ['Plan', 'Gigas', 'Monto', 'Promocion', 'Descuento', 'Detalle0', 'Detalle1']
     self.exporter.start_exporting()
コード例 #11
0
 def __init__(self, file_name):
     self.file = open(file_name.upper() + ".csv", "wb")
     self.exporter = CsvItemExporter(self.file)
コード例 #12
0
 def spider_opened(self, spider):
     self.files = dict([(name, open(CSVDir + name + '.csv', 'w+a'))
                        for name in self.SaveTypes])
     self.exporters = dict([(name, CsvItemExporter(self.files[name]))
                            for name in self.SaveTypes])
     [e.start_exporting() for e in self.exporters.values()]
コード例 #13
0
 def __init__(self):
     self.file = open("zakon.csv", 'wb')
     self.exporter = CsvItemExporter(self.file)
     self.exporter.start_exporting()
コード例 #14
0
ファイル: pipelines.py プロジェクト: shayongithub/Assignment1
 def __init__(self, file_name):
     self.file = open("bitcoin.csv", "wb")
     self.exporter = CsvItemExporter(self.file)
コード例 #15
0
ファイル: pipelines.py プロジェクト: canvas-J/scrapy_crawler
 def open_spider(self, spider):
     self.file = open('review-8-15.csv', 'wb')
     self.exporter = CsvItemExporter(self.file, encoding='gb18030')
     self.exporter.start_exporting()
コード例 #16
0
 def __init__(self):
     self.file = open('doubanmovie.csv', 'wb')
     self.exporter = CsvItemExporter(self.file, encoding='utf-8')
     self.exporter.start_exporting()
コード例 #17
0
 def open_spider(self, spider):
     self.file = open('air_quality.csv', 'wb')
     self.exporter = CsvItemExporter(self.file)
     self.exporter.start_exporting()
コード例 #18
0
 def spider_opened(self, spider):
     file_to_save = open('exports/csv/%s.csv' % spider.name, 'w+b')
     self.files[spider] = file_to_save
     self.exporter = CsvItemExporter(file_to_save)
     self.exporter.start_exporting()
 def __init__(self):
     self.file = open('evarticle.csv','wb')
     self.exporter = CsvItemExporter(file=self.file)
     self.exporter.start_exporting()
コード例 #20
0
ファイル: pipelines.py プロジェクト: ybsbbb/stock-spider
 def open_spider(self,spider):
     self.file = open('stocks_01.csv', 'w')
     self.exporter = CsvItemExporter(self.file)
     self.exporter.start_exporting()
コード例 #21
0
 def open_spider(self, spider):
     self.csv_file = open("taobao.csv", "w")
     self.csv_exporter = CsvItemExporter(self.csv_file)
     self.csv_exporter.start_exporting()
コード例 #22
0
ファイル: pipelines.py プロジェクト: LubivD/Scrapy-crawler
 def open_spider(self, spider):
     self.file = open("%s.csv" % (spider.name), 'wb')
     self.exporter = CsvItemExporter(self.file)
     self.exporter.start_exporting()
コード例 #23
0
 def __init__(self):
     self.file = open("goldmine.csv", 'wb')
     self.exporter = CsvItemExporter(self.file, unicode)
     self.exporter.start_exporting()
コード例 #24
0
 def __init__(self):
     self.file = open("newsUrlCrawl.csv", "wb")
     self.exporter = CsvItemExporter(self.file, encoding="utf-8")
     self.exporter.start_exporting()
コード例 #25
0
 def __init__(self):
     self.file = open('news_data.csv', 'wb')
     self.exporter = CsvItemExporter(self.file, encoding='utf-8')
     self.exporter.start_exporting()
コード例 #26
0
 def __init__(self):
     self.file = open('data/PoetryTranslation.csv', 'wb')
     self.exporter = CsvItemExporter(self.file, include_headers_line=True,encoding='utf-8')
     self.exporter.fields_to_export = PoetryTranslationItem.KEYS
     self.exporter.start_exporting()
     self.saved_list = []
コード例 #27
0
 def __init__(self):
     self.file = open('kaist_herald.csv', 'wb')
     self.exporter = CsvItemExporter(self.file, encoding='utf-8')
     self.exporter.start_exporting()
コード例 #28
0
 def spider_opened(self, spider):
     self.file = open('top_posts.csv', 'w+b')
     self.exporter = CsvItemExporter(self.file)
     self.exporter.start_exporting()
コード例 #29
0
 def open_spider(self, spider):
     self.csvfile = open(self.filename, 'wb')
     self.exporter = CsvItemExporter(self.csvfile)
     self.exporter.start_exporting()
コード例 #30
0
 def spider_opened(self, spider):
     
     output_file = open(self.file_name, 'w+b')
     self.files[spider] = output_file
     self.exporter = CsvItemExporter(output_file,fields_to_export = self.export_fields)
     self.exporter.start_exporting()