У меня есть следующий цикл for:
for titles in titles:
title = titles.xpath("a/text()").extract()
link = titles.xpath("a/@href").extract()
print(title, link)
Как я могу сбросить заголовок и ссылку в отформатированный файл .csv?
Вы должны использовать модуль Python CSV. Посмотрите здесь для получения дополнительной информации: Запись списка строк в Excel CSV-файл в Python.
Вот пример для вашей проблемы:
import csv
results = []
# your code... also add this to your for loop.
results.append([title, link])
csv_file = open("csv_file.csv",'wb')
wr = csv.writer(csv_file)
for row in results:
wr.writerow(row)
Примерно так (документация):
...
doc_path = "path/to/doc.csv" # must exist, first folder on the place
# where you are running the script!
with open(doc_path, 'a') as doc:
for entry in titles:
title = entry.xpath("a/text()").extract()
link = entry.xpath("a/@href").extract()
print(title, link)
doc.write(str(title)+','+str(link)+'\n')
pandas.DataFrame.to_csv, но даже люди, использующие pandas, используют традиционные write (пример). 05.10.2016 Используйте программу записи csv.
Основное использование:
import csv
with open('file.csv') as f:
writer = csv.writer(f)
writer.writerow(["title", "link"])
File "/Users/user/PycharmProjects/scrapy_tests/ttest/spiders/test.py", line 28, in parse wr.writerow(row) TypeError: a bytes-like object is required, not 'str04.10.2016'wb'на'w', не понимаю, почему вы открылись в двоичном режиме. 04.10.2016