红宝石刮刀。如何导出到CSV?
题
我写了这个Ruby脚本来刮掉制造商网站的产品信息。阵列中的产品对象的擦除和存储工作,但我无法弄清楚如何将数组数据导出到CSV文件。抛出此错误: scraper.rb:45:main的未定义方法`send_data':对象(NomethodError)
我不明白这段代码。这是什么,为什么它不起作用?
send_data csv_data,
:type => 'text/csv; charset=iso-8859-1; header=present',
:disposition => "attachment; filename=products.csv"
.
完整代码:
#!/usr/bin/ruby
require 'rubygems'
require 'anemone'
require 'fastercsv'
productsArray = Array.new
class Product
attr_accessor :name, :sku, :desc
end
# Scraper Code
Anemone.crawl("http://retail.pelicanbayltd.com/") do |anemone|
anemone.on_every_page do |page|
currentPage = Product.new
#Product info parsing
currentPage.name = page.doc.css(".page_headers").text
currentPage.sku = page.doc.css("tr:nth-child(2) strong").text
currentPage.desc = page.doc.css("tr:nth-child(4) .item").text
if currentPage.sku =~ /#\d\d\d\d/
currentPage.sku = currentPage.sku[1..-1]
productsArray.push(currentPage)
end
end
end
# CSV Export Code
products = productsArray.find(:all)
csv_data = FasterCSV.generate do |csv|
# header row
csv << ["sku", "name", "desc"]
# data rows
productsArray.each do |product|
csv << [product.sku, product.name, product.desc]
end
end
send_data csv_data,
:type => 'text/csv; charset=iso-8859-1; header=present',
:disposition => "attachment; filename=products.csv"
. 解决方案
File.open('filename.csv', 'w') do |f|
f.write(csv_data)
end
. 其他提示
如果您是ruby的新功能,您应该使用Ruby 1.9或更高版本,在这种情况下,您可以使用内置的CSV输出,在快速CSV Plus L18N支持中构建:
require 'csv'
CSV.open('filename.csv', 'w') do |csv|
csv << [sku, name, desc]
end
.
http://ruby-doc.org/stdlib-1.9.2 / libdoc / csv / rdoc / csv.html
它可能会更有意义:
@csv = FasterCSV.open('filename.csv', 'w')
.
然后按照您的方式写入:
@csv << [sku, name, desc]
.
如果您的脚本中途通过您至少有一半的数据崩溃。
不隶属于 StackOverflow