,

[Ruby] CSV ファイルに記載された URL からファイルをダウンロードするスクリプト

公開日: 2020/02/03

必要に駆られて書いた使い捨てのスクリプト。

TSV ファイルの URL リストを利用して wget でダウンロードしています。

# frozen_string_literal: true

require 'csv'
require 'uri'

def download_image(uri)
  download_path = './download'
  `wget #{uri} -P #{download_path}`
  sleep 1
end

file = 'product_images.tsv'
f = CSV.open(file, headers: false, col_sep: "\t", skip_blanks: true)
f.readline # Skip headers
f.each do |line|
  line.each do |str|
    uri = str if str =~ URI::DEFAULT_PARSER.make_regexp
    download_image(uri) unless uri.nil?
  end
end

補遺