crawl_3.rb

require 'selenium-webdriver'

Selenium::WebDriver::Chrome.driver_path = `which chromedriver-helper`.chomp # 설치한 크롬 드라이버 사용
options = Selenium::WebDriver::Chrome::Options.new # 크롬 헤드리스 모드 위해 옵션 설정
options.add_argument('--disable-gpu') # 크롬 헤드리스 모드 사용 위해 disable-gpu setting
options.add_argument('--headless') # 크롬 헤드리스 모드 사용 위해 headless setting
@browser = Selenium::WebDriver.for :chrome, options: options # 실레니움 + 크롬 + 헤드리스 옵션으로 브라우저 실행

browser = @browser.get 'https://uni.likelion.org/' # 로그인 페이지 가기
id_input = "//*[@id=\"user_email\"]" # email 입력 부분
pw_input = "//*[@id=\"user_password\"]" # pw 입력 부분

inputID = @browser.find_element(xpath: id_input)
inputID.send_keys "id" # id 입력
inputPW = @browser.find_element(xpath: pw_input)
inputPW.send_keys "pw" # pw 입력

@browser.find_element(xpath: "/html/body/main/form/div/div[3]/input").click # 제출 버튼


(1..1145).each do |i|
  puts i
  begin
    @browser.navigate.to "http://uni.likelion.org/users/#{i}"
    puts "학생 : " + @browser.find_element(xpath: "/html/body/main/header/div/div/h1").text
    puts "email : " + @browser.find_element(xpath: "/html/body/main/header/div/p[1]/span").text.strip.split("\n").first
    puts "기수 : " + @browser.find_element(xpath: "/html/body/main/header/div/p[2]/span").text.strip.split(" ")[0].split("년부터").first
    puts "학교 : " + @browser.find_element(xpath: "/html/body/main/header/div/p[2]/span").text.strip.split(" ")[4]
    puts "------------------------"
  rescue
    puts "없습니다."
  end
end
@browser.quit