Usando Ruby com o Mechanize para fazer login em um site
Preciso raspar dados de um site, mas é necessário primeiro fazer o login. Eu tenho usado o hpricot para raspar com sucesso outros sites, mas sou novo no mecanize e estou realmente desconcertado com a maneira de trabalha
Vejo este exemplo comumente citado:
require 'rubygems'
require 'mechanize'
a = Mechanize.new
a.get('http://rubyforge.org/') do |page|
# Click the login link
login_page = a.click(page.link_with(:text => /Log In/))
# Submit the login form
my_page = login_page.form_with(:action => '/account/login.php') do |f|
f.form_loginname = ARGV[0]
f.form_pw = ARGV[1]
end.click_button
my_page.links.each do |link|
text = link.text.strip
next unless text.length > 0
puts text
end
end
Mas eu achei extremamente enigmático. A parte que eu não entendo em particular é o que está acontecendo aqui:
f.form_loginname = ARGV[0]
f.form_pw = ARGV[1]
Como essas tags de entrada da página se tornaram métodos de repente? Estou faltando alguma coisa aqui? Quando tento recriá-lo, para acessar o AppDataPro (http://www.appdata.com/login), encontro o problema de que o nome da entrada contém colchetes, como este:
<Table>
<tr><td width="150">
<label for="user_session_username">Username</label><br />
</td><td >
<input id="user_session_username" name="user_session[username]" size="30" type="text" />
</td></tr>
<tr><td>
<label for="user_session_password">Password</label><br />
</td><td>
<input id="user_session_password" name="user_session[password]" size="30" type="password" />
</td></tr>
</table>
Esta é minha tentativa de usar mecanizar:
a = Mechanize.new
a.get('http://www.appdata.com/login') do |page|
# Click the login link
login_page = a.click(page.link_with(:text => /Login/)) #login_page is basically a doc of appdata/login
my_page = login_page.form_with(:action => '/login') do |f|
f.user_session[username] = '****username here?****'
f.user_session[password] = '****password here?****'
end
end
mas causa o erro,
logintest01.rb:21:in `block (2 levels) in <main>': undefined method `user_session' for nil:NilClass (NoMethodError)
O que há de errado com o que estou fazendo?