使用 Jsoup 登录
Login using Jsoup
我想登录网站并保留 cookie。我在使用 Jsoup 的登录部分遇到问题;
我的代码;
Connection.Response loginForm = Jsoup.connect("URL" + "/login/").cookies(cookies).method(Connection.Method.GET).execute();
formData.put("username", "#######");
formData.put("pwd", "########");
formData.put("hidden","69");
formData.put("token", loginForm.parse().select("input#token").first().attr("value"));
Connection.Response homePage = Jsoup.connect("URL" + "/login/")
.referrer("URL" + "/login/")
.followRedirects(true)
.cookies(cookies)
.data(formData)
.method(Connection.Method.POST)
.execute();
cookies_2.putAll(homePage.cookies()); // save the cookies, this will be passed on to next request
如果我转到登录页面并使用开发者工具,则有 ;
Google chrome developper tool
Google chrome developper tool
编辑 1;
现在的问题是我得到了网站的主页,但没有登录部分,我保留了 "Connect or register" 按钮。
我输出了 cookies_2 和 Chrome 日志里的 cookies 是一样的 ;
Jsoup cookies_2 output
Chrome cookies when login
现在,我不明白的是,如果我有正确的 cookie,为什么我无法登录?
编辑 2;
我用最终解决方案修改了我的代码,它起作用了!
感谢您的帮助!
几点说明:
- 您的 HTTP 状态为 302。使用
Jsoup.connect(...).followRedirects(true)
可能是个好主意
- 有些服务器会检查您来自的站点,因此建议设置引用 header:
Jsoup.connect(...).referrer(URL + "/login")
- 您确定
hidden
值始终是 69
吗?也许每个请求都不同。您可以像这样动态获取它:formData.put("hidden",html.select("co_js").first().attr("value"));
我不喜欢你获取令牌的方式。让我们使用 Jsoup 来提取它:
String authToken = html.select("input#token").first().attr("value");
编辑:
- 我尝试从头开始执行此操作,但提交的登录表单缺少 Content-Type 定义。尝试使用:
Jsoup.connect(...).header("Content-Type","application/x-www-form-urlencoded")
我通过分析 Chrome 的开发工具中的 headers 得到了这个想法。现在我可以成功登录了。
- 您还可以使用以下代码检查您是否已登录:
Document doc = homePage.parse();
System.out.println("Logged in as: " + doc.select(".dropdown-toggle").text());
通过让服务器知道您可以处理压缩页面,您可以减小下载页面的大小。对于每个请求使用:Jsoup.connect(...).header("accept-encoding", "gzip, deflate")
它是透明的,你不需要做任何特殊的事情来处理它,但它在内部工作。
编辑 2:
根据之前的建议提供最终解决方案:
import java.util.HashMap;
import java.util.Map;
import org.jsoup.Connection;
import org.jsoup.Connection.Response;
import org.jsoup.Jsoup;
import org.jsoup.nodes.Document;
public class Whosebug51734840 {
private static final String URL = "https://time2watch.in";
private static final String URL_LOGIN = URL + "/login/";
static String userAgent = "Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/68.0.3440.106 Safari/537.36";
public static void main(final String[] args) throws Exception {
Map<String, String> headers = new HashMap<String, String>();
headers.put("accept-encoding", "gzip, deflate");
Connection.Response loginForm = Jsoup.connect(URL + "/login").userAgent(userAgent).headers(headers).execute();
Map<String, String> cookies = loginForm.cookies();
Document html = loginForm.parse();
String authToken = html.select("input#token").first().attr("value");
System.out.println("Found authToken:" + authToken);
Map<String, String> formData = new HashMap<String, String>();
formData.put("username", "!!!!!!!!!!!!!!!!!!");
formData.put("pwd", "!!!!!!!!!!!!!!!!!!");
formData.put("hidden", "69");
formData.put("token", authToken);
headers.put("Content-Type", "application/x-www-form-urlencoded");
System.out.println("cookies before login:");
System.out.println(cookies);
System.out.println(" Logged in cookie present? " + cookies.containsKey("s4icookuser"));
Connection.Response afterLoginPage = Jsoup.connect(URL_LOGIN).cookies(cookies).headers(headers)
.userAgent(userAgent).data(formData).method(Connection.Method.POST).referrer(URL_LOGIN).execute();
// update cookies
cookies = afterLoginPage.cookies();
System.out.println("cookies after login:");
System.out.println(cookies);
System.out.println(" Logged in cookie present? " + cookies.containsKey("s4icookuser"));
Response homePage = Jsoup.connect(URL).cookies(cookies).method(Connection.Method.GET).userAgent(userAgent)
.referrer(URL_LOGIN).followRedirects(true).referrer(URL_LOGIN).headers(headers).execute();
Document doc = homePage.parse();
System.out.println("Error? " + doc.text().contains("Erreur"));
System.out.println("OK? " + !doc.text().contains("Se connecter"));
System.out.println("Logged in as: " + doc.select(".dropdown-toggle").text());
}
}
我想登录网站并保留 cookie。我在使用 Jsoup 的登录部分遇到问题;
我的代码;
Connection.Response loginForm = Jsoup.connect("URL" + "/login/").cookies(cookies).method(Connection.Method.GET).execute();
formData.put("username", "#######");
formData.put("pwd", "########");
formData.put("hidden","69");
formData.put("token", loginForm.parse().select("input#token").first().attr("value"));
Connection.Response homePage = Jsoup.connect("URL" + "/login/")
.referrer("URL" + "/login/")
.followRedirects(true)
.cookies(cookies)
.data(formData)
.method(Connection.Method.POST)
.execute();
cookies_2.putAll(homePage.cookies()); // save the cookies, this will be passed on to next request
如果我转到登录页面并使用开发者工具,则有 ;
Google chrome developper tool
Google chrome developper tool
编辑 1;
现在的问题是我得到了网站的主页,但没有登录部分,我保留了 "Connect or register" 按钮。
我输出了 cookies_2 和 Chrome 日志里的 cookies 是一样的 ;
Jsoup cookies_2 output
Chrome cookies when login
现在,我不明白的是,如果我有正确的 cookie,为什么我无法登录?
编辑 2;
我用最终解决方案修改了我的代码,它起作用了!
感谢您的帮助!
几点说明:
- 您的 HTTP 状态为 302。使用
Jsoup.connect(...).followRedirects(true)
可能是个好主意
- 有些服务器会检查您来自的站点,因此建议设置引用 header:
Jsoup.connect(...).referrer(URL + "/login")
- 您确定
hidden
值始终是69
吗?也许每个请求都不同。您可以像这样动态获取它:formData.put("hidden",html.select("co_js").first().attr("value"));
我不喜欢你获取令牌的方式。让我们使用 Jsoup 来提取它:
String authToken = html.select("input#token").first().attr("value");
编辑:
- 我尝试从头开始执行此操作,但提交的登录表单缺少 Content-Type 定义。尝试使用:
Jsoup.connect(...).header("Content-Type","application/x-www-form-urlencoded")
我通过分析 Chrome 的开发工具中的 headers 得到了这个想法。现在我可以成功登录了。 - 您还可以使用以下代码检查您是否已登录:
Document doc = homePage.parse(); System.out.println("Logged in as: " + doc.select(".dropdown-toggle").text());
通过让服务器知道您可以处理压缩页面,您可以减小下载页面的大小。对于每个请求使用:
Jsoup.connect(...).header("accept-encoding", "gzip, deflate")
它是透明的,你不需要做任何特殊的事情来处理它,但它在内部工作。编辑 2:
根据之前的建议提供最终解决方案:
import java.util.HashMap;
import java.util.Map;
import org.jsoup.Connection;
import org.jsoup.Connection.Response;
import org.jsoup.Jsoup;
import org.jsoup.nodes.Document;
public class Whosebug51734840 {
private static final String URL = "https://time2watch.in";
private static final String URL_LOGIN = URL + "/login/";
static String userAgent = "Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/68.0.3440.106 Safari/537.36";
public static void main(final String[] args) throws Exception {
Map<String, String> headers = new HashMap<String, String>();
headers.put("accept-encoding", "gzip, deflate");
Connection.Response loginForm = Jsoup.connect(URL + "/login").userAgent(userAgent).headers(headers).execute();
Map<String, String> cookies = loginForm.cookies();
Document html = loginForm.parse();
String authToken = html.select("input#token").first().attr("value");
System.out.println("Found authToken:" + authToken);
Map<String, String> formData = new HashMap<String, String>();
formData.put("username", "!!!!!!!!!!!!!!!!!!");
formData.put("pwd", "!!!!!!!!!!!!!!!!!!");
formData.put("hidden", "69");
formData.put("token", authToken);
headers.put("Content-Type", "application/x-www-form-urlencoded");
System.out.println("cookies before login:");
System.out.println(cookies);
System.out.println(" Logged in cookie present? " + cookies.containsKey("s4icookuser"));
Connection.Response afterLoginPage = Jsoup.connect(URL_LOGIN).cookies(cookies).headers(headers)
.userAgent(userAgent).data(formData).method(Connection.Method.POST).referrer(URL_LOGIN).execute();
// update cookies
cookies = afterLoginPage.cookies();
System.out.println("cookies after login:");
System.out.println(cookies);
System.out.println(" Logged in cookie present? " + cookies.containsKey("s4icookuser"));
Response homePage = Jsoup.connect(URL).cookies(cookies).method(Connection.Method.GET).userAgent(userAgent)
.referrer(URL_LOGIN).followRedirects(true).referrer(URL_LOGIN).headers(headers).execute();
Document doc = homePage.parse();
System.out.println("Error? " + doc.text().contains("Erreur"));
System.out.println("OK? " + !doc.text().contains("Se connecter"));
System.out.println("Logged in as: " + doc.select(".dropdown-toggle").text());
}
}