Mengapa Saya Mendapat Ralat Terlarang 403 dengan Program Carian Google Java Saya, Tetapi Tidak dalam Penyemak Imbas Web Saya?

403 Dilarang dengan Java tetapi Bukan Penyemak Imbas Web: Menyelesaikan Isu Carian Google

Walaupun berjaya mendapatkan semula hasil carian dalam pelayar web, menemui ralat 403 Forbidden apabila cuba mengambil data carian Google menggunakan program Java boleh membingungkan. Punca utama terletak pada ketiadaan maklumat ejen pengguna dalam permintaan Java.

Untuk menyelesaikan isu ini, adalah perlu untuk mensimulasikan gelagat penyemak imbas web dengan menetapkan pengepala "User-Agent":

URLConnection connection = new URL("https://www.google.com/search?q=" + query).openConnection();
connection.setRequestProperty("User-Agent", "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.11 (KHTML, like Gecko) Chrome/23.0.1271.95 Safari/537.11");
connection.connect();

Pengepala ini mengarahkan pelayan untuk menganggap permintaan sebagai berasal daripada pelayar web, yang menghalang ralat 403. Perlu diingat bahawa pengendalian SSL dikendalikan secara automatik.

Walau bagaimanapun, mendapatkan semula jumlah hasil menggunakan Java memerlukan langkah selanjutnya. Anda perlu mengambil kuki dan menghuraikan pautan token ubah hala:

String cookie = connection.getHeaderField("Set-Cookie").split(";")[0];
Pattern pattern = Pattern.compile("content=\\"0;url=(.*?)\\"");
Matcher m = pattern.matcher(response);
if (m.find()) {
    String url = m.group(1);
    connection = new URL(url).openConnection();
    connection.setRequestProperty("User-Agent", "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.11 (KHTML, like Gecko) Chrome/23.0.1271.95 Safari/537.11");
    connection.setRequestProperty("Cookie", cookie);
    connection.connect();
    r = new BufferedReader(new InputStreamReader(connection.getInputStream(), Charset.forName("UTF-8")));
    sb = new StringBuilder();
    while ((line = r.readLine()) != null) {
        sb.append(line);
    }
    response = sb.toString();
    pattern = Pattern.compile("<div>

Melaksanakan keseluruhan blok kod menghasilkan hasil sebanyak 2930000000L, menunjukkan bilangan hasil carian.

Atas ialah kandungan terperinci Mengapa Saya Mendapat Ralat Terlarang 403 dengan Program Carian Google Java Saya, Tetapi Tidak dalam Penyemak Imbas Web Saya?. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!