Über java mit Webseite kommunizieren

Diese Seite verwendet Cookies. Durch die Nutzung unserer Seite erklären Sie sich damit einverstanden, dass wir Cookies setzen. Weitere Informationen

  • Über java mit Webseite kommunizieren

    Hallo an alle,

    wollte mal fragen, wie ich vernünftig eine Webseiten-Kommuniktion mit Java ertellen kann. Also mein Anwendungsfall ist, dass ich eine Webseite parsen möchte um dort die (für mich wichtigen) Infos herauszufiltern, ohne die Seite selbst aufrufen zu müssen: z.B. akutelle Aktien-Kurse, das Wetter, die wichtigen Schlagzeilen von Spiegel-Online.
    Den Code dafür habe ich auch schon, allerdings gibt es auch Infos, die hinter einer LogIn-Maske stecken. Ich habe es auch schon geschafft mich mittels POST dort einzuloggen. Allerdings wird, wie ich das kenne, eine Session erstellt, mit der man sonst verschlossende Bereiche betreten darf. Jetzt weiß ich allerdings nicht, wie ich diese Session speichern und wiederverwenden kann. Gibt es ein Session-Handling in Java?

    Hier mein bisheriger Code:

    Quellcode

    1. private static ArrayList<String> getURLRespons(String urlPfad, boolean isPOST)
    2. {
    3. ArrayList<String> respons = new ArrayList<String>();
    5. try {
    6. // Construct data
    7. String data = "";
    9. if(isPOST)
    10. {
    11. data = URLEncoder.encode("loginUsername", "UTF-8") + "=" + URLEncoder.encode("Peter123", "UTF-8");
    12. data += "&" + URLEncoder.encode("loginPassword", "UTF-8") + "=" + URLEncoder.encode("123456", "UTF-8");
    13. }
    15. // Send data
    16. URL url = new URL(urlPfad);
    17. URLConnection conn = url.openConnection();
    18. conn.setDoOutput(true);
    19. OutputStreamWriter wr = new OutputStreamWriter(conn.getOutputStream());
    20. wr.write(data);
    21. wr.flush();
    23. // Get the response
    24. BufferedReader rd = new BufferedReader(new InputStreamReader(conn.getInputStream()));
    25. String line;
    26. while ((line = rd.readLine()) != null) {
    27. respons.add(line);
    28. }
    29. wr.close();
    30. rd.close();
    32. } catch (Exception e) {
    33. e.printStackTrace();
    34. }
    36. return respons;
    37. }
    Alles anzeigen


    Bin für jeden Tipp sehr dankbar.

    Gruß Someone2313

  • Habe es nun lösen können :) Dank eine Thread von den Kollegen aus "java-forum.org": java-forum.org/allgemeine-java…-via-java.html#post663753 Allerdings musste ich den Code etwas anpassen, damit es lief. Hier meine Version:

    Quellcode

    1. package post_respons;
    3. import java.io.*;
    4. import java.net.*;
    5. import java.util.*;
    7. public class Main2 {
    9. /**
    10. * @param args
    11. */
    12. public static void main(String[] args) {
    14. try {
    15. /* Link zur LoginSeite */
    16. URL url = new URL("http://www.<LoginURL>.de/index.php");
    17. HttpURLConnection con = (HttpURLConnection) url.openConnection();
    19. /* Parameter per POST senden */
    20. con.setRequestMethod("POST"); /* die Zeile brauchst nicht unbedingt */
    21. con.setDoOutput(true);
    23. /* login/pass ist der name des entsprechenden input fields aus der html seite,
    24. * username/ passwort sind deine login-date */
    25. OutputStreamWriter writer = new OutputStreamWriter(con.getOutputStream());
    26. writer.write("loginUsername=Peter123&");
    27. writer.write("loginPassword=123456");
    28. writer.flush();
    29. writer.close();
    31. /* Asugabe der HTML Antwort Page */
    32. BufferedReader reader = new BufferedReader(
    33. new InputStreamReader(con.getInputStream()));
    34. String line = null;
    35. while((line = reader.readLine()) != null) {
    36. // System.out.println(line);
    37. }
    39. /* SESSION auslesen (diese Session musst du nun in den folgenden aufrufen mitgeben,
    40. * dann bist du eingeloggt. ) */
    41. String CookieH5 = con.getHeaderField(5);
    42. con.disconnect();
    45. // Neue Verbindung aufbauen
    46. url = new URL("http://www.<URLimLogin-Bereich.de");
    47. con = (HttpURLConnection) url.openConnection();
    49. // nun die SESSION wieder mitgeben
    50. con.setRequestProperty("Cookie", CookieH5);
    52. // Asugabe der HTML Antwort Page
    53. reader = new BufferedReader(
    54. new InputStreamReader(con.getInputStream()));
    55. line = null;
    56. while((line = reader.readLine()) != null) {
    57. System.out.println(line);
    58. }
    63. } catch (Exception e) {
    64. e.printStackTrace();
    65. }
    68. }
    70. }
    Alles anzeigen