Programmgesteuert auf die Webseite in Java zugreifen

Question

Es gibt eine Webseite, von der ich eine bestimmte Zeichenfolge abrufen möchte. Um dies zu tun, muss ich mich anmelden, auf einige Schaltflächen klicken, ein Textfeld ausfüllen, auf eine andere Schaltfläche klicken - und dann erscheint die Zeichenfolge.

Wie kann ich ein Java-Programm schreiben, um das automatisch zu tun? Gibt es zu diesem Zweck nützliche Bibliotheken? Nun

Dank

Answer 1

HtmlUnit

Htmlunit ein "GUI-Less-Browser für Java-Programme" ist. Es modelliert HTML Dokumente und bietet eine API, können Sie Seiten aufrufen, füllen Sie Formulare, klicken Sie auf Links, etc ... genau wie Sie in Ihrem "normalen" Browser tun.

Beispielcode für submiting Form:

@Test 
public void submittingForm() throws Exception { 
    final WebClient webClient = new WebClient(); 

    // Get the first page 
    final HtmlPage page1 = webClient.getPage("http://some_url"); 

    // Get the form that we are dealing with and within that form, 
    // find the submit button and the field that we want to change. 
    final HtmlForm form = page1.getFormByName("myform"); 

    final HtmlSubmitInput button = form.getInputByName("submitbutton"); 
    final HtmlTextInput textField = form.getInputByName("userid"); 

    // Change the value of the text field 
    textField.setValueAttribute("root"); 

    // Now submit the form by clicking the button and get back the second page. 
    final HtmlPage page2 = button.click(); 

    webClient.closeAllWindows(); 
} 

Für weitere Informationen überprüfen: http://htmlunit.sourceforge.net/gettingStarted.html

Answer 2

, wenn Sie eine Taste drücken in der Regel Sie eine Anfrage über eine HTTP-POST-Methode zu tun, so sollten Sie HttpClient Anfrage bearbeiten verwenden und HtmlParser die Antwortseite mit der Zeichenfolge behandeln Sie benötigen.

Answer 3

Ja:

• java.net.URL#openConnection() ermöglicht es Ihnen, HTTP-Anfragen zu machen und bekommen die http Antworten

• Apache HttpComponents ist eine Bibliothek, die die Arbeit mit HTTP erleichtert.

Answer 4

Werfen Sie einen Blick in das Apache HttpClient Projekt, oder wenn Sie müssen Javascript auf der Seite ausführen können, versuchen HttpUnit.

Answer 5

Die Super-einfache Möglichkeit, dies zu tun, ist mit Htmlunit hier:

http://htmlunit.sourceforge.net/

und was wollen Sie so einfach tun sein können, wie:

@Test 
public void homePage() throws Exception { 
    final WebClient webClient = new WebClient(); 
    final HtmlPage page = webClient.getPage("http://htmlunit.sourceforge.net"); 
    assertEquals("HtmlUnit - Welcome to HtmlUnit", page.getTitleText()); 
}