Как получить содержимое веб-страницы из WebView?

На Android у меня есть WebView, на котором отображается страница.

Как получить источник страницы без повторного запроса страницы?

Кажется, что WebView должен иметь какой-то метод getPageSource(), который возвращает строку, но, увы, это не так.

Если я разрешаю JavaScript, то какой JavaScript должен помещать этот вызов для получения содержимого?

webview.loadUrl("javascript:(function() { " +  
    "document.getElementsByTagName('body')[0].style.color = 'red'; " +  
    "})()");  

Ответ 1

Я знаю, что это поздний ответ, но я нашел этот вопрос, потому что у меня была такая же проблема. Я думаю, что нашел ответ в этот пост на lexandera.com. Код ниже в основном представляет собой вырезку и вставку с сайта. Кажется, это трюк.

final Context myApp = this;

/* An instance of this class will be registered as a JavaScript interface */
class MyJavaScriptInterface
{
    @JavascriptInterface
    @SuppressWarnings("unused")
    public void processHTML(String html)
    {
        // process the html as needed by the app
    }
}

final WebView browser = (WebView)findViewById(R.id.browser);
/* JavaScript must be enabled if you want it to work, obviously */
browser.getSettings().setJavaScriptEnabled(true);

/* Register a new JavaScript interface called HTMLOUT */
browser.addJavascriptInterface(new MyJavaScriptInterface(), "HTMLOUT");

/* WebViewClient must be set BEFORE calling loadUrl! */
browser.setWebViewClient(new WebViewClient() {
    @Override
    public void onPageFinished(WebView view, String url)
    {
        /* This call inject JavaScript into the page which just finished loading. */
        browser.loadUrl("javascript:window.HTMLOUT.processHTML('<head>'+document.getElementsByTagName('html')[0].innerHTML+'</head>');");
    }
});

/* load a web page */
browser.loadUrl("http://lexandera.com/files/jsexamples/gethtml.html");

Ответ 2

Per issue 12987, ответ Blundell вызывает сбой (по крайней мере, на моей 2.3 VM). Вместо этого я перехватываю вызов console.log со специальным префиксом:

// intercept calls to console.log
web.setWebChromeClient(new WebChromeClient() {
    public boolean onConsoleMessage(ConsoleMessage cmsg)
    {
        // check secret prefix
        if (cmsg.message().startsWith("MAGIC"))
        {
            String msg = cmsg.message().substring(5); // strip off prefix

            /* process HTML */

            return true;
        }

        return false;
    }
});

// inject the JavaScript on page load
web.setWebViewClient(new WebViewClient() {
    public void onPageFinished(WebView view, String address)
    {
        // have the page spill its guts, with a secret prefix
        view.loadUrl("javascript:console.log('MAGIC'+document.getElementsByTagName('html')[0].innerHTML);");
    }
});

web.loadUrl("http://www.google.com");

Ответ 3

Это ответ, основанный на jluckyiv's, но я думаю, что лучше и проще изменить Javascript следующим образом.

browser.loadUrl("javascript:HTMLOUT.processHTML(document.documentElement.outerHTML);");

Ответ 4

Рассматривали ли вы выборку HTML отдельно, а затем загружали его в веб-просмотр?

String fetchContent(WebView view, String url) throws IOException {
    HttpClient httpClient = new DefaultHttpClient();
    HttpGet get = new HttpGet(url);
    HttpResponse response = httpClient.execute(get);
    StatusLine statusLine = response.getStatusLine();
    int statusCode = statusLine.getStatusCode();
    HttpEntity entity = response.getEntity();
    String html = EntityUtils.toString(entity); // assume html for simplicity
    view.loadDataWithBaseURL(url, html, "text/html", "utf-8", url); // todo: get mime, charset from entity
    if (statusCode != 200) {
        // handle fail
    }
    return html;
}

Ответ 5

Мне удалось получить эту работу, используя код из ответа @jluckyiv, но мне пришлось добавить в аннотацию @JavascriptInterface метод processHTML в MyJavaScriptInterface.

class MyJavaScriptInterface
{
    @SuppressWarnings("unused")
    @JavascriptInterface
    public void processHTML(String html)
    {
        // process the html as needed by the app
    }
}

Ответ 6

Вам также нужно аннотировать метод с @JavascriptInterface, если ваша targetSdkVersion >= 17 - потому что в SDK 17 есть новые требования к безопасности, т.е. все javascript-методы должны быть аннотированы с помощью @JavascriptInterface. В противном случае вы увидите ошибку: Uncaught TypeError: Object [object Object] не имеет метода "processHTML" в null: 1

Ответ 7

Если вы работаете над kitkat и выше, вы можете использовать хром-инструменты для отладки, чтобы найти все запросы и ответы, входящие и выходящие из вашего веб-браузера, а также исходный код html просматриваемой страницы.

https://developer.chrome.com/devtools/docs/remote-debugging