C#彻底解决Web Browser 跨域读取Iframes内容

用C# winform的控件web browser 读取网页内容,分析一下数据,做一些采集工作。

如果是同一个域名下面还是好办的,基本上用HtmlAgilityPack就完全可以解决问题。

但是现在遇到跨域问题,比如我需要打开页面上存在的广告联盟的地址,进行保存。

这就是牵扯到跨域。

一般的错误是:拒绝访问。

"Access is denied. (Exception from HRESULT: 0x80070005 (E_ACCESSDENIED))"。

因为你没有在这个网站去修改另一个网站数据的权利。

怎么办?很困恼吧。现在就告诉大家一个好办法。

直接上代码了。

工具类,大家保存成一个类。需要引用mshtml

using System;

using System.Runtime.InteropServices;

using System.Windows.Forms;

using mshtml;

namespace WebBrowserTest

{

// This is the COM IServiceProvider interface, not System.IServiceProvider .Net interface!

[ComImport(), ComVisible(true), Guid("6D5140C1-7436-11CE-8034-00AA006009FA"),

InterfaceTypeAttribute(ComInterfaceType.InterfaceIsIUnknown)]

public interface IServiceProvider

{

[return: MarshalAs(UnmanagedType.I4)]

[PreserveSig]

int QueryService(ref Guid guidService, ref Guid riid, [MarshalAs(UnmanagedType.Interface)] out object ppvObject);

}

public enum OLECMDF

{

OLECMDF_DEFHIDEONCTXTMENU = 0x20,

OLECMDF_ENABLED = 2,

OLECMDF_INVISIBLE = 0x10,

OLECMDF_LATCHED = 4,

OLECMDF_NINCHED = 8,

OLECMDF_SUPPORTED = 1

}

public enum OLECMDID

{

OLECMDID_PAGESETUP = 8,

OLECMDID_PRINT = 6,

OLECMDID_PRINTPREVIEW = 7,

OLECMDID_PROPERTIES = 10,

OLECMDID_SAVEAS = 4

}

public enum OLECMDEXECOPT

{

OLECMDEXECOPT_DODEFAULT,

OLECMDEXECOPT_PROMPTUSER,

OLECMDEXECOPT_DONTPROMPTUSER,

OLECMDEXECOPT_SHOWHELP

}

[ComImport, Guid("D30C1661-CDAF-11d0-8A3E-00C04FC9E26E"), TypeLibType(TypeLibTypeFlags.FOleAutomation | TypeLibTypeFlags.FDual | TypeLibTypeFlags.FHidden)]

public interface IWebBrowser2

{

[DispId(100)]

void GoBack();

[DispId(0x65)]

void GoForward();

[DispId(0x66)]

void GoHome();

[DispId(0x67)]

void GoSearch();

[DispId(0x68)]

void Navigate([In] string Url, [In] ref object flags, [In] ref object targetFrameName, [In] ref object postData, [In] ref object headers);

[DispId(-550)]

void Refresh();

[DispId(0x69)]

void Refresh2([In] ref object level);

[DispId(0x6a)]

void Stop();

[DispId(200)]

object Application { [return: MarshalAs(UnmanagedType.IDispatch)] get; }

[DispId(0xc9)]

object Parent { [return: MarshalAs(UnmanagedType.IDispatch)] get; }

[DispId(0xca)]

object Container { [return: MarshalAs(UnmanagedType.IDispatch)] get; }

[DispId(0xcb)]

object Document { [return: MarshalAs(UnmanagedType.IDispatch)] get; }

[DispId(0xcc)]

bool TopLevelContainer { get; }

[DispId(0xcd)]

string Type { get; }

[DispId(0xce)]

int Left { get; set; }

[DispId(0xcf)]

int Top { get; set; }

[DispId(0xd0)]

int Width { get; set; }

[DispId(0xd1)]

int Height { get; set; }

[DispId(210)]

string LocationName { get; }

[DispId(0xd3)]

string LocationURL { get; }

[DispId(0xd4)]

bool Busy { get; }

[DispId(300)]

void Quit();

[DispId(0x12d)]

void ClientToWindow(out int pcx, out int pcy);

[DispId(0x12e)]

void PutProperty([In] string property, [In] object vtValue);

[DispId(0x12f)]

object GetProperty([In] string property);

[DispId(0)]

string Name { get; }

[DispId(-515)]

int HWND { get; }

[DispId(400)]

string FullName { get; }

[DispId(0x191)]

string Path { get; }

[DispId(0x192)]

bool Visible { get; set; }

[DispId(0x193)]

bool StatusBar { get; set; }

[DispId(0x194)]

string StatusText { get; set; }

[DispId(0x195)]

int ToolBar { get; set; }

[DispId(0x196)]

bool MenuBar { get; set; }

[DispId(0x197)]

bool FullScreen { get; set; }

[DispId(500)]

void Navigate2([In] ref object URL, [In] ref object flags, [In] ref object targetFrameName, [In] ref object postData, [In] ref object headers);

[DispId(0x1f5)]

OLECMDF QueryStatusWB([In] OLECMDID cmdID);

[DispId(0x1f6)]

void ExecWB([In] OLECMDID cmdID, [In] OLECMDEXECOPT cmdexecopt, ref object pvaIn, IntPtr pvaOut);

[DispId(0x1f7)]

void ShowBrowserBar([In] ref object pvaClsid, [In] ref object pvarShow, [In] ref object pvarSize);

[DispId(-525)]

WebBrowserReadyState ReadyState { get; }

[DispId(550)]

bool Offline { get; set; }

[DispId(0x227)]

bool Silent { get; set; }

[DispId(0x228)]

bool RegisterAsBrowser { get; set; }

[DispId(0x229)]

bool RegisterAsDropTarget { get; set; }

[DispId(0x22a)]

bool TheaterMode { get; set; }

[DispId(0x22b)]

bool AddressBar { get; set; }

[DispId(0x22c)]

bool Resizable { get; set; }

}

class CorssDomainHelper

{

private static Guid IID_IWebBrowserApp = new Guid("0002DF05-0000-0000-C000-000000000046");

private static Guid IID_IWebBrowser2 = new Guid("D30C1661-CDAF-11D0-8A3E-00C04FC9E26E");

// Utility for IE cross domain access

// Returns null in case of failure.

public static IHTMLDocument3 GetDocumentFromWindow(IHTMLWindow2 htmlWindow)

{

if (htmlWindow == null)

{

return null;

}

// First try the usual way to get the document.

try

{

IHTMLDocument2 doc = htmlWindow.document;

return (IHTMLDocument3)doc;

}

catch (COMException comEx)

{

// I think COMException won't be ever fired but just to be sure ...

}

catch (UnauthorizedAccessException)

{

}

catch (Exception ex)

{

return null;

}

// At this point the error was E_ACCESSDENIED because the frame contains a document from another domain.

// IE tries to prevent a cross frame scripting security issue.

try

{

// Convert IHTMLWindow2 to IWebBrowser2 using IServiceProvider.

IServiceProvider sp = (IServiceProvider)htmlWindow;

// Use IServiceProvider.QueryService to get IWebBrowser2 object.

Object brws = null;

sp.QueryService(ref IID_IWebBrowserApp, ref IID_IWebBrowser2, out brws);

// Get the document from IWebBrowser2.

IWebBrowser2 browser = (IWebBrowser2)(brws);

return (IHTMLDocument3)browser.Document;

}

catch (Exception ex)

{

Console.WriteLine(ex);

}

return null;

}

}

}

使用的时候方法是这样的:

HTMLDocument doc = (HTMLDocument)Browser.Document.DomDocument;

for (int i = 0; i < Browser.Document.Window.Frames.Count; i++)

{

IHTMLDocument3 baiduDoc = CorssDomainHelper.GetDocumentFromWindow(Browser.Document.Window.Frames[i].DomWindow

as IHTMLWindow2);

if (baiduDoc!=null && baiduDoc.documentElement!=null && baiduDoc.documentElement.document != null)

{

IHTMLElementCollection linkss = ((HTMLDocument)(baiduDoc.documentElement.document)).links;

foreach (mshtml.IHTMLElement element in linkss)

{

//加入你的代码就可以了。

}

}

测试完全可以解决webbrowser 跨域访问iframe的问题。

转发请注明:IT分享  ***

 
 

C#彻底解决Web Browser 跨域读取Iframes内容的更多相关文章

  1. 解决web资源跨域请求问题

    参考地址: http://my.oschina.net/lichaoqiang/blog/317823 在浏览器请求中,出现跨域访问资源的问题,我们肯定会遇到.如果跨域请求被阻止,有可能导致css.j ...

  2. IIS反向代理解决Web前端跨域

    1.1 IIS7反向代理解决跨域问题IIS的版本必须是IIS7及其以上,否则没有反向代理功能:按照以下步骤来配置IIS,以实现反向代理: 1.2 配置步骤1. 下载安装ARR(Application ...

  3. 跨域调用webapi web端跨域调用webapi

    web端跨域调用webapi   在做Web开发中,常常会遇到跨域的问题,到目前为止,已经有非常多的跨域解决方案. 通过自己的研究以及在网上看了一些大神的博客,写了一个Demo 首先新建一个webap ...

  4. 170222、使用Spring Session和Redis解决分布式Session跨域共享问题

    使用Spring Session和Redis解决分布式Session跨域共享问题 原创 2017-02-27 徐刘根 Java后端技术 前言 对于分布式使用Nginx+Tomcat实现负载均衡,最常用 ...

  5. JSON跨域读取那点事(JSONP跨域访问)

    最近在码一个小项目,需要远程读取json.因为需求很少,如果引用jquery使用其getjson方法就显得很浪费嘛= = 这篇文章很详细的解释了JSON跨域读取的前世今生,把原理讲得很透彻.特此分享. ...

  6. 转:解决tomcat服务器跨域问题

    原文地址: 解决tomcat服务器跨域请求问题 注:还未测试 在tomcat 的web.xml 配置文件中加入如下配置过滤器 (如web.xml中有多个filter时要把下面配置放在最前端) < ...

  7. 关于跨域读取json数据我的理解

    这两天在做关于读取json数据的插件,想用getJSON读取数据: $.getJSON(http://www.xxxx.com/Titles.js, function (data) { console ...

  8. Nginx配置解决NetCore的跨域

    使用Nginx配置解决NetCore的跨域 废话不多说,直接上Nginx配置 server { listen 80; server_name 你的Id或域名; location / { add_hea ...

  9. Web Api跨域访问配置及调用示例

    1.Web Api跨域访问配置. 在Web.config中的system.webServer内添加以下代码: <httpProtocol> <customHeaders> &l ...

随机推荐

  1. AngularJS应用开发思维之3:依赖注入

    找不到的API? AngularJS提供了一些功能的封装,但是当你试图通过全局对象angular去 访问这些功能时,却发现与以往遇到的库大不相同. $http 比如,在jQuery中,我们知道它的AP ...

  2. 基于Asterisk的VoIP开发指南——Asterisk 模块编写指南(1)

    原文:基于Asterisk的VoIP开发指南--Asterisk 模块编写指南(1) 1 开源项目概述 Asterisk是一个开源的软件包,通常运行在Linux操作系统平台上.Asterisk可以用三 ...

  3. C#网络编程系列(两)它Socket同步TCPserver

    声明原文 笔者:竹zz  本文地址http://blog.csdn.net/zhujunxxxxx/article/details/44258719 转载请注明出处 文章系列文件夹 C#网络编程系列文 ...

  4. 18 个最新实用的 jQuery 插件

    1. Simple Effects for Drop-Down Lists 一个jQuery插件用于将普通的select控件转成一个带有一些简单扩展效果的下拉列表. 2. X-editable 这个插 ...

  5. Building Modern Web Apps-构建现代的 Web 应用程序

    Building Modern Web Apps-构建现代的 Web 应用程序 视频长度:1 小时左右 视频作者:Scott Hunter 和 Scott Hanselman 视频背景:Visual ...

  6. less 命令

    每天一个linux命令(13):less 命令 less 工 具也是对文件或其它输出进行分页显示的工具,应该说是linux正统查看文件内容的工具,功能极其强大.less 的用法比起 more 更加的有 ...

  7. js实现多张图片同时放大缩小相对位置不变

    项目要求需要用js实现同时放大多张图片相对位置不变,就和同事去一家国外网站的js文件中跟踪扒取了这一算法, 庆幸的是算法抠出来了并整理了出来,但遗憾的只知计算过程却弄不明白算法原理: 大体上是核心运算 ...

  8. CSS绘制无图片的气泡对话框

    <div class="qipao_contianer">            <div class="qipao_content yj3" ...

  9. maven 启蒙

    Maven是基于项目对象模型(POM),可以通过一小段描述信息来管理项目的构建,报告和文档的软件项目管理工具.为了替代ANT的Apache开源项目.现在的项目越来越大.ANT已经不适用了. 1.部署m ...

  10. JS代码平面化

    重构JS代码 - 让JS代码平面化   js中的嵌套函数用的很多,很牛叉,那为何要平面化? 易懂(自己及他人) 易修改(自己及他人) 平时Ajax调用写法(基于jQuery) $.post('url' ...