.NET中如何使用PhantomJS与Selenium模拟采集数据
发表评论
在现代 web 开发中,数据采集是一个非常常见的需求。无论是从网站中提取信息,还是进行自动化测试,模拟用户行为都变得尤为重要。在 .NET 环境中,常见的两种模拟采集的工具是 PhantomJS 和 Selenium。这两者各具特点,适用于 […]
在现代 web 开发中,数据采集是一个非常常见的需求。无论是从网站中提取信息,还是进行自动化测试,模拟用户行为都变得尤为重要。在 .NET 环境中,常见的两种模拟采集的工具是 PhantomJS 和 Selenium。这两者各具特点,适用于 […]
C#使用phantomjs采集页面HTML。 code.js C#代码 调用
原理就是从webbrowser拿到Cookie 一般做网页登录,比如登录QQ空间,则要破解登录的相关的一系列加密算法。 在给客户维护以前登录QQ空间采集好友访客的一个软件时,发现2015年的空间密码加密方式变了,由以前的MD5改为了RSA, […]
ScrapySharp + HtmlAgilityPack 这两个库基本可以完成98%的采集需求,剩下的2%可以再加一个库: phantomjs 目前接到的需求中,还没有使用到 phantomjs这个库。 补充(2015-3-9) […]