作家
登录

爬虫-化被动为主动

作者: 来源: 2017-05-10 15:51:20 阅读 我要评论

一、媒介

我小我是比较懒的,先也写了个被动的扫描器,不想改以前写的器械,并且被动也有被动的长处,所以就想可弗成以让爬虫也设置个代劳。就有了下面的器械,很便利。

爬虫

二、实操

主构造:

以phantomjs为核心,用JS模仿人对页面的操作,代劳软件抓链接。以下贱程是通用pychon脚本实现的。

1打开浏览器并设置代劳->2输入网址->3填充表单->4点击按钮->5点击超链拉->6封闭标签->7封闭浏览器,轮回2-6。

1. 打开浏览器并设置代劳

  1. proxy_config = [ 
  2.     '--proxy=127.0.0.1:8080', 
  3.     '--proxy-type=http', 
  4.     '--ignore-ssl-errors=yes', 
  5. phantomjs_path='/home/ubuntu_235/proxyscan/phantomjs/phantomjs/bin/phantomjs' 
  6. driver = webdriver.PhantomJS(executable_path=phantomjs_path,service_args=sys_config

2. 输入网址

  1. driver.get('http://demo.aisec.cn') 

3. 填充表单

  1. _input_text = ""
  2.         var input_list=document.getElementsByTagName("input"); 
  3.         for (i_i=0;i_i<input_list.length;i_i++){ 
  4.         var input_type=input_list[i_i].attributes["type"].value 
  5.         if (input_type == "text" || input_type == "password"){ 
  6.         input_list[i_i].value="ascan@ascan.com"
  7.         continue; 
  8.         } 
  9.         if (input_type == "radio" || input_type == "checkbox"){ 
  10.         input_list[i_i].setAttribute('target','_blank'); 
  11.         input_list[i_i].checked="True"
  12.         } 
  13.         } 
  14. """ 

如安在不改变原被动扫描器的情况下让被动变成主动。

4. 点击按钮

  1. _but_click

      推荐阅读

      研究学习Kotlin的一些方法

    Kotlin是一门让人认为很舒畅的说话,比拟Java来说,它加倍简洁,省去了琐琐碎碎的语法工作,同时了供给了类似Lambda,String template,Null Safe Operator等特点。闪开辟者用起来轻车熟路>>>详细阅读


    本文标题:爬虫-化被动为主动

    地址:http://www.17bianji.com/lsqh/35132.html

关键词: 探索发现

乐购科技部分新闻及文章转载自互联网,供读者交流和学习,若有涉及作者版权等问题请及时与我们联系,以便更正、删除或按规定办理。感谢所有提供资讯的网站,欢迎各类媒体与乐购科技进行文章共享合作。

网友点评
自媒体专栏

评论

热度

精彩导读
栏目ID=71的表不存在(操作类型=0)