Puppeteer 详解 入门教程 (网页爬虫利器)

Puppeteer 详解 入门教程 (网页爬虫利器)
1、Puppeteer 简介 Puppeteer 是一个node库,他提供了一组用来操纵Chrome的API, 通俗来说就是一个 headless chrome浏览器 (当然你也可以配置成有UI的,默认是没有的)。既然是浏览器,那么我们手工可以在浏览器上做的事情 Puppeteer 都能胜任, 另外,Puppeteer 翻译成中文是”木偶”意思,所以听名字就知道,操纵起来很方便,你可以很方便的操纵她去实现: 1) 生成网页截图或...

python pymysql 报错 pymysql.err.InterfaceError: (0, ”) 或 AttributeError: ‘dict’ object has no attribute ‘Exception’

python pymysql 报错 pymysql.err.InterfaceError: (0, ”) 或 AttributeError: ‘dict’ object has no attribute ‘Exception’
因为个人一直秉承着最好用最新版的原则,所以一直在使用Python3,结果今天在使用pymysql这个库,然后自己封装了一个mysql的类,但是各种报错。错误如下图: AttributeError: 'dict' object has no attribute 'Exception' 当时自己百度了很多资料,基本都没解决问题。先给大家看我封装的类的代码吧。如下:   1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 2...

Python2.7 使用 enum 注意事项

Python2.7 使用 enum 注意事项
在使用enum的时候,遇见了如下问题: 发现并不能通过Color.red.value获取值,而是通过Color.red 后查找资料,需要再安装一个python包: pip install enum34 然后就可以了:   @unique class TripSource(IntEnum): FILE_SIZE = 15 * 1024 * 1024 QUEUE_SIZE = 5000 POST_IP_SIZE = 50 FILE_ROWS = 2250 QUEUE_PUT_SIZE = 50000   资...

信用疯了 为了信用卡疯了

信用疯了 为了信用卡疯了
图:美国运通百夫长黑金卡 我能拖更???我呵呵一笑,托更?这辈子都不可能托更的。 近期的🍐很大,每次🍐大的时候我发现我自己都有独特的解决方案,很是另类,记得前两年我疯狂的买域名,买了好多好多域名,今年不买了,不浪费钱了,但是最近不知道什么情况,我居然疯狂的想申请信用卡,而且是申请白金信用卡,普通的信用卡完全瞧不上,感觉自己飘了,太飘...

phpstorm 调试无法自动打开 chrome 解决方法

phpstorm 调试无法自动打开 chrome 解决方法
相信大家看过我曾经写的“PhoStorm + Wamp + Xdebug 超详细设置 实现调试PHP程序代码” 应该可以轻易 的在自己的电脑上调试php程序代码了,但是在昨天帮朋友更改php程序的时候我发现当我点击调试按钮的时候,程序居然不会自动弹出浏览器打开页面了,这个一脸懵逼,当时因为很晚,所以想着先解决朋友的问题,今天把这个问题解决了,就在博客记录一下。废话太多,解决方案开始:...

最新版 wamp 安装 go-pear.phar 超详解 (wampserver)

最新版 wamp 安装 go-pear.phar 超详解 (wampserver)
说一下个人环境: WampServer Version 3.1.0 64bit php 5.6.31 Apache 2.4.27 windows 10 x64   第一步: 下载go-pear.phar(下载地址:http://pear.php.net/go-pear.phar )  最好用迅雷什么的下载不要用浏览器。因为文件很大。   第二步: 把下载好的go-pear.phar 放入wamp 的 PHP文件目录,例如我wamp的目录是 E:\wamp64\ 那么对应的PHP目录就是:E:\wamp64\bi...

wordpress 修改 文章归档

wordpress 修改 文章归档
首先进入你的wordpress管理后台,然后再左侧的功能中找到【外观】--【编辑】,然后如下图,找到“文章归档” 文章归档页面模板 (template-archives.php) 然后点击这个文件,可以看到这个文件里面的代码。然后可以看到里面的代码。这里通过这里面的代码还有你博客的URL地址https://woj.app/archives  做对比,然后可以看到 实际显示的功能代码为: 定位‘文章归档’功能代码 通过...

python 转(生成) exe 方法pyinstaller详解

python 转(生成) exe 方法pyinstaller详解
首先你需要安装pyinstaller,这里推荐你用python自带的方法安装。命令是:   pip install pyinstaller 如果你是windows下,执行此命令后,就不用再安装其他的了。 ------如果你执行了上述命令,则下面的内容可忽略------- 如果手动安装,则你需要注意,是否安装了“pypiwin32”,因为再windows必定依赖pypiwin32它。 pywin32的下载地址,注意对应版本。 https://source...

Python (含代码)爬取了猫眼 47858 万条评论,告诉你《飞驰人生》值不值得看?!

Python (含代码)爬取了猫眼 47858 万条评论,告诉你《飞驰人生》值不值得看?!
坦白说,看前几部电影的时候,我一直在想“到底放不放阿信的歌啊?什么时候放啊?”,那看《飞驰人生》的时候,直到影片结束片尾曲《一半人生》响起的时候,我才记起来,哦,之前我是为了这首歌才看的这部电影。 截止大年初四晚上24点,猫眼实时数据显示《飞驰人生》综合票房排名第三,票房占比16.1%。但是仅仅依靠数字怎么能直接看出一部电影的优劣呢?不如们来看看观众们...

谈一谈如何建设体系化的安全运营中心(SOC)

谈一谈如何建设体系化的安全运营中心(SOC)
0x00 前言 本文主要是谈谈笔者对于如何建设体系化的安全运营中心(SOC)的一点经验和思考,观点仅代表个人,仅供参考,不具普遍意义。 0x01 什么是SOC SOC, 即Security Operations Center,我们一般称之为安全运营中心,主要是负责企业的入侵检测,应急响应,以及安全监控等,通常我们会笼统地概括成两个方面即Blue Team (Defensive Security)和Red Team (Offensive Security)...