2020-12-25 alecctv 阅读(79) 评论(0)

抛出问题：分析：gbk和utf-8编码问题1.使用jd-gui-1.6.6.jar 反编译时出现乱码。增加运行参数。java -D'file.encoding'=utf-8 -jar .\jd-gui-1.6.6.j...

2020-12-20 alecctv 阅读(95) 评论(0)

直接开始操作：网页打开视频网站，比如爱奇艺的琅琊榜琅琊榜的网址是：https://www.iqiyi.com/v_19rrf6cagc.html将网址添加到解析网站后面，然后复制到浏览器打开就能直接播放视频了http...

2020-12-20 alecctv 阅读(85) 评论(0)

前言：记录下从解析网站获取vip视频文件地址后使用ffmpeg合成在线视频写入本地遇到的问题。(可配合Python爬取视频) ps:解析网站可以点这，解析视频地址可在开发者模式找到。场景一：ffmpeg失败：无法为...

2020-12-20 alecctv 阅读(410) 评论(0)

系统说明：学习，最重要的是融会贯通！ 花了一晚时间写了一段关键词爬取磁力以及自动入SQLite存库，简单使用了队列以及多线程技术，优化后版本在此分享记录 共使用7个线程，1个主线程6个子线程爬取数据本地环境：Or...

2020-12-20 alecctv 阅读(149) 评论(0)

分析展示3.1 queue相关知识本次使用python中的queue，也就是队列来模拟数据的存取过程。首先对于基本爬虫初期，可以简单的使用到queue的知识可以如下所示：初始化： class Queue.Queue...

2020-12-19 alecctv 阅读(83) 评论(0)

前言：因为国内墙的原因，或者连接国外速度。这时候想提高网速那就要用上代理了，代理使用的范围很广，还可搭配爬虫使用接下来开始：在网上找到一个docker的tinyproxy镜像的部署，endoffight/tinypr...

2020-12-19 alecctv 阅读(74) 评论(0)

非常简单，只要在请求的方法中(比如get或post)传递proxies参数就可以了。示例代码如下：#encoding: utf-8 import requests proxies = { 'https': ...