惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

Y
Y Combinator Blog
博客园 - 叶小钗
GbyAI
GbyAI
H
Hackread – Cybersecurity News, Data Breaches, AI and More
Stack Overflow Blog
Stack Overflow Blog
Jina AI
Jina AI
Microsoft Security Blog
Microsoft Security Blog
T
Tailwind CSS Blog
S
SegmentFault 最新的问题
freeCodeCamp Programming Tutorials: Python, JavaScript, Git & More
博客园 - 聂微东
Google DeepMind News
Google DeepMind News
Martin Fowler
Martin Fowler
有赞技术团队
有赞技术团队
Hugging Face - Blog
Hugging Face - Blog
N
Netflix TechBlog - Medium
B
Blog
MongoDB | Blog
MongoDB | Blog
钛媒体:引领未来商业与生活新知
钛媒体:引领未来商业与生活新知
让小产品的独立变现更简单 - ezindie.com
让小产品的独立变现更简单 - ezindie.com
V
V2EX
雷峰网
雷峰网
Apple Machine Learning Research
Apple Machine Learning Research
人人都是产品经理
人人都是产品经理

老董笔记

尚硅谷机构在哪?尚硅谷培训怎么样?靠谱吗-互联网IT百科 韩顺平介绍,传智讲师,开办泰牛,入尚硅谷等一系列-互联网IT百科 pandas多重索引标准样式(写入excel有空行)-互联网IT百科 cannot join with no overlapping index names-互联网IT百科 pandas多列变多行(即宽表变长表)melt和stack函数-互联网IT百科 pandas多行转多列(长表变宽表)pivot和unstack-互联网IT百科 Index contains duplicate entries, cannot reshape完美解决-互联网IT百科 single positional indexer is out-of-bounds-互联网IT百科 Can only compare identically-labeled Series objects-互联网IT百科 pandas transform用法详解(多个案例)-互联网IT百科 python四舍五入精确实现-互联网IT百科 pandas的groupby使用apply分组排序-互联网IT百科 index 0 is out of bounds for axis 0 with size 0-互联网IT百科 pandas分组过滤filter函数-互联网IT百科 联想Win10系统如何禁用触摸屏关闭触摸-互联网IT百科 groupby分组计算transform转换返回相同长度序列-互联网IT百科 brooks seo教程python教程,brooks seo教程网盘,布鲁seo资源-互联网IT百科 电脑右键文件夹一直转圈电卡死怎么回事-互联网IT百科 施琪嘉的心理成长课(荐)-互联网IT百科 百度SEO公司_SEO推广公司哪家好_SEO外包服务如何选-老董笔记 groupby后agg同1列用多个聚合函数、不同列用不同函数、自定义函数-互联网IT百科 pandas的groupby单列多列分组聚合运算-互联网IT百科 DataFrameGroupBy对象及分组个数、分组大小、组名索引、组数据详解-互联网IT百科 pandas中groupby之Grouper and axis must be same length-互联网IT百科 pandas中groupby的分组原理-互联网IT百科 pandas的groupby的使用详解大全-互联网IT百科 openpyxl单元格自动换行强制换行Alignment(wrapText=True)-互联网IT百科 python教程全套(可就业)-互联网IT百科 联想win10系统CPU显示100%,电脑呼呼响怎么回事-互联网IT百科 如何自制CPU,CPU原理是怎么样的?-互联网IT百科
selenium清除残留chromedriver进程(网上帖子是错的)-互联网IT...
2020-09-14 · via 老董笔记

  selenium如果频繁通过chromedriver来启动和关闭谷歌浏览器,那么内存会残留一些chromedriver进程,因为chromedriver并不会随着程序的退出而立刻在内存消失。所以在频繁使用的时候可能感觉到卡顿,此时查下系统的进程会发现很多chromedriver驻留在内存!

  解决这个问题,也是有思路可寻的,网上也有相关文章,但是千篇一律,而且是错的!!!目测全部都是复制粘贴,真是流毒甚深。你看度娘显示相同的文章的:

  这个文章被N个人转载,流传甚广,可惜他说的在python中的操作是错的。他的错误做法如下:

c_service = Service('chromedriver路径')
c_service.command_line_args()
c_service.start()
driver = webdriver.Chrome()
driver.get("http://www.baidu.com")
driver.quit();
c_service.stop()

  经过验证,以上做法在启动之初就会产生2个chromedriver,一个是WebDriver类创建的,一个是Service类创建的,而且这两个chromedriver各自为政毫无关系,退出也是各自退出各自的。不相信的话,我们看WebDriver的源码,他的quit方法内部就是靠service.stop()。而且本人实际在cmd下查看过chromedriver进程确实有2个,所以上面那篇帖子的做法纯属意淫,画蛇添足,毫无根据!

 def quit(self):
        """
        Closes the browser and shuts down the ChromeDriver executable
        that is started when starting the ChromeDriver
        """
        try:
            RemoteWebDriver.quit(self)
        except Exception:
            # We don't care about the message because something probably has gone wrong
            pass
        finally:
            self.service.stop()

  正确的做法应该是这么来实现:

from selenium.webdriver.chrome.service import Service


service = Service('xxx') # 参数是chromedriver路径
service.command_line_args()
service.start()
option = Options()
No_Image_loading = {"profile.managed_default_content_settings.images": 2}
option.add_experimental_option("prefs", No_Image_loading)
driver = webdriver.Remote(service.service_url,options=option)
driver.get('http://mail.sina.net');
service.stop()

  以上做法可行是因为WebDriver类本身就是继承了RemoteWebDriver类,不过要注意上面的方法创建的driver实例不具备execute_cdp_cmd方法,因为execute_cdp_cmd方法是WebDriver类定义的,没有这个方法可能无法屏蔽一些反爬特征。

  如果想彻底的话,还是在结尾直接调用cmd命令来干掉chromedriver进程【 os.system('taskkill /im chromedriver.exe /F')】记得加个异常处理免得chromedriver不存在了你还在杀死他。,当然这是通杀,如果想精准杀死进程也是可以的,利用driver.service.process.pid属性可实现。

很赞哦!

python编程网提示:转载请注明来源www.python66.com。
有宝贵意见可添加站长微信(底部),获取技术资料请到公众号(底部)。同行交流请加群 python学习会