真实经历表示: 不一定...

有没有考虑过, 内存确实 不足...

不知道调起 Chrome 然后指望 CDP 里面的 HeapProfiler.collectGarbage 一直清理有没有效, 至少我的爬虫有个翻页导致内存无限增长的问题就是指望它的...

@Livid 收到, 我以为以后都加 ddos 防火墙没法订阅自己的提醒了... 之前有一天半夜 2 点开始的, 当时以为自己被灰度了, 以后会恢复就好

.v2ex.com/n/ 订阅自己提醒的也翻车半个月了...

是不是全翻车了... 各种 503 什么的, 订阅不了了?

@Livid

考研 -> 以后就不会再问这个问题

工作 -> 以后一直在想这个问题

实习有提升的那都是神仙, 大部分实习都是学自己想学的东西, 真干活那是正式工以后的事, 读研给我的感觉一是长见识, 二是暂缓就业, 三是扩展圈子, 四才是学到点东西

目前疫情这样的节奏, 读研不算坏出路, 不过就像楼上说的, 如果是 985/211 的第一学历, 或者有大厂 offer, 直接参加工作也没有问题

感觉很大程度上是因为这里是真的过滤掉了很多劣质网民...

只要是网络游戏, 你永远也不知道网线那头是个什么, 再说净化网络环境对盈利没有好处, 快餐游戏以后甚至可能连议罪银都能整出来, 国产网民平均质量是什么水平都心里有数, 放平心态或者少打游戏

年轻时候打个英雄联盟九个人一块骂我我骄傲了吗 [doge]

我倒是也出现过这些没用的东西, 但是你这也太多了吧, 不知道是不是我关了那个 "套娃用户协议" 里面的广告的原因, 最近已经快一个月没见这些推荐了

面对 "没有人比他更懂产品" 的这个东西, 我只能六字真言了, 大多数想看的东西, 稍微官方一点的基本都有 RSS, 没有 RSS 我也有爬虫自己转, 只有公众号的那种订阅源不看也罢, 至于爬它, 之前工作爬了 3 年, 太费劲懒得折腾了

@RandomAccess
一样是一个事件循环来解决的, 先后顺序的阻塞用 await 或者协程队列都行
非要多线程或者非协程的, 走 run_in_executor

@wersonliu9527 匿名函数或者闭包函数确实在 console 里或者 window 对象里拿不到, 所以才建议的直接 cdp 上拦截流量替换 js 文件做注入... 调试模式断点那些东西要对 js 对象做操作, 又要找 node 又要找代码 ID, 挺折腾的

@tisswb
我从 Sublime 到 VSC 也是舍不得买那个授权... Pycharm 社区版我记得挺不错的, 我是嫌他启动太慢而且快捷键之类的定制化不太灵活, 直接无缝从 Sublime Text 转的 vscode

@RandomAccess
时间循环尽可能只用一个, 就算协程用的很熟悉的人, 也很少去多个线程上跑多个 loop
所以 Python 3.9 还是 3.10 之后, 很多内置的协程方法都去掉了 loop 参数, 默认都从 running loop 里面获取

你要做的是, 首先保证整个程序只留有一个事件循环(因为多个也没有意义, await 不是阻塞, 是等待), 然后在里面传递 session 对象就是合法的了

然后你说的阻塞, 协程实际上是非阻塞的设计, 你的阻塞可能是 await 关键词, 那个是等待不算阻塞. 所以你如果想并发开始多个任务, 可以把 "协程函数" (async def 声明的)执行获得的 "协程对象" 创建为 Task, 它就会开始执行但是又不会阻塞, 创建 Task 的方式有 asyncio.ensure_future(some_coro) 或者 asyncio.create_task(coro), 后者是 3.7 以后新增的

class TimerContext(BaseTimerContext):
""" Low resolution timeout context manager """

def __init__(self, loop: asyncio.AbstractEventLoop) -> None:
raise RuntimeError(
"Timeout context manager should be used " "inside a task"
)


老问题了, 所以我现在用到 aiohttp 尽量不用 asyncio.run, 因为它一定新建一个 loop, 然而 Session 的默认 Timeout 对象却是在协程外面初始化的, 导致两个循环不一致, 见下面源码

https://github.com/aio-libs/aiohttp/blob/742a8b6d09b2623670ddede838c913d2a8a4d89e/aiohttp/client.py#L161

据说 aiohttp 4.0 以后会好, 但是 4.0 一直发不出来

想解决的话, 简单的就是暂时别用 asyncio.run. 或者在协程函数里 import 它, 或者手动指定 Timeout 试试

第二次见这种需求, 上次还是去年面试...
cdp 里面可以直接跳到 Debugger.Location 然后做一些其他事情, 不过如果拿到 js 流量, 直接正则里面代码不好么, 随便注入点什么

@androllen 我是没法切换了, 以前在 Sublime 养成的键位习惯, 肌肉记忆根深蒂固了

想起我抢红米 K30S 那段时光... 伤害不高 侮辱性极强 [doug]

说谎不是一个好习惯, 因为不是每个人都能在大脑里构建 28 维平行宇宙来模拟事物发展的

如果一些人把说谎当作智商, 那不说谎把问题解决就是智慧了