TE
科技回声
首页24小时热榜最新最佳问答展示工作
GitHubTwitter
首页

科技回声

基于 Next.js 构建的科技新闻平台,提供全球科技新闻和讨论内容。

GitHubTwitter

首页

首页最新最佳问答展示工作

资源链接

HackerNews API原版 HackerNewsNext.js

© 2025 科技回声. 版权所有。

A guide to Web Scraping without getting blocked

75 点作者 daolf超过 5 年前

2 条评论

staticautomatic超过 5 年前
This is a pretty clear and concise overview but I wish it went into a little more technical detail, especially about running multiple concurrent browser instances.
评论 #21768166 未加载
adipasquale超过 5 年前
very informative, thanks! i coincidentally just posted a blogpost about the other complementary approach using pure HTTP requests without headless browsers: <a href="https:&#x2F;&#x2F;news.ycombinator.com&#x2F;item?id=21770576" rel="nofollow">https:&#x2F;&#x2F;news.ycombinator.com&#x2F;item?id=21770576</a>