爬虫
-
OWASP ZAP 安全测试入门:从零开始玩转漏洞扫描
OWASP ZAP 安全测试入门:从零开始玩转漏洞扫描 引言 在互联网时代,网络安全问题日益突出,各种安全漏洞层出不穷。为了保障网站和应用程序的安全,安全测试成为了必不可少的一环。而 OWASP ZAP 作为一款开源的 web...
-
中文词形还原那些事儿:古文、网络用语和专业领域的处理之道
不知道你有没有遇到过这种情况:读古文的时候,明明每个字都认识,连在一起就不知道啥意思了?刷微博、逛论坛的时候,满屏的“yyds”、“zqsg”,看得一脸懵?或者,在处理一些专业领域的文本时,各种缩写、术语满天飞,让人头大? 其实,这背...
-
Elasticsearch Translog 深度解析:数据不丢的秘密与性能权衡
你好!如果你正在使用 Elasticsearch,并且对数据写入的可靠性、性能调优特别关心,那么 Translog (Transaction Log,事务日志) 这个机制你绝对不能忽视。它就像 Elasticsearch 数据写入过程中的...
-
Selenium攻克iframe:数据抓取的隐秘角落,不再束手无策!
相信不少朋友在使用Selenium进行网页数据抓取的时候,都遇到过这样的情况:明明在浏览器里能看到的数据,用Selenium却怎么也抓不到?别怀疑,很有可能是目标数据藏在了 iframe 这个“小房间”里! iframe (Inli...
-
Playwright跨语言文本提取实战:如何解决多语言环境下的编码乱码与语言检测难题
你遇到的真实场景 上周帮新加坡电商团队抓取日本乐天商品页时,突然发现价格显示成「ジューシー」这样的乱码;给德国客户做的爬虫在抓取俄语网站时,把西里尔字母识别成了问号框。这些就是跨语言数据提取的典型车祸现场。 编...
