Python网络爬虫领域两个最新的比较火的工具莫过于httpx和parsel了。

## httpx和parsel

httpx号称下一代的新一代网络请求库，不仅支持requests库的所有操作，还能发送异步请求。

parsel最初集成在著名Python爬虫框架Scrapy中，后独立出来成立一个单独的模块，支持XPath选择器、CSS选择器和正则表达式等多种解析提取方式, 据说相比于BeautifulSoup解析效率更高。

## 多线程代码

    from fake_useragent import UserAgent
    import csv
    import re
    import time
    from parsel import Selector
    import httpx
    import threading
    class HomeLinkSpider(object):
    def init(self):
    self.data = list()
    self.path = "浦东_70_90平_500_800万.csv"
    self.url = "https://sh.lianjia.com/ershoufang/pudong/a3p5/"
    def get_max_page(self):
        response = httpx.get(self.url, headers={&quot;User-Agent&quot;: UserAgent().random})
        if response.status_code == 200:
            # 创建Selector类实例
            selector = Selector(response.text)
            # 采用css选择器获取最大页码div Boxl
            a = selector.css('div[class=&quot;page-box house-lst-page-box&quot;]')
            # 使用eval将page-data的json字符串转化为字典格式
            max_page = eval(a[0].xpath(&quot;//@page-data&quot;).get())[&quot;totalPage&quot;]
            print(f&quot;最大页码数：{max_page}&quot;)
            return max_page
        else:
            print(&quot;请求失败 status:{}&quot;.format(response.status_code))
            return None
    
    # 解析单页面，需传入单页面url地址
    def parse_single_page(self, url):
        print(f&quot;多线程开始爬取：{url}&quot;)
        response = httpx.get(url, headers={&quot;User-Agent&quot;: UserAgent().random})
        selector = Selector(response.text)
        ul = selector.css(&quot;ul.sellListContent&quot;)[0]
        li_list = ul.css(&quot;li&quot;)
        for li in li_list:
            detail = dict()
            detail[&quot;title&quot;] = li.css(&quot;div.title a::text&quot;).get()
    
            #  2室1厅 | 74.14平米 | 南 | 精装 | 高楼层(共6层) | 1999年建 | 板楼
            house_info = li.css(&quot;div.houseInfo::text&quot;).get()
            house_info_list = house_info.split(&quot; | &quot;)
    
            detail[&quot;bedroom&quot;] = house_info_list[0]
            detail[&quot;area&quot;] = house_info_list[1]
            detail[&quot;direction&quot;] = house_info_list[2]
    
            floor_pattern = re.compile(r&quot;\d{1,2}&quot;)
            match1 = re.search(floor_pattern, house_info_list[4])  # 从字符串任意位置匹配
            if match1:
                detail[&quot;floor&quot;] = match1.group()
            else:
                detail[&quot;floor&quot;] = &quot;未知&quot;
    
            # 匹配年份
            year_pattern = re.compile(r&quot;\d{4}&quot;)
            match2 = re.search(year_pattern, house_info_list[5])
            if match2:
                detail[&quot;year&quot;] = match2.group()
            else:
                detail[&quot;year&quot;] = &quot;未知&quot;
    
            # 文兰小区 - 塘桥    提取小区名和哈快
            position_info = li.css(&quot;div.positionInfo a::text&quot;).getall()
            detail[&quot;house&quot;] = position_info[0]
            detail[&quot;location&quot;] = position_info[1]
    
            # 650万，匹配650
            price_pattern = re.compile(r&quot;\d+&quot;)
            total_price = li.css(&quot;div.totalPrice span::text&quot;).get()
            detail[&quot;total_price&quot;] = re.search(price_pattern, total_price).group()
    
            # 单价64182元/平米， 匹配64182
            unit_price = li.css(&quot;div.unitPrice span::text&quot;).get()
            detail[&quot;unit_price&quot;] = re.search(price_pattern, unit_price).group()
    
            self.data.append(detail)
    
    def parse_page(self):
        max_page = self.get_max_page()
    
        thread_list = []
        for i in range(1, max_page + 1):
            url = f&quot;https://sh.lianjia.com/ershoufang/pudong/pg{i}a3p5/&quot;
            t = threading.Thread(target=self.parse_single_page, args=(url,))
            thread_list.append(t)
    
        for t in thread_list:
            t.start()
    
        for t in thread_list:
            t.join()
    
    def write_csv_file(self):
        head = [&quot;标题&quot;, &quot;小区&quot;, &quot;房厅&quot;, &quot;面积&quot;, &quot;朝向&quot;, &quot;楼层&quot;, &quot;年份&quot;, &quot;位置&quot;, &quot;总价(万)&quot;, &quot;单价(元/平方米)&quot;]
        keys = [
            &quot;title&quot;,
            &quot;house&quot;,
            &quot;bedroom&quot;,
            &quot;area&quot;,
            &quot;direction&quot;,
            &quot;floor&quot;,
            &quot;year&quot;,
            &quot;location&quot;,
            &quot;total_price&quot;,
            &quot;unit_price&quot;,
        ]
    
        try:
            with open(self.path, &quot;w&quot;, newline=&quot;&quot;, encoding=&quot;utf_8_sig&quot;) as csv_file:
                writer = csv.writer(csv_file, dialect=&quot;excel&quot;)
                if head is not None:
                    writer.writerow(head)
                for item in self.data:
                    row_data = []
                    for k in keys:
                        row_data.append(item[k])
                    writer.writerow(row_data)
                print(f&quot;Write a CSV file to path {self.path} Successful.&quot;)
        except Exception as e:
            print(&quot;Fail to write CSV to path: %s, Case: %s&quot; % (self.path, e))
    
    if name == "main":
    start = time.time()
    home_link_spider = HomeLinkSpider()
    home_link_spider.parse_page()
    home_link_spider.write_csv_file()
    end = time.time()
    print(f"耗时：{end - start:.2f}秒")

参考：[https://pythondjango.cn/python/advanced/3-httpx-parsel-requests-comparision/](https://pythondjango.cn/python/advanced/3-httpx-parsel-requests-comparision/)


httpx和parsel组合实现Python多线程爬虫

## PNGDirs

是一个空白透明背景免抠PNG图片素材免费下载网站，10万+PNG图片素材免费下载，透明背景图片，无需抠图。

这是一个免费的公益项目，所有素材都是免费、免抠的。这个PNG图片目录库，提供海量空白透明背景免抠PNG图片素材，网站所有的资源均可免费下载，可免费商用。

## 网站地址

PNGDirs：[https://www.pngdirs.com/](https://www.pngdirs.com/)

## 类似网站

- CleanPNG：[https://www.cleanpng.com/](https://www.cleanpng.com/)


PNGDirs-空白透明背景免抠PNG图片素材免费下载网站

熟悉本站的朋友都知道，本站的图片不多（也不敢多怕麻烦），总体是以文字为主。但是，文章多多少少需要图片来点缀一下，以增加文章美感，或作为封面图使用。那些没有图片的文章，只能使用默认的几张图片，翻来覆去就那些，可能让人产生疲劳。

其实，之前那些有图片的文章，图片都是上传到第三方[图床](__GHOST_URL__/post/685)的。虽然图片不多，但由于没有相关插件支持，总是麻烦了点。

想到以后的文章，可能会加更多的图片，就不得不考虑一下图床的问题了。好在天无绝人之路，让我找到了基于CloudFlare R2对象存储的免费高速图床搭建方案，可轻松实现零成本的图片托管。

## 为什么选择CloudFlare R2

R2是Cloudflare推出的对象存储服务，主打零出口费用（也就是免流量费）和与Amazon S3兼容的API，适合存储大量数据且需频繁访问的场景，完美解决传统图床的痛点：

✅ ​不怕被刷流量：下载请求1000万次/月免费，超限后仅$0.36/千万次
✅ ​全球加速：虽不及国内CDN，但实测白天可达50MB/s
✅ ​完全兼容S3 API：适配所有主流图床工具（如PicGo、WordPress插件）

更重要的是R2免费额度非常的大，以下是R2核心定价和免费额度：​
![](__GHOST_URL__/content/images/2026/03/1749318185431.png)
出口费用全免！当然有些人还是会说下载、读取次数被刷怎么办？1000万次才收费0.36美元，真的会有人去刷吗？

## 开启CloudFlare R2服务

### 创建R2存储桶

官方网址：[https://www.cloudflare.com/zh-cn/](https://www.cloudflare.com/zh-cn/)

打开并注册CF账户，登录后点击右侧「R2对象存储」-「创建存储桶」：

存储桶名称：自己填写
位置：亚太地区
默认存储类：标准（不能选不频繁访问，没有免费额度）

创建完，可以自定义图床域名，当然主域名要先托管到CF。

### 创建R2 API

「R2对象存储」-「API」-「管理API令牌」-「创建API令牌」，账户API、用户API均可。

其中权限选择「管理员读和写」，对象读和写也可以，不过要指定桶。

创建好后会出现API密钥等信息，请保存好。

### 关键防护配置

#### 设置图片缓存规则

设置这个主要是为了进一步防止被刷下载次数。进入域名页面，「规则」-「页面规则」-「创建页面规则」：

URL：https://img.a.com/*​ 要带https（R2只有https），后面/*
浏览器缓存 TTL：1天（按需设置）
边缘缓存TTL：1个月（也可以适当降低，如果经常更换图片的话）
缓存级别：缓存所有内容
源服务器缓存控制：添加但不开启（开启，缓存会遵循源站规则；不开启，缓存规则由CF控制）

#### 设置速率限制

通过设置速率限制防止恶意请求。点击「安全性」-「WAF」-「速率限制规则」-「创建规则」：

规则名称：R2速率限制
字段：URL路径、包含、/​（控制域名下所有速率）
当速率超过...：100​、10秒钟
然后采取措施…：阻止

重点是【当速率超过...】这个选项，推荐100甚至更多一点，不建议填写太低，很容易误伤；意思是同一IP 10秒内请求超过多少张图片，就触发操作（按照站点图片情况设置）。

## WordPress插件

配合插件Media Cloud使用，减少工作量。

通过以上步骤，即可轻松搭建一个基于CloudFlare R2和WordPress的免费高速图床。这种方案非常适合个人站长或小型网站使用，尤其适合那些对成本敏感但对速度要求较高的用户。

希望这篇文章能帮助你实现零成本搭建高速图床的目标！如果你有任何问题或建议，欢迎在评论区留言。


零成本搭建高速图床：基于CloudFlare R2+WordPress的免费图片托管方案

朋友们，如果你们和我一样，是个靠谷歌AdSense赚点零花钱的“互联网农民工”，那么今天这篇血泪史，请一定收藏好。毕竟，当AdSense后台温柔提醒你“请提交中国税收居民身份证明，否则扣你30%税”时，这场与官僚主义paperwork的终极掰头，就正式开始了。

朋友们，如果你们最近想享受境外投资的税收优惠，或者被国外机构要求证明自己“根正苗红”是个中国纳税好公民，那么恭喜你——《中国税收居民身份证明》申请副本·真人通关攻略·魔幻现实主义版，即将为您上演。

## 起因：谷歌的温柔一刀，和我的天真无邪

某天，AdSense后台弹出一条通知：“亲，为了少扣你30%的税，请提交中国税收居民身份证明哦～”

我（自信满满）：“这不就是一张纸吗？税务局盖个章的事儿！”

——事实证明，我还是太年轻了，低估了“中国式证明”的隐藏关卡。

## 材料清单，比甲方需求还难搞

虽然从4月1日开始，可以便捷的在网上办理，自然人电子税务局线上也开放了申请端口，再也不用跑线下办理了，但是，别想着一次就能够办成功。

浏览器打开自然人电子税务局（网址：[https://etax.chinatax.gov.cn/](https://etax.chinatax.gov.cn/)），扫码登录，我要办税→中国税收居民身份证明开具。

按照税务局官网上的流程，乍一看简单到感人。于是我哼着小曲儿，在线填完了材料，点击提交。

隔天，就接到了一个电话：“你这不行。”

我（瞳孔地震）：“哪里不行？！”

为了凑齐“薛定谔的材料”，我开启了疯狂循环模式：

**补充英文名**：没有填写英文名，材料打回去，重新申请……

**补充情况说明**：详细说明提供的合同与本人的关系及开具身份证明的具体原因。

**抬头不对**：材料打回去，重新申请……

**协定条款不对**：独立个人劳务。

**拟享受协定待遇收入金额与预计减免税金额不对**：请正确输入收入金额，运用正确税率计算减免税金额并输入。

你永远不知道下一次审核会缺什么材料，就像开盲盒，但开出来的只有心塞。

## 等待，是一场修行

前前后后，折腾了几次，总算提交成功了。然而，每次打开那个已确认的界面，就是看不到可以下载附件的地方。

终于，在已确认的第10天，看到可以下载附件的地方了。原来“10个工作日”是个薛定谔的数字，可能取决于税务局打印机的心情，或者审核小哥当天是否摸鱼。

拿到证明时，我仿佛拿到了奥运金牌。那一刻，我仿佛听见了天堂的钟声🔔。
![](__GHOST_URL__/content/images/2026/03/1750772730576.jpg)
“弱弱问一句……这证明有效期多久？不会明年再来一次吧？”（我：闭嘴吧你！）

## 血泪TIPS（拿去保命）

**心态要稳**：过程中你会怀疑“我真的是中国公民吗？”“税务局是不是在针对我？”——别慌，大家都一样。

**申请年度**：选择2025年，对方国家选择新加坡共和国，备注信息选择“无须备注信息”。

**申请信息**：特殊样式要求，选择“否”，申请目的选择享受协定待遇。相关附件上传与谷歌有关协议或者打款记录等材料。

享受协定待遇相关信息如下：

- 对方纳税人名称：Google Asia Pacific Pte. Ltd.
- 拟适用协定名称：选择第一条
- 拟适用协议条款：独立个人劳务条款
- 拟享受协定待遇收入金额：可任意填写
- 预计减免税金额：根据拟享受协定待遇收入金额 x 减免百分比来填，比如10%、20%都行，但不能100%，也就是和拟享受协定待遇收入金额一样（血泪史，遇上了严格的审核人员）

**申请人信息**：选择有住所，需上传“身份证件”和“居民户口簿”。

**证明领取方式**：选择“电子领取”。

虽然这场拉锯战让我深刻理解了“中国速度”的另一面，但看着那张证明，依然有种诡异的成就感——毕竟，能单挑税务局paperwork并活下来的人，离“修仙成功”也不远了。

（谁再和我说“数字化政务”，我反手就甩他这份证明！）

谷歌AdSense战士敬上，祝各位早日通关，保住那30%的羊毛！🦾

希望这篇能让你在崩溃的边缘笑出声来。如果有同款血泪史，欢迎留言，咱们组个“税务马拉松互助会”😂！


《中国税收居民身份证明》申请记：一场与繁琐paperwork的拉锯战

## WebRTC Screen Mirror

是一款基于WebRTC技术的在线屏幕共享工具，它利用浏览器内置的WebRTC功能，实现低延迟、高画质的屏幕镜像。无需安装任何软件或插件，只需打开网页，输入对应的投屏码，即可将屏幕内容分享到其他设备上。

功能特征：

- 低延迟屏幕共享： 基于WebRTC技术，实现毫秒级延迟，让屏幕共享更加流畅自然
- 跨平台支持： 可以在各种支持WebRTC的设备上使用，包括Windows、macOS、Linux、Android、iOS等
- 简单易用： 无需安装任何软件，只需打开网页，输入投屏码即可使用
- 完全免费开源： 所有代码开源，可以免费使用和学习
- 使用WebSocket实现实时信令通信： 确保连接的快速建立和稳定性
- 基于Cloudflare Durable Objects实现可靠的WebSocket信令服务器：提供高性能和可靠的信令服务

使用场景：

- 远程演示： 将你的电脑屏幕分享给其他人，进行产品演示、教学讲解等
- 游戏直播： 将游戏画面实时分享给观众
- 协同办公： 与同事共享屏幕，共同编辑文档、查看代码等
- 远程协助： 帮助他人解决电脑问题

总之，WebRTC Screen Mirror是一款简单易用、功能强大的在线屏幕共享工具，它利用WebRTC技术的优势，提供流畅、低延迟的屏幕镜像体验。无需安装任何软件，完全免费开源，是跨设备屏幕共享的理想选择。

## 网站地址

网址：[https://mirror.doveliao.com/](https://mirror.doveliao.com/)

GitHub：https://github.com/akazwz/WebRTC-Screen-Mirror


WebRTC Screen Mirror：基于浏览器免费开源投屏神器，可实现低延迟、跨平台屏幕共享

这里是 aboss.top 的自留地。写了十几年野路子代码，攒了些摸爬滚打的经验，做成系列课程慢慢讲；也留了一小块地方，记记代码之外的胡思乱想。