GaGa's Blog

XPath，全称是 XML Path Language（XML 路径语言）。简单来说，它就像是网页和文档世界里的GPS 导航系统。

1.它是如何工作的？

HTML 和 XML 文档在计算机眼里，其实长得像一棵倒挂的“树”（被称为 DOM 树）。这棵树有根（Root）、有树枝（父节点、子节点），还有树叶。

10GB 以上的 pcap/cap 文件，Wireshark 直接打开会出现：

• 内存暴涨
• UI 卡死
• 索引时间很长
• 过滤器响应慢
• TCP 重组极慢

生产环境一般不会直接分析原始大包。

标准流程：

问题

阿里云上alb服务偶发记录后端502，request_time/upstream_response_time都很短。

调用链：client -> alb -> backend_server

解读

Scrapy 是一个基于事件驱动 + 异步 I/O（Twisted） 的高性能爬虫框架，其核心设计目标是：

• 高并发抓取（非阻塞）
• 可扩展组件化架构
• 清晰的数据流转模型

整体架构采用 分层 + 调度驱动模型，核心组件如下：

Twisted 是一个基于事件驱动（Event-Driven）的网络框架，核心目标是：

• 高并发网络服务开发
• 异步 I/O 处理
• 协议驱动开发（TCP/UDP/HTTP/FTP/SSH 等）

其设计理念类似于：

• Node.js（事件循环）
• Reactor模式（经典IO模型）

HttpClient 是用于发送 HTTP 请求并接收 HTTP 响应的客户端组件，广泛应用于服务间通信、API 调用、爬虫、网关等场景。

在 Java 生态中，主流实现包括：

• Apache HttpClient（经典、功能强）
• OkHttp（现代化、性能优）
• Java HttpClient（JDK 原生）

1.框架特点

Django

Django 走的是 “约定优于配置” + “开箱即用” 路线。它自带很多企业开发常用能力：

• ORM
• Admin 后台
• 路由系统
• 模板引擎
• 表单系统
• 用户认证
• Session / Middleware
• 安全防护机制

Flask 路由本质上是：把某个 URL 规则映射到某个视图函数上，当客户端发起 HTTP 请求时，Flask 根据请求的 路径、请求方法、参数规则 找到对应函数执行，再把结果返回给客户端。

可以理解为：

• URL：外部访问入口
• 路由规则：匹配条件
• 视图函数：实际处理逻辑
• 路由表：Flask 内部维护的映射关系

LitServer.run()的函数签名

• https://lightning.ai/docs/litserve/api-reference/litserver

1
2
3
4
5
6
7
8
9
10
11

def run(
    self,
    host: str = "0.0.0.0",
    port: Union[str, int] = 8000,
    num_api_servers: Optional[int] = None,
    log_level: str = "info",
    generate_client_file: bool = True,
    api_server_worker_type: Literal["process", "thread"] = "process",
    pretty_logs: bool = False,
    **kwargs, # timeout_keep_alive=30 -> 透传给uvicorn
)

editcap 是 Wireshark 自带的一个非常强大的命令行工具，专门用于切分、转换和过滤 pcap/pcapng 抓包文件。

如果你想切割大文件，主要有两种常用方式：按数据包数量”切割 或 按时间间隔”切割。

1. 按数据包数量切割

Wireshark 会根据捕获到的网络流量，自动为你计算并展示与 TCP 流相关的时间差，这在分析网络延迟、性能瓶颈或排查异常时非常有用。

数据逐行解析

tcp.stream eq 13520完美锁定了这一条流。总结为：客户端本想优雅地关闭连接（FIN），但服务端却无情地直接掀了桌子（RST）。

1. 正常的前半段：HTTP 业务顺利完成

• POST 请求：客户端（100.127.128.146）向服务端（192.168.3.4）发送了一个 POST /ocr_v4_mobile 请求，传输的是 JSON 数据。
• 200 OK 响应：服务端很给力，立刻返回了 HTTP/1.1 200 OK，也带有 JSON 回应。
• 到这里为止，业务层面的交互已经圆满结束了。