实战复盘：零点博客C#后端接口开发，从爬虫采集到JSON数据解析全流程

大家好，我是零点博客的主理人。今天要和大家聊聊一个比较硬核的话题：后端接口开发实战。

最近在给技术栈从 PHP 迁移到 C# 的过程中，为了方便前端调用数据，我们需要开发一套通用的数据接口。这不仅仅涉及简单的 HTTP 请求，还包含了爬虫开发、正则表达式提取数据、MySQL 数据库操作以及最重要的SQL注入防护。废话不多说，直接进入实战环节。

1. 需求背景与技术选型

我们的目标是开发一个接口，能够抓取 EMLOG 博客系统的文章列表，并将其格式化为 JSON 返回给前端。为了做到这一点，我选用了 ASP.NET Core（C#），配合 MySQL 数据库存储抓取到的数据。

2. 核心功能：爬虫与数据清洗

在开发接口之前，我们需要先有数据源。这里我们用 C# 模拟一个简单的爬虫。

利用 HttpClient 获取网页 HTML，然后通过正则表达式提取文章标题和摘要。正则在这里是神器，能快速从杂乱的 HTML 中捞出我们需要的内容。

var html = await client.GetStringAsync("https://emlog.com/");
// 使用正则匹配 h2 标签内的文本
var match = Regex.Match(html, @"(.+?)");
if (match.Success)
{
    var title = match.Groups[1].Value;
    Console.WriteLine($"提取成功：{title}");
}

3. 后端接口开发实战：安全第一

拿到数据后，下一步是将其存储到数据库，并对外提供访问。这里大家最容易踩坑的地方就是SQL注入防护。

很多新手喜欢直接字符串拼接 SQL，比如 "SELECT * FROM posts WHERE id=" + id，这在 C# 和 PHP 开发中都是大忌。我坚持使用预处理语句（Parameterized Queries）来执行操作。

string sql = "SELECT title, content FROM posts WHERE status = @Status";
using (var command = new MySqlCommand(sql, connection))
{
    // 绝对不要拼接字符串！使用参数化查询
    command.Parameters.AddWithValue("@Status", "published");

    using (var reader = command.ExecuteReader())
    {
        while (reader.Read())
        {
            // 构建对象并放入列表
            var post = new Post { Title = reader.GetString("title") };
            posts.Add(post);
        }
    }
}

4. 数据格式化与 JSON 返回

数据从数据库取出来后，我们需要将其序列化为 JSON 格式，方便前端 JavaScript 调用。

C# 自带的 Newtonsoft.Json 或 System.Text.Json 库非常强大。我们在接口开发时，只需将 List<Post> 对象直接转为 JSON 字符串即可。为了方便前端解析，我们可以把 MySQL 的时间字段统一处理为标准时间格式，避免出现乱码或解析错误。

5. 前端交互与 HTML/CSS 布局

接口通了之后，前端怎么用？通过 AJAX 或 Fetch API。

在零点博客的这次实战中，我编写了简单的 HTML/CSS/JS 代码来展示接口返回的数据。CSS 使用了 Flexbox 布局，保证在手机端也能完美适配。JS 负责发送请求，拿到 JSON 数据后，动态生成 DOM 节点插入页面。

fetch('/api/getPosts')
    .then(response => response.json())
    .then(data => {
        // data 就是接口返回的 JSON 对象
        renderPosts(data);
    });

6. 避坑指南与总结

在这套后端接口开发实战过程中，我踩过最大的坑就是编码问题。MySQL 的连接字符串一定要加上 CharSet=utf8mb4，否则中文显示会变成乱码，导致前端解析 JSON 失败。

另外，爬虫开发时要注意 HTTP 请求头，加上 User-Agent 模拟浏览器，否则很多网站会直接拦截请求。

总的来说，这次从后端接口开发到JSON 解析，再到前端渲染的全链路实战，让我对 C# 和 Web 开发有了更深的理解。如果你在做在线工具开发或爬虫项目，希望能从零点博客的这套源码中找到灵感。