C# 后端实战：基于 EMLOG 开发自动化数据处理接口与爬虫，附源码避坑

在零点博客折腾了一段时间的 EMLOG 主题开发，我发现这个系统虽然轻量，但单纯靠前端 JS 来处理复杂的网络请求、HTML 正则解析以及海量数据写入，性能瓶颈会很明显。于是我在最近的项目中，决定用 **C#** 来做一个独立的后端服务，专门负责处理这些“硬骨头”，前端只负责展示。

今天就把这套 **C#** 结合 **EMLOG** 的开发思路和实战经验复盘一下，重点聊聊怎么安全地操作数据库和怎么写接口。

一、架构思路：让 C# 接管 EMLOG 的“体力活”

我们的目标是开发一个在线工具，功能是把第三方网站的 XML 数据源抓取下来，解析后存入 EMLOG 的数据库里。

前端： HTML + CSS + 原生 JS 调用接口。
后端： C# WebAPI (.NET Core) 处理业务逻辑。
存储： EMLOG 使用的 MySQL 数据库。

二、核心代码实现：连接 MySQL 与数据交互

首先，我们需要引入 MySQL 的驱动包。这里为了保证数据安全，我强烈建议在 **C#** 代码中直接使用参数化查询，而不是直接拼接 SQL 字符串。

string connectionString = "Server=localhost;Database=emlog;Uid=root;Pwd=xxx;";
using (var conn = new MySqlConnection(connectionString))
{
    conn.Open();
    // 构建 SQL 插入语句
    string sql = "INSERT INTO emlog_article (title, content, date) VALUES (@Title, @Content, @Date)";

    using (var cmd = new MySqlCommand(sql, conn))
    {
        // 关键点：使用参数化查询防止 SQL注入
        cmd.Parameters.AddWithValue("@Title", "通过爬虫获取的文章标题");
        cmd.Parameters.AddWithValue("@Content", "XML解析后的正文内容...");
        cmd.Parameters.AddWithValue("@Date", DateTime.Now);

        cmd.ExecuteNonQuery();
    }
}

大家在写代码时，一定要盯着这个 `Parameters.AddWithValue` 看。只要用了它，**SQL注入防护** 基本就解决了。不管用户输入什么特殊字符，数据库都会把它当成普通文本处理，而不会执行恶意代码。

三、爬虫开发与正则表达式实战

数据源往往是不干净的 HTML，我们需要 **正则表达式** 来提取我们要的信息。

string html = "..."; // 假设这是从网页抓取的 HTML
// 匹配文章标题的正则
Regex regex = new Regex(@"<title>(.*?)</title>", RegexOptions.IgnoreCase);
Match match = regex.Match(html);

if (match.Success)
{
    string title = match.Groups[1].Value;
    // 处理 title...
}

这里我也踩过坑，如果不写 `RegexOptions.IgnoreCase`，可能会因为标签大小写问题导致匹配失败。正则表达式用好了，爬虫开发就成功了一半。

四、 JSON 与 XML 的互转

由于我们需要跟前端或者第三方系统交互，**JSON** 格式是主流。在 **C#** 中，可以使用 `System.Text.Json` 库快速将对象序列化。

var responseObj = new { status = "success", data = dataList };
return Content(JsonSerializer.Serialize(responseObj), "application/json");

同时，我们也要支持 **XML** 格式。很多老系统还是喜欢 XML，写个转换器很容易，核心就是把 XML 节点读出来赋值给 C# 对象，再转 JSON。

五、总结与避坑指南

做这个 **在线工具** 开发时，最大的难点其实不是代码怎么写，而是逻辑的健壮性。比如并发插入时会不会报错，JSON 格式是否标准。建议大家多跑几次 **源码案例**，多测试一下 **SQL注入防护** 是否真的生效。

如果你也在做类似的 **C#** 结合 CMS 的开发，欢迎在零点博客留言交流，咱们一起拆解更多底层技术细节。