关于在 ASP.NET 中构建 Web Scraping 与自动化系统的疑问

Source: Dev.to

Question

是否可以在 ASP.NET 中使用 HttpClient、HtmlAgilityPack 或 PuppeteerSharp 等工具构建一个爬取和自动化系统，而不依赖 API？对于毕业设计，是否将其结构化为一个完整的自动化工作流（包括数据爬取、处理、存储和调度）会更实用？

是否有类似的真实案例，例如在商户现金预支（Merchant Cash Advance）行业中使用的自动化系统？比如 Cloudsquare 的 MCA CRM 能够自动化数据收集和承保流程。