求高手给个思路！该如何解决

求高手给个思路！
现有工信部的一个项目，要求实现对未备案的网站做到自动发现，入库，该采用什么方案合适呢？

[解决办法]