爬虫可以抓取豆丁文库，百度文库吗？解决办法

爬虫可以抓取豆丁文库，百度文库吗？
如题，大家给我讲解下吧，网络爬虫大概可以抓取哪些资源，像豆丁文库，百度文库这些是用post方式能抓取吗？

[解决办法]
ASP没试过，不过用CURL应该可以。