爬虫只能爬取能够直接通过网络访问得到的信息,也就是那些对外公开的信息。对于需要登录或者访问权限的信息,需要使用相应的技术手段来模拟登录或者通过其他方式获取访问权限,才能进行爬取。
所以爬虫并不只能爬取到看得到的信息,而是要依赖于网络接口和数据访问的规则。
爬虫只能爬取能够直接通过网络访问得到的信息,也就是那些对外公开的信息。对于需要登录或者访问权限的信息,需要使用相应的技术手段来模拟登录或者通过其他方式获取访问权限,才能进行爬取。
所以爬虫并不只能爬取到看得到的信息,而是要依赖于网络接口和数据访问的规则。