爬虫_网页url设计

为何须要网页URL设计？

       每一个url不一样的结构表明着不一样的网页模块和信息的展示形式，为了方便维护与管理

网页url怎么设计？

       分层： 主域名，子域名

       通常形式为：

　　　　　　　　　　　　主域名:  www.job.com

                                   子域名  head.job.com       bolg.job.com

              子子域名  head.job.com/home   head.job.com/img    bolg.job.com/page/123

为啥要分析url设计？

       能够方便而且直接的找到本身想要的全部内容，更加有效