如何根據網站日志進行分析并做出優化改進
1. 日志的數據往往比GA之類統計工具的全，更適合對流量的細分分析；
2. 用日志數據寫腳本去生成周報什么的，比GA后臺慢慢查、或是用GA的API，相對方便快捷；
3. 可以依其數據屏蔽些頁面。見到最極端例子是前公司，有個主題帖量大致十萬級的論壇，其中大部分抓取，都是抓其中的“只看該作者帖子”的無意義鏈接。
從爬蟲日志分析中能獲取的一些SEO信息
1.抓取頁面量和流量的分配（一般抓得多的頁面權重高，是否著陸合適的關鍵詞）
2.是否有垃圾頁面抓?。ㄊ謾C頁，帶參數的頁面，個人profile，各種非200響應碼等等）
3.抓取是否有斷檔，可能是服務器或者程序出了問題
4.抓取能覆蓋到頁面的比例是多少，鏈接是否有問題
