URL変更
NewsClipからのお知らせページのURLが変わりました
リンク先の巡回方法を少し変更しました。
これまでは、リンク一層目は無条件にリンクをたどり、二層目以降は、一層目のURLとの比較をして、URLが大きく変化していなければたどる、というやり方をしていました。
これを少し変更し、「リンク文字列の検索パターン」が設定されている場合に限り、二層目以降も無条件にリンクをたどるように変更しました。
具体的には次のような動作になります。
リンク文字列の検索パターンが設定されていない場合
- 第一階層(トップページ)http://hoge.com/topics/
- 第二階層(トップページから直接リンクされているページ)http://hoge.com/topics/1.html
- 第三階層 http://hoge.com/picture/index.html のような構造になっている場合は、第二階層は無条件で巡回しますが、第三階層はURL文字列が大きく異なるので巡回しません。(ここで、「大きく異なる」とは、具体的には、一方のURL文字列を他方のURL文字列に書き換えるのに、3文字以上文字を削除する必要があることを意味します。上の例では、”to”と”s”と”1”を削除する必要があります)
リンク文字列の検索パターンが設定されている場合
リンク文字列の検索パターンに、”pic”が設定されていれば、上に示した三階層はすべて巡回します(いずれもURLに”pic”を含んでいるため。)一方、”topic”が設定されている場合は二階層までしか巡回しません。