>>196
185です。

勢いで作ったので何らか不具合があるかもしれません。
index.htmlがないサイトを考慮してを指定しても追加されるようになってます。
その分冗長なリストになってしまいますが取りこぼすよりはマシかと思ったのでそうしました。

基本的に追記してくのですが、たまに整理のためにソートする事があるので、list.txtを使う時をソートしてから使うのが良いです。

何らかお役に立てれば。