開発言語はpythonでもJavaでもC#でもRubyでも良いのですが、
Webサイトの更新を検知するプログラムを作りたいと考えています。

ETagは設置していないサイトが多いので汎用的では無いと見受けられるのですが、
他に何か良い手立ては無いでしょうか？

1日1回スクレイピングして〜と思っていたのですが、
bodyタグの中身すら広告やら何やらで毎回内容が変わるサイトが多く、
どうすれば実現できるのか皆様のご意見を伺いたいです。