リッピングとは違うかもしれないけど、ffmpeg でトランスコードする際、フレームレートを変えたら音ズレが訪れたことがある。
フレームレートを変えずにやったら音ずれは無くなった。
それ以来、フレームレートお変更はやらないようにしている。