メモリにアクセスすることを意味するでしょ。

6.3.2.1 左辺値
左辺値が評価されたときにオブジェクトを指し示していなければ，動作は未定義とする。

3.14 オブジェクト（object）　その内容によって，値を表現することができる実行環境中の記憶域の部分。
参考オブジェクトを参照する場合，オブジェクトは，特定の型をもっていると解釈してもよい（6.3.2.1 参照）。

なんでそういう決まりになっているのかを理解せずに条文の字面に書いてあることだけ表面的に言う人とは歯車が噛み合わないな。