「追加のライブラリディレクトリ」でディレクトリを指定しただけでは lib ファイルは読み込まれません。
どこかでどの lib ファイルにリンクするかを指定しなければなりません。

(1) [リンカー]->[入力]->[追加の依存ファイル]で指定している。
ここで相対パスを指定しているなら「追加のライブラリディレクトリ」が使用される可能性があります。

(2) ソースコードに記述している。
次のように記述しているなら (1) と同じように「追加のライブラリディレクトリ」が使用される可能性があります。
#pragma comment(lib, "test.lib")

(3) プロジェクトを依存関係にしている。
この場合は「追加のライブラリディレクトリ」に関係なく同一構成の lib ファイルが自動的にリンクされます。