Один из возможных подходов: в конце процесса сборки TFS переместите их в отдельный артефакт.

у Visual Studio 2005 генерирует.pdb файлы при компиляции в релизе? Я не буду отлаживать сборку релиза, так почему они генерируются?