关于程序集反射的问题

Question

假如我在D:/BinTemp/目录下放置了一个test.dll

而网站http://localhost(主目录不在D:/BinTemp下)中，通过Assembly.loadFile(@"D:/BinTemp/test.dll")来调用这个DLL,

但是在调用完成后，到D:/BinTemp/下却不能删除该DLL了，只能回收应用程序池后才能删除。
这个问题该怎么解决呢？请教各位达人们