Giống như thuốc trừ sâu, test case sẽ không tìm ra lỗi mới khi đã bị dùng quá nhiều lần. Đây chính là “nghịch lý thuốc trừ sâu” – khi thuốc trừ sâu không diệt được sâu bọ. Để phát hiện các lỗi mới, tester phải cập nhật thường xuyên test case cũ và viết test case mới. Tuy nhiên, đôi khi nghịch lý này có thể cung cấp những kết quả có lợi cho việc kiểm thử. Ví dụ: khi chạy automated regression testing (kiểm thử hồi quy tự động) thì lỗi hồi quy tương đối ít.