diff --git a/file_entity.module b/file_entity.module
index a4da34d..287be1f 100644
--- a/file_entity.module
+++ b/file_entity.module
@@ -1676,7 +1676,7 @@ function file_entity_file_entity_access($op, $file, $account) {
     }
   }
 
-  return !empty($grants) ? FILE_ENTITY_ACCESS_ALLOW : FILE_ENTITY_ACCESS_IGNORE;
+  return FILE_ENTITY_ACCESS_IGNORE;
 }
 
 /**
