diff --git a/src/index.js b/src/index.js
index a6e2aaf7..732b8217 100644
--- a/src/index.js
+++ b/src/index.js
@@ -510,8 +510,8 @@ class ExtractCssChunksPlugin {
                     .join('\n')}`
               )
             );
-            usedModules.add(fallbackModule);
           }
+          usedModules.add(fallbackModule);
         }
       }
     } else {