如何仅为* .html显示自定义404？

Question

有一行

error_page 404 /404.html;

在我的nginx配置

中

但是我只需要为* .html文件显示自定义404页面？不适用于CSS，JS等。

我试过

   location ~ \.html {
      error_page 404 /404.html;
   }

但它不起作用。