Este é realmente muito fácil. Quando você declara seu tipo de postagem usando register_post_type , é necessário adicionar um novo argumento para 'has_archive'.
Você adicionará algo ao efeito de:
'has_archive' => 'about-cool-post-types'
Depois, vá para Configurações> > Permalinks para limpá-los e deve funcionar. Testei-o localmente e esta parece ser a maneira de gerar automaticamente sua página de arquivo em um URL diferente. Então, você deve ser capaz de criar uma página no slug do CPT.