Nunca programei com nenhuma delas no windows (praticamente não não programei no windows) para dizer isso. Acredito que sim.
Uma das coisas mais complicadas de se fazer em uma IDE quando não se sabe é justamente como configurar para usar alguma biblioteca externa. Isso varia um pouco de IDE para IDE e nem sempre é claro. Pode variar também se essa biblioteca foi instalada pelo gerenciador de pacotes do sistema, ou se você mesmo compilou, etc.
Normalmente essas configurações envolvem criar um projeto nessa IDE para o seu programa e setar essas opções de compilação e linkagem no projeto. Frequentemente há partes separadas nas configurações do projeto para as opções de compilação e linkagem e as de linkagem costumam ser as mais importantes.
Como eu não uso nenhuma dessas IDEs não posso dizer como fazer isso nelas a menos que eu mesmo instale uma delas para testar. Posso fazer isso depois caso você tenha dificuldades.