Como mostrar ou ocultar widget apenas em páginas selecionadas do site
Para manipular a aparência dos widgets você pode usar os seguintes plugins:
Aqui você pode encontrar tags condicionais do WooCommerce: https://docs.woothemes.com/document/conditional-tags/
Aqui você pode encontrar tags condicionais do WordPress: https://codex.wordpress.org/Conditional_Tags
Por exemplo, você pode criar filtros diferentes por shortcode [woof] para cada página de categoria usando seus atributos tax_only e by_only. Em seguida, adicione um widget de texto comum na barra lateral e escreva lá o shortcode com seus atributos. Depois disso, escreva na área de texto de widget-logic uma condição para exibir o widget atual apenas na(s) página(s) selecionada(s).
(Widget Logic)