En Productos / Todos los productos se ve un listado de todos los productos de la tienda, pasando el mouse por encima se ve la opción de Edición rápida :

 

Allí se despliegan opciones de para editar un producto, entre otros si está publicado o no , categorías, etc

 

Por último hay que Actualizar para guardar los cambios.