Hay muchas maneras de ocultar los títulos de los widgets de tu web pero a mi siempre me ha parecido el más sencillo, a la par de efectivo, el que te voy a mostrar aquí, que tengo por ahí guardado hace años y aún sigue funcionando sin fallos.

Solo son 2 pasos:

Añade el código de abajo a tu web usando tu método favorito de añadir códigos.
Cuando quieras ocultar el título de un widget simplemente añádele delante del título el símbolo @.

El código a añadir es como el de este ejemplo:

/* Ocultar titulos de widgets que tengan la @ al principio del titulo */
add_filter( 'widget_title', 'ayudawp_quitar_titulo_widget' );
function ayudawp_quitar_titulo_widget( $widget_title ) {
if ( substr ( $widget_title, 0, 1 ) == '@' )
return;
else 
return ( $widget_title );
}

Yo he elegido la arroba (@) como elemento eliminador del título, pero tú puedes elegir el que quieras, y por supuesto luego aplicarlo en consecuencia.

De sencillo que es hasta asusta 😀