WordPress tiene una sección dedicada en el Escritorio principal para editar, eliminar o moderar los comentarios que se van dejando en las entradas o incluso en las páginas.
Para acceder, ingresa a la parte de Comentarios del lado izquierdo en la plataforma principal.
Después podrás ver un menú similar a este:
En este panel puedes administrar cualquier comentario entrante.
Para evitar SPAM, instala y configura Akismet, un excelente plugin que ayude a mantener limpio y seguro tu blog.
Revisa el tutorial de instalación y configuración aquí: Evitar SPAM con Akismet