Quando você já tem um domínio não é necessário mudar seus Name Servers para o WordPress, caso o endereço principal do seu blog seja um subdominio simplesmente adicione um CNAME no seu Name server atual apontando para o endereço padrão do Blog.
Exemplo:
subdominio.seudominio.com.br. IN CNAME seublog.wordpress.com.
Para informações mais detalhadas consulte: http://en.support.wordpress.com/domains/map-subdomain/