Swear è quando si fa una promessa solenne o un voto (anche divini) che dir si voglia, un fioretto potremo dire in Italia.

Ha anche significato di imprecare, e quindi anche imprecare contro dio, e quindi bestemmiare. Immagino che derivi dal fatto che spezzare una promessa solenne fatta una divinità sia una cosa inaudita, una bestemmia.

Nel caso specifico, Dragonsworn, è inteso come votarsi ad una causa, quella del Drago, e di per se non è da intendersi in senso negativo.
La Legione del Drago è composta da Dragonsworn.

Va da se che i manti bianchi danno un eccezione negativa al termine visto che seguono il Drago, oltre al fatto che quelli che quelli ad loro incontrati erano effettivamente feccia.

E infine se pensassi che avessero un significato esclusivamente negativo non li userei come titolino.

Precisazione: i Dragonsworns sono considerati negativamente perché fino all'avvento di Rand, erano votati ai Falsi Draghi. Visto che da 3000 anni si sono uniti sempre tutti a bastonare i falsi draghi è rimasta la fama negativa per i suoi seguaci. Tecnicamente anche gli asha'man sono dragonsworn, e anche la Banda della Mano Rossa di Mat.

Probabilmente se Rand avesse seguito il percorso indicatogli da Moiraine avrebbe raccolto i Dragonsworn per conquistare Illian.