Аспазия была родом из Милета и потому в Афинах не имела гражданских прав. Перикл прожил с ней около двадцати лет и жениться не мог. Закон, проведённый им самим в 451 году, запрещал афинянину брак с чужестранкой.
Плутарх сообщает, что её судили за нечестие. Перикл защищал её лично, проливая слёзы. Её оправдали. Известие это позднее и восходит, по признанию самого Плутарха, к комическому поэту Гермиппу. Комедия была тогда главным орудием политической брани. Нынешние историки считают этот процесс скорее сюжетом со сцены, чем протоколом.
Комики вообще занимались ею много. У Аристофана Пелопоннесская война начинается из-за похищенных у Аспазии девиц. У Кратина она названа наложницей Геры. Из этих насмешек и составлена значительная часть её биографии.
Другое предание рисует её учительницей красноречия. В платоновском «Менексене» Сократ произносит надгробную речь. Он уверяет, что выучил её у Аспазии, которая её и сочинила. Насмешка тут очевидна: речь пародирует знаменитое надгробное слово Перикла. Но смысл она имела бы лишь при одном условии — что репутация Аспазии как наставницы в риторике уже существовала.
Ксенофонт дважды приводит её как знатока в делах брака и сватовства и делает это без иронии.
От самой Аспазии не сохранилось ни строки. Всё, что о ней известно, написали мужчины, и каждый писал о своём. Плутарх о слезах Перикла, Аристофан о войне, Платон о риторике.