обновить порты и поставить всё из портов
Разницы нет, бинарно ставить или из сырцов собирать. А точней разница есть, но во времени и куче ошибок в итоге.
Нужно ли будет удалять xorg сервер и как удалить кеды?
Поставьте pc-bsd(он же freebsd), там по умолчанию kde. И не мучайте себя.