os.rmdir()

Удаляет каталог, но только если он пуст, иначе будет OSError. Чтобы удалить каталог со всем содержимым, используйте shutil.rmtree().

import os

os.rmdir('empty_folder')