Vyprávělo se, že v dávných dobách stával v městečku Kasejovice hrad zvaný Karlsberg. Za husitských válek však byl tak zpustošen, že není o něm nyní ani památky.