A Tabán életében a szőlőművelés mellett fontos szerepet játszott az is, hogy itt volt az egyik dunai átkelőhely. Az e körüli folytonos mozgolódás elősegítette a szállásadók, kereskedők életét is. A Lánchíd átadásával mindez gyökeresen megváltozott. A mai Clark Ádám téren sorra épültek a díszes új paloták, a Tabánt viszont elkerülte a forgalom.
Eközben a "rácok", a szerbek részaránya is folyamatosan csökkent a Tabánban. 1851-ben Budán már csak 1180 szerb élt. Pedig valamikor még a szerb értelmiség központja volt itt, itt alakult ki a szerb irodalom. De ennek is vége lett, csak a nyomorúság maradt. A Rác fürdő sem éppen a legszebb évtizedeit élte, a prostitúció fészkelte be oda magát. Tiltott szerencsejátékok, zug-italmérések pusztították az agyakat.