На первый взгляд Панаджи больше похож на какой-нибудь провинциальный португальский городишко, чем на административный центр штата Гоа. Узкие улочки, колокольни католических костелов, столики кафе на площадях – всё это не очень вяжется с привычным представлением европейца об Индии.
Символ города – статуя аббата Фариа, простирающего руки над загипнотизированной женщиной. Аббат Фариа, родившийся в Кандолиме священник и ученый, живя в Европе, стал одним из первых исследователей гипноза. Считается, что именно он послужил Александру Дюма прототипом аббата, заключенного в замке Иф.
Еще одна достопримечательность Панаджи – так называемое Здание Секретариата. Первоначально - дворец султана Биджапура Юсуфа Шаха, в XVII веке здание было основательно перестроено португальцами и с тех пор служило резиденцией вице-короля и секретариатом колонии.