Žman je smješten u uvali Žmančica, a okružen je brdima Gračinom te Velikim i Malim Slotnjakom.
Pod nazivom Mezano spominje se u 13. stoljeću, a iz tog vremena datira i župna crkva sv. Ivana, dok u okolici naselja postoje nalazišta iz pretpovijesnog doba.
Posebitost Žmana su plodna polja smještena na području Malog i Velikog jezera, što Žmance čini vrlo vještim poljoprivrednicima. Plodove svojih ruku mještani će rado ponuditi svojim gostima, a okus domaćeg vina, sira i maslinovog ulja zasigurno će ostati u sjećanju svim ljubiteljima dobre spize.