От самых ворот замка тянулась широкая улица, известная как Сэнгоку баба, что в произвольном, но достаточно близком по смыслу переводе означает «Проспект миллионеров». Сэнгоку, или одной тысяче коку, был равен годовой доход здешних обитателей. Коку лишь немногим меньше пяти бушелей, и одна тысяча коку — это, по любой оценке, очень большое количество риса. Доход некоторых жителей Сэнгоку баба превышал десять тысяч коку. Если бы эти люди были прямыми подданными сёгуна, а не вассалами Симадзу, то они сами получили бы статус дайме, обладающих правом на аудиенцию с сёгуном. Обитатели Сэнгоку баба были главными советниками дайме. Они имели знаменитых предков и пользовались привилегией свободного доступа к дайме. Некоторые из них были его дальними родственниками, потомками младших братьев прежних дайме, чьи резиденции отражали их богатство и могущество.
Типичная резиденция Сэнгоку баба представляла собой целый комплекс зданий, окруженный каменной стеной. В этих домах жили не только сами вассалы вместе с членами своих семей, но также их помощники и слуги. Как и во многих других княжествах, в Сацума самурайская элита, по сути, представляла собой отдельный класс внутри воинского сословия. В то время как родители Сайго выбивались из сил, чтобы одевать своих подрастающих детей, обитатели Сэнгоку баба мучились над деталями придворного протокола и архитектурой своих прудов с карпами.
К югу от этого внутреннего престижного района, на другом берегу реки Коцуки, находились резиденции вассалов среднего и нижнего ранга. Это были люди, которые служили в административном аппарате дайме, занимаясь корреспонденцией, составляя правительственные эдикты, собирая налоги и проводя политику, сформулированную их начальством. Вассалы среднего и нижнего звена жили в одном из четырех районов: Арата-мати, Корэи-мати, Уэносоно-мати и Кадзия-мати. Районы Арата, Корэи и Уэносоно лежали к юго-западу от реки Коцуки, в то время как район Кадзия приютился на противоположном речном берегу. Поскольку квартал Кадзия находился на том же берегу реки, что и замок, номинально он считался наиболее престижным из всех четырех. Сам район Кадзия подразделялся еще на два квартала: Верхняя Кадзия (Уэнокадзия) и Нижняя Кадзия (Ситанокадзия). «Верхняя» в данном контексте означает северо-западную часть района, ту, что располагалась ближе к замку. Нижняя Кадзия, менее престижная часть не самого фешенебельного района, представляла собою образование из восьмидесяти домов. Квартал пересекали узкие улочки и широкие проспекты. Красочные названия улиц, такие, как «Аллея кошачьего дерьма» (Нэко но кусо коро), свидетельствуют о том, что условия проживания в Ситанокадзия были далеко не идеальными. Дома представляли собой компактные строения, рассчитанные на одну семью, с маленькими садиками и бамбуковыми оградами. Район был густонаселен, и большинство домов имели площадь менее пяти тысяч квадратных футов.
На одной из боковых улиц стоял дом, размером чуть больше остальных, принадлежавший Сайго Китибэи, отцу Сайго Такамори. Примечательно, что поблизости находились дома целого ряда будущих выдающихся деятелей: Окубо Тосимити, друга детства Сайго, его политического союзника и в конечном итоге главного архитектора современного японского государства; Ояма Ивао, двоюродного брата Сайго, будущего начальника генерального штаба и лорда-хранителя императорской печати; и Того Хэйхатиро, последнего начальника морского генерального штаба и самого уважаемого японского адмирала.
Из дома Сайго открывался прекрасный вид на вулкан Сакурадзима, или «Остров сакуры», расположенный в трех милях от Кадзия-мати через залив Кинко. Строго говоря, Сакурадзима больше не является островом. — После сильного извержения 1914 года в залив было выброшено большое количество лавы и пепла, в результате чего образовался перешеек. «Остров сакуры» превратился в оконечность мыса, выдающегося в залив Кинко со стороны полуострова Осуми. Извержения вулкана Сакурадзима происходили достаточно регулярно, покрывая окружающую территорию слоем пепла. Вулканический пепел сделал почву на Сакурадзима особенно плодородной, и в девятнадцатом веке на острове жили тысячи крестьян. Остров стал главным источником мандаринов — одной из основных культур региона.