Элиту армии Токугава составляла О-бан, или Великая Гвардия, которая первоначально делилась на три отряда. Когда армия Иэясу во время корейской войны отправилась в Нагоя нести гарнизонную службу, их было уже пять, а к 1623 г. число отрядов достигло двенадцати. Каждый отряд включал капитана (о-бан касира), пять лейтенантов (о-бан кумигасира) и пятнадцать гвардейцев (о-бан). Каждый капитан имел под своим началом тридцать «домашних», а его перечисленные выше подчиненные выставляли своих людей в соответствии с разнарядкой. Помимо Великой Гвардии, существовали также лейб-гвардия (соин-бан), охранявшая персону сёгуна; Внутренняя Стража (косо-бан), охранявшая замок Эдо; Новая Гвардия (син-бан), ничего конкретного не охранявшая и сформированная в 1643 г., скорее всего, затем, чтобы обеспечить должностями родственников многочисленных наложниц третьего сёгуна Токугава, Иэмицу.
Помимо бан, существовал еще целый ряд специальных подразделений, различавшихся главным образом вооружением, как, например, 25 отрядов по сотне всадников, вооруженных ружьями и известных как тэппо хяку-нин – гуми. С точки зрения военной они были эффективнее вооруженных мечами конников Великой Гвардии, но по статусу тем не менее стояли гораздо ниже. Зачисление в бан, особенно в Великую Гвардию, было престижно и служило началом военной карьеры. Особого мастерства в обращении с оружием для этого не требовалось, и, поскольку воевать было не с кем, поддерживать боеспособность армии было непросто. В 1650 г. вышел закон, запрещавший праздным гвардейцам устраивать поединки и осуществлять кровную месть, за которым последовал другой закон, предписывавший им содержать в порядке военное снаряжение. В 1694 г. появился даже закон, требовавший, чтобы самураи армии сёгуната совершенствовались в военном искусстве, что странным образом противоречит распространенному взгляду на самураев. Многие гвардейцы Великой Гвардии, как оказалось, не умели даже плавать, не говоря уже об обращении с мечом. Энергичный сёгун Ёсимунэ попытался в 1701 г. возродить спартанские доблести самурайства, но его призывы ни к чему не привели. Упадок самурайства был вызван не только отсутствием возможности попрактиковаться в военном деле. К концу семнадцатого века самураев занимали не столько тонкости фехтовального искусства, сколь необходимость сохранить платежеспособность. В мире постоянно растущих цен ежегодное жалованье, выраженное в рисе, обеспечивало самураю фиксированный годовой доход. Уже в 1630 г. расходы, связанные с периодическим пребыванием в Эдо для несения стражи и выполнения других обязанностей, вызывали у многих финансовые затруднения. Предметы роскоши, которых требовала жизнь в столице сёгунов, стоили дорого, и это сказывалось на способности знаменного самурая содержать ту вооруженную свиту, которую он обязан был выставлять согласно предписанию. В 1633 г. жалованье было повышено, однако его все равно было недостаточно, чтобы удержать самураев от посещения ломбардов и ростовщиков. В 1673 г. один самурай, с жалованьем в 300 коку, столкнулся с неразрешимой финансовой проблемой. Его жалованье было равно 75 рё в серебряной монете (что соответствует примерно полутора килограммам золота), однако в тот год он потратил 38 рё на содержание всадников и прислуги, 10 на покупку коня и фураж, 18 на масло, овощи и прочие предметы первой необходимости и 30 на одежду, бумагу и всякую всячину, что составило в итоге 108 рё. Недостающие деньги ему пришлось занимать у ростовщиков. В концу XVIII века один самурай продал свое жалованье в рисе, чтобы заплатить за жилье. Хотя самурай и пользовался правом носить два меча, звонкой монетой владело презренное торговое сословие.
Самый яркий пример все большего обнищания самурайского сословия относится к 1856 г., к самому концу правления Токугава, когда один самурай вынужден был занимать деньги у тех самых крестьян, которые обрабатывали его земли. Крестьяне, над которыми в теории он имел право жизни и смерти, грозили оставить должности сельских старост, если он не сократит свои расходы; для начала, предложили они, ему неплохо было бы выгнать собственного брата, бездельника и транжира.
В Японии Токугава далеко не все самураи занимались исключительно военным делом. Многие самураи, с важным видом шествовавшие по Эдо, выполняли всего-навсего различные мелкие поручения, вроде наблюдения за ремонтом стен замка или оценки ущерба от наводнения. Пусть сама идея вооруженных до зубов гражданских служащих и кажется забавной, эти люди также были самураями, их статус был равен статусу военнослужащих, и теоретически они также были обязаны содержать вооруженную свиту в соответствии с предписанием. Представьте себе городскую ратушу, где вместо обычных чиновников за столами сидят офицеры местного гарнизона. К тому же, как и у их коллег в гвардии, у них возникали те же самые экономические проблемы.