Генерал Пиктон, чувствуя поддержку и справа и слева, выдвинул вперед 88-й и 45-й полки и атаковал в штыки застигнутых врасплох французских солдат, еще задыхавшихся от тяжелого подъема и лишившихся почти всех командиров. Он оттеснил их к самому краю плато, но в эту минуту 31-й полк дивизии Оделе, возглавлявший бригаду Фуа, дебушировал на левый фланг дивизии Мерля и поспешил поддержать ее. Однако, прежде чем он успел построиться, его накрыло картечным и ружейным огнем, и полк, лишившись своего полковника Деменье, был оттеснен к самому выходу с дороги. Солдаты, остановившиеся у самого края откоса, вели смертоносный стрелковый огонь по англичанам, не позволяя сбросить себя вниз и давая время подтянуться бригаде Фуа. Та появилась, наконец, на плато, вместе с присоединившимся 31-м полком. Но в эту минуту Веллингтон двинул на левый французский фланг дивизию Лита, а на правый — дивизию Спенсера с артиллерийскими резервами, направив силы всех 15 тысяч своих превосходно отдохнувших и закрепившихся на прочной позиции солдат на 7-8 тысяч французов, задыхавшихся после подъема, едва державшихся на краю обрыва и лишенных поддержки артиллерии. Изрешетив их картечью, Веллингтон приказал пехоте атаковать в штыки. Атакованные ужасающим огнем, оттесненные на наклонный участок вдвое превосходящими силами, французские солдаты были опрокинуты и отступили, унося на руках тяжело раненого генерала Фуа.
В это время вступил в бой и Ней, к сожалению, довольно поздно, что объяснялось отдаленностью Мойры, служившей ему отправным пунктом. Его колонну возглавляла дивизия Луазона, сопровождаемая на некотором расстоянии плотной колонной дивизии Маршана. Дивизия Мерме осталась в резерве.
После горячей перестрелки Ней бросил войска на позицию. Две бригады Луазона сошли с дороги и стали карабкаться на гору, в то время как Маршан продолжал движение по дороге. С той стороны к горному склону лепилась деревушка Сул, вытянувшаяся вдоль дороги. Генерал Симон бросился в нее с 26-м линейным полком и Южным легионом, выгнал оттуда португальцев, захватил их пушки и превратил ее в опорный пункт для подъема к вершине. Несколько правее бригада Ферре, состоявшая из 32-го легкого и 66-го и 82-го линейных, мучительно взбиралась по тому же склону, без помех, но и без поддержки из деревни. Обе бригады упорно лезли вверх, цепляясь за камни и деревья, и уже добрались под огнем португальцев до вершины, как вдруг их почти в упор накрыла картечью артиллерия генерала Кроуфорда. В ту же минуту Кроуфорд бросил легкую дивизию и португальскую бригаду Колмана в штыковую атаку и опрокинул французские полки, прежде чем они успели построиться и оказать какое-либо сопротивление. Бригада Симона остановилась в Суле, потеряв своего раненого генерала, попавшего в руки неприятеля. Бригада Феррея, не сумев зацепиться, оказалась отброшена к подножию горы. В эту минуту дивизия Маршана, дошедшая до места, откуда дивизия Луазона повернула на Сул, оказалась под перекрестным огнем со всех высот. Под градом пуль португальцев и англичан дивизия дрогнула и, вместо того чтобы кинуться атакующим шагом к Буссако, свернула влево и прижалась к почти отвесному склону. Возможность энергичной атакой захватить парк монастыря была упущена.
Вести измученные войска в новую атаку, чтобы пытаться остановить побеждавшего неприятеля, было уже поздно. Если бы Массена командовал простой дивизией, он, вероятно, возобновил бы атаку и, быть может, одолел все препятствия своим беспримерным упорством, но как главнокомандующий он рассудил, что довольно потерь в 4500 человек убитыми и ранеными в результате одной бесплодной атаки, и, не теряя надежды прогнать англичан, решился взяться за дело иначе.
Он призвал своих заместителей, которым мог бы высказать не одно замечание по поводу состоявшегося боя. Генерал Ренье сдержал слово и сделал, что мог, но Ней атаковал слишком поздно и не выказал такой храбрости, как в Эльхингене. Однако Массена ни в чем не упрекнул их и выслушал с невозмутимым хладнокровием, каковое сохранял в трудном положении. Ренье рассказал о своем поведении, и оно было безупречно. Ней объявил, что сделал всё возможное, возложил вину за неудачу на недостаточность средств экспедиции и заявил, что разумнее всего повернуть обратно и дождаться между Алмейдой и Сьюдад-Родриго новых подкреплений. Массена не стал ни перекладывать вину за неудачу на своих заместителей, ни выражать огорчение в пустых рассуждениях о том, что следовало делать, лишь отверг свысока всякую мысль о возвращении. Приказав воссоединить войска у подножия горы, собрать раненых и приготовиться к маршу, он удалился для принятия решения. Подобные минуты были триумфом его сильной души. Массена думал, что англичане тоже понесли значительные потери и наверняка не осмелятся спускаться с высот на равнину, где могут столкнуться не только с по-прежнему решительно настроенной пехотой французов, но и с кавалерией и артиллерией, с которыми не имели дела на вершине (и он думал правильно, ибо англичане, хоть и победили, но опасались новой атаки и не решались покинуть позицию). Он думал также, что справа, на низкой гряде, через которую Сьерра-де-Алкоба соединяется со Сьерра-ду-Карамулу, наверняка должен быть какой-то проход; что местные жители обязательно должны были проложить там какую-то дорогу, а он слишком легко поверил словам первых встречных. И Массена отправил на правый фланг армии Монбрена и полковника Сен-Круа с драгунами, чтобы они попытались найти этот проход. Приняв решение, он терпеливо стал дожидаться результата.