В чем разница между абстрактным классом и классом, в котором все его методы абстрактны?

Абсолютно нет. Действительно, класс может быть абстрактным без каких-либо методов, которые являются абстрактными, хотя это относительно редко (см. Комментарий Марка ниже для примера). С другой стороны, если у класса есть какие-либо абстрактные методы, то он должен быть объявлен абстрактным.

Вообще говоря, цель абстрактного класса - предоставить скелету некоторое неабстрактное поведение, но другие биты все еще должны быть заполнены подклассами. Это можно использовать, например, с шаблоном метода шаблона .