132 находится вне диапазона байта, который составляет от -128 до 127 (Byte.MIN_VALUE - Byte.MAX_VALUE). Вместо этого верхний бит 8-битного значения обрабатывается как подписанный, который указывает, что в этом случае он отрицательный. Таким образом, число равно 132 - 256 = -124.