Предполагая, что индексы согласованы в кадрах данных (не принимая во внимание фактические значения col):
df1[~df1.index.isin(df2.index)]