Odmítat jednání o brexitu je od EU nezodpovědné, tvrdí britský ministr