PCI: pcie_portdriver: fix pcie_port_device_remove