transport: add got_remote_refs flag