selftest/flapping

   1 # This file contains a list of regular expressions matching the names of
   2 # tests that are flapping. In other words, they sometimes succeed and
   3 # sometimes fail, depending on external factors.
   4 #
   5 # "make test" will not report failures or successes for tests listed here.
   6 #
   7 # DO NOT ADD TESTS HERE UNLESS THEY ARE ACTUALLY FLAPPING
   8 #
   9 # It is much better to add known failing tests to 'knownfail', so the
  10 # test system can warn when they actually start passing.
  11 ^samba3.raw.mux.* #This test is flaky on the async lock time
  12 ^samba3.smbtorture_s3.*OPLOCK4 # fails sometimes on sn-devel
  13 ^samba4.nbt.winsreplication.owned # fails sometimes, timing related
  14 ^samba3.rpc.spoolss.*printserver.enum_printers_old # fails on some hosts due to timing issues ?
  15 ^samba3.rpc.spoolss.printer.*addprinterex.print_test # another intermittent failure
  16 ^samba3.rap.printing # fails sometimes on sn-devel
  17 ^samba3.rpc.spoolss.printer.*addprinter.print_test # fails on some hosts due to timing issues ?
  18 ^samba3.rpc.spoolss.printer.addprinter.print_job_enum # fails on some hosts due to bug 10930
  19 ^samba3.rpc.spoolss.printer.addprinterex.print_job_enum # fails on some hosts due to bug 10930
  20 ^samba3.rpc.lsa.privileges.lsa.Privileges\(nt4_dc\) # fails sometimes on sn-devel
  21 ^samba4.blackbox.gentest # is flakey due to timing
  22 ^samba3.smb2.acls.INHERITANCE\(ad_dc\)  # Seems to flap - succeeds on sn-devel, fails on Fedora 16
  23 ^samba3.smb2.acls.DYNAMIC\(ad_dc\)  # Seems to flap - succeeds on sn-devel, fails on Fedora 16
  24 ^samba3.raw.acls.dynamic\(ad_dc\) # Seems to flap - succeeds on sn-devel, fails on Fedora 16
  25 ^samba3.raw.acls.inheritance\(ad_dc\) # Seems to flap - succeeds on sn-devel, fails on Fedora 16
  26 ^samba3.raw.samba3checkfsp.samba3checkfsp\(ad_dc\) # Seems to flap - succeeds on sn-devel, fails on Fedora 16
  27 ^samba3.raw.samba3closeerr.samba3closeerr\(ad_dc\) # Seems to flap - succeeds on sn-devel, fails on Fedora 16
  28 ^samba4.smb2.create.mkdir-dup\(ad_dc_ntvfs\) # This test (for bug 11486) involves a race, not always protected against in the NTVFS file server
  29 ^samba4.winbind.struct.domain_info.ad_member # flakey on sn-devel-104 and sn-devel-144
  30 #
  31 # This test just is not reliable in finding the max search limit
  32 #
  33 ^samba4.ldap.notification.python\(.*\).__main__.LDAPNotificationTest.test_max_search
  34 ^samba3.blackbox.smbclient_tar.* # fails very, very often on sn-devel