pack-objects: turn off bitmaps when we split packs
[git.git] / Documentation / technical / api-hashmap.txt
blobb977ae8bbb1f46ebb40d1d315e79262fe344f1c2
1 hashmap API
2 ===========
4 The hashmap API is a generic implementation of hash-based key-value mappings.
6 Data Structures
7 ---------------
9 `struct hashmap`::
11         The hash table structure.
13 The `size` member keeps track of the total number of entries. The `cmpfn`
14 member is a function used to compare two entries for equality. The `table` and
15 `tablesize` members store the hash table and its size, respectively.
17 `struct hashmap_entry`::
19         An opaque structure representing an entry in the hash table, which must
20         be used as first member of user data structures. Ideally it should be
21         followed by an int-sized member to prevent unused memory on 64-bit
22         systems due to alignment.
24 The `hash` member is the entry's hash code and the `next` member points to the
25 next entry in case of collisions (i.e. if multiple entries map to the same
26 bucket).
28 `struct hashmap_iter`::
30         An iterator structure, to be used with hashmap_iter_* functions.
32 Types
33 -----
35 `int (*hashmap_cmp_fn)(const void *entry, const void *entry_or_key, const void *keydata)`::
37         User-supplied function to test two hashmap entries for equality. Shall
38         return 0 if the entries are equal.
40 This function is always called with non-NULL `entry` / `entry_or_key`
41 parameters that have the same hash code. When looking up an entry, the `key`
42 and `keydata` parameters to hashmap_get and hashmap_remove are always passed
43 as second and third argument, respectively. Otherwise, `keydata` is NULL.
45 Functions
46 ---------
48 `unsigned int strhash(const char *buf)`::
49 `unsigned int strihash(const char *buf)`::
50 `unsigned int memhash(const void *buf, size_t len)`::
51 `unsigned int memihash(const void *buf, size_t len)`::
53         Ready-to-use hash functions for strings, using the FNV-1 algorithm (see
54         http://www.isthe.com/chongo/tech/comp/fnv).
56 `strhash` and `strihash` take 0-terminated strings, while `memhash` and
57 `memihash` operate on arbitrary-length memory.
59 `strihash` and `memihash` are case insensitive versions.
61 `void hashmap_init(struct hashmap *map, hashmap_cmp_fn equals_function, size_t initial_size)`::
63         Initializes a hashmap structure.
65 `map` is the hashmap to initialize.
67 The `equals_function` can be specified to compare two entries for equality.
68 If NULL, entries are considered equal if their hash codes are equal.
70 If the total number of entries is known in advance, the `initial_size`
71 parameter may be used to preallocate a sufficiently large table and thus
72 prevent expensive resizing. If 0, the table is dynamically resized.
74 `void hashmap_free(struct hashmap *map, int free_entries)`::
76         Frees a hashmap structure and allocated memory.
78 `map` is the hashmap to free.
80 If `free_entries` is true, each hashmap_entry in the map is freed as well
81 (using stdlib's free()).
83 `void hashmap_entry_init(void *entry, unsigned int hash)`::
85         Initializes a hashmap_entry structure.
87 `entry` points to the entry to initialize.
89 `hash` is the hash code of the entry.
91 `void *hashmap_get(const struct hashmap *map, const void *key, const void *keydata)`::
93         Returns the hashmap entry for the specified key, or NULL if not found.
95 `map` is the hashmap structure.
97 `key` is a hashmap_entry structure (or user data structure that starts with
98 hashmap_entry) that has at least been initialized with the proper hash code
99 (via `hashmap_entry_init`).
101 If an entry with matching hash code is found, `key` and `keydata` are passed
102 to `hashmap_cmp_fn` to decide whether the entry matches the key.
104 `void *hashmap_get_next(const struct hashmap *map, const void *entry)`::
106         Returns the next equal hashmap entry, or NULL if not found. This can be
107         used to iterate over duplicate entries (see `hashmap_add`).
109 `map` is the hashmap structure.
111 `entry` is the hashmap_entry to start the search from, obtained via a previous
112 call to `hashmap_get` or `hashmap_get_next`.
114 `void hashmap_add(struct hashmap *map, void *entry)`::
116         Adds a hashmap entry. This allows to add duplicate entries (i.e.
117         separate values with the same key according to hashmap_cmp_fn).
119 `map` is the hashmap structure.
121 `entry` is the entry to add.
123 `void *hashmap_put(struct hashmap *map, void *entry)`::
125         Adds or replaces a hashmap entry. If the hashmap contains duplicate
126         entries equal to the specified entry, only one of them will be replaced.
128 `map` is the hashmap structure.
130 `entry` is the entry to add or replace.
132 Returns the replaced entry, or NULL if not found (i.e. the entry was added).
134 `void *hashmap_remove(struct hashmap *map, const void *key, const void *keydata)`::
136         Removes a hashmap entry matching the specified key. If the hashmap
137         contains duplicate entries equal to the specified key, only one of
138         them will be removed.
140 `map` is the hashmap structure.
142 `key` is a hashmap_entry structure (or user data structure that starts with
143 hashmap_entry) that has at least been initialized with the proper hash code
144 (via `hashmap_entry_init`).
146 If an entry with matching hash code is found, `key` and `keydata` are
147 passed to `hashmap_cmp_fn` to decide whether the entry matches the key.
149 Returns the removed entry, or NULL if not found.
151 `void hashmap_iter_init(struct hashmap *map, struct hashmap_iter *iter)`::
152 `void *hashmap_iter_next(struct hashmap_iter *iter)`::
153 `void *hashmap_iter_first(struct hashmap *map, struct hashmap_iter *iter)`::
155         Used to iterate over all entries of a hashmap.
157 `hashmap_iter_init` initializes a `hashmap_iter` structure.
159 `hashmap_iter_next` returns the next hashmap_entry, or NULL if there are no
160 more entries.
162 `hashmap_iter_first` is a combination of both (i.e. initializes the iterator
163 and returns the first entry, if any).
165 Usage example
166 -------------
168 Here's a simple usage example that maps long keys to double values.
169 ------------
170 struct hashmap map;
172 struct long2double {
173         struct hashmap_entry ent; /* must be the first member! */
174         long key;
175         double value;
178 static int long2double_cmp(const struct long2double *e1, const struct long2double *e2, const void *unused)
180         return !(e1->key == e2->key);
183 void long2double_init(void)
185         hashmap_init(&map, (hashmap_cmp_fn) long2double_cmp, 0);
188 void long2double_free(void)
190         hashmap_free(&map, 1);
193 static struct long2double *find_entry(long key)
195         struct long2double k;
196         hashmap_entry_init(&k, memhash(&key, sizeof(long)));
197         k.key = key;
198         return hashmap_get(&map, &k, NULL);
201 double get_value(long key)
203         struct long2double *e = find_entry(key);
204         return e ? e->value : 0;
207 void set_value(long key, double value)
209         struct long2double *e = find_entry(key);
210         if (!e) {
211                 e = malloc(sizeof(struct long2double));
212                 hashmap_entry_init(e, memhash(&key, sizeof(long)));
213                 e->key = key;
214                 hashmap_add(&map, e);
215         }
216         e->value = value;
218 ------------
220 Using variable-sized keys
221 -------------------------
223 The `hashmap_entry_get` and `hashmap_entry_remove` functions expect an ordinary
224 `hashmap_entry` structure as key to find the correct entry. If the key data is
225 variable-sized (e.g. a FLEX_ARRAY string) or quite large, it is undesirable
226 to create a full-fledged entry structure on the heap and copy all the key data
227 into the structure.
229 In this case, the `keydata` parameter can be used to pass
230 variable-sized key data directly to the comparison function, and the `key`
231 parameter can be a stripped-down, fixed size entry structure allocated on the
232 stack.
234 See test-hashmap.c for an example using arbitrary-length strings as keys.