Params API: {utf8,octet}_ptr need to know the data size
[openssl.git] / doc / man3 / OPENSSL_malloc.pod
1 =pod
2
3 =head1 NAME
4
5 OPENSSL_malloc_init,
6 OPENSSL_malloc, OPENSSL_zalloc, OPENSSL_realloc, OPENSSL_free,
7 OPENSSL_clear_realloc, OPENSSL_clear_free, OPENSSL_cleanse,
8 CRYPTO_malloc, CRYPTO_zalloc, CRYPTO_realloc, CRYPTO_free,
9 OPENSSL_strdup, OPENSSL_strndup,
10 OPENSSL_memdup, OPENSSL_strlcpy, OPENSSL_strlcat,
11 OPENSSL_hexstr2buf, OPENSSL_buf2hexstr, OPENSSL_hexchar2int,
12 CRYPTO_strdup, CRYPTO_strndup,
13 OPENSSL_mem_debug_push, OPENSSL_mem_debug_pop,
14 CRYPTO_mem_debug_push, CRYPTO_mem_debug_pop,
15 CRYPTO_clear_realloc, CRYPTO_clear_free,
16 CRYPTO_get_mem_functions, CRYPTO_set_mem_functions,
17 CRYPTO_get_alloc_counts,
18 CRYPTO_set_mem_debug, CRYPTO_mem_ctrl,
19 CRYPTO_mem_leaks, CRYPTO_mem_leaks_fp, CRYPTO_mem_leaks_cb,
20 OPENSSL_MALLOC_FAILURES,
21 OPENSSL_MALLOC_FD
22 - Memory allocation functions
23
24 =head1 SYNOPSIS
25
26  #include <openssl/crypto.h>
27
28  int OPENSSL_malloc_init(void)
29
30  void *OPENSSL_malloc(size_t num)
31  void *OPENSSL_zalloc(size_t num)
32  void *OPENSSL_realloc(void *addr, size_t num)
33  void OPENSSL_free(void *addr)
34  char *OPENSSL_strdup(const char *str)
35  char *OPENSSL_strndup(const char *str, size_t s)
36  size_t OPENSSL_strlcat(char *dst, const char *src, size_t size);
37  size_t OPENSSL_strlcpy(char *dst, const char *src, size_t size);
38  void *OPENSSL_memdup(void *data, size_t s)
39  void *OPENSSL_clear_realloc(void *p, size_t old_len, size_t num)
40  void OPENSSL_clear_free(void *str, size_t num)
41  void OPENSSL_cleanse(void *ptr, size_t len);
42
43  unsigned char *OPENSSL_hexstr2buf(const char *str, long *len);
44  char *OPENSSL_buf2hexstr(const unsigned char *buffer, long len);
45  int OPENSSL_hexchar2int(unsigned char c);
46
47  void *CRYPTO_malloc(size_t num, const char *file, int line)
48  void *CRYPTO_zalloc(size_t num, const char *file, int line)
49  void *CRYPTO_realloc(void *p, size_t num, const char *file, int line)
50  void CRYPTO_free(void *str, const char *, int)
51  char *CRYPTO_strdup(const char *p, const char *file, int line)
52  char *CRYPTO_strndup(const char *p, size_t num, const char *file, int line)
53  void *CRYPTO_clear_realloc(void *p, size_t old_len, size_t num,
54                             const char *file, int line)
55  void CRYPTO_clear_free(void *str, size_t num, const char *, int)
56
57  void CRYPTO_get_mem_functions(
58          void *(**m)(size_t, const char *, int),
59          void *(**r)(void *, size_t, const char *, int),
60          void (**f)(void *, const char *, int))
61  int CRYPTO_set_mem_functions(
62          void *(*m)(size_t, const char *, int),
63          void *(*r)(void *, size_t, const char *, int),
64          void (*f)(void *, const char *, int))
65
66  void CRYPTO_get_alloc_counts(int *m, int *r, int *f)
67
68  int CRYPTO_set_mem_debug(int onoff)
69
70  env OPENSSL_MALLOC_FAILURES=... <application>
71  env OPENSSL_MALLOC_FD=... <application>
72
73  int CRYPTO_mem_ctrl(int mode);
74
75  int OPENSSL_mem_debug_push(const char *info)
76  int OPENSSL_mem_debug_pop(void);
77
78  int CRYPTO_mem_debug_push(const char *info, const char *file, int line);
79  int CRYPTO_mem_debug_pop(void);
80
81  int CRYPTO_mem_leaks(BIO *b);
82  int CRYPTO_mem_leaks_fp(FILE *fp);
83  int CRYPTO_mem_leaks_cb(int (*cb)(const char *str, size_t len, void *u),
84                          void *u);
85
86 =head1 DESCRIPTION
87
88 OpenSSL memory allocation is handled by the B<OPENSSL_xxx> API. These are
89 generally macro's that add the standard C B<__FILE__> and B<__LINE__>
90 parameters and call a lower-level B<CRYPTO_xxx> API.
91 Some functions do not add those parameters, but exist for consistency.
92
93 OPENSSL_malloc_init() does nothing and does not need to be called. It is
94 included for compatibility with older versions of OpenSSL.
95
96 OPENSSL_malloc(), OPENSSL_realloc(), and OPENSSL_free() are like the
97 C malloc(), realloc(), and free() functions.
98 OPENSSL_zalloc() calls memset() to zero the memory before returning.
99
100 OPENSSL_clear_realloc() and OPENSSL_clear_free() should be used
101 when the buffer at B<addr> holds sensitive information.
102 The old buffer is filled with zero's by calling OPENSSL_cleanse()
103 before ultimately calling OPENSSL_free().
104
105 OPENSSL_cleanse() fills B<ptr> of size B<len> with a string of 0's.
106 Use OPENSSL_cleanse() with care if the memory is a mapping of a file.
107 If the storage controller uses write compression, then its possible
108 that sensitive tail bytes will survive zeroization because the block of
109 zeros will be compressed. If the storage controller uses wear leveling,
110 then the old sensitive data will not be overwritten; rather, a block of
111 0's will be written at a new physical location.
112
113 OPENSSL_strdup(), OPENSSL_strndup() and OPENSSL_memdup() are like the
114 equivalent C functions, except that memory is allocated by calling the
115 OPENSSL_malloc() and should be released by calling OPENSSL_free().
116
117 OPENSSL_strlcpy(),
118 OPENSSL_strlcat() and OPENSSL_strnlen() are equivalents of the common C
119 library functions and are provided for portability.
120
121 OPENSSL_hexstr2buf() parses B<str> as a hex string and returns a
122 pointer to the parsed value. The memory is allocated by calling
123 OPENSSL_malloc() and should be released by calling OPENSSL_free().
124 If B<len> is not NULL, it is filled in with the output length.
125 Colons between two-character hex "bytes" are ignored.
126 An odd number of hex digits is an error.
127
128 OPENSSL_buf2hexstr() takes the specified buffer and length, and returns
129 a hex string for value, or NULL on error.
130 B<Buffer> cannot be NULL; if B<len> is 0 an empty string is returned.
131
132 OPENSSL_hexchar2int() converts a character to the hexadecimal equivalent,
133 or returns -1 on error.
134
135 If no allocations have been done, it is possible to "swap out" the default
136 implementations for OPENSSL_malloc(), OPENSSL_realloc and OPENSSL_free()
137 and replace them with alternate versions (hooks).
138 CRYPTO_get_mem_functions() function fills in the given arguments with the
139 function pointers for the current implementations.
140 With CRYPTO_set_mem_functions(), you can specify a different set of functions.
141 If any of B<m>, B<r>, or B<f> are NULL, then the function is not changed.
142
143 The default implementation can include some debugging capability (if enabled
144 at build-time).
145 This adds some overhead by keeping a list of all memory allocations, and
146 removes items from the list when they are free'd.
147 This is most useful for identifying memory leaks.
148 CRYPTO_set_mem_debug() turns this tracking on and off.  In order to have
149 any effect, is must be called before any of the allocation functions
150 (e.g., CRYPTO_malloc()) are called, and is therefore normally one of the
151 first lines of main() in an application.
152 CRYPTO_mem_ctrl() provides fine-grained control of memory leak tracking.
153 To enable tracking call CRYPTO_mem_ctrl() with a B<mode> argument of
154 the B<CRYPTO_MEM_CHECK_ON>.
155 To disable tracking call CRYPTO_mem_ctrl() with a B<mode> argument of
156 the B<CRYPTO_MEM_CHECK_OFF>.
157
158 While checking memory, it can be useful to store additional context
159 about what is being done.
160 For example, identifying the field names when parsing a complicated
161 data structure.
162 OPENSSL_mem_debug_push() (which calls CRYPTO_mem_debug_push())
163 attachs an identifying string to the allocation stack.
164 This must be a global or other static string; it is not copied.
165 OPENSSL_mem_debug_pop() removes identifying state from the stack.
166
167 At the end of the program, calling CRYPTO_mem_leaks() or
168 CRYPTO_mem_leaks_fp() will report all "leaked" memory, writing it
169 to the specified BIO B<b> or FILE B<fp>. These functions return 1 if
170 there are no leaks, 0 if there are leaks and -1 if an error occurred.
171
172 CRYPTO_mem_leaks_cb() does the same as CRYPTO_mem_leaks(), but instead
173 of writing to a given BIO, the callback function is called for each
174 output string with the string, length, and userdata B<u> as the callback
175 parameters.
176
177 If the library is built with the C<crypto-mdebug> option, then one
178 function, CRYPTO_get_alloc_counts(), and two additional environment
179 variables, B<OPENSSL_MALLOC_FAILURES> and B<OPENSSL_MALLOC_FD>,
180 are available.
181
182 The function CRYPTO_get_alloc_counts() fills in the number of times
183 each of CRYPTO_malloc(), CRYPTO_realloc(), and CRYPTO_free() have been
184 called, into the values pointed to by B<mcount>, B<rcount>, and B<fcount>,
185 respectively.  If a pointer is NULL, then the corresponding count is not stored.
186
187 The variable
188 B<OPENSSL_MALLOC_FAILURES> controls how often allocations should fail.
189 It is a set of fields separated by semicolons, which each field is a count
190 (defaulting to zero) and an optional atsign and percentage (defaulting
191 to 100).  If the count is zero, then it lasts forever.  For example,
192 C<100;@25> or C<100@0;0@25> means the first 100 allocations pass, then all
193 other allocations (until the program exits or crashes) have a 25% chance of
194 failing.
195
196 If the variable B<OPENSSL_MALLOC_FD> is parsed as a positive integer, then
197 it is taken as an open file descriptor, and a record of all allocations is
198 written to that descriptor.  If an allocation will fail, and the platform
199 supports it, then a backtrace will be written to the descriptor.  This can
200 be useful because a malloc may fail but not be checked, and problems will
201 only occur later.  The following example in classic shell syntax shows how
202 to use this (will not work on all platforms):
203
204   OPENSSL_MALLOC_FAILURES='200;@10'
205   export OPENSSL_MALLOC_FAILURES
206   OPENSSL_MALLOC_FD=3
207   export OPENSSL_MALLOC_FD
208   ...app invocation... 3>/tmp/log$$
209
210
211 =head1 RETURN VALUES
212
213 OPENSSL_malloc_init(), OPENSSL_free(), OPENSSL_clear_free()
214 CRYPTO_free(), CRYPTO_clear_free() and CRYPTO_get_mem_functions()
215 return no value.
216
217 CRYPTO_mem_leaks(), CRYPTO_mem_leaks_fp() and CRYPTO_mem_leaks_cb() return 1 if
218 there are no leaks, 0 if there are leaks and -1 if an error occurred.
219
220 OPENSSL_malloc(), OPENSSL_zalloc(), OPENSSL_realloc(),
221 OPENSSL_clear_realloc(),
222 CRYPTO_malloc(), CRYPTO_zalloc(), CRYPTO_realloc(),
223 CRYPTO_clear_realloc(),
224 OPENSSL_buf2hexstr(), OPENSSL_hexstr2buf(),
225 OPENSSL_strdup(), and OPENSSL_strndup()
226 return a pointer to allocated memory or NULL on error.
227
228 CRYPTO_set_mem_functions() and CRYPTO_set_mem_debug()
229 return 1 on success or 0 on failure (almost
230 always because allocations have already happened).
231
232 CRYPTO_mem_ctrl() returns -1 if an error occurred, otherwise the
233 previous value of the mode.
234
235 OPENSSL_mem_debug_push() and OPENSSL_mem_debug_pop()
236 return 1 on success or 0 on failure.
237
238 =head1 NOTES
239
240 While it's permitted to swap out only a few and not all the functions
241 with CRYPTO_set_mem_functions(), it's recommended to swap them all out
242 at once.  I<This applies specially if OpenSSL was built with the
243 configuration option> C<crypto-mdebug> I<enabled.  In case, swapping out
244 only, say, the malloc() implementation is outright dangerous.>
245
246 =head1 COPYRIGHT
247
248 Copyright 2016-2018 The OpenSSL Project Authors. All Rights Reserved.
249
250 Licensed under the Apache License 2.0 (the "License").  You may not use
251 this file except in compliance with the License.  You can obtain a copy
252 in the file LICENSE in the source distribution or at
253 L<https://www.openssl.org/source/license.html>.
254
255 =cut