Clang Project

clang_source_code/lib/Headers/fmaintrin.h
1/*===---- fmaintrin.h - FMA intrinsics -------------------------------------===
2 *
3 * Permission is hereby granted, free of charge, to any person obtaining a copy
4 * of this software and associated documentation files (the "Software"), to deal
5 * in the Software without restriction, including without limitation the rights
6 * to use, copy, modify, merge, publish, distribute, sublicense, and/or sell
7 * copies of the Software, and to permit persons to whom the Software is
8 * furnished to do so, subject to the following conditions:
9 *
10 * The above copyright notice and this permission notice shall be included in
11 * all copies or substantial portions of the Software.
12 *
13 * THE SOFTWARE IS PROVIDED "AS IS", WITHOUT WARRANTY OF ANY KIND, EXPRESS OR
14 * IMPLIED, INCLUDING BUT NOT LIMITED TO THE WARRANTIES OF MERCHANTABILITY,
15 * FITNESS FOR A PARTICULAR PURPOSE AND NONINFRINGEMENT. IN NO EVENT SHALL THE
16 * AUTHORS OR COPYRIGHT HOLDERS BE LIABLE FOR ANY CLAIM, DAMAGES OR OTHER
17 * LIABILITY, WHETHER IN AN ACTION OF CONTRACT, TORT OR OTHERWISE, ARISING FROM,
18 * OUT OF OR IN CONNECTION WITH THE SOFTWARE OR THE USE OR OTHER DEALINGS IN
19 * THE SOFTWARE.
20 *
21 *===-----------------------------------------------------------------------===
22 */
23
24#ifndef __IMMINTRIN_H
25#error "Never use <fmaintrin.h> directly; include <immintrin.h> instead."
26#endif
27
28#ifndef __FMAINTRIN_H
29#define __FMAINTRIN_H
30
31/* Define the default attributes for the functions in this file. */
32#define __DEFAULT_FN_ATTRS128 __attribute__((__always_inline__, __nodebug__, __target__("fma"), __min_vector_width__(128)))
33#define __DEFAULT_FN_ATTRS256 __attribute__((__always_inline__, __nodebug__, __target__("fma"), __min_vector_width__(256)))
34
35static __inline__ __m128 __DEFAULT_FN_ATTRS128
36_mm_fmadd_ps(__m128 __A__m128 __B__m128 __C)
37{
38  return (__m128)__builtin_ia32_vfmaddps((__v4sf)__A, (__v4sf)__B, (__v4sf)__C);
39}
40
41static __inline__ __m128d __DEFAULT_FN_ATTRS128
42_mm_fmadd_pd(__m128d __A__m128d __B__m128d __C)
43{
44  return (__m128d)__builtin_ia32_vfmaddpd((__v2df)__A, (__v2df)__B, (__v2df)__C);
45}
46
47static __inline__ __m128 __DEFAULT_FN_ATTRS128
48_mm_fmadd_ss(__m128 __A__m128 __B__m128 __C)
49{
50  return (__m128)__builtin_ia32_vfmaddss3((__v4sf)__A, (__v4sf)__B, (__v4sf)__C);
51}
52
53static __inline__ __m128d __DEFAULT_FN_ATTRS128
54_mm_fmadd_sd(__m128d __A__m128d __B__m128d __C)
55{
56  return (__m128d)__builtin_ia32_vfmaddsd3((__v2df)__A, (__v2df)__B, (__v2df)__C);
57}
58
59static __inline__ __m128 __DEFAULT_FN_ATTRS128
60_mm_fmsub_ps(__m128 __A__m128 __B__m128 __C)
61{
62  return (__m128)__builtin_ia32_vfmaddps((__v4sf)__A, (__v4sf)__B, -(__v4sf)__C);
63}
64
65static __inline__ __m128d __DEFAULT_FN_ATTRS128
66_mm_fmsub_pd(__m128d __A__m128d __B__m128d __C)
67{
68  return (__m128d)__builtin_ia32_vfmaddpd((__v2df)__A, (__v2df)__B, -(__v2df)__C);
69}
70
71static __inline__ __m128 __DEFAULT_FN_ATTRS128
72_mm_fmsub_ss(__m128 __A__m128 __B__m128 __C)
73{
74  return (__m128)__builtin_ia32_vfmaddss3((__v4sf)__A, (__v4sf)__B, -(__v4sf)__C);
75}
76
77static __inline__ __m128d __DEFAULT_FN_ATTRS128
78_mm_fmsub_sd(__m128d __A__m128d __B__m128d __C)
79{
80  return (__m128d)__builtin_ia32_vfmaddsd3((__v2df)__A, (__v2df)__B, -(__v2df)__C);
81}
82
83static __inline__ __m128 __DEFAULT_FN_ATTRS128
84_mm_fnmadd_ps(__m128 __A__m128 __B__m128 __C)
85{
86  return (__m128)__builtin_ia32_vfmaddps(-(__v4sf)__A, (__v4sf)__B, (__v4sf)__C);
87}
88
89static __inline__ __m128d __DEFAULT_FN_ATTRS128
90_mm_fnmadd_pd(__m128d __A__m128d __B__m128d __C)
91{
92  return (__m128d)__builtin_ia32_vfmaddpd(-(__v2df)__A, (__v2df)__B, (__v2df)__C);
93}
94
95static __inline__ __m128 __DEFAULT_FN_ATTRS128
96_mm_fnmadd_ss(__m128 __A__m128 __B__m128 __C)
97{
98  return (__m128)__builtin_ia32_vfmaddss3((__v4sf)__A, -(__v4sf)__B, (__v4sf)__C);
99}
100
101static __inline__ __m128d __DEFAULT_FN_ATTRS128
102_mm_fnmadd_sd(__m128d __A__m128d __B__m128d __C)
103{
104  return (__m128d)__builtin_ia32_vfmaddsd3((__v2df)__A, -(__v2df)__B, (__v2df)__C);
105}
106
107static __inline__ __m128 __DEFAULT_FN_ATTRS128
108_mm_fnmsub_ps(__m128 __A__m128 __B__m128 __C)
109{
110  return (__m128)__builtin_ia32_vfmaddps(-(__v4sf)__A, (__v4sf)__B, -(__v4sf)__C);
111}
112
113static __inline__ __m128d __DEFAULT_FN_ATTRS128
114_mm_fnmsub_pd(__m128d __A__m128d __B__m128d __C)
115{
116  return (__m128d)__builtin_ia32_vfmaddpd(-(__v2df)__A, (__v2df)__B, -(__v2df)__C);
117}
118
119static __inline__ __m128 __DEFAULT_FN_ATTRS128
120_mm_fnmsub_ss(__m128 __A__m128 __B__m128 __C)
121{
122  return (__m128)__builtin_ia32_vfmaddss3((__v4sf)__A, -(__v4sf)__B, -(__v4sf)__C);
123}
124
125static __inline__ __m128d __DEFAULT_FN_ATTRS128
126_mm_fnmsub_sd(__m128d __A__m128d __B__m128d __C)
127{
128  return (__m128d)__builtin_ia32_vfmaddsd3((__v2df)__A, -(__v2df)__B, -(__v2df)__C);
129}
130
131static __inline__ __m128 __DEFAULT_FN_ATTRS128
132_mm_fmaddsub_ps(__m128 __A__m128 __B__m128 __C)
133{
134  return (__m128)__builtin_ia32_vfmaddsubps((__v4sf)__A, (__v4sf)__B, (__v4sf)__C);
135}
136
137static __inline__ __m128d __DEFAULT_FN_ATTRS128
138_mm_fmaddsub_pd(__m128d __A__m128d __B__m128d __C)
139{
140  return (__m128d)__builtin_ia32_vfmaddsubpd((__v2df)__A, (__v2df)__B, (__v2df)__C);
141}
142
143static __inline__ __m128 __DEFAULT_FN_ATTRS128
144_mm_fmsubadd_ps(__m128 __A__m128 __B__m128 __C)
145{
146  return (__m128)__builtin_ia32_vfmaddsubps((__v4sf)__A, (__v4sf)__B, -(__v4sf)__C);
147}
148
149static __inline__ __m128d __DEFAULT_FN_ATTRS128
150_mm_fmsubadd_pd(__m128d __A__m128d __B__m128d __C)
151{
152  return (__m128d)__builtin_ia32_vfmaddsubpd((__v2df)__A, (__v2df)__B, -(__v2df)__C);
153}
154
155static __inline__ __m256 __DEFAULT_FN_ATTRS256
156_mm256_fmadd_ps(__m256 __A__m256 __B__m256 __C)
157{
158  return (__m256)__builtin_ia32_vfmaddps256((__v8sf)__A, (__v8sf)__B, (__v8sf)__C);
159}
160
161static __inline__ __m256d __DEFAULT_FN_ATTRS256
162_mm256_fmadd_pd(__m256d __A__m256d __B__m256d __C)
163{
164  return (__m256d)__builtin_ia32_vfmaddpd256((__v4df)__A, (__v4df)__B, (__v4df)__C);
165}
166
167static __inline__ __m256 __DEFAULT_FN_ATTRS256
168_mm256_fmsub_ps(__m256 __A__m256 __B__m256 __C)
169{
170  return (__m256)__builtin_ia32_vfmaddps256((__v8sf)__A, (__v8sf)__B, -(__v8sf)__C);
171}
172
173static __inline__ __m256d __DEFAULT_FN_ATTRS256
174_mm256_fmsub_pd(__m256d __A__m256d __B__m256d __C)
175{
176  return (__m256d)__builtin_ia32_vfmaddpd256((__v4df)__A, (__v4df)__B, -(__v4df)__C);
177}
178
179static __inline__ __m256 __DEFAULT_FN_ATTRS256
180_mm256_fnmadd_ps(__m256 __A__m256 __B__m256 __C)
181{
182  return (__m256)__builtin_ia32_vfmaddps256(-(__v8sf)__A, (__v8sf)__B, (__v8sf)__C);
183}
184
185static __inline__ __m256d __DEFAULT_FN_ATTRS256
186_mm256_fnmadd_pd(__m256d __A__m256d __B__m256d __C)
187{
188  return (__m256d)__builtin_ia32_vfmaddpd256(-(__v4df)__A, (__v4df)__B, (__v4df)__C);
189}
190
191static __inline__ __m256 __DEFAULT_FN_ATTRS256
192_mm256_fnmsub_ps(__m256 __A__m256 __B__m256 __C)
193{
194  return (__m256)__builtin_ia32_vfmaddps256(-(__v8sf)__A, (__v8sf)__B, -(__v8sf)__C);
195}
196
197static __inline__ __m256d __DEFAULT_FN_ATTRS256
198_mm256_fnmsub_pd(__m256d __A__m256d __B__m256d __C)
199{
200  return (__m256d)__builtin_ia32_vfmaddpd256(-(__v4df)__A, (__v4df)__B, -(__v4df)__C);
201}
202
203static __inline__ __m256 __DEFAULT_FN_ATTRS256
204_mm256_fmaddsub_ps(__m256 __A__m256 __B__m256 __C)
205{
206  return (__m256)__builtin_ia32_vfmaddsubps256((__v8sf)__A, (__v8sf)__B, (__v8sf)__C);
207}
208
209static __inline__ __m256d __DEFAULT_FN_ATTRS256
210_mm256_fmaddsub_pd(__m256d __A__m256d __B__m256d __C)
211{
212  return (__m256d)__builtin_ia32_vfmaddsubpd256((__v4df)__A, (__v4df)__B, (__v4df)__C);
213}
214
215static __inline__ __m256 __DEFAULT_FN_ATTRS256
216_mm256_fmsubadd_ps(__m256 __A__m256 __B__m256 __C)
217{
218  return (__m256)__builtin_ia32_vfmaddsubps256((__v8sf)__A, (__v8sf)__B, -(__v8sf)__C);
219}
220
221static __inline__ __m256d __DEFAULT_FN_ATTRS256
222_mm256_fmsubadd_pd(__m256d __A__m256d __B__m256d __C)
223{
224  return (__m256d)__builtin_ia32_vfmaddsubpd256((__v4df)__A, (__v4df)__B, -(__v4df)__C);
225}
226
227#undef __DEFAULT_FN_ATTRS128
228#undef __DEFAULT_FN_ATTRS256
229
230#endif /* __FMAINTRIN_H */
231