1/*===----- avx512vpopcntdqintrin.h - AVX512VPOPCNTDQ intrinsics-------------===
2 *
3 *
4 * Part of the LLVM Project, under the Apache License v2.0 with LLVM Exceptions.
5 * See https://llvm.org/LICENSE.txt for license information.
6 * SPDX-License-Identifier: Apache-2.0 WITH LLVM-exception
7 *
8 *===-----------------------------------------------------------------------===
9 */
10#ifndef __IMMINTRIN_H
11#error \
12 "Never use <avx512vpopcntdqintrin.h> directly; include <immintrin.h> instead."
13#endif
14
15#ifndef __AVX512VPOPCNTDQINTRIN_H
16#define __AVX512VPOPCNTDQINTRIN_H
17
18/* Define the default attributes for the functions in this file. */
19#if defined(__cplusplus) && (__cplusplus >= 201103L)
20#define __DEFAULT_FN_ATTRS \
21 __attribute__((__always_inline__, __nodebug__, \
22 __target__("avx512vpopcntdq"), \
23 __min_vector_width__(512))) constexpr
24#else
25#define __DEFAULT_FN_ATTRS \
26 __attribute__((__always_inline__, __nodebug__, \
27 __target__("avx512vpopcntdq"), __min_vector_width__(512)))
28#endif
29
30static __inline__ __m512i __DEFAULT_FN_ATTRS _mm512_popcnt_epi64(__m512i __A) {
31 return (__m512i)__builtin_elementwise_popcount((__v8du)__A);
32}
33
34static __inline__ __m512i __DEFAULT_FN_ATTRS
35_mm512_mask_popcnt_epi64(__m512i __W, __mmask8 __U, __m512i __A) {
36 return (__m512i)__builtin_ia32_selectq_512(
37 (__mmask8)__U, (__v8di)_mm512_popcnt_epi64(__A), (__v8di)__W);
38}
39
40static __inline__ __m512i __DEFAULT_FN_ATTRS
41_mm512_maskz_popcnt_epi64(__mmask8 __U, __m512i __A) {
42 return _mm512_mask_popcnt_epi64((__m512i)_mm512_setzero_si512(), __U, __A);
43}
44
45static __inline__ __m512i __DEFAULT_FN_ATTRS _mm512_popcnt_epi32(__m512i __A) {
46 return (__m512i)__builtin_elementwise_popcount((__v16su)__A);
47}
48
49static __inline__ __m512i __DEFAULT_FN_ATTRS
50_mm512_mask_popcnt_epi32(__m512i __W, __mmask16 __U, __m512i __A) {
51 return (__m512i)__builtin_ia32_selectd_512(
52 (__mmask16)__U, (__v16si)_mm512_popcnt_epi32(__A), (__v16si)__W);
53}
54
55static __inline__ __m512i __DEFAULT_FN_ATTRS
56_mm512_maskz_popcnt_epi32(__mmask16 __U, __m512i __A) {
57 return _mm512_mask_popcnt_epi32((__m512i)_mm512_setzero_si512(), __U, __A);
58}
59
60#undef __DEFAULT_FN_ATTRS
61
62#endif