Skip to main content

core\stdarch\crates\core_arch\src\loongarch64\lasx/
portable.rs

1//! LoongArch64 LASX intrinsics - intrinsics::simd implementation
2
3use super::super::{simd as ls, simd::*, *};
4use crate::core_arch::simd::{self as cs, *};
5use crate::intrinsics::simd as is;
6use crate::mem::transmute;
7
8#[inline(always)]
9#[rustc_const_unstable(feature = "stdarch_const_helpers", issue = "none")]
10const unsafe fn simd_pickev_b<T: Copy>(a: T, b: T) -> T {
11    simd_shuffle!(
12        b,
13        a,
14        [
15            0, 2, 4, 6, 8, 10, 12, 14, 32, 34, 36, 38, 40, 42, 44, 46,
16            16, 18, 20, 22, 24, 26, 28, 30, 48, 50, 52, 54, 56, 58, 60, 62
17        ]
18    )
19}
20
21#[inline(always)]
22#[rustc_const_unstable(feature = "stdarch_const_helpers", issue = "none")]
23const unsafe fn simd_pickev_d<T: Copy>(a: T, b: T) -> T {
24    simd_shuffle!(b, a, [0, 4, 2, 6])
25}
26
27#[inline(always)]
28#[rustc_const_unstable(feature = "stdarch_const_helpers", issue = "none")]
29const unsafe fn simd_pickev_w<T: Copy>(a: T, b: T) -> T {
30    simd_shuffle!(b, a, [0, 2, 8, 10, 4, 6, 12, 14])
31}
32
33#[inline(always)]
34#[rustc_const_unstable(feature = "stdarch_const_helpers", issue = "none")]
35const unsafe fn simd_pickev_h<T: Copy>(a: T, b: T) -> T {
36    simd_shuffle!(b, a, [0, 2, 4, 6, 16, 18, 20, 22, 8, 10, 12, 14, 24, 26, 28, 30])
37}
38
39#[inline(always)]
40#[rustc_const_unstable(feature = "stdarch_const_helpers", issue = "none")]
41const unsafe fn simd_pickod_b<T: Copy>(a: T, b: T) -> T {
42    simd_shuffle!(
43        b,
44        a,
45        [
46            1, 3, 5, 7, 9, 11, 13, 15, 33, 35, 37, 39, 41, 43, 45, 47,
47            17, 19, 21, 23, 25, 27, 29, 31, 49, 51, 53, 55, 57, 59, 61, 63
48        ]
49    )
50}
51
52#[inline(always)]
53#[rustc_const_unstable(feature = "stdarch_const_helpers", issue = "none")]
54const unsafe fn simd_pickod_d<T: Copy>(a: T, b: T) -> T {
55    simd_shuffle!(b, a, [1, 5, 3, 7])
56}
57
58#[inline(always)]
59#[rustc_const_unstable(feature = "stdarch_const_helpers", issue = "none")]
60const unsafe fn simd_pickod_w<T: Copy>(a: T, b: T) -> T {
61    simd_shuffle!(b, a, [1, 3, 9, 11, 5, 7, 13, 15])
62}
63
64#[inline(always)]
65#[rustc_const_unstable(feature = "stdarch_const_helpers", issue = "none")]
66const unsafe fn simd_pickod_h<T: Copy>(a: T, b: T) -> T {
67    simd_shuffle!(b, a, [1, 3, 5, 7, 17, 19, 21, 23, 9, 11, 13, 15, 25, 27, 29, 31])
68}
69
70#[inline(always)]
71#[rustc_const_unstable(feature = "stdarch_const_helpers", issue = "none")]
72pub(crate) const unsafe fn simd_ilvh_b<T: Copy>(a: T, b: T) -> T {
73    simd_shuffle!(
74        b,
75        a,
76        [
77            8, 40, 9, 41, 10, 42, 11, 43, 12, 44, 13, 45, 14, 46, 15, 47,
78            24, 56, 25, 57, 26, 58, 27, 59, 28, 60, 29, 61, 30, 62, 31, 63
79        ]
80    )
81}
82
83#[inline(always)]
84#[rustc_const_unstable(feature = "stdarch_const_helpers", issue = "none")]
85pub(crate) const unsafe fn simd_ilvh_h<T: Copy>(a: T, b: T) -> T {
86    simd_shuffle!(b, a, [4, 20, 5, 21, 6, 22, 7, 23, 12, 28, 13, 29, 14, 30, 15, 31])
87}
88
89#[inline(always)]
90#[rustc_const_unstable(feature = "stdarch_const_helpers", issue = "none")]
91pub(crate) const unsafe fn simd_ilvh_w<T: Copy>(a: T, b: T) -> T {
92    simd_shuffle!(b, a, [2, 10, 3, 11, 6, 14, 7, 15])
93}
94
95#[inline(always)]
96#[rustc_const_unstable(feature = "stdarch_const_helpers", issue = "none")]
97pub(crate) const unsafe fn simd_ilvh_d<T: Copy>(a: T, b: T) -> T {
98    simd_shuffle!(b, a, [1, 5, 3, 7])
99}
100
101#[inline(always)]
102#[rustc_const_unstable(feature = "stdarch_const_helpers", issue = "none")]
103pub(crate) const unsafe fn simd_ilvl_b<T: Copy>(a: T, b: T) -> T {
104    simd_shuffle!(
105        b,
106        a,
107        [
108            0, 32, 1, 33, 2, 34, 3, 35, 4, 36, 5, 37, 6, 38, 7, 39,
109            16, 48, 17, 49, 18, 50, 19, 51, 20, 52, 21, 53, 22, 54, 23, 55
110        ]
111    )
112}
113
114#[inline(always)]
115#[rustc_const_unstable(feature = "stdarch_const_helpers", issue = "none")]
116pub(crate) const unsafe fn simd_ilvl_h<T: Copy>(a: T, b: T) -> T {
117    simd_shuffle!(b, a, [0, 16, 1, 17, 2, 18, 3, 19, 8, 24, 9, 25, 10, 26, 11, 27])
118}
119
120#[inline(always)]
121#[rustc_const_unstable(feature = "stdarch_const_helpers", issue = "none")]
122pub(crate) const unsafe fn simd_ilvl_w<T: Copy>(a: T, b: T) -> T {
123    simd_shuffle!(b, a, [0, 8, 1, 9, 4, 12, 5, 13])
124}
125
126#[inline(always)]
127#[rustc_const_unstable(feature = "stdarch_const_helpers", issue = "none")]
128pub(crate) const unsafe fn simd_ilvl_d<T: Copy>(a: T, b: T) -> T {
129    simd_shuffle!(b, a, [0, 4, 2, 6])
130}
131
132impl_vv!("lasx", lasx_xvpcnt_b, is::simd_ctpop, m256i, i8x32);
133impl_vv!("lasx", lasx_xvpcnt_h, is::simd_ctpop, m256i, i16x16);
134impl_vv!("lasx", lasx_xvpcnt_w, is::simd_ctpop, m256i, i32x8);
135impl_vv!("lasx", lasx_xvpcnt_d, is::simd_ctpop, m256i, i64x4);
136impl_vv!("lasx", lasx_xvclz_b, is::simd_ctlz, m256i, i8x32);
137impl_vv!("lasx", lasx_xvclz_h, is::simd_ctlz, m256i, i16x16);
138impl_vv!("lasx", lasx_xvclz_w, is::simd_ctlz, m256i, i32x8);
139impl_vv!("lasx", lasx_xvclz_d, is::simd_ctlz, m256i, i64x4);
140impl_vv!("lasx", lasx_xvneg_b, is::simd_neg, m256i, i8x32);
141impl_vv!("lasx", lasx_xvneg_h, is::simd_neg, m256i, i16x16);
142impl_vv!("lasx", lasx_xvneg_w, is::simd_neg, m256i, i32x8);
143impl_vv!("lasx", lasx_xvneg_d, is::simd_neg, m256i, i64x4);
144impl_vv!("lasx", lasx_xvfsqrt_s, is::simd_fsqrt, m256, f32x8);
145impl_vv!("lasx", lasx_xvfsqrt_d, is::simd_fsqrt, m256d, f64x4);
146
147impl_gv!("lasx", lasx_xvreplgr2vr_b, ls::simd_splat, m256i, i8x32, i32);
148impl_gv!("lasx", lasx_xvreplgr2vr_h, ls::simd_splat, m256i, i16x16, i32);
149impl_gv!("lasx", lasx_xvreplgr2vr_w, ls::simd_splat, m256i, i32x8, i32);
150impl_gv!("lasx", lasx_xvreplgr2vr_d, ls::simd_splat, m256i, i64x4, i64);
151
152impl_sv!("lasx", lasx_xvrepli_b, ls::simd_splat, m256i, i8x32, 10);
153impl_sv!("lasx", lasx_xvrepli_h, ls::simd_splat, m256i, i16x16, 10);
154impl_sv!("lasx", lasx_xvrepli_w, ls::simd_splat, m256i, i32x8, 10);
155impl_sv!("lasx", lasx_xvrepli_d, ls::simd_splat, m256i, i64x4, 10);
156
157impl_vvv!("lasx", lasx_xvadd_b, is::simd_add, m256i, i8x32);
158impl_vvv!("lasx", lasx_xvadd_h, is::simd_add, m256i, i16x16);
159impl_vvv!("lasx", lasx_xvadd_w, is::simd_add, m256i, i32x8);
160impl_vvv!("lasx", lasx_xvadd_d, is::simd_add, m256i, i64x4);
161impl_vvv!("lasx", lasx_xvsub_b, is::simd_sub, m256i, i8x32);
162impl_vvv!("lasx", lasx_xvsub_h, is::simd_sub, m256i, i16x16);
163impl_vvv!("lasx", lasx_xvsub_w, is::simd_sub, m256i, i32x8);
164impl_vvv!("lasx", lasx_xvsub_d, is::simd_sub, m256i, i64x4);
165impl_vvv!("lasx", lasx_xvmax_b, cs::simd_imax, m256i, i8x32);
166impl_vvv!("lasx", lasx_xvmax_h, cs::simd_imax, m256i, i16x16);
167impl_vvv!("lasx", lasx_xvmax_w, cs::simd_imax, m256i, i32x8);
168impl_vvv!("lasx", lasx_xvmax_d, cs::simd_imax, m256i, i64x4);
169impl_vvv!("lasx", lasx_xvmax_bu, cs::simd_imax, m256i, u8x32);
170impl_vvv!("lasx", lasx_xvmax_hu, cs::simd_imax, m256i, u16x16);
171impl_vvv!("lasx", lasx_xvmax_wu, cs::simd_imax, m256i, u32x8);
172impl_vvv!("lasx", lasx_xvmax_du, cs::simd_imax, m256i, u64x4);
173impl_vvv!("lasx", lasx_xvmin_b, cs::simd_imin, m256i, i8x32);
174impl_vvv!("lasx", lasx_xvmin_h, cs::simd_imin, m256i, i16x16);
175impl_vvv!("lasx", lasx_xvmin_w, cs::simd_imin, m256i, i32x8);
176impl_vvv!("lasx", lasx_xvmin_d, cs::simd_imin, m256i, i64x4);
177impl_vvv!("lasx", lasx_xvmin_bu, cs::simd_imin, m256i, u8x32);
178impl_vvv!("lasx", lasx_xvmin_hu, cs::simd_imin, m256i, u16x16);
179impl_vvv!("lasx", lasx_xvmin_wu, cs::simd_imin, m256i, u32x8);
180impl_vvv!("lasx", lasx_xvmin_du, cs::simd_imin, m256i, u64x4);
181impl_vvv!("lasx", lasx_xvseq_b, is::simd_eq, m256i, i8x32);
182impl_vvv!("lasx", lasx_xvseq_h, is::simd_eq, m256i, i16x16);
183impl_vvv!("lasx", lasx_xvseq_w, is::simd_eq, m256i, i32x8);
184impl_vvv!("lasx", lasx_xvseq_d, is::simd_eq, m256i, i64x4);
185impl_vvv!("lasx", lasx_xvslt_b, is::simd_lt, m256i, i8x32);
186impl_vvv!("lasx", lasx_xvslt_h, is::simd_lt, m256i, i16x16);
187impl_vvv!("lasx", lasx_xvslt_w, is::simd_lt, m256i, i32x8);
188impl_vvv!("lasx", lasx_xvslt_d, is::simd_lt, m256i, i64x4);
189impl_vvv!("lasx", lasx_xvslt_bu, is::simd_lt, m256i, u8x32);
190impl_vvv!("lasx", lasx_xvslt_hu, is::simd_lt, m256i, u16x16);
191impl_vvv!("lasx", lasx_xvslt_wu, is::simd_lt, m256i, u32x8);
192impl_vvv!("lasx", lasx_xvslt_du, is::simd_lt, m256i, u64x4);
193impl_vvv!("lasx", lasx_xvsle_b, is::simd_le, m256i, i8x32);
194impl_vvv!("lasx", lasx_xvsle_h, is::simd_le, m256i, i16x16);
195impl_vvv!("lasx", lasx_xvsle_w, is::simd_le, m256i, i32x8);
196impl_vvv!("lasx", lasx_xvsle_d, is::simd_le, m256i, i64x4);
197impl_vvv!("lasx", lasx_xvsle_bu, is::simd_le, m256i, u8x32);
198impl_vvv!("lasx", lasx_xvsle_hu, is::simd_le, m256i, u16x16);
199impl_vvv!("lasx", lasx_xvsle_wu, is::simd_le, m256i, u32x8);
200impl_vvv!("lasx", lasx_xvsle_du, is::simd_le, m256i, u64x4);
201impl_vvv!("lasx", lasx_xvmul_b, is::simd_mul, m256i, i8x32);
202impl_vvv!("lasx", lasx_xvmul_h, is::simd_mul, m256i, i16x16);
203impl_vvv!("lasx", lasx_xvmul_w, is::simd_mul, m256i, i32x8);
204impl_vvv!("lasx", lasx_xvmul_d, is::simd_mul, m256i, i64x4);
205impl_vvv!("lasx", lasx_xvdiv_b, is::simd_div, m256i, i8x32);
206impl_vvv!("lasx", lasx_xvdiv_h, is::simd_div, m256i, i16x16);
207impl_vvv!("lasx", lasx_xvdiv_w, is::simd_div, m256i, i32x8);
208impl_vvv!("lasx", lasx_xvdiv_d, is::simd_div, m256i, i64x4);
209impl_vvv!("lasx", lasx_xvdiv_bu, is::simd_div, m256i, u8x32);
210impl_vvv!("lasx", lasx_xvdiv_hu, is::simd_div, m256i, u16x16);
211impl_vvv!("lasx", lasx_xvdiv_wu, is::simd_div, m256i, u32x8);
212impl_vvv!("lasx", lasx_xvdiv_du, is::simd_div, m256i, u64x4);
213impl_vvv!("lasx", lasx_xvmod_b, is::simd_rem, m256i, i8x32);
214impl_vvv!("lasx", lasx_xvmod_h, is::simd_rem, m256i, i16x16);
215impl_vvv!("lasx", lasx_xvmod_w, is::simd_rem, m256i, i32x8);
216impl_vvv!("lasx", lasx_xvmod_d, is::simd_rem, m256i, i64x4);
217impl_vvv!("lasx", lasx_xvmod_bu, is::simd_rem, m256i, u8x32);
218impl_vvv!("lasx", lasx_xvmod_hu, is::simd_rem, m256i, u16x16);
219impl_vvv!("lasx", lasx_xvmod_wu, is::simd_rem, m256i, u32x8);
220impl_vvv!("lasx", lasx_xvmod_du, is::simd_rem, m256i, u64x4);
221impl_vvv!("lasx", lasx_xvand_v, is::simd_and, m256i, u8x32);
222impl_vvv!("lasx", lasx_xvandn_v, ls::simd_andn, m256i, u8x32);
223impl_vvv!("lasx", lasx_xvor_v, is::simd_or, m256i, u8x32);
224impl_vvv!("lasx", lasx_xvorn_v, ls::simd_orn, m256i, u8x32);
225impl_vvv!("lasx", lasx_xvnor_v, ls::simd_nor, m256i, u8x32);
226impl_vvv!("lasx", lasx_xvxor_v, is::simd_xor, m256i, u8x32);
227impl_vvv!("lasx", lasx_xvfadd_s, is::simd_add, m256, f32x8);
228impl_vvv!("lasx", lasx_xvfadd_d, is::simd_add, m256d, f64x4);
229impl_vvv!("lasx", lasx_xvfsub_s, is::simd_sub, m256, f32x8);
230impl_vvv!("lasx", lasx_xvfsub_d, is::simd_sub, m256d, f64x4);
231impl_vvv!("lasx", lasx_xvfmul_s, is::simd_mul, m256, f32x8);
232impl_vvv!("lasx", lasx_xvfmul_d, is::simd_mul, m256d, f64x4);
233impl_vvv!("lasx", lasx_xvfdiv_s, is::simd_div, m256, f32x8);
234impl_vvv!("lasx", lasx_xvfdiv_d, is::simd_div, m256d, f64x4);
235impl_vvv!("lasx", lasx_xvsll_b, ls::simd_shl, m256i, i8x32);
236impl_vvv!("lasx", lasx_xvsll_h, ls::simd_shl, m256i, i16x16);
237impl_vvv!("lasx", lasx_xvsll_w, ls::simd_shl, m256i, i32x8);
238impl_vvv!("lasx", lasx_xvsll_d, ls::simd_shl, m256i, i64x4);
239impl_vvv!("lasx", lasx_xvsra_b, ls::simd_shr, m256i, i8x32);
240impl_vvv!("lasx", lasx_xvsra_h, ls::simd_shr, m256i, i16x16);
241impl_vvv!("lasx", lasx_xvsra_w, ls::simd_shr, m256i, i32x8);
242impl_vvv!("lasx", lasx_xvsra_d, ls::simd_shr, m256i, i64x4);
243impl_vvv!("lasx", lasx_xvsrl_b, ls::simd_shr, m256i, u8x32);
244impl_vvv!("lasx", lasx_xvsrl_h, ls::simd_shr, m256i, u16x16);
245impl_vvv!("lasx", lasx_xvsrl_w, ls::simd_shr, m256i, u32x8);
246impl_vvv!("lasx", lasx_xvsrl_d, ls::simd_shr, m256i, u64x4);
247impl_vvv!("lasx", lasx_xvbitclr_b, ls::simd_bitclr, m256i, u8x32);
248impl_vvv!("lasx", lasx_xvbitclr_h, ls::simd_bitclr, m256i, u16x16);
249impl_vvv!("lasx", lasx_xvbitclr_w, ls::simd_bitclr, m256i, u32x8);
250impl_vvv!("lasx", lasx_xvbitclr_d, ls::simd_bitclr, m256i, u64x4);
251impl_vvv!("lasx", lasx_xvbitset_b, ls::simd_bitset, m256i, u8x32);
252impl_vvv!("lasx", lasx_xvbitset_h, ls::simd_bitset, m256i, u16x16);
253impl_vvv!("lasx", lasx_xvbitset_w, ls::simd_bitset, m256i, u32x8);
254impl_vvv!("lasx", lasx_xvbitset_d, ls::simd_bitset, m256i, u64x4);
255impl_vvv!("lasx", lasx_xvbitrev_b, ls::simd_bitrev, m256i, u8x32);
256impl_vvv!("lasx", lasx_xvbitrev_h, ls::simd_bitrev, m256i, u16x16);
257impl_vvv!("lasx", lasx_xvbitrev_w, ls::simd_bitrev, m256i, u32x8);
258impl_vvv!("lasx", lasx_xvbitrev_d, ls::simd_bitrev, m256i, u64x4);
259impl_vvv!("lasx", lasx_xvsadd_b, is::simd_saturating_add, m256i, i8x32);
260impl_vvv!("lasx", lasx_xvsadd_h, is::simd_saturating_add, m256i, i16x16);
261impl_vvv!("lasx", lasx_xvsadd_w, is::simd_saturating_add, m256i, i32x8);
262impl_vvv!("lasx", lasx_xvsadd_d, is::simd_saturating_add, m256i, i64x4);
263impl_vvv!("lasx", lasx_xvsadd_bu, is::simd_saturating_add, m256i, u8x32);
264impl_vvv!("lasx", lasx_xvsadd_hu, is::simd_saturating_add, m256i, u16x16);
265impl_vvv!("lasx", lasx_xvsadd_wu, is::simd_saturating_add, m256i, u32x8);
266impl_vvv!("lasx", lasx_xvsadd_du, is::simd_saturating_add, m256i, u64x4);
267impl_vvv!("lasx", lasx_xvssub_b, is::simd_saturating_sub, m256i, i8x32);
268impl_vvv!("lasx", lasx_xvssub_h, is::simd_saturating_sub, m256i, i16x16);
269impl_vvv!("lasx", lasx_xvssub_w, is::simd_saturating_sub, m256i, i32x8);
270impl_vvv!("lasx", lasx_xvssub_d, is::simd_saturating_sub, m256i, i64x4);
271impl_vvv!("lasx", lasx_xvssub_bu, is::simd_saturating_sub, m256i, u8x32);
272impl_vvv!("lasx", lasx_xvssub_hu, is::simd_saturating_sub, m256i, u16x16);
273impl_vvv!("lasx", lasx_xvssub_wu, is::simd_saturating_sub, m256i, u32x8);
274impl_vvv!("lasx", lasx_xvssub_du, is::simd_saturating_sub, m256i, u64x4);
275impl_vvv!("lasx", lasx_xvadda_b, ls::simd_adda, m256i, i8x32);
276impl_vvv!("lasx", lasx_xvadda_h, ls::simd_adda, m256i, i16x16);
277impl_vvv!("lasx", lasx_xvadda_w, ls::simd_adda, m256i, i32x8);
278impl_vvv!("lasx", lasx_xvadda_d, ls::simd_adda, m256i, i64x4);
279impl_vvv!("lasx", lasx_xvabsd_b, ls::simd_absd, m256i, i8x32);
280impl_vvv!("lasx", lasx_xvabsd_h, ls::simd_absd, m256i, i16x16);
281impl_vvv!("lasx", lasx_xvabsd_w, ls::simd_absd, m256i, i32x8);
282impl_vvv!("lasx", lasx_xvabsd_d, ls::simd_absd, m256i, i64x4);
283impl_vvv!("lasx", lasx_xvabsd_bu, ls::simd_absd, m256i, u8x32);
284impl_vvv!("lasx", lasx_xvabsd_hu, ls::simd_absd, m256i, u16x16);
285impl_vvv!("lasx", lasx_xvabsd_wu, ls::simd_absd, m256i, u32x8);
286impl_vvv!("lasx", lasx_xvabsd_du, ls::simd_absd, m256i, u64x4);
287impl_vvv!("lasx", lasx_xvpickev_b, simd_pickev_b, m256i, i8x32);
288impl_vvv!("lasx", lasx_xvpickev_h, simd_pickev_h, m256i, i16x16);
289impl_vvv!("lasx", lasx_xvpickev_w, simd_pickev_w, m256i, i32x8);
290impl_vvv!("lasx", lasx_xvpickev_d, simd_pickev_d, m256i, i64x4);
291impl_vvv!("lasx", lasx_xvpickod_b, simd_pickod_b, m256i, i8x32);
292impl_vvv!("lasx", lasx_xvpickod_h, simd_pickod_h, m256i, i16x16);
293impl_vvv!("lasx", lasx_xvpickod_w, simd_pickod_w, m256i, i32x8);
294impl_vvv!("lasx", lasx_xvpickod_d, simd_pickod_d, m256i, i64x4);
295impl_vvv!("lasx", lasx_xvilvh_b, simd_ilvh_b, m256i, i8x32);
296impl_vvv!("lasx", lasx_xvilvh_h, simd_ilvh_h, m256i, i16x16);
297impl_vvv!("lasx", lasx_xvilvh_w, simd_ilvh_w, m256i, i32x8);
298impl_vvv!("lasx", lasx_xvilvh_d, simd_ilvh_d, m256i, i64x4);
299impl_vvv!("lasx", lasx_xvilvl_b, simd_ilvl_b, m256i, i8x32);
300impl_vvv!("lasx", lasx_xvilvl_h, simd_ilvl_h, m256i, i16x16);
301impl_vvv!("lasx", lasx_xvilvl_w, simd_ilvl_w, m256i, i32x8);
302impl_vvv!("lasx", lasx_xvilvl_d, simd_ilvl_d, m256i, i64x4);
303
304impl_vuv!("lasx", lasx_xvslli_b, is::simd_shl, m256i, i8x32);
305impl_vuv!("lasx", lasx_xvslli_h, is::simd_shl, m256i, i16x16);
306impl_vuv!("lasx", lasx_xvslli_w, is::simd_shl, m256i, i32x8);
307impl_vuv!("lasx", lasx_xvslli_d, is::simd_shl, m256i, i64x4);
308impl_vuv!("lasx", lasx_xvsrai_b, is::simd_shr, m256i, i8x32);
309impl_vuv!("lasx", lasx_xvsrai_h, is::simd_shr, m256i, i16x16);
310impl_vuv!("lasx", lasx_xvsrai_w, is::simd_shr, m256i, i32x8);
311impl_vuv!("lasx", lasx_xvsrai_d, is::simd_shr, m256i, i64x4);
312impl_vuv!("lasx", lasx_xvsrli_b, is::simd_shr, m256i, u8x32);
313impl_vuv!("lasx", lasx_xvsrli_h, is::simd_shr, m256i, u16x16);
314impl_vuv!("lasx", lasx_xvsrli_w, is::simd_shr, m256i, u32x8);
315impl_vuv!("lasx", lasx_xvsrli_d, is::simd_shr, m256i, u64x4);
316impl_vuv!("lasx", lasx_xvaddi_bu, is::simd_add, m256i, u8x32, 5);
317impl_vuv!("lasx", lasx_xvaddi_hu, is::simd_add, m256i, u16x16, 5);
318impl_vuv!("lasx", lasx_xvaddi_wu, is::simd_add, m256i, u32x8, 5);
319impl_vuv!("lasx", lasx_xvaddi_du, is::simd_add, m256i, u64x4, 5);
320impl_vuv!("lasx", lasx_xvslti_bu, is::simd_lt, m256i, u8x32, 5);
321impl_vuv!("lasx", lasx_xvslti_hu, is::simd_lt, m256i, u16x16, 5);
322impl_vuv!("lasx", lasx_xvslti_wu, is::simd_lt, m256i, u32x8, 5);
323impl_vuv!("lasx", lasx_xvslti_du, is::simd_lt, m256i, u64x4, 5);
324impl_vuv!("lasx", lasx_xvslei_bu, is::simd_le, m256i, u8x32, 5);
325impl_vuv!("lasx", lasx_xvslei_hu, is::simd_le, m256i, u16x16, 5);
326impl_vuv!("lasx", lasx_xvslei_wu, is::simd_le, m256i, u32x8, 5);
327impl_vuv!("lasx", lasx_xvslei_du, is::simd_le, m256i, u64x4, 5);
328impl_vuv!("lasx", lasx_xvmaxi_bu, cs::simd_imax, m256i, u8x32, 5);
329impl_vuv!("lasx", lasx_xvmaxi_hu, cs::simd_imax, m256i, u16x16, 5);
330impl_vuv!("lasx", lasx_xvmaxi_wu, cs::simd_imax, m256i, u32x8, 5);
331impl_vuv!("lasx", lasx_xvmaxi_du, cs::simd_imax, m256i, u64x4, 5);
332impl_vuv!("lasx", lasx_xvmini_bu, cs::simd_imin, m256i, u8x32, 5);
333impl_vuv!("lasx", lasx_xvmini_hu, cs::simd_imin, m256i, u16x16, 5);
334impl_vuv!("lasx", lasx_xvmini_wu, cs::simd_imin, m256i, u32x8, 5);
335impl_vuv!("lasx", lasx_xvmini_du, cs::simd_imin, m256i, u64x4, 5);
336
337impl_vug!("lasx", lasx_xvpickve2gr_w, is::simd_extract, m256i, i32x8, i32, 3);
338impl_vug!("lasx", lasx_xvpickve2gr_d, is::simd_extract, m256i, i64x4, i64, 2);
339impl_vug!("lasx", lasx_xvpickve2gr_wu, is::simd_extract, m256i, u32x8, u32, 3);
340impl_vug!("lasx", lasx_xvpickve2gr_du, is::simd_extract, m256i, u64x4, u64, 2);
341
342impl_vsv!("lasx", lasx_xvseqi_b, is::simd_eq, m256i, i8x32, 5);
343impl_vsv!("lasx", lasx_xvseqi_h, is::simd_eq, m256i, i16x16, 5);
344impl_vsv!("lasx", lasx_xvseqi_w, is::simd_eq, m256i, i32x8, 5);
345impl_vsv!("lasx", lasx_xvseqi_d, is::simd_eq, m256i, i64x4, 5);
346impl_vsv!("lasx", lasx_xvslti_b, is::simd_lt, m256i, i8x32, 5);
347impl_vsv!("lasx", lasx_xvslti_h, is::simd_lt, m256i, i16x16, 5);
348impl_vsv!("lasx", lasx_xvslti_w, is::simd_lt, m256i, i32x8, 5);
349impl_vsv!("lasx", lasx_xvslti_d, is::simd_lt, m256i, i64x4, 5);
350impl_vsv!("lasx", lasx_xvslei_b, is::simd_le, m256i, i8x32, 5);
351impl_vsv!("lasx", lasx_xvslei_h, is::simd_le, m256i, i16x16, 5);
352impl_vsv!("lasx", lasx_xvslei_w, is::simd_le, m256i, i32x8, 5);
353impl_vsv!("lasx", lasx_xvslei_d, is::simd_le, m256i, i64x4, 5);
354impl_vsv!("lasx", lasx_xvmaxi_b, cs::simd_imax, m256i, i8x32, 5);
355impl_vsv!("lasx", lasx_xvmaxi_h, cs::simd_imax, m256i, i16x16, 5);
356impl_vsv!("lasx", lasx_xvmaxi_w, cs::simd_imax, m256i, i32x8, 5);
357impl_vsv!("lasx", lasx_xvmaxi_d, cs::simd_imax, m256i, i64x4, 5);
358impl_vsv!("lasx", lasx_xvmini_b, cs::simd_imin, m256i, i8x32, 5);
359impl_vsv!("lasx", lasx_xvmini_h, cs::simd_imin, m256i, i16x16, 5);
360impl_vsv!("lasx", lasx_xvmini_w, cs::simd_imin, m256i, i32x8, 5);
361impl_vsv!("lasx", lasx_xvmini_d, cs::simd_imin, m256i, i64x4, 5);
362
363impl_vvvv!("lasx", lasx_xvmadd_b, ls::simd_madd, m256i, i8x32);
364impl_vvvv!("lasx", lasx_xvmadd_h, ls::simd_madd, m256i, i16x16);
365impl_vvvv!("lasx", lasx_xvmadd_w, ls::simd_madd, m256i, i32x8);
366impl_vvvv!("lasx", lasx_xvmadd_d, ls::simd_madd, m256i, i64x4);
367impl_vvvv!("lasx", lasx_xvmsub_b, ls::simd_msub, m256i, i8x32);
368impl_vvvv!("lasx", lasx_xvmsub_h, ls::simd_msub, m256i, i16x16);
369impl_vvvv!("lasx", lasx_xvmsub_w, ls::simd_msub, m256i, i32x8);
370impl_vvvv!("lasx", lasx_xvmsub_d, ls::simd_msub, m256i, i64x4);
371impl_vvvv!("lasx", lasx_xvfmadd_s, is::simd_fma, m256, f32x8);
372impl_vvvv!("lasx", lasx_xvfmadd_d, is::simd_fma, m256d, f64x4);
373impl_vvvv!("lasx", lasx_xvfmsub_s, ls::simd_fmsub, m256, f32x8);
374impl_vvvv!("lasx", lasx_xvfmsub_d, ls::simd_fmsub, m256d, f64x4);
375impl_vvvv!("lasx", lasx_xvfnmadd_s, ls::simd_fnmadd, m256, f32x8);
376impl_vvvv!("lasx", lasx_xvfnmadd_d, ls::simd_fnmadd, m256d, f64x4);
377impl_vvvv!("lasx", lasx_xvfnmsub_s, ls::simd_fnmsub, m256, f32x8);
378impl_vvvv!("lasx", lasx_xvfnmsub_d, ls::simd_fnmsub, m256d, f64x4);
379
380impl_vugv!("lasx", lasx_xvinsgr2vr_w, is::simd_insert, m256i, i32x8, i32, 3);
381impl_vugv!("lasx", lasx_xvinsgr2vr_d, is::simd_insert, m256i, i64x4, i64, 2);