xref: /third_party/ffmpeg/libavcodec/loongarch/hevcdsp_lsx.c

51         DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x,
56         DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x,
101         DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src1, src2);
105         DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src5, src6);
166         DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x,
171         DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x,
218         DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src1, src2);
222         DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src5, src6);
228         DUP2_ARG2(__lsx_vilvh_w, src1, src0, src3, src2, src0, src1);
229         DUP2_ARG2(__lsx_vsllwil_hu_bu, src0, 6, src1, 6, in0, in1);
245         DUP2_ARG2(__lsx_vilvh_w, src5, src4, src7, src6, src0, src1);
246         DUP2_ARG2(__lsx_vsllwil_hu_bu, src0, 6, src1, 6, in0, in1);
291         DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x,
296         DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x,
336         DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src1, src2);
376         DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src1, src2);
380         DUP2_ARG2(__lsx_vldx, _src, src_stride, _src, src_stride_2x,
426         DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src2, src4);
430         DUP2_ARG2(__lsx_vldx, _src, src_stride, _src, src_stride_2x,
483         DUP2_ARG2(__lsx_vld, src, 0, src, 16, src0, src1);
486         DUP2_ARG2(__lsx_vld, src, 0, src, 16, src3, src4);
489         DUP2_ARG2(__lsx_vld, src, 0, src, 16, src6, src7);
492         DUP2_ARG2(__lsx_vld, src, 0, src, 16, src9, src10);
498         DUP2_ARG2(__lsx_vilvh_b, zero, src4, zero, src5, in4_l, in5_l);
503         DUP2_ARG2(__lsx_vsllwil_hu_bu, src4, 6, src5, 6, in4_r, in5_r);
504         DUP2_ARG2(__lsx_vslli_h, in4_l, 6, in5_l, 6, in4_l, in5_l);
522         DUP2_ARG2(__lsx_vilvh_b, zero, src10, zero, src11, in4_l, in5_l);
527         DUP2_ARG2(__lsx_vsllwil_hu_bu, src10, 6, src11, 6, in4_r, in5_r);
528         DUP2_ARG2(__lsx_vslli_h, in4_l, 6, in5_l, 6, in4_l, in5_l);
621     DUP2_ARG2(__lsx_vaddi_bu, mask0, 2, mask0, 4, mask1, mask2);
626         DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src1, src2);
630         DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src5, src6);
707     DUP2_ARG2(__lsx_vaddi_bu, mask0, 2, mask0, 4, mask1, mask2);
712         DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src1, src2);
769     DUP2_ARG2(__lsx_vaddi_bu, mask0, 2, mask0, 4, mask1, mask2);
772     DUP2_ARG2(__lsx_vaddi_bu, mask4, 2, mask4, 4, mask5, mask6);
777         DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src1, src2);
780         DUP2_ARG2(__lsx_vldx, _src, src_stride, _src, src_stride_2x,
794         DUP2_ARG2(__lsx_vdp2_h_bu_b, vec4, filt0, vec5, filt0, dst4, dst5);
858     DUP2_ARG2(__lsx_vaddi_bu, mask0, 2, mask0, 4, mask1, mask2);
862         DUP2_ARG2(__lsx_vld, src, 0, src, 8, src0, src1);
864         DUP2_ARG2(__lsx_vld, src, 0, src, 8, src2, src3);
919     DUP2_ARG2(__lsx_vaddi_bu, mask0, 10, mask0, 12, mask5, mask6);
923         DUP2_ARG2(__lsx_vld, src, 0, src, 16, src0, src1);
925         DUP2_ARG2(__lsx_vld, src, 0, src, 16, src2, src3);
934         DUP2_ARG2(__lsx_vdp2_h_bu_b, vec4, filt0, vec5, filt0, dst4, dst5);
989     DUP2_ARG2(__lsx_vaddi_bu, mask0, 10, mask0, 12, mask5, mask6);
993         DUP2_ARG2(__lsx_vld, src, 0, src, 16, src0, src1);
1049     DUP2_ARG2(__lsx_vaddi_bu, mask0, 10, mask0, 12, mask5, mask6);
1053         DUP2_ARG2(__lsx_vld, src, 0, src, 16, src0, src1);
1081         DUP2_ARG2(__lsx_vdp2_h_bu_b, vec4, filt0, vec5, filt0, dst4, dst5);
1118     DUP2_ARG2(__lsx_vaddi_bu, mask0, 10, mask0, 12, mask5, mask6)
1219     DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src1, src2);
1223     DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src5, src6);
1227     DUP2_ARG2(__lsx_vilvl_b, src4, src3, src6, src5, src43_r, src65_r);
1228     DUP2_ARG2(__lsx_vilvl_d, src21_r, src10_r, src43_r, src32_r,
1234         DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src8, src9);
1238         DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x,
1293         DUP2_ARG2(__lsx_vilvl_b, src7, src6, src8, src7, src76_r, src87_r);
1337     DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src1, src2);
1341     DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src5, src6);
1345     DUP2_ARG2(__lsx_vilvl_b, src4, src3, src6, src5, src43_r, src65_r);
1349         DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src8, src9);
1411     DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src1, src2);
1415     DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src5, src6);
1419     DUP2_ARG2(__lsx_vilvl_b, src4, src3, src6, src5, src43_r, src65_r);
1422     DUP2_ARG2(__lsx_vilvh_b, src4, src3, src6, src5, src43_l, src65_l);
1423     DUP2_ARG2(__lsx_vilvl_d, src21_l, src10_l, src43_l, src32_l,
1429         DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src8, src9);
1436         DUP2_ARG2(__lsx_vilvl_d, src87_l, src76_l, src109_l, src98_l,
1523         DUP2_ARG2(__lsx_vldx, src_tmp, src_stride, src_tmp, src_stride_2x,
1528         DUP2_ARG2(__lsx_vldx, src_tmp, src_stride, src_tmp, src_stride_2x,
1533         DUP2_ARG2(__lsx_vilvl_b, src4, src3, src6, src5, src43_r, src65_r);
1536         DUP2_ARG2(__lsx_vilvh_b, src4, src3, src6, src5, src43_l, src65_l);
1540             DUP2_ARG2(__lsx_vldx, src_tmp, src_stride, src_tmp, src_stride_2x,
1688     DUP2_ARG2(__lsx_vaddi_bu, mask0, 2, mask0, 4, mask1, mask2);
1692     DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src1, src2);
1696     DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src5, src6);
1724     DUP2_ARG2(__lsx_vilvl_h, dst41, dst30, dst52, dst41, dst10_r, dst21_r);
1725     DUP2_ARG2(__lsx_vilvh_h, dst41, dst30, dst52, dst41, dst43_r, dst54_r);
1732         DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src8, src9);
1750         DUP2_ARG2(__lsx_vilvl_h, dst97, dst66, dst108, dst97, dst76_r, dst87_r);
1768         DUP2_ARG2(__lsx_vpickev_h, dst1_r, dst0_r, dst3_r, dst2_r, dst0_r, dst2_r);
1826     DUP2_ARG2(__lsx_vaddi_bu, mask0, 2, mask0, 4, mask1, mask2);
1833         DUP2_ARG2(__lsx_vldx, src_tmp, src_stride, src_tmp, src_stride_2x,
1838         DUP2_ARG2(__lsx_vldx, src_tmp, src_stride, src_tmp, src_stride_2x,
1904             DUP2_ARG2(__lsx_vdp2_w_h, dst10_r, filt_h0, dst10_l, filt_h0,
1974     DUP2_ARG2(__lsx_vaddi_bu, mask0, 2, mask0, 4, mask1, mask2);
1981     DUP2_ARG2(__lsx_vldx, src_tmp, src_stride, src_tmp, src_stride_2x,
1986     DUP2_ARG2(__lsx_vldx, src_tmp, src_stride, src_tmp, src_stride_2x,
2050         DUP2_ARG2(__lsx_vdp2_w_h, dst10_r, filt_h0, dst10_l, filt_h0,
2076     DUP2_ARG2(__lsx_vaddi_bu, mask4, 2, mask4, 4, mask5, mask6);
2080     DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src1, src2);
2084     DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src5, src6);
2112     DUP2_ARG2(__lsx_vilvl_h, dst41, dst30, dst52, dst41, dst10_r, dst21_r);
2113     DUP2_ARG2(__lsx_vilvh_h, dst41, dst30, dst52, dst41, dst43_r, dst54_r);
2121         DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src8, src9);
2138         DUP2_ARG2(__lsx_vilvl_h, dst97, dst66, dst108, dst97, dst76_r, dst87_r);
2156         DUP2_ARG2(__lsx_vpickev_h, dst1_r, dst0_r, dst3_r, dst2_r,
2238     DUP2_ARG2(__lsx_vldrepl_h, filter, 0, filter, 2, filt0, filt1);
2240     DUP2_ARG2(__lsx_vaddi_bu, mask0, 2, mask0, 8, mask1, mask2);
2244         DUP2_ARG2(__lsx_vld, src, 0, src, 16, src0, src1);
2285     DUP2_ARG2(__lsx_vldrepl_h, filter, 0, filter, 2, filt0, filt1);
2288     DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src1, src2);
2290     DUP2_ARG2(__lsx_vilvl_b, src1, src0, src2, src1, src10_r, src21_r);
2291     DUP2_ARG2(__lsx_vilvh_b, src1, src0, src2, src1, src10_l, src21_l);
2297         DUP2_ARG2(__lsx_vilvl_b, src3, src2, src4, src3, src32_r, src43_r);
2298         DUP2_ARG2(__lsx_vilvh_b, src3, src2, src4, src3, src32_l, src43_l);
2314         DUP2_ARG2(__lsx_vilvl_b, src5, src4, src2, src5, src10_r, src21_r);
2315         DUP2_ARG2(__lsx_vilvh_b, src5, src4, src2, src5, src10_l, src21_l);
2353     DUP2_ARG2(__lsx_vldrepl_h, filter, 0, filter, 2, filt0, filt1);
2356     DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src1, src2);
2357     DUP2_ARG2(__lsx_vilvl_b, src1, src0, src2, src1, src10_r, src21_r);
2358     DUP2_ARG2(__lsx_vilvh_b, src1, src0, src2, src1, src10_l, src21_l);
2361     DUP2_ARG2(__lsx_vldx, _src, src_stride, _src, src_stride_2x, src7, src8);
2364     DUP2_ARG2(__lsx_vilvl_b, src7, src6, src8, src7, src76_r, src87_r);
2367         DUP2_ARG2(__lsx_vld, src, 0, _src, 0, src3, src9);
2368         DUP2_ARG2(__lsx_vldx, src, src_stride, _src, src_stride, src4, src10);
2371         DUP2_ARG2(__lsx_vilvl_b, src3, src2, src4, src3, src32_r, src43_r);
2372         DUP2_ARG2(__lsx_vilvh_b, src3, src2, src4, src3, src32_l, src43_l);
2374         DUP2_ARG2(__lsx_vilvl_b, src9, src8, src10, src9, src98_r, src109_r);
2380         DUP2_ARG2(__lsx_vdp2_h_bu_b, src76_r, filt0, src87_r, filt0,
2394         DUP2_ARG2(__lsx_vld, src, 0, _src, 0, src5, src11);
2395         DUP2_ARG2(__lsx_vldx, src, src_stride, _src, src_stride, src2, src8);
2398         DUP2_ARG2(__lsx_vilvl_b, src5, src4, src2, src5, src10_r, src21_r);
2399         DUP2_ARG2(__lsx_vilvh_b, src5, src4, src2, src5, src10_l, src21_l);
2401         DUP2_ARG2(__lsx_vilvl_b, src11, src10, src8, src11, src76_r, src87_r);
2408         DUP2_ARG2(__lsx_vdp2_h_bu_b, src98_r, filt0, src109_r, filt0,
2448     DUP2_ARG2(__lsx_vldrepl_h, filter, 0, filter, 2, filt0, filt1);
2451     DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src1, src2);
2452     DUP2_ARG2(__lsx_vilvl_b, src1, src0, src2, src1, src10_r, src21_r);
2453     DUP2_ARG2(__lsx_vilvh_b, src1, src0, src2, src1, src10_l, src21_l);
2456     DUP2_ARG2(__lsx_vldx, _src, src_stride, _src, src_stride_2x, src7, src8);
2459     DUP2_ARG2(__lsx_vilvl_b, src7, src6, src8, src7, src76_r, src87_r);
2460     DUP2_ARG2(__lsx_vilvh_b, src7, src6, src8, src7, src76_l, src87_l);
2463         DUP2_ARG2(__lsx_vld, src, 0, _src, 0, src3, src9);
2464         DUP2_ARG2(__lsx_vldx, src, src_stride, _src, src_stride, src4, src10);
2467         DUP2_ARG2(__lsx_vilvl_b, src3, src2, src4, src3, src32_r, src43_r);
2468         DUP2_ARG2(__lsx_vilvh_b, src3, src2, src4, src3, src32_l, src43_l);
2470         DUP2_ARG2(__lsx_vilvl_b, src9, src8, src10, src9, src98_r, src109_r);
2471         DUP2_ARG2(__lsx_vilvh_b, src9, src8, src10, src9, src98_l, src109_l);
2495         DUP2_ARG2(__lsx_vld, src, 0, _src, 0, src5, src11);
2496         DUP2_ARG2(__lsx_vldx, src, src_stride, _src, src_stride, src2, src8);
2499         DUP2_ARG2(__lsx_vilvl_b, src5, src4, src2, src5, src10_r, src21_r);
2500         DUP2_ARG2(__lsx_vilvh_b, src5, src4, src2, src5, src10_l, src21_l);
2502         DUP2_ARG2(__lsx_vilvl_b, src11, src10, src8, src11, src76_r, src87_r);
2503         DUP2_ARG2(__lsx_vilvh_b, src11, src10, src8, src11, src76_l, src87_l);
2554     DUP2_ARG2(__lsx_vldrepl_h, filter_x, 0, filter_x, 2, filt0, filt1);
2558     DUP2_ARG2(__lsx_vreplvei_w, filter_vec, 0, filter_vec, 1, filt_h0, filt_h1);
2563     DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src1, src2);
2580     DUP2_ARG2(__lsx_vilvl_h, dst1, dst0, dst2, dst1, dst10_r, dst21_r);
2581     DUP2_ARG2(__lsx_vilvh_h, dst1, dst0, dst2, dst1, dst10_l, dst21_l);
2582     DUP2_ARG2(__lsx_vilvl_h, dst3, dst2, dst4, dst3, dst32_r, dst43_r);
2583     DUP2_ARG2(__lsx_vilvh_h, dst3, dst2, dst4, dst3, dst32_l, dst43_l);
2592     DUP2_ARG2(__lsx_vpickev_h, dst0_l, dst0_r, dst1_l, dst1_r, dst0_r, dst1_r);
2619     DUP2_ARG2(__lsx_vldrepl_h, filter_x, 0, filter_x, 2, filt0, filt1);
2623     DUP2_ARG2(__lsx_vreplvei_w, filter_vec, 0, filter_vec, 1, filt_h0, filt_h1);
2633         DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src5, src6);
2643         DUP2_ARG2(__lsx_vdp2_h_bu_b, vec0, filt0, vec2, filt0, dst0, dst1);
2649         DUP2_ARG2(__lsx_vilvl_h, dst1, dst0, dst2, dst1, dst10_r, dst21_r);
2650         DUP2_ARG2(__lsx_vilvh_h, dst1, dst0, dst2, dst1, dst10_l, dst21_l);
2664         DUP2_ARG2(__lsx_vilvl_h, dst3, dst2, dst4, dst3, dst32_r, dst43_r);
2665         DUP2_ARG2(__lsx_vilvh_h, dst3, dst2, dst4, dst3, dst32_l, dst43_l);
2666         DUP2_ARG2(__lsx_vilvl_h, dst5, dst4, dst6, dst5, dst54_r, dst65_r);
2667         DUP2_ARG2(__lsx_vilvh_h, dst5, dst4, dst6, dst5, dst54_l, dst65_l);
2684         DUP2_ARG2(__lsx_vpickev_h, dst0_l, dst0_r, dst1_l, dst1_r,
2686         DUP2_ARG2(__lsx_vpickev_h, dst2_l, dst2_r, dst3_l, dst3_r,
2724     DUP2_ARG2(__lsx_vldrepl_h, filter_x, 0, filter_x, 2, filt0, filt1);
2728     DUP2_ARG2(__lsx_vreplvei_w, filter_vec, 0, filter_vec, 1, filt_h0, filt_h1);
2794     DUP2_ARG2(__lsx_vpickev_h, dst4_l, dst4_r, dst5_l, dst5_r, dst4_r, dst5_r);
2837     DUP2_ARG2(__lsx_vldrepl_h, filter_x, 0, filter_x, 2, filt0, filt1);
2841     DUP2_ARG2(__lsx_vreplvei_w, filter_vec, 0, filter_vec, 1, filt_h0, filt_h1);
2850         DUP2_ARG2(__lsx_vldx, src_tmp, src_stride, src_tmp, src_stride_2x,
2861         DUP2_ARG2(__lsx_vdp2_h_bu_b, vec0, filt0, vec2, filt0, dst0, dst1);
2867         DUP2_ARG2(__lsx_vilvl_h, dst1, dst0, dst2, dst1, dst10_r, dst21_r);
2868         DUP2_ARG2(__lsx_vilvh_h, dst1, dst0, dst2, dst1, dst10_l, dst21_l);
2872             DUP2_ARG2(__lsx_vldx, src_tmp, src_stride, src_tmp, src_stride_2x,
2892             DUP2_ARG2(__lsx_vilvl_h, dst3, dst2, dst4, dst3, dst32_r, dst43_r);
2893             DUP2_ARG2(__lsx_vilvh_h, dst3, dst2, dst4, dst3, dst32_l, dst43_l);
2894             DUP2_ARG2(__lsx_vilvl_h, dst5, dst4, dst6, dst5, dst54_r, dst65_r);
2895             DUP2_ARG2(__lsx_vilvh_h, dst5, dst4, dst6, dst5, dst54_l, dst65_l);
2987     DUP2_ARG2(__lsx_vldrepl_h, filter_x, 0, filter_x, 2, filt0, filt1);
2991     DUP2_ARG2(__lsx_vreplvei_w, filter_vec, 0, filter_vec, 1, filt_h0, filt_h1);
3000     DUP2_ARG2(__lsx_vldx, src_tmp, src_stride, src_tmp, src_stride_2x,
3008     DUP2_ARG2(__lsx_vdp2_h_bu_b, vec0, filt0, vec2, filt0, dst0, dst1);
3014     DUP2_ARG2(__lsx_vilvl_h, dst1, dst0, dst2, dst1, dst10_r, dst21_r);
3015     DUP2_ARG2(__lsx_vilvh_h, dst1, dst0, dst2, dst1, dst10_l, dst21_l);
3019         DUP2_ARG2(__lsx_vldx, src_tmp, src_stride, src_tmp, src_stride_2x,
3039         DUP2_ARG2(__lsx_vilvl_h, dst3, dst2, dst4, dst3, dst32_r, dst43_r);
3040         DUP2_ARG2(__lsx_vilvh_h, dst3, dst2, dst4, dst3, dst32_l, dst43_l);
3041         DUP2_ARG2(__lsx_vilvl_h, dst5, dst4, dst6, dst5, dst54_r, dst65_r);
3042         DUP2_ARG2(__lsx_vilvh_h, dst5, dst4, dst6, dst5, dst54_l, dst65_l);
3080     DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src1, src2);
3084     DUP2_ARG2(__lsx_vdp2_h_bu_b, vec0, filt0, vec2, filt0, dst10, dst21);
3093         DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src4, src5);
3097         DUP2_ARG2(__lsx_vldx, src, src_stride, src, src_stride_2x, src8, src9);
3115         DUP2_ARG2(__lsx_vilvl_h, dst73, dst22, dst84, dst73, dst32_r, dst43_r);
3116         DUP2_ARG2(__lsx_vilvh_h, dst84, dst73, dst95, dst84, dst87_r, dst98_r);
3117         DUP2_ARG2(__lsx_vilvl_h, dst95, dst84, dst106, dst95, dst54_r, dst65_r);

Indexes created Thu Nov 07 10:32:03 CST 2024