llvm/test/CodeGen/RISCV/rvv/fixed-vectors-reduction-mask-vp.ll

   1 ; NOTE: Assertions have been autogenerated by utils/update_llc_test_checks.py
   2 ; RUN: llc -mtriple=riscv32 -mattr=+v -verify-machineinstrs < %s | FileCheck %s
   3 ; RUN: llc -mtriple=riscv64 -mattr=+v -verify-machineinstrs < %s | FileCheck %s
   4
   5 declare i1 @llvm.vp.reduce.and.v1i1(i1, <1 x i1>, <1 x i1>, i32)
   6
   7 define zeroext i1 @vpreduce_and_v1i1(i1 zeroext %s, <1 x i1> %v, <1 x i1> %m, i32 zeroext %evl) {
   8 ; CHECK-LABEL: vpreduce_and_v1i1:
   9 ; CHECK:       # %bb.0:
  10 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf8, ta, ma
  11 ; CHECK-NEXT:    vmnot.m v9, v0
  12 ; CHECK-NEXT:    vmv1r.v v0, v8
  13 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
  14 ; CHECK-NEXT:    seqz a1, a1
  15 ; CHECK-NEXT:    and a0, a1, a0
  16 ; CHECK-NEXT:    ret
  17   %r = call i1 @llvm.vp.reduce.and.v1i1(i1 %s, <1 x i1> %v, <1 x i1> %m, i32 %evl)
  18   ret i1 %r
  19 }
  20
  21 declare i1 @llvm.vp.reduce.or.v1i1(i1, <1 x i1>, <1 x i1>, i32)
  22
  23 define zeroext i1 @vpreduce_or_v1i1(i1 zeroext %s, <1 x i1> %v, <1 x i1> %m, i32 zeroext %evl) {
  24 ; CHECK-LABEL: vpreduce_or_v1i1:
  25 ; CHECK:       # %bb.0:
  26 ; CHECK-NEXT:    vmv1r.v v9, v0
  27 ; CHECK-NEXT:    vmv1r.v v0, v8
  28 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf8, ta, ma
  29 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
  30 ; CHECK-NEXT:    snez a1, a1
  31 ; CHECK-NEXT:    or a0, a1, a0
  32 ; CHECK-NEXT:    ret
  33   %r = call i1 @llvm.vp.reduce.or.v1i1(i1 %s, <1 x i1> %v, <1 x i1> %m, i32 %evl)
  34   ret i1 %r
  35 }
  36
  37 declare i1 @llvm.vp.reduce.xor.v1i1(i1, <1 x i1>, <1 x i1>, i32)
  38
  39 define zeroext i1 @vpreduce_xor_v1i1(i1 zeroext %s, <1 x i1> %v, <1 x i1> %m, i32 zeroext %evl) {
  40 ; CHECK-LABEL: vpreduce_xor_v1i1:
  41 ; CHECK:       # %bb.0:
  42 ; CHECK-NEXT:    vmv1r.v v9, v0
  43 ; CHECK-NEXT:    vmv1r.v v0, v8
  44 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf8, ta, ma
  45 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
  46 ; CHECK-NEXT:    andi a1, a1, 1
  47 ; CHECK-NEXT:    xor a0, a1, a0
  48 ; CHECK-NEXT:    ret
  49   %r = call i1 @llvm.vp.reduce.xor.v1i1(i1 %s, <1 x i1> %v, <1 x i1> %m, i32 %evl)
  50   ret i1 %r
  51 }
  52
  53 declare i1 @llvm.vp.reduce.and.v2i1(i1, <2 x i1>, <2 x i1>, i32)
  54
  55 define zeroext i1 @vpreduce_and_v2i1(i1 zeroext %s, <2 x i1> %v, <2 x i1> %m, i32 zeroext %evl) {
  56 ; CHECK-LABEL: vpreduce_and_v2i1:
  57 ; CHECK:       # %bb.0:
  58 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf8, ta, ma
  59 ; CHECK-NEXT:    vmnot.m v9, v0
  60 ; CHECK-NEXT:    vmv1r.v v0, v8
  61 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
  62 ; CHECK-NEXT:    seqz a1, a1
  63 ; CHECK-NEXT:    and a0, a1, a0
  64 ; CHECK-NEXT:    ret
  65   %r = call i1 @llvm.vp.reduce.and.v2i1(i1 %s, <2 x i1> %v, <2 x i1> %m, i32 %evl)
  66   ret i1 %r
  67 }
  68
  69 declare i1 @llvm.vp.reduce.or.v2i1(i1, <2 x i1>, <2 x i1>, i32)
  70
  71 define zeroext i1 @vpreduce_or_v2i1(i1 zeroext %s, <2 x i1> %v, <2 x i1> %m, i32 zeroext %evl) {
  72 ; CHECK-LABEL: vpreduce_or_v2i1:
  73 ; CHECK:       # %bb.0:
  74 ; CHECK-NEXT:    vmv1r.v v9, v0
  75 ; CHECK-NEXT:    vmv1r.v v0, v8
  76 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf8, ta, ma
  77 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
  78 ; CHECK-NEXT:    snez a1, a1
  79 ; CHECK-NEXT:    or a0, a1, a0
  80 ; CHECK-NEXT:    ret
  81   %r = call i1 @llvm.vp.reduce.or.v2i1(i1 %s, <2 x i1> %v, <2 x i1> %m, i32 %evl)
  82   ret i1 %r
  83 }
  84
  85 declare i1 @llvm.vp.reduce.xor.v2i1(i1, <2 x i1>, <2 x i1>, i32)
  86
  87 define zeroext i1 @vpreduce_xor_v2i1(i1 zeroext %s, <2 x i1> %v, <2 x i1> %m, i32 zeroext %evl) {
  88 ; CHECK-LABEL: vpreduce_xor_v2i1:
  89 ; CHECK:       # %bb.0:
  90 ; CHECK-NEXT:    vmv1r.v v9, v0
  91 ; CHECK-NEXT:    vmv1r.v v0, v8
  92 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf8, ta, ma
  93 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
  94 ; CHECK-NEXT:    andi a1, a1, 1
  95 ; CHECK-NEXT:    xor a0, a1, a0
  96 ; CHECK-NEXT:    ret
  97   %r = call i1 @llvm.vp.reduce.xor.v2i1(i1 %s, <2 x i1> %v, <2 x i1> %m, i32 %evl)
  98   ret i1 %r
  99 }
 100
 101 declare i1 @llvm.vp.reduce.and.v4i1(i1, <4 x i1>, <4 x i1>, i32)
 102
 103 define zeroext i1 @vpreduce_and_v4i1(i1 zeroext %s, <4 x i1> %v, <4 x i1> %m, i32 zeroext %evl) {
 104 ; CHECK-LABEL: vpreduce_and_v4i1:
 105 ; CHECK:       # %bb.0:
 106 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf4, ta, ma
 107 ; CHECK-NEXT:    vmnot.m v9, v0
 108 ; CHECK-NEXT:    vmv1r.v v0, v8
 109 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 110 ; CHECK-NEXT:    seqz a1, a1
 111 ; CHECK-NEXT:    and a0, a1, a0
 112 ; CHECK-NEXT:    ret
 113   %r = call i1 @llvm.vp.reduce.and.v4i1(i1 %s, <4 x i1> %v, <4 x i1> %m, i32 %evl)
 114   ret i1 %r
 115 }
 116
 117 declare i1 @llvm.vp.reduce.or.v4i1(i1, <4 x i1>, <4 x i1>, i32)
 118
 119 define zeroext i1 @vpreduce_or_v4i1(i1 zeroext %s, <4 x i1> %v, <4 x i1> %m, i32 zeroext %evl) {
 120 ; CHECK-LABEL: vpreduce_or_v4i1:
 121 ; CHECK:       # %bb.0:
 122 ; CHECK-NEXT:    vmv1r.v v9, v0
 123 ; CHECK-NEXT:    vmv1r.v v0, v8
 124 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf4, ta, ma
 125 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 126 ; CHECK-NEXT:    snez a1, a1
 127 ; CHECK-NEXT:    or a0, a1, a0
 128 ; CHECK-NEXT:    ret
 129   %r = call i1 @llvm.vp.reduce.or.v4i1(i1 %s, <4 x i1> %v, <4 x i1> %m, i32 %evl)
 130   ret i1 %r
 131 }
 132
 133 declare i1 @llvm.vp.reduce.xor.v4i1(i1, <4 x i1>, <4 x i1>, i32)
 134
 135 define zeroext i1 @vpreduce_xor_v4i1(i1 zeroext %s, <4 x i1> %v, <4 x i1> %m, i32 zeroext %evl) {
 136 ; CHECK-LABEL: vpreduce_xor_v4i1:
 137 ; CHECK:       # %bb.0:
 138 ; CHECK-NEXT:    vmv1r.v v9, v0
 139 ; CHECK-NEXT:    vmv1r.v v0, v8
 140 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf4, ta, ma
 141 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 142 ; CHECK-NEXT:    andi a1, a1, 1
 143 ; CHECK-NEXT:    xor a0, a1, a0
 144 ; CHECK-NEXT:    ret
 145   %r = call i1 @llvm.vp.reduce.xor.v4i1(i1 %s, <4 x i1> %v, <4 x i1> %m, i32 %evl)
 146   ret i1 %r
 147 }
 148
 149 declare i1 @llvm.vp.reduce.and.v8i1(i1, <8 x i1>, <8 x i1>, i32)
 150
 151 define zeroext i1 @vpreduce_and_v8i1(i1 zeroext %s, <8 x i1> %v, <8 x i1> %m, i32 zeroext %evl) {
 152 ; CHECK-LABEL: vpreduce_and_v8i1:
 153 ; CHECK:       # %bb.0:
 154 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf2, ta, ma
 155 ; CHECK-NEXT:    vmnot.m v9, v0
 156 ; CHECK-NEXT:    vmv1r.v v0, v8
 157 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 158 ; CHECK-NEXT:    seqz a1, a1
 159 ; CHECK-NEXT:    and a0, a1, a0
 160 ; CHECK-NEXT:    ret
 161   %r = call i1 @llvm.vp.reduce.and.v8i1(i1 %s, <8 x i1> %v, <8 x i1> %m, i32 %evl)
 162   ret i1 %r
 163 }
 164
 165 declare i1 @llvm.vp.reduce.or.v8i1(i1, <8 x i1>, <8 x i1>, i32)
 166
 167 define zeroext i1 @vpreduce_or_v8i1(i1 zeroext %s, <8 x i1> %v, <8 x i1> %m, i32 zeroext %evl) {
 168 ; CHECK-LABEL: vpreduce_or_v8i1:
 169 ; CHECK:       # %bb.0:
 170 ; CHECK-NEXT:    vmv1r.v v9, v0
 171 ; CHECK-NEXT:    vmv1r.v v0, v8
 172 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf2, ta, ma
 173 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 174 ; CHECK-NEXT:    snez a1, a1
 175 ; CHECK-NEXT:    or a0, a1, a0
 176 ; CHECK-NEXT:    ret
 177   %r = call i1 @llvm.vp.reduce.or.v8i1(i1 %s, <8 x i1> %v, <8 x i1> %m, i32 %evl)
 178   ret i1 %r
 179 }
 180
 181 declare i1 @llvm.vp.reduce.xor.v8i1(i1, <8 x i1>, <8 x i1>, i32)
 182
 183 define zeroext i1 @vpreduce_xor_v8i1(i1 zeroext %s, <8 x i1> %v, <8 x i1> %m, i32 zeroext %evl) {
 184 ; CHECK-LABEL: vpreduce_xor_v8i1:
 185 ; CHECK:       # %bb.0:
 186 ; CHECK-NEXT:    vmv1r.v v9, v0
 187 ; CHECK-NEXT:    vmv1r.v v0, v8
 188 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf2, ta, ma
 189 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 190 ; CHECK-NEXT:    andi a1, a1, 1
 191 ; CHECK-NEXT:    xor a0, a1, a0
 192 ; CHECK-NEXT:    ret
 193   %r = call i1 @llvm.vp.reduce.xor.v8i1(i1 %s, <8 x i1> %v, <8 x i1> %m, i32 %evl)
 194   ret i1 %r
 195 }
 196
 197 declare i1 @llvm.vp.reduce.and.v10i1(i1, <10 x i1>, <10 x i1>, i32)
 198
 199 define zeroext i1 @vpreduce_and_v10i1(i1 zeroext %s, <10 x i1> %v, <10 x i1> %m, i32 zeroext %evl) {
 200 ; CHECK-LABEL: vpreduce_and_v10i1:
 201 ; CHECK:       # %bb.0:
 202 ; CHECK-NEXT:    vsetvli zero, a1, e8, m1, ta, ma
 203 ; CHECK-NEXT:    vmnot.m v9, v0
 204 ; CHECK-NEXT:    vmv1r.v v0, v8
 205 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 206 ; CHECK-NEXT:    seqz a1, a1
 207 ; CHECK-NEXT:    and a0, a1, a0
 208 ; CHECK-NEXT:    ret
 209   %r = call i1 @llvm.vp.reduce.and.v10i1(i1 %s, <10 x i1> %v, <10 x i1> %m, i32 %evl)
 210   ret i1 %r
 211 }
 212
 213 declare i1 @llvm.vp.reduce.and.v16i1(i1, <16 x i1>, <16 x i1>, i32)
 214
 215 define zeroext i1 @vpreduce_and_v16i1(i1 zeroext %s, <16 x i1> %v, <16 x i1> %m, i32 zeroext %evl) {
 216 ; CHECK-LABEL: vpreduce_and_v16i1:
 217 ; CHECK:       # %bb.0:
 218 ; CHECK-NEXT:    vsetvli zero, a1, e8, m1, ta, ma
 219 ; CHECK-NEXT:    vmnot.m v9, v0
 220 ; CHECK-NEXT:    vmv1r.v v0, v8
 221 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 222 ; CHECK-NEXT:    seqz a1, a1
 223 ; CHECK-NEXT:    and a0, a1, a0
 224 ; CHECK-NEXT:    ret
 225   %r = call i1 @llvm.vp.reduce.and.v16i1(i1 %s, <16 x i1> %v, <16 x i1> %m, i32 %evl)
 226   ret i1 %r
 227 }
 228
 229 declare i1 @llvm.vp.reduce.and.v256i1(i1, <256 x i1>, <256 x i1>, i32)
 230
 231 define zeroext i1 @vpreduce_and_v256i1(i1 zeroext %s, <256 x i1> %v, <256 x i1> %m, i32 zeroext %evl) {
 232 ; CHECK-LABEL: vpreduce_and_v256i1:
 233 ; CHECK:       # %bb.0:
 234 ; CHECK-NEXT:    li a3, 128
 235 ; CHECK-NEXT:    mv a2, a1
 236 ; CHECK-NEXT:    bltu a1, a3, .LBB14_2
 237 ; CHECK-NEXT:  # %bb.1:
 238 ; CHECK-NEXT:    li a2, 128
 239 ; CHECK-NEXT:  .LBB14_2:
 240 ; CHECK-NEXT:    vsetvli zero, a2, e8, m8, ta, ma
 241 ; CHECK-NEXT:    vmnot.m v11, v0
 242 ; CHECK-NEXT:    vmv1r.v v0, v9
 243 ; CHECK-NEXT:    vcpop.m a2, v11, v0.t
 244 ; CHECK-NEXT:    seqz a2, a2
 245 ; CHECK-NEXT:    and a0, a2, a0
 246 ; CHECK-NEXT:    addi a2, a1, -128
 247 ; CHECK-NEXT:    sltu a1, a1, a2
 248 ; CHECK-NEXT:    addi a1, a1, -1
 249 ; CHECK-NEXT:    and a1, a1, a2
 250 ; CHECK-NEXT:    vsetvli zero, a1, e8, m8, ta, ma
 251 ; CHECK-NEXT:    vmnot.m v8, v8
 252 ; CHECK-NEXT:    vmv1r.v v0, v10
 253 ; CHECK-NEXT:    vcpop.m a1, v8, v0.t
 254 ; CHECK-NEXT:    seqz a1, a1
 255 ; CHECK-NEXT:    and a0, a1, a0
 256 ; CHECK-NEXT:    ret
 257   %r = call i1 @llvm.vp.reduce.and.v256i1(i1 %s, <256 x i1> %v, <256 x i1> %m, i32 %evl)
 258   ret i1 %r
 259 }
 260
 261 declare i1 @llvm.vp.reduce.or.v16i1(i1, <16 x i1>, <16 x i1>, i32)
 262
 263 define zeroext i1 @vpreduce_or_v16i1(i1 zeroext %s, <16 x i1> %v, <16 x i1> %m, i32 zeroext %evl) {
 264 ; CHECK-LABEL: vpreduce_or_v16i1:
 265 ; CHECK:       # %bb.0:
 266 ; CHECK-NEXT:    vmv1r.v v9, v0
 267 ; CHECK-NEXT:    vmv1r.v v0, v8
 268 ; CHECK-NEXT:    vsetvli zero, a1, e8, m1, ta, ma
 269 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 270 ; CHECK-NEXT:    snez a1, a1
 271 ; CHECK-NEXT:    or a0, a1, a0
 272 ; CHECK-NEXT:    ret
 273   %r = call i1 @llvm.vp.reduce.or.v16i1(i1 %s, <16 x i1> %v, <16 x i1> %m, i32 %evl)
 274   ret i1 %r
 275 }
 276
 277 declare i1 @llvm.vp.reduce.xor.v16i1(i1, <16 x i1>, <16 x i1>, i32)
 278
 279 define zeroext i1 @vpreduce_xor_v16i1(i1 zeroext %s, <16 x i1> %v, <16 x i1> %m, i32 zeroext %evl) {
 280 ; CHECK-LABEL: vpreduce_xor_v16i1:
 281 ; CHECK:       # %bb.0:
 282 ; CHECK-NEXT:    vmv1r.v v9, v0
 283 ; CHECK-NEXT:    vmv1r.v v0, v8
 284 ; CHECK-NEXT:    vsetvli zero, a1, e8, m1, ta, ma
 285 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 286 ; CHECK-NEXT:    andi a1, a1, 1
 287 ; CHECK-NEXT:    xor a0, a1, a0
 288 ; CHECK-NEXT:    ret
 289   %r = call i1 @llvm.vp.reduce.xor.v16i1(i1 %s, <16 x i1> %v, <16 x i1> %m, i32 %evl)
 290   ret i1 %r
 291 }
 292
 293 declare i1 @llvm.vp.reduce.add.v1i1(i1, <1 x i1>, <1 x i1>, i32)
 294
 295 define zeroext i1 @vpreduce_add_v1i1(i1 zeroext %s, <1 x i1> %v, <1 x i1> %m, i32 zeroext %evl) {
 296 ; CHECK-LABEL: vpreduce_add_v1i1:
 297 ; CHECK:       # %bb.0:
 298 ; CHECK-NEXT:    vmv1r.v v9, v0
 299 ; CHECK-NEXT:    vmv1r.v v0, v8
 300 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf8, ta, ma
 301 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 302 ; CHECK-NEXT:    andi a1, a1, 1
 303 ; CHECK-NEXT:    xor a0, a1, a0
 304 ; CHECK-NEXT:    ret
 305   %r = call i1 @llvm.vp.reduce.add.v1i1(i1 %s, <1 x i1> %v, <1 x i1> %m, i32 %evl)
 306   ret i1 %r
 307 }
 308
 309 declare i1 @llvm.vp.reduce.add.v2i1(i1, <2 x i1>, <2 x i1>, i32)
 310
 311 define zeroext i1 @vpreduce_add_v2i1(i1 zeroext %s, <2 x i1> %v, <2 x i1> %m, i32 zeroext %evl) {
 312 ; CHECK-LABEL: vpreduce_add_v2i1:
 313 ; CHECK:       # %bb.0:
 314 ; CHECK-NEXT:    vmv1r.v v9, v0
 315 ; CHECK-NEXT:    vmv1r.v v0, v8
 316 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf8, ta, ma
 317 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 318 ; CHECK-NEXT:    andi a1, a1, 1
 319 ; CHECK-NEXT:    xor a0, a1, a0
 320 ; CHECK-NEXT:    ret
 321   %r = call i1 @llvm.vp.reduce.add.v2i1(i1 %s, <2 x i1> %v, <2 x i1> %m, i32 %evl)
 322   ret i1 %r
 323 }
 324
 325 declare i1 @llvm.vp.reduce.add.v4i1(i1, <4 x i1>, <4 x i1>, i32)
 326
 327 define zeroext i1 @vpreduce_add_v4i1(i1 zeroext %s, <4 x i1> %v, <4 x i1> %m, i32 zeroext %evl) {
 328 ; CHECK-LABEL: vpreduce_add_v4i1:
 329 ; CHECK:       # %bb.0:
 330 ; CHECK-NEXT:    vmv1r.v v9, v0
 331 ; CHECK-NEXT:    vmv1r.v v0, v8
 332 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf4, ta, ma
 333 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 334 ; CHECK-NEXT:    andi a1, a1, 1
 335 ; CHECK-NEXT:    xor a0, a1, a0
 336 ; CHECK-NEXT:    ret
 337   %r = call i1 @llvm.vp.reduce.add.v4i1(i1 %s, <4 x i1> %v, <4 x i1> %m, i32 %evl)
 338   ret i1 %r
 339 }
 340
 341 declare i1 @llvm.vp.reduce.add.v8i1(i1, <8 x i1>, <8 x i1>, i32)
 342
 343 define zeroext i1 @vpreduce_add_v8i1(i1 zeroext %s, <8 x i1> %v, <8 x i1> %m, i32 zeroext %evl) {
 344 ; CHECK-LABEL: vpreduce_add_v8i1:
 345 ; CHECK:       # %bb.0:
 346 ; CHECK-NEXT:    vmv1r.v v9, v0
 347 ; CHECK-NEXT:    vmv1r.v v0, v8
 348 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf2, ta, ma
 349 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 350 ; CHECK-NEXT:    andi a1, a1, 1
 351 ; CHECK-NEXT:    xor a0, a1, a0
 352 ; CHECK-NEXT:    ret
 353   %r = call i1 @llvm.vp.reduce.add.v8i1(i1 %s, <8 x i1> %v, <8 x i1> %m, i32 %evl)
 354   ret i1 %r
 355 }
 356
 357 declare i1 @llvm.vp.reduce.add.v16i1(i1, <16 x i1>, <16 x i1>, i32)
 358
 359 define zeroext i1 @vpreduce_add_v16i1(i1 zeroext %s, <16 x i1> %v, <16 x i1> %m, i32 zeroext %evl) {
 360 ; CHECK-LABEL: vpreduce_add_v16i1:
 361 ; CHECK:       # %bb.0:
 362 ; CHECK-NEXT:    vmv1r.v v9, v0
 363 ; CHECK-NEXT:    vmv1r.v v0, v8
 364 ; CHECK-NEXT:    vsetvli zero, a1, e8, m1, ta, ma
 365 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 366 ; CHECK-NEXT:    andi a1, a1, 1
 367 ; CHECK-NEXT:    xor a0, a1, a0
 368 ; CHECK-NEXT:    ret
 369   %r = call i1 @llvm.vp.reduce.add.v16i1(i1 %s, <16 x i1> %v, <16 x i1> %m, i32 %evl)
 370   ret i1 %r
 371 }
 372
 373 declare i1 @llvm.vp.reduce.smax.v1i1(i1, <1 x i1>, <1 x i1>, i32)
 374
 375 define zeroext i1 @vpreduce_smax_v1i1(i1 zeroext %s, <1 x i1> %v, <1 x i1> %m, i32 zeroext %evl) {
 376 ; CHECK-LABEL: vpreduce_smax_v1i1:
 377 ; CHECK:       # %bb.0:
 378 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf8, ta, ma
 379 ; CHECK-NEXT:    vmnot.m v9, v0
 380 ; CHECK-NEXT:    vmv1r.v v0, v8
 381 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 382 ; CHECK-NEXT:    seqz a1, a1
 383 ; CHECK-NEXT:    and a0, a1, a0
 384 ; CHECK-NEXT:    ret
 385   %r = call i1 @llvm.vp.reduce.smax.v1i1(i1 %s, <1 x i1> %v, <1 x i1> %m, i32 %evl)
 386   ret i1 %r
 387 }
 388
 389 declare i1 @llvm.vp.reduce.smax.v2i1(i1, <2 x i1>, <2 x i1>, i32)
 390
 391 define zeroext i1 @vpreduce_smax_v2i1(i1 zeroext %s, <2 x i1> %v, <2 x i1> %m, i32 zeroext %evl) {
 392 ; CHECK-LABEL: vpreduce_smax_v2i1:
 393 ; CHECK:       # %bb.0:
 394 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf8, ta, ma
 395 ; CHECK-NEXT:    vmnot.m v9, v0
 396 ; CHECK-NEXT:    vmv1r.v v0, v8
 397 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 398 ; CHECK-NEXT:    seqz a1, a1
 399 ; CHECK-NEXT:    and a0, a1, a0
 400 ; CHECK-NEXT:    ret
 401   %r = call i1 @llvm.vp.reduce.smax.v2i1(i1 %s, <2 x i1> %v, <2 x i1> %m, i32 %evl)
 402   ret i1 %r
 403 }
 404
 405 declare i1 @llvm.vp.reduce.smax.v4i1(i1, <4 x i1>, <4 x i1>, i32)
 406
 407 define zeroext i1 @vpreduce_smax_v4i1(i1 zeroext %s, <4 x i1> %v, <4 x i1> %m, i32 zeroext %evl) {
 408 ; CHECK-LABEL: vpreduce_smax_v4i1:
 409 ; CHECK:       # %bb.0:
 410 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf4, ta, ma
 411 ; CHECK-NEXT:    vmnot.m v9, v0
 412 ; CHECK-NEXT:    vmv1r.v v0, v8
 413 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 414 ; CHECK-NEXT:    seqz a1, a1
 415 ; CHECK-NEXT:    and a0, a1, a0
 416 ; CHECK-NEXT:    ret
 417   %r = call i1 @llvm.vp.reduce.smax.v4i1(i1 %s, <4 x i1> %v, <4 x i1> %m, i32 %evl)
 418   ret i1 %r
 419 }
 420
 421 declare i1 @llvm.vp.reduce.smax.v8i1(i1, <8 x i1>, <8 x i1>, i32)
 422
 423 define zeroext i1 @vpreduce_smax_v8i1(i1 zeroext %s, <8 x i1> %v, <8 x i1> %m, i32 zeroext %evl) {
 424 ; CHECK-LABEL: vpreduce_smax_v8i1:
 425 ; CHECK:       # %bb.0:
 426 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf2, ta, ma
 427 ; CHECK-NEXT:    vmnot.m v9, v0
 428 ; CHECK-NEXT:    vmv1r.v v0, v8
 429 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 430 ; CHECK-NEXT:    seqz a1, a1
 431 ; CHECK-NEXT:    and a0, a1, a0
 432 ; CHECK-NEXT:    ret
 433   %r = call i1 @llvm.vp.reduce.smax.v8i1(i1 %s, <8 x i1> %v, <8 x i1> %m, i32 %evl)
 434   ret i1 %r
 435 }
 436
 437 declare i1 @llvm.vp.reduce.smax.v16i1(i1, <16 x i1>, <16 x i1>, i32)
 438
 439 define zeroext i1 @vpreduce_smax_v16i1(i1 zeroext %s, <16 x i1> %v, <16 x i1> %m, i32 zeroext %evl) {
 440 ; CHECK-LABEL: vpreduce_smax_v16i1:
 441 ; CHECK:       # %bb.0:
 442 ; CHECK-NEXT:    vsetvli zero, a1, e8, m1, ta, ma
 443 ; CHECK-NEXT:    vmnot.m v9, v0
 444 ; CHECK-NEXT:    vmv1r.v v0, v8
 445 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 446 ; CHECK-NEXT:    seqz a1, a1
 447 ; CHECK-NEXT:    and a0, a1, a0
 448 ; CHECK-NEXT:    ret
 449   %r = call i1 @llvm.vp.reduce.smax.v16i1(i1 %s, <16 x i1> %v, <16 x i1> %m, i32 %evl)
 450   ret i1 %r
 451 }
 452
 453 declare i1 @llvm.vp.reduce.smax.v32i1(i1, <32 x i1>, <32 x i1>, i32)
 454
 455 define zeroext i1 @vpreduce_smax_v32i1(i1 zeroext %s, <32 x i1> %v, <32 x i1> %m, i32 zeroext %evl) {
 456 ; CHECK-LABEL: vpreduce_smax_v32i1:
 457 ; CHECK:       # %bb.0:
 458 ; CHECK-NEXT:    vsetvli zero, a1, e8, m2, ta, ma
 459 ; CHECK-NEXT:    vmnot.m v9, v0
 460 ; CHECK-NEXT:    vmv1r.v v0, v8
 461 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 462 ; CHECK-NEXT:    seqz a1, a1
 463 ; CHECK-NEXT:    and a0, a1, a0
 464 ; CHECK-NEXT:    ret
 465   %r = call i1 @llvm.vp.reduce.smax.v32i1(i1 %s, <32 x i1> %v, <32 x i1> %m, i32 %evl)
 466   ret i1 %r
 467 }
 468
 469 declare i1 @llvm.vp.reduce.smax.v64i1(i1, <64 x i1>, <64 x i1>, i32)
 470
 471 define zeroext i1 @vpreduce_smax_v64i1(i1 zeroext %s, <64 x i1> %v, <64 x i1> %m, i32 zeroext %evl) {
 472 ; CHECK-LABEL: vpreduce_smax_v64i1:
 473 ; CHECK:       # %bb.0:
 474 ; CHECK-NEXT:    vsetvli zero, a1, e8, m4, ta, ma
 475 ; CHECK-NEXT:    vmnot.m v9, v0
 476 ; CHECK-NEXT:    vmv1r.v v0, v8
 477 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 478 ; CHECK-NEXT:    seqz a1, a1
 479 ; CHECK-NEXT:    and a0, a1, a0
 480 ; CHECK-NEXT:    ret
 481   %r = call i1 @llvm.vp.reduce.smax.v64i1(i1 %s, <64 x i1> %v, <64 x i1> %m, i32 %evl)
 482   ret i1 %r
 483 }
 484
 485 declare i1 @llvm.vp.reduce.smin.v1i1(i1, <1 x i1>, <1 x i1>, i32)
 486
 487 define zeroext i1 @vpreduce_smin_v1i1(i1 zeroext %s, <1 x i1> %v, <1 x i1> %m, i32 zeroext %evl) {
 488 ; CHECK-LABEL: vpreduce_smin_v1i1:
 489 ; CHECK:       # %bb.0:
 490 ; CHECK-NEXT:    vmv1r.v v9, v0
 491 ; CHECK-NEXT:    vmv1r.v v0, v8
 492 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf8, ta, ma
 493 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 494 ; CHECK-NEXT:    snez a1, a1
 495 ; CHECK-NEXT:    or a0, a1, a0
 496 ; CHECK-NEXT:    ret
 497   %r = call i1 @llvm.vp.reduce.smin.v1i1(i1 %s, <1 x i1> %v, <1 x i1> %m, i32 %evl)
 498   ret i1 %r
 499 }
 500
 501 declare i1 @llvm.vp.reduce.smin.v2i1(i1, <2 x i1>, <2 x i1>, i32)
 502
 503 define zeroext i1 @vpreduce_smin_v2i1(i1 zeroext %s, <2 x i1> %v, <2 x i1> %m, i32 zeroext %evl) {
 504 ; CHECK-LABEL: vpreduce_smin_v2i1:
 505 ; CHECK:       # %bb.0:
 506 ; CHECK-NEXT:    vmv1r.v v9, v0
 507 ; CHECK-NEXT:    vmv1r.v v0, v8
 508 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf8, ta, ma
 509 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 510 ; CHECK-NEXT:    snez a1, a1
 511 ; CHECK-NEXT:    or a0, a1, a0
 512 ; CHECK-NEXT:    ret
 513   %r = call i1 @llvm.vp.reduce.smin.v2i1(i1 %s, <2 x i1> %v, <2 x i1> %m, i32 %evl)
 514   ret i1 %r
 515 }
 516
 517 declare i1 @llvm.vp.reduce.smin.v4i1(i1, <4 x i1>, <4 x i1>, i32)
 518
 519 define zeroext i1 @vpreduce_smin_v4i1(i1 zeroext %s, <4 x i1> %v, <4 x i1> %m, i32 zeroext %evl) {
 520 ; CHECK-LABEL: vpreduce_smin_v4i1:
 521 ; CHECK:       # %bb.0:
 522 ; CHECK-NEXT:    vmv1r.v v9, v0
 523 ; CHECK-NEXT:    vmv1r.v v0, v8
 524 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf4, ta, ma
 525 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 526 ; CHECK-NEXT:    snez a1, a1
 527 ; CHECK-NEXT:    or a0, a1, a0
 528 ; CHECK-NEXT:    ret
 529   %r = call i1 @llvm.vp.reduce.smin.v4i1(i1 %s, <4 x i1> %v, <4 x i1> %m, i32 %evl)
 530   ret i1 %r
 531 }
 532
 533 declare i1 @llvm.vp.reduce.smin.v8i1(i1, <8 x i1>, <8 x i1>, i32)
 534
 535 define zeroext i1 @vpreduce_smin_v8i1(i1 zeroext %s, <8 x i1> %v, <8 x i1> %m, i32 zeroext %evl) {
 536 ; CHECK-LABEL: vpreduce_smin_v8i1:
 537 ; CHECK:       # %bb.0:
 538 ; CHECK-NEXT:    vmv1r.v v9, v0
 539 ; CHECK-NEXT:    vmv1r.v v0, v8
 540 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf2, ta, ma
 541 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 542 ; CHECK-NEXT:    snez a1, a1
 543 ; CHECK-NEXT:    or a0, a1, a0
 544 ; CHECK-NEXT:    ret
 545   %r = call i1 @llvm.vp.reduce.smin.v8i1(i1 %s, <8 x i1> %v, <8 x i1> %m, i32 %evl)
 546   ret i1 %r
 547 }
 548
 549 declare i1 @llvm.vp.reduce.smin.v16i1(i1, <16 x i1>, <16 x i1>, i32)
 550
 551 define zeroext i1 @vpreduce_smin_v16i1(i1 zeroext %s, <16 x i1> %v, <16 x i1> %m, i32 zeroext %evl) {
 552 ; CHECK-LABEL: vpreduce_smin_v16i1:
 553 ; CHECK:       # %bb.0:
 554 ; CHECK-NEXT:    vmv1r.v v9, v0
 555 ; CHECK-NEXT:    vmv1r.v v0, v8
 556 ; CHECK-NEXT:    vsetvli zero, a1, e8, m1, ta, ma
 557 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 558 ; CHECK-NEXT:    snez a1, a1
 559 ; CHECK-NEXT:    or a0, a1, a0
 560 ; CHECK-NEXT:    ret
 561   %r = call i1 @llvm.vp.reduce.smin.v16i1(i1 %s, <16 x i1> %v, <16 x i1> %m, i32 %evl)
 562   ret i1 %r
 563 }
 564
 565 declare i1 @llvm.vp.reduce.smin.v32i1(i1, <32 x i1>, <32 x i1>, i32)
 566
 567 define zeroext i1 @vpreduce_smin_v32i1(i1 zeroext %s, <32 x i1> %v, <32 x i1> %m, i32 zeroext %evl) {
 568 ; CHECK-LABEL: vpreduce_smin_v32i1:
 569 ; CHECK:       # %bb.0:
 570 ; CHECK-NEXT:    vmv1r.v v9, v0
 571 ; CHECK-NEXT:    vmv1r.v v0, v8
 572 ; CHECK-NEXT:    vsetvli zero, a1, e8, m2, ta, ma
 573 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 574 ; CHECK-NEXT:    snez a1, a1
 575 ; CHECK-NEXT:    or a0, a1, a0
 576 ; CHECK-NEXT:    ret
 577   %r = call i1 @llvm.vp.reduce.smin.v32i1(i1 %s, <32 x i1> %v, <32 x i1> %m, i32 %evl)
 578   ret i1 %r
 579 }
 580
 581 declare i1 @llvm.vp.reduce.smin.v64i1(i1, <64 x i1>, <64 x i1>, i32)
 582
 583 define zeroext i1 @vpreduce_smin_v64i1(i1 zeroext %s, <64 x i1> %v, <64 x i1> %m, i32 zeroext %evl) {
 584 ; CHECK-LABEL: vpreduce_smin_v64i1:
 585 ; CHECK:       # %bb.0:
 586 ; CHECK-NEXT:    vmv1r.v v9, v0
 587 ; CHECK-NEXT:    vmv1r.v v0, v8
 588 ; CHECK-NEXT:    vsetvli zero, a1, e8, m4, ta, ma
 589 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 590 ; CHECK-NEXT:    snez a1, a1
 591 ; CHECK-NEXT:    or a0, a1, a0
 592 ; CHECK-NEXT:    ret
 593   %r = call i1 @llvm.vp.reduce.smin.v64i1(i1 %s, <64 x i1> %v, <64 x i1> %m, i32 %evl)
 594   ret i1 %r
 595 }
 596
 597 declare i1 @llvm.vp.reduce.umax.v1i1(i1, <1 x i1>, <1 x i1>, i32)
 598
 599 define zeroext i1 @vpreduce_umax_v1i1(i1 zeroext %s, <1 x i1> %v, <1 x i1> %m, i32 zeroext %evl) {
 600 ; CHECK-LABEL: vpreduce_umax_v1i1:
 601 ; CHECK:       # %bb.0:
 602 ; CHECK-NEXT:    vmv1r.v v9, v0
 603 ; CHECK-NEXT:    vmv1r.v v0, v8
 604 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf8, ta, ma
 605 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 606 ; CHECK-NEXT:    snez a1, a1
 607 ; CHECK-NEXT:    or a0, a1, a0
 608 ; CHECK-NEXT:    ret
 609   %r = call i1 @llvm.vp.reduce.umax.v1i1(i1 %s, <1 x i1> %v, <1 x i1> %m, i32 %evl)
 610   ret i1 %r
 611 }
 612
 613 declare i1 @llvm.vp.reduce.umax.v2i1(i1, <2 x i1>, <2 x i1>, i32)
 614
 615 define zeroext i1 @vpreduce_umax_v2i1(i1 zeroext %s, <2 x i1> %v, <2 x i1> %m, i32 zeroext %evl) {
 616 ; CHECK-LABEL: vpreduce_umax_v2i1:
 617 ; CHECK:       # %bb.0:
 618 ; CHECK-NEXT:    vmv1r.v v9, v0
 619 ; CHECK-NEXT:    vmv1r.v v0, v8
 620 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf8, ta, ma
 621 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 622 ; CHECK-NEXT:    snez a1, a1
 623 ; CHECK-NEXT:    or a0, a1, a0
 624 ; CHECK-NEXT:    ret
 625   %r = call i1 @llvm.vp.reduce.umax.v2i1(i1 %s, <2 x i1> %v, <2 x i1> %m, i32 %evl)
 626   ret i1 %r
 627 }
 628
 629 declare i1 @llvm.vp.reduce.umax.v4i1(i1, <4 x i1>, <4 x i1>, i32)
 630
 631 define zeroext i1 @vpreduce_umax_v4i1(i1 zeroext %s, <4 x i1> %v, <4 x i1> %m, i32 zeroext %evl) {
 632 ; CHECK-LABEL: vpreduce_umax_v4i1:
 633 ; CHECK:       # %bb.0:
 634 ; CHECK-NEXT:    vmv1r.v v9, v0
 635 ; CHECK-NEXT:    vmv1r.v v0, v8
 636 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf4, ta, ma
 637 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 638 ; CHECK-NEXT:    snez a1, a1
 639 ; CHECK-NEXT:    or a0, a1, a0
 640 ; CHECK-NEXT:    ret
 641   %r = call i1 @llvm.vp.reduce.umax.v4i1(i1 %s, <4 x i1> %v, <4 x i1> %m, i32 %evl)
 642   ret i1 %r
 643 }
 644
 645 declare i1 @llvm.vp.reduce.umax.v8i1(i1, <8 x i1>, <8 x i1>, i32)
 646
 647 define zeroext i1 @vpreduce_umax_v8i1(i1 zeroext %s, <8 x i1> %v, <8 x i1> %m, i32 zeroext %evl) {
 648 ; CHECK-LABEL: vpreduce_umax_v8i1:
 649 ; CHECK:       # %bb.0:
 650 ; CHECK-NEXT:    vmv1r.v v9, v0
 651 ; CHECK-NEXT:    vmv1r.v v0, v8
 652 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf2, ta, ma
 653 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 654 ; CHECK-NEXT:    snez a1, a1
 655 ; CHECK-NEXT:    or a0, a1, a0
 656 ; CHECK-NEXT:    ret
 657   %r = call i1 @llvm.vp.reduce.umax.v8i1(i1 %s, <8 x i1> %v, <8 x i1> %m, i32 %evl)
 658   ret i1 %r
 659 }
 660
 661 declare i1 @llvm.vp.reduce.umax.v16i1(i1, <16 x i1>, <16 x i1>, i32)
 662
 663 define zeroext i1 @vpreduce_umax_v16i1(i1 zeroext %s, <16 x i1> %v, <16 x i1> %m, i32 zeroext %evl) {
 664 ; CHECK-LABEL: vpreduce_umax_v16i1:
 665 ; CHECK:       # %bb.0:
 666 ; CHECK-NEXT:    vmv1r.v v9, v0
 667 ; CHECK-NEXT:    vmv1r.v v0, v8
 668 ; CHECK-NEXT:    vsetvli zero, a1, e8, m1, ta, ma
 669 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 670 ; CHECK-NEXT:    snez a1, a1
 671 ; CHECK-NEXT:    or a0, a1, a0
 672 ; CHECK-NEXT:    ret
 673   %r = call i1 @llvm.vp.reduce.umax.v16i1(i1 %s, <16 x i1> %v, <16 x i1> %m, i32 %evl)
 674   ret i1 %r
 675 }
 676
 677 declare i1 @llvm.vp.reduce.umax.v32i1(i1, <32 x i1>, <32 x i1>, i32)
 678
 679 define zeroext i1 @vpreduce_umax_v32i1(i1 zeroext %s, <32 x i1> %v, <32 x i1> %m, i32 zeroext %evl) {
 680 ; CHECK-LABEL: vpreduce_umax_v32i1:
 681 ; CHECK:       # %bb.0:
 682 ; CHECK-NEXT:    vmv1r.v v9, v0
 683 ; CHECK-NEXT:    vmv1r.v v0, v8
 684 ; CHECK-NEXT:    vsetvli zero, a1, e8, m2, ta, ma
 685 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 686 ; CHECK-NEXT:    snez a1, a1
 687 ; CHECK-NEXT:    or a0, a1, a0
 688 ; CHECK-NEXT:    ret
 689   %r = call i1 @llvm.vp.reduce.umax.v32i1(i1 %s, <32 x i1> %v, <32 x i1> %m, i32 %evl)
 690   ret i1 %r
 691 }
 692
 693 declare i1 @llvm.vp.reduce.umax.v64i1(i1, <64 x i1>, <64 x i1>, i32)
 694
 695 define zeroext i1 @vpreduce_umax_v64i1(i1 zeroext %s, <64 x i1> %v, <64 x i1> %m, i32 zeroext %evl) {
 696 ; CHECK-LABEL: vpreduce_umax_v64i1:
 697 ; CHECK:       # %bb.0:
 698 ; CHECK-NEXT:    vmv1r.v v9, v0
 699 ; CHECK-NEXT:    vmv1r.v v0, v8
 700 ; CHECK-NEXT:    vsetvli zero, a1, e8, m4, ta, ma
 701 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 702 ; CHECK-NEXT:    snez a1, a1
 703 ; CHECK-NEXT:    or a0, a1, a0
 704 ; CHECK-NEXT:    ret
 705   %r = call i1 @llvm.vp.reduce.umax.v64i1(i1 %s, <64 x i1> %v, <64 x i1> %m, i32 %evl)
 706   ret i1 %r
 707 }
 708
 709 declare i1 @llvm.vp.reduce.umin.v1i1(i1, <1 x i1>, <1 x i1>, i32)
 710
 711 define zeroext i1 @vpreduce_umin_v1i1(i1 zeroext %s, <1 x i1> %v, <1 x i1> %m, i32 zeroext %evl) {
 712 ; CHECK-LABEL: vpreduce_umin_v1i1:
 713 ; CHECK:       # %bb.0:
 714 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf8, ta, ma
 715 ; CHECK-NEXT:    vmnot.m v9, v0
 716 ; CHECK-NEXT:    vmv1r.v v0, v8
 717 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 718 ; CHECK-NEXT:    seqz a1, a1
 719 ; CHECK-NEXT:    and a0, a1, a0
 720 ; CHECK-NEXT:    ret
 721   %r = call i1 @llvm.vp.reduce.umin.v1i1(i1 %s, <1 x i1> %v, <1 x i1> %m, i32 %evl)
 722   ret i1 %r
 723 }
 724
 725 declare i1 @llvm.vp.reduce.umin.v2i1(i1, <2 x i1>, <2 x i1>, i32)
 726
 727 define zeroext i1 @vpreduce_umin_v2i1(i1 zeroext %s, <2 x i1> %v, <2 x i1> %m, i32 zeroext %evl) {
 728 ; CHECK-LABEL: vpreduce_umin_v2i1:
 729 ; CHECK:       # %bb.0:
 730 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf8, ta, ma
 731 ; CHECK-NEXT:    vmnot.m v9, v0
 732 ; CHECK-NEXT:    vmv1r.v v0, v8
 733 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 734 ; CHECK-NEXT:    seqz a1, a1
 735 ; CHECK-NEXT:    and a0, a1, a0
 736 ; CHECK-NEXT:    ret
 737   %r = call i1 @llvm.vp.reduce.umin.v2i1(i1 %s, <2 x i1> %v, <2 x i1> %m, i32 %evl)
 738   ret i1 %r
 739 }
 740
 741 declare i1 @llvm.vp.reduce.umin.v4i1(i1, <4 x i1>, <4 x i1>, i32)
 742
 743 define zeroext i1 @vpreduce_umin_v4i1(i1 zeroext %s, <4 x i1> %v, <4 x i1> %m, i32 zeroext %evl) {
 744 ; CHECK-LABEL: vpreduce_umin_v4i1:
 745 ; CHECK:       # %bb.0:
 746 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf4, ta, ma
 747 ; CHECK-NEXT:    vmnot.m v9, v0
 748 ; CHECK-NEXT:    vmv1r.v v0, v8
 749 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 750 ; CHECK-NEXT:    seqz a1, a1
 751 ; CHECK-NEXT:    and a0, a1, a0
 752 ; CHECK-NEXT:    ret
 753   %r = call i1 @llvm.vp.reduce.umin.v4i1(i1 %s, <4 x i1> %v, <4 x i1> %m, i32 %evl)
 754   ret i1 %r
 755 }
 756
 757 declare i1 @llvm.vp.reduce.umin.v8i1(i1, <8 x i1>, <8 x i1>, i32)
 758
 759 define zeroext i1 @vpreduce_umin_v8i1(i1 zeroext %s, <8 x i1> %v, <8 x i1> %m, i32 zeroext %evl) {
 760 ; CHECK-LABEL: vpreduce_umin_v8i1:
 761 ; CHECK:       # %bb.0:
 762 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf2, ta, ma
 763 ; CHECK-NEXT:    vmnot.m v9, v0
 764 ; CHECK-NEXT:    vmv1r.v v0, v8
 765 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 766 ; CHECK-NEXT:    seqz a1, a1
 767 ; CHECK-NEXT:    and a0, a1, a0
 768 ; CHECK-NEXT:    ret
 769   %r = call i1 @llvm.vp.reduce.umin.v8i1(i1 %s, <8 x i1> %v, <8 x i1> %m, i32 %evl)
 770   ret i1 %r
 771 }
 772
 773 declare i1 @llvm.vp.reduce.umin.v16i1(i1, <16 x i1>, <16 x i1>, i32)
 774
 775 define zeroext i1 @vpreduce_umin_v16i1(i1 zeroext %s, <16 x i1> %v, <16 x i1> %m, i32 zeroext %evl) {
 776 ; CHECK-LABEL: vpreduce_umin_v16i1:
 777 ; CHECK:       # %bb.0:
 778 ; CHECK-NEXT:    vsetvli zero, a1, e8, m1, ta, ma
 779 ; CHECK-NEXT:    vmnot.m v9, v0
 780 ; CHECK-NEXT:    vmv1r.v v0, v8
 781 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 782 ; CHECK-NEXT:    seqz a1, a1
 783 ; CHECK-NEXT:    and a0, a1, a0
 784 ; CHECK-NEXT:    ret
 785   %r = call i1 @llvm.vp.reduce.umin.v16i1(i1 %s, <16 x i1> %v, <16 x i1> %m, i32 %evl)
 786   ret i1 %r
 787 }
 788
 789 declare i1 @llvm.vp.reduce.umin.v32i1(i1, <32 x i1>, <32 x i1>, i32)
 790
 791 define zeroext i1 @vpreduce_umin_v32i1(i1 zeroext %s, <32 x i1> %v, <32 x i1> %m, i32 zeroext %evl) {
 792 ; CHECK-LABEL: vpreduce_umin_v32i1:
 793 ; CHECK:       # %bb.0:
 794 ; CHECK-NEXT:    vsetvli zero, a1, e8, m2, ta, ma
 795 ; CHECK-NEXT:    vmnot.m v9, v0
 796 ; CHECK-NEXT:    vmv1r.v v0, v8
 797 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 798 ; CHECK-NEXT:    seqz a1, a1
 799 ; CHECK-NEXT:    and a0, a1, a0
 800 ; CHECK-NEXT:    ret
 801   %r = call i1 @llvm.vp.reduce.umin.v32i1(i1 %s, <32 x i1> %v, <32 x i1> %m, i32 %evl)
 802   ret i1 %r
 803 }
 804
 805 declare i1 @llvm.vp.reduce.umin.v64i1(i1, <64 x i1>, <64 x i1>, i32)
 806
 807 define zeroext i1 @vpreduce_umin_v64i1(i1 zeroext %s, <64 x i1> %v, <64 x i1> %m, i32 zeroext %evl) {
 808 ; CHECK-LABEL: vpreduce_umin_v64i1:
 809 ; CHECK:       # %bb.0:
 810 ; CHECK-NEXT:    vsetvli zero, a1, e8, m4, ta, ma
 811 ; CHECK-NEXT:    vmnot.m v9, v0
 812 ; CHECK-NEXT:    vmv1r.v v0, v8
 813 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 814 ; CHECK-NEXT:    seqz a1, a1
 815 ; CHECK-NEXT:    and a0, a1, a0
 816 ; CHECK-NEXT:    ret
 817   %r = call i1 @llvm.vp.reduce.umin.v64i1(i1 %s, <64 x i1> %v, <64 x i1> %m, i32 %evl)
 818   ret i1 %r
 819 }
 820
 821 declare i1 @llvm.vp.reduce.mul.v1i1(i1, <1 x i1>, <1 x i1>, i32)
 822
 823 define i1 @vpreduce_mul_v1i1(i1 %s, <1 x i1> %v, <1 x i1> %m, i32 zeroext %evl) {
 824 ; CHECK-LABEL: vpreduce_mul_v1i1:
 825 ; CHECK:       # %bb.0:
 826 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf8, ta, ma
 827 ; CHECK-NEXT:    vmnot.m v9, v0
 828 ; CHECK-NEXT:    vmv1r.v v0, v8
 829 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 830 ; CHECK-NEXT:    seqz a1, a1
 831 ; CHECK-NEXT:    and a0, a1, a0
 832 ; CHECK-NEXT:    ret
 833   %r = call i1 @llvm.vp.reduce.mul.v1i1(i1 %s, <1 x i1> %v, <1 x i1> %m, i32 %evl)
 834   ret i1 %r
 835 }
 836
 837 declare i1 @llvm.vp.reduce.mul.v2i1(i1, <2 x i1>, <2 x i1>, i32)
 838
 839 define zeroext i1 @vpreduce_mul_v2i1(i1 zeroext %s, <2 x i1> %v, <2 x i1> %m, i32 zeroext %evl) {
 840 ; CHECK-LABEL: vpreduce_mul_v2i1:
 841 ; CHECK:       # %bb.0:
 842 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf8, ta, ma
 843 ; CHECK-NEXT:    vmnot.m v9, v0
 844 ; CHECK-NEXT:    vmv1r.v v0, v8
 845 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 846 ; CHECK-NEXT:    seqz a1, a1
 847 ; CHECK-NEXT:    and a0, a1, a0
 848 ; CHECK-NEXT:    ret
 849   %r = call i1 @llvm.vp.reduce.mul.v2i1(i1 %s, <2 x i1> %v, <2 x i1> %m, i32 %evl)
 850   ret i1 %r
 851 }
 852
 853 declare i1 @llvm.vp.reduce.mul.v4i1(i1, <4 x i1>, <4 x i1>, i32)
 854
 855 define zeroext i1 @vpreduce_mul_v4i1(i1 zeroext %s, <4 x i1> %v, <4 x i1> %m, i32 zeroext %evl) {
 856 ; CHECK-LABEL: vpreduce_mul_v4i1:
 857 ; CHECK:       # %bb.0:
 858 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf4, ta, ma
 859 ; CHECK-NEXT:    vmnot.m v9, v0
 860 ; CHECK-NEXT:    vmv1r.v v0, v8
 861 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 862 ; CHECK-NEXT:    seqz a1, a1
 863 ; CHECK-NEXT:    and a0, a1, a0
 864 ; CHECK-NEXT:    ret
 865   %r = call i1 @llvm.vp.reduce.mul.v4i1(i1 %s, <4 x i1> %v, <4 x i1> %m, i32 %evl)
 866   ret i1 %r
 867 }
 868
 869 declare i1 @llvm.vp.reduce.mul.v8i1(i1, <8 x i1>, <8 x i1>, i32)
 870
 871 define zeroext i1 @vpreduce_mul_v8i1(i1 zeroext %s, <8 x i1> %v, <8 x i1> %m, i32 zeroext %evl) {
 872 ; CHECK-LABEL: vpreduce_mul_v8i1:
 873 ; CHECK:       # %bb.0:
 874 ; CHECK-NEXT:    vsetvli zero, a1, e8, mf2, ta, ma
 875 ; CHECK-NEXT:    vmnot.m v9, v0
 876 ; CHECK-NEXT:    vmv1r.v v0, v8
 877 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 878 ; CHECK-NEXT:    seqz a1, a1
 879 ; CHECK-NEXT:    and a0, a1, a0
 880 ; CHECK-NEXT:    ret
 881   %r = call i1 @llvm.vp.reduce.mul.v8i1(i1 %s, <8 x i1> %v, <8 x i1> %m, i32 %evl)
 882   ret i1 %r
 883 }
 884
 885 declare i1 @llvm.vp.reduce.mul.v16i1(i1, <16 x i1>, <16 x i1>, i32)
 886
 887 define zeroext i1 @vpreduce_mul_v16i1(i1 zeroext %s, <16 x i1> %v, <16 x i1> %m, i32 zeroext %evl) {
 888 ; CHECK-LABEL: vpreduce_mul_v16i1:
 889 ; CHECK:       # %bb.0:
 890 ; CHECK-NEXT:    vsetvli zero, a1, e8, m1, ta, ma
 891 ; CHECK-NEXT:    vmnot.m v9, v0
 892 ; CHECK-NEXT:    vmv1r.v v0, v8
 893 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 894 ; CHECK-NEXT:    seqz a1, a1
 895 ; CHECK-NEXT:    and a0, a1, a0
 896 ; CHECK-NEXT:    ret
 897   %r = call i1 @llvm.vp.reduce.mul.v16i1(i1 %s, <16 x i1> %v, <16 x i1> %m, i32 %evl)
 898   ret i1 %r
 899 }
 900
 901 declare i1 @llvm.vp.reduce.mul.v32i1(i1, <32 x i1>, <32 x i1>, i32)
 902
 903 define zeroext i1 @vpreduce_mul_v32i1(i1 zeroext %s, <32 x i1> %v, <32 x i1> %m, i32 zeroext %evl) {
 904 ; CHECK-LABEL: vpreduce_mul_v32i1:
 905 ; CHECK:       # %bb.0:
 906 ; CHECK-NEXT:    vsetvli zero, a1, e8, m2, ta, ma
 907 ; CHECK-NEXT:    vmnot.m v9, v0
 908 ; CHECK-NEXT:    vmv1r.v v0, v8
 909 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 910 ; CHECK-NEXT:    seqz a1, a1
 911 ; CHECK-NEXT:    and a0, a1, a0
 912 ; CHECK-NEXT:    ret
 913   %r = call i1 @llvm.vp.reduce.mul.v32i1(i1 %s, <32 x i1> %v, <32 x i1> %m, i32 %evl)
 914   ret i1 %r
 915 }
 916
 917 declare i1 @llvm.vp.reduce.mul.v64i1(i1, <64 x i1>, <64 x i1>, i32)
 918
 919 define zeroext i1 @vpreduce_mul_v64i1(i1 zeroext %s, <64 x i1> %v, <64 x i1> %m, i32 zeroext %evl) {
 920 ; CHECK-LABEL: vpreduce_mul_v64i1:
 921 ; CHECK:       # %bb.0:
 922 ; CHECK-NEXT:    vsetvli zero, a1, e8, m4, ta, ma
 923 ; CHECK-NEXT:    vmnot.m v9, v0
 924 ; CHECK-NEXT:    vmv1r.v v0, v8
 925 ; CHECK-NEXT:    vcpop.m a1, v9, v0.t
 926 ; CHECK-NEXT:    seqz a1, a1
 927 ; CHECK-NEXT:    and a0, a1, a0
 928 ; CHECK-NEXT:    ret
 929   %r = call i1 @llvm.vp.reduce.mul.v64i1(i1 %s, <64 x i1> %v, <64 x i1> %m, i32 %evl)
 930   ret i1 %r
 931 }