llvm/test/CodeGen/PowerPC/sat-add.ll

   1 ; NOTE: Assertions have been autogenerated by utils/update_llc_test_checks.py
   2 ; RUN: llc < %s -mtriple=powerpc64le-- -verify-machineinstrs | FileCheck %s
   3
   4 ; There are at least 3 potential patterns corresponding to an unsigned saturated add: min, cmp with sum, cmp with not.
   5 ; Test each of those patterns with i8/i16/i32/i64.
   6 ; Test each of those with a constant operand and a variable operand.
   7 ; Test each of those with a 128-bit vector type.
   8
   9 define i8 @unsigned_sat_constant_i8_using_min(i8 %x) {
  10 ; CHECK-LABEL: unsigned_sat_constant_i8_using_min:
  11 ; CHECK:       # %bb.0:
  12 ; CHECK-NEXT:    clrlwi 4, 3, 24
  13 ; CHECK-NEXT:    cmplwi 4, 213
  14 ; CHECK-NEXT:    li 4, -43
  15 ; CHECK-NEXT:    isellt 3, 3, 4
  16 ; CHECK-NEXT:    addi 3, 3, 42
  17 ; CHECK-NEXT:    blr
  18   %c = icmp ult i8 %x, -43
  19   %s = select i1 %c, i8 %x, i8 -43
  20   %r = add i8 %s, 42
  21   ret i8 %r
  22 }
  23
  24 define i8 @unsigned_sat_constant_i8_using_cmp_sum(i8 %x) {
  25 ; CHECK-LABEL: unsigned_sat_constant_i8_using_cmp_sum:
  26 ; CHECK:       # %bb.0:
  27 ; CHECK-NEXT:    clrlwi 3, 3, 24
  28 ; CHECK-NEXT:    addi 3, 3, 42
  29 ; CHECK-NEXT:    andi. 4, 3, 256
  30 ; CHECK-NEXT:    li 4, -1
  31 ; CHECK-NEXT:    iseleq 3, 3, 4
  32 ; CHECK-NEXT:    blr
  33   %a = add i8 %x, 42
  34   %c = icmp ugt i8 %x, %a
  35   %r = select i1 %c, i8 -1, i8 %a
  36   ret i8 %r
  37 }
  38
  39 define i8 @unsigned_sat_constant_i8_using_cmp_notval(i8 %x) {
  40 ; CHECK-LABEL: unsigned_sat_constant_i8_using_cmp_notval:
  41 ; CHECK:       # %bb.0:
  42 ; CHECK-NEXT:    clrlwi 4, 3, 24
  43 ; CHECK-NEXT:    addi 3, 3, 42
  44 ; CHECK-NEXT:    cmplwi 4, 213
  45 ; CHECK-NEXT:    li 4, -1
  46 ; CHECK-NEXT:    iselgt 3, 4, 3
  47 ; CHECK-NEXT:    blr
  48   %a = add i8 %x, 42
  49   %c = icmp ugt i8 %x, -43
  50   %r = select i1 %c, i8 -1, i8 %a
  51   ret i8 %r
  52 }
  53
  54 define i16 @unsigned_sat_constant_i16_using_min(i16 %x) {
  55 ; CHECK-LABEL: unsigned_sat_constant_i16_using_min:
  56 ; CHECK:       # %bb.0:
  57 ; CHECK-NEXT:    clrlwi 4, 3, 16
  58 ; CHECK-NEXT:    cmplwi 4, 65493
  59 ; CHECK-NEXT:    li 4, -43
  60 ; CHECK-NEXT:    isellt 3, 3, 4
  61 ; CHECK-NEXT:    addi 3, 3, 42
  62 ; CHECK-NEXT:    blr
  63   %c = icmp ult i16 %x, -43
  64   %s = select i1 %c, i16 %x, i16 -43
  65   %r = add i16 %s, 42
  66   ret i16 %r
  67 }
  68
  69 define i16 @unsigned_sat_constant_i16_using_cmp_sum(i16 %x) {
  70 ; CHECK-LABEL: unsigned_sat_constant_i16_using_cmp_sum:
  71 ; CHECK:       # %bb.0:
  72 ; CHECK-NEXT:    clrlwi 3, 3, 16
  73 ; CHECK-NEXT:    addi 3, 3, 42
  74 ; CHECK-NEXT:    andis. 4, 3, 1
  75 ; CHECK-NEXT:    li 4, -1
  76 ; CHECK-NEXT:    iseleq 3, 3, 4
  77 ; CHECK-NEXT:    blr
  78   %a = add i16 %x, 42
  79   %c = icmp ugt i16 %x, %a
  80   %r = select i1 %c, i16 -1, i16 %a
  81   ret i16 %r
  82 }
  83
  84 define i16 @unsigned_sat_constant_i16_using_cmp_notval(i16 %x) {
  85 ; CHECK-LABEL: unsigned_sat_constant_i16_using_cmp_notval:
  86 ; CHECK:       # %bb.0:
  87 ; CHECK-NEXT:    clrlwi 4, 3, 16
  88 ; CHECK-NEXT:    addi 3, 3, 42
  89 ; CHECK-NEXT:    cmplwi 4, 65493
  90 ; CHECK-NEXT:    li 4, -1
  91 ; CHECK-NEXT:    iselgt 3, 4, 3
  92 ; CHECK-NEXT:    blr
  93   %a = add i16 %x, 42
  94   %c = icmp ugt i16 %x, -43
  95   %r = select i1 %c, i16 -1, i16 %a
  96   ret i16 %r
  97 }
  98
  99 define i32 @unsigned_sat_constant_i32_using_min(i32 %x) {
 100 ; CHECK-LABEL: unsigned_sat_constant_i32_using_min:
 101 ; CHECK:       # %bb.0:
 102 ; CHECK-NEXT:    li 4, -43
 103 ; CHECK-NEXT:    cmplw 3, 4
 104 ; CHECK-NEXT:    isellt 3, 3, 4
 105 ; CHECK-NEXT:    addi 3, 3, 42
 106 ; CHECK-NEXT:    blr
 107   %c = icmp ult i32 %x, -43
 108   %s = select i1 %c, i32 %x, i32 -43
 109   %r = add i32 %s, 42
 110   ret i32 %r
 111 }
 112
 113 define i32 @unsigned_sat_constant_i32_using_cmp_sum(i32 %x) {
 114 ; CHECK-LABEL: unsigned_sat_constant_i32_using_cmp_sum:
 115 ; CHECK:       # %bb.0:
 116 ; CHECK-NEXT:    addi 4, 3, 42
 117 ; CHECK-NEXT:    cmplw 4, 3
 118 ; CHECK-NEXT:    li 3, -1
 119 ; CHECK-NEXT:    isellt 3, 3, 4
 120 ; CHECK-NEXT:    blr
 121   %a = add i32 %x, 42
 122   %c = icmp ugt i32 %x, %a
 123   %r = select i1 %c, i32 -1, i32 %a
 124   ret i32 %r
 125 }
 126
 127 define i32 @unsigned_sat_constant_i32_using_cmp_notval(i32 %x) {
 128 ; CHECK-LABEL: unsigned_sat_constant_i32_using_cmp_notval:
 129 ; CHECK:       # %bb.0:
 130 ; CHECK-NEXT:    li 5, -43
 131 ; CHECK-NEXT:    addi 4, 3, 42
 132 ; CHECK-NEXT:    cmplw 3, 5
 133 ; CHECK-NEXT:    li 3, -1
 134 ; CHECK-NEXT:    iselgt 3, 3, 4
 135 ; CHECK-NEXT:    blr
 136   %a = add i32 %x, 42
 137   %c = icmp ugt i32 %x, -43
 138   %r = select i1 %c, i32 -1, i32 %a
 139   ret i32 %r
 140 }
 141
 142 define i64 @unsigned_sat_constant_i64_using_min(i64 %x) {
 143 ; CHECK-LABEL: unsigned_sat_constant_i64_using_min:
 144 ; CHECK:       # %bb.0:
 145 ; CHECK-NEXT:    li 4, -43
 146 ; CHECK-NEXT:    cmpld 3, 4
 147 ; CHECK-NEXT:    isellt 3, 3, 4
 148 ; CHECK-NEXT:    addi 3, 3, 42
 149 ; CHECK-NEXT:    blr
 150   %c = icmp ult i64 %x, -43
 151   %s = select i1 %c, i64 %x, i64 -43
 152   %r = add i64 %s, 42
 153   ret i64 %r
 154 }
 155
 156 define i64 @unsigned_sat_constant_i64_using_cmp_sum(i64 %x) {
 157 ; CHECK-LABEL: unsigned_sat_constant_i64_using_cmp_sum:
 158 ; CHECK:       # %bb.0:
 159 ; CHECK-NEXT:    addi 4, 3, 42
 160 ; CHECK-NEXT:    cmpld 4, 3
 161 ; CHECK-NEXT:    li 3, -1
 162 ; CHECK-NEXT:    isellt 3, 3, 4
 163 ; CHECK-NEXT:    blr
 164   %a = add i64 %x, 42
 165   %c = icmp ugt i64 %x, %a
 166   %r = select i1 %c, i64 -1, i64 %a
 167   ret i64 %r
 168 }
 169
 170 define i64 @unsigned_sat_constant_i64_using_cmp_notval(i64 %x) {
 171 ; CHECK-LABEL: unsigned_sat_constant_i64_using_cmp_notval:
 172 ; CHECK:       # %bb.0:
 173 ; CHECK-NEXT:    li 5, -43
 174 ; CHECK-NEXT:    addi 4, 3, 42
 175 ; CHECK-NEXT:    cmpld 3, 5
 176 ; CHECK-NEXT:    li 3, -1
 177 ; CHECK-NEXT:    iselgt 3, 3, 4
 178 ; CHECK-NEXT:    blr
 179   %a = add i64 %x, 42
 180   %c = icmp ugt i64 %x, -43
 181   %r = select i1 %c, i64 -1, i64 %a
 182   ret i64 %r
 183 }
 184
 185 define i8 @unsigned_sat_variable_i8_using_min(i8 %x, i8 %y) {
 186 ; CHECK-LABEL: unsigned_sat_variable_i8_using_min:
 187 ; CHECK:       # %bb.0:
 188 ; CHECK-NEXT:    not 6, 4
 189 ; CHECK-NEXT:    clrlwi 5, 3, 24
 190 ; CHECK-NEXT:    clrlwi 7, 6, 24
 191 ; CHECK-NEXT:    cmplw 5, 7
 192 ; CHECK-NEXT:    isellt 3, 3, 6
 193 ; CHECK-NEXT:    add 3, 3, 4
 194 ; CHECK-NEXT:    blr
 195   %noty = xor i8 %y, -1
 196   %c = icmp ult i8 %x, %noty
 197   %s = select i1 %c, i8 %x, i8 %noty
 198   %r = add i8 %s, %y
 199   ret i8 %r
 200 }
 201
 202 define i8 @unsigned_sat_variable_i8_using_cmp_sum(i8 %x, i8 %y) {
 203 ; CHECK-LABEL: unsigned_sat_variable_i8_using_cmp_sum:
 204 ; CHECK:       # %bb.0:
 205 ; CHECK-NEXT:    clrlwi 4, 4, 24
 206 ; CHECK-NEXT:    clrlwi 3, 3, 24
 207 ; CHECK-NEXT:    add 3, 3, 4
 208 ; CHECK-NEXT:    andi. 4, 3, 256
 209 ; CHECK-NEXT:    li 4, -1
 210 ; CHECK-NEXT:    iseleq 3, 3, 4
 211 ; CHECK-NEXT:    blr
 212   %a = add i8 %x, %y
 213   %c = icmp ugt i8 %x, %a
 214   %r = select i1 %c, i8 -1, i8 %a
 215   ret i8 %r
 216 }
 217
 218 define i8 @unsigned_sat_variable_i8_using_cmp_notval(i8 %x, i8 %y) {
 219 ; CHECK-LABEL: unsigned_sat_variable_i8_using_cmp_notval:
 220 ; CHECK:       # %bb.0:
 221 ; CHECK-NEXT:    not 6, 4
 222 ; CHECK-NEXT:    clrlwi 5, 3, 24
 223 ; CHECK-NEXT:    add 3, 3, 4
 224 ; CHECK-NEXT:    li 4, -1
 225 ; CHECK-NEXT:    clrlwi 6, 6, 24
 226 ; CHECK-NEXT:    cmplw 5, 6
 227 ; CHECK-NEXT:    iselgt 3, 4, 3
 228 ; CHECK-NEXT:    blr
 229   %noty = xor i8 %y, -1
 230   %a = add i8 %x, %y
 231   %c = icmp ugt i8 %x, %noty
 232   %r = select i1 %c, i8 -1, i8 %a
 233   ret i8 %r
 234 }
 235
 236 define i16 @unsigned_sat_variable_i16_using_min(i16 %x, i16 %y) {
 237 ; CHECK-LABEL: unsigned_sat_variable_i16_using_min:
 238 ; CHECK:       # %bb.0:
 239 ; CHECK-NEXT:    not 6, 4
 240 ; CHECK-NEXT:    clrlwi 5, 3, 16
 241 ; CHECK-NEXT:    clrlwi 7, 6, 16
 242 ; CHECK-NEXT:    cmplw 5, 7
 243 ; CHECK-NEXT:    isellt 3, 3, 6
 244 ; CHECK-NEXT:    add 3, 3, 4
 245 ; CHECK-NEXT:    blr
 246   %noty = xor i16 %y, -1
 247   %c = icmp ult i16 %x, %noty
 248   %s = select i1 %c, i16 %x, i16 %noty
 249   %r = add i16 %s, %y
 250   ret i16 %r
 251 }
 252
 253 define i16 @unsigned_sat_variable_i16_using_cmp_sum(i16 %x, i16 %y) {
 254 ; CHECK-LABEL: unsigned_sat_variable_i16_using_cmp_sum:
 255 ; CHECK:       # %bb.0:
 256 ; CHECK-NEXT:    clrlwi 4, 4, 16
 257 ; CHECK-NEXT:    clrlwi 3, 3, 16
 258 ; CHECK-NEXT:    add 3, 3, 4
 259 ; CHECK-NEXT:    andis. 4, 3, 1
 260 ; CHECK-NEXT:    li 4, -1
 261 ; CHECK-NEXT:    iseleq 3, 3, 4
 262 ; CHECK-NEXT:    blr
 263   %a = add i16 %x, %y
 264   %c = icmp ugt i16 %x, %a
 265   %r = select i1 %c, i16 -1, i16 %a
 266   ret i16 %r
 267 }
 268
 269 define i16 @unsigned_sat_variable_i16_using_cmp_notval(i16 %x, i16 %y) {
 270 ; CHECK-LABEL: unsigned_sat_variable_i16_using_cmp_notval:
 271 ; CHECK:       # %bb.0:
 272 ; CHECK-NEXT:    not 6, 4
 273 ; CHECK-NEXT:    clrlwi 5, 3, 16
 274 ; CHECK-NEXT:    add 3, 3, 4
 275 ; CHECK-NEXT:    li 4, -1
 276 ; CHECK-NEXT:    clrlwi 6, 6, 16
 277 ; CHECK-NEXT:    cmplw 5, 6
 278 ; CHECK-NEXT:    iselgt 3, 4, 3
 279 ; CHECK-NEXT:    blr
 280   %noty = xor i16 %y, -1
 281   %a = add i16 %x, %y
 282   %c = icmp ugt i16 %x, %noty
 283   %r = select i1 %c, i16 -1, i16 %a
 284   ret i16 %r
 285 }
 286
 287 define i32 @unsigned_sat_variable_i32_using_min(i32 %x, i32 %y) {
 288 ; CHECK-LABEL: unsigned_sat_variable_i32_using_min:
 289 ; CHECK:       # %bb.0:
 290 ; CHECK-NEXT:    not 5, 4
 291 ; CHECK-NEXT:    cmplw 3, 5
 292 ; CHECK-NEXT:    isellt 3, 3, 5
 293 ; CHECK-NEXT:    add 3, 3, 4
 294 ; CHECK-NEXT:    blr
 295   %noty = xor i32 %y, -1
 296   %c = icmp ult i32 %x, %noty
 297   %s = select i1 %c, i32 %x, i32 %noty
 298   %r = add i32 %s, %y
 299   ret i32 %r
 300 }
 301
 302 define i32 @unsigned_sat_variable_i32_using_cmp_sum(i32 %x, i32 %y) {
 303 ; CHECK-LABEL: unsigned_sat_variable_i32_using_cmp_sum:
 304 ; CHECK:       # %bb.0:
 305 ; CHECK-NEXT:    add 4, 3, 4
 306 ; CHECK-NEXT:    cmplw 4, 3
 307 ; CHECK-NEXT:    li 3, -1
 308 ; CHECK-NEXT:    isellt 3, 3, 4
 309 ; CHECK-NEXT:    blr
 310   %a = add i32 %x, %y
 311   %c = icmp ugt i32 %x, %a
 312   %r = select i1 %c, i32 -1, i32 %a
 313   ret i32 %r
 314 }
 315
 316 define i32 @unsigned_sat_variable_i32_using_cmp_notval(i32 %x, i32 %y) {
 317 ; CHECK-LABEL: unsigned_sat_variable_i32_using_cmp_notval:
 318 ; CHECK:       # %bb.0:
 319 ; CHECK-NEXT:    not 5, 4
 320 ; CHECK-NEXT:    add 4, 3, 4
 321 ; CHECK-NEXT:    cmplw 3, 5
 322 ; CHECK-NEXT:    li 3, -1
 323 ; CHECK-NEXT:    iselgt 3, 3, 4
 324 ; CHECK-NEXT:    blr
 325   %noty = xor i32 %y, -1
 326   %a = add i32 %x, %y
 327   %c = icmp ugt i32 %x, %noty
 328   %r = select i1 %c, i32 -1, i32 %a
 329   ret i32 %r
 330 }
 331
 332 define i64 @unsigned_sat_variable_i64_using_min(i64 %x, i64 %y) {
 333 ; CHECK-LABEL: unsigned_sat_variable_i64_using_min:
 334 ; CHECK:       # %bb.0:
 335 ; CHECK-NEXT:    not 5, 4
 336 ; CHECK-NEXT:    cmpld 3, 5
 337 ; CHECK-NEXT:    isellt 3, 3, 5
 338 ; CHECK-NEXT:    add 3, 3, 4
 339 ; CHECK-NEXT:    blr
 340   %noty = xor i64 %y, -1
 341   %c = icmp ult i64 %x, %noty
 342   %s = select i1 %c, i64 %x, i64 %noty
 343   %r = add i64 %s, %y
 344   ret i64 %r
 345 }
 346
 347 define i64 @unsigned_sat_variable_i64_using_cmp_sum(i64 %x, i64 %y) {
 348 ; CHECK-LABEL: unsigned_sat_variable_i64_using_cmp_sum:
 349 ; CHECK:       # %bb.0:
 350 ; CHECK-NEXT:    add 4, 3, 4
 351 ; CHECK-NEXT:    cmpld 4, 3
 352 ; CHECK-NEXT:    li 3, -1
 353 ; CHECK-NEXT:    isellt 3, 3, 4
 354 ; CHECK-NEXT:    blr
 355   %a = add i64 %x, %y
 356   %c = icmp ugt i64 %x, %a
 357   %r = select i1 %c, i64 -1, i64 %a
 358   ret i64 %r
 359 }
 360
 361 define i64 @unsigned_sat_variable_i64_using_cmp_notval(i64 %x, i64 %y) {
 362 ; CHECK-LABEL: unsigned_sat_variable_i64_using_cmp_notval:
 363 ; CHECK:       # %bb.0:
 364 ; CHECK-NEXT:    not 5, 4
 365 ; CHECK-NEXT:    add 4, 3, 4
 366 ; CHECK-NEXT:    cmpld 3, 5
 367 ; CHECK-NEXT:    li 3, -1
 368 ; CHECK-NEXT:    iselgt 3, 3, 4
 369 ; CHECK-NEXT:    blr
 370   %noty = xor i64 %y, -1
 371   %a = add i64 %x, %y
 372   %c = icmp ugt i64 %x, %noty
 373   %r = select i1 %c, i64 -1, i64 %a
 374   ret i64 %r
 375 }
 376
 377 define <16 x i8> @unsigned_sat_constant_v16i8_using_min(<16 x i8> %x) {
 378 ; CHECK-LABEL: unsigned_sat_constant_v16i8_using_min:
 379 ; CHECK:       # %bb.0:
 380 ; CHECK-NEXT:    addis 3, 2, .LCPI24_0@toc@ha
 381 ; CHECK-NEXT:    addi 3, 3, .LCPI24_0@toc@l
 382 ; CHECK-NEXT:    lxvd2x 35, 0, 3
 383 ; CHECK-NEXT:    addis 3, 2, .LCPI24_1@toc@ha
 384 ; CHECK-NEXT:    addi 3, 3, .LCPI24_1@toc@l
 385 ; CHECK-NEXT:    vminub 2, 2, 3
 386 ; CHECK-NEXT:    lxvd2x 35, 0, 3
 387 ; CHECK-NEXT:    vaddubm 2, 2, 3
 388 ; CHECK-NEXT:    blr
 389   %c = icmp ult <16 x i8> %x, <i8 -43, i8 -43, i8 -43, i8 -43, i8 -43, i8 -43, i8 -43, i8 -43, i8 -43, i8 -43, i8 -43, i8 -43, i8 -43, i8 -43, i8 -43, i8 -43>
 390   %s = select <16 x i1> %c, <16 x i8> %x, <16 x i8> <i8 -43, i8 -43, i8 -43, i8 -43, i8 -43, i8 -43, i8 -43, i8 -43, i8 -43, i8 -43, i8 -43, i8 -43, i8 -43, i8 -43, i8 -43, i8 -43>
 391   %r = add <16 x i8> %s, <i8 42, i8 42, i8 42, i8 42, i8 42, i8 42, i8 42, i8 42, i8 42, i8 42, i8 42, i8 42, i8 42, i8 42, i8 42, i8 42>
 392   ret <16 x i8> %r
 393 }
 394
 395 define <16 x i8> @unsigned_sat_constant_v16i8_using_cmp_sum(<16 x i8> %x) {
 396 ; CHECK-LABEL: unsigned_sat_constant_v16i8_using_cmp_sum:
 397 ; CHECK:       # %bb.0:
 398 ; CHECK-NEXT:    addis 3, 2, .LCPI25_0@toc@ha
 399 ; CHECK-NEXT:    addi 3, 3, .LCPI25_0@toc@l
 400 ; CHECK-NEXT:    lxvd2x 35, 0, 3
 401 ; CHECK-NEXT:    vaddubs 2, 2, 3
 402 ; CHECK-NEXT:    blr
 403   %a = add <16 x i8> %x, <i8 42, i8 42, i8 42, i8 42, i8 42, i8 42, i8 42, i8 42, i8 42, i8 42, i8 42, i8 42, i8 42, i8 42, i8 42, i8 42>
 404   %c = icmp ugt <16 x i8> %x, %a
 405   %r = select <16 x i1> %c, <16 x i8> <i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1>, <16 x i8> %a
 406   ret <16 x i8> %r
 407 }
 408
 409 define <16 x i8> @unsigned_sat_constant_v16i8_using_cmp_notval(<16 x i8> %x) {
 410 ; CHECK-LABEL: unsigned_sat_constant_v16i8_using_cmp_notval:
 411 ; CHECK:       # %bb.0:
 412 ; CHECK-NEXT:    addis 3, 2, .LCPI26_0@toc@ha
 413 ; CHECK-NEXT:    addi 3, 3, .LCPI26_0@toc@l
 414 ; CHECK-NEXT:    lxvd2x 35, 0, 3
 415 ; CHECK-NEXT:    vaddubs 2, 2, 3
 416 ; CHECK-NEXT:    blr
 417   %a = add <16 x i8> %x, <i8 42, i8 42, i8 42, i8 42, i8 42, i8 42, i8 42, i8 42, i8 42, i8 42, i8 42, i8 42, i8 42, i8 42, i8 42, i8 42>
 418   %c = icmp ugt <16 x i8> %x, <i8 -43, i8 -43, i8 -43, i8 -43, i8 -43, i8 -43, i8 -43, i8 -43, i8 -43, i8 -43, i8 -43, i8 -43, i8 -43, i8 -43, i8 -43, i8 -43>
 419   %r = select <16 x i1> %c, <16 x i8> <i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1>, <16 x i8> %a
 420   ret <16 x i8> %r
 421 }
 422
 423 define <8 x i16> @unsigned_sat_constant_v8i16_using_min(<8 x i16> %x) {
 424 ; CHECK-LABEL: unsigned_sat_constant_v8i16_using_min:
 425 ; CHECK:       # %bb.0:
 426 ; CHECK-NEXT:    addis 3, 2, .LCPI27_0@toc@ha
 427 ; CHECK-NEXT:    addi 3, 3, .LCPI27_0@toc@l
 428 ; CHECK-NEXT:    lxvd2x 35, 0, 3
 429 ; CHECK-NEXT:    addis 3, 2, .LCPI27_1@toc@ha
 430 ; CHECK-NEXT:    addi 3, 3, .LCPI27_1@toc@l
 431 ; CHECK-NEXT:    vminuh 2, 2, 3
 432 ; CHECK-NEXT:    lxvd2x 35, 0, 3
 433 ; CHECK-NEXT:    vadduhm 2, 2, 3
 434 ; CHECK-NEXT:    blr
 435   %c = icmp ult <8 x i16> %x, <i16 -43, i16 -43, i16 -43, i16 -43, i16 -43, i16 -43, i16 -43, i16 -43>
 436   %s = select <8 x i1> %c, <8 x i16> %x, <8 x i16> <i16 -43, i16 -43, i16 -43, i16 -43, i16 -43, i16 -43, i16 -43, i16 -43>
 437   %r = add <8 x i16> %s, <i16 42, i16 42, i16 42, i16 42, i16 42, i16 42, i16 42, i16 42>
 438   ret <8 x i16> %r
 439 }
 440
 441 define <8 x i16> @unsigned_sat_constant_v8i16_using_cmp_sum(<8 x i16> %x) {
 442 ; CHECK-LABEL: unsigned_sat_constant_v8i16_using_cmp_sum:
 443 ; CHECK:       # %bb.0:
 444 ; CHECK-NEXT:    addis 3, 2, .LCPI28_0@toc@ha
 445 ; CHECK-NEXT:    addi 3, 3, .LCPI28_0@toc@l
 446 ; CHECK-NEXT:    lxvd2x 35, 0, 3
 447 ; CHECK-NEXT:    vadduhs 2, 2, 3
 448 ; CHECK-NEXT:    blr
 449   %a = add <8 x i16> %x, <i16 42, i16 42, i16 42, i16 42, i16 42, i16 42, i16 42, i16 42>
 450   %c = icmp ugt <8 x i16> %x, %a
 451   %r = select <8 x i1> %c, <8 x i16> <i16 -1, i16 -1, i16 -1, i16 -1, i16 -1, i16 -1, i16 -1, i16 -1>, <8 x i16> %a
 452   ret <8 x i16> %r
 453 }
 454
 455 define <8 x i16> @unsigned_sat_constant_v8i16_using_cmp_notval(<8 x i16> %x) {
 456 ; CHECK-LABEL: unsigned_sat_constant_v8i16_using_cmp_notval:
 457 ; CHECK:       # %bb.0:
 458 ; CHECK-NEXT:    addis 3, 2, .LCPI29_0@toc@ha
 459 ; CHECK-NEXT:    addi 3, 3, .LCPI29_0@toc@l
 460 ; CHECK-NEXT:    lxvd2x 35, 0, 3
 461 ; CHECK-NEXT:    vadduhs 2, 2, 3
 462 ; CHECK-NEXT:    blr
 463   %a = add <8 x i16> %x, <i16 42, i16 42, i16 42, i16 42, i16 42, i16 42, i16 42, i16 42>
 464   %c = icmp ugt <8 x i16> %x, <i16 -43, i16 -43, i16 -43, i16 -43, i16 -43, i16 -43, i16 -43, i16 -43>
 465   %r = select <8 x i1> %c, <8 x i16> <i16 -1, i16 -1, i16 -1, i16 -1, i16 -1, i16 -1, i16 -1, i16 -1>, <8 x i16> %a
 466   ret <8 x i16> %r
 467 }
 468
 469 define <4 x i32> @unsigned_sat_constant_v4i32_using_min(<4 x i32> %x) {
 470 ; CHECK-LABEL: unsigned_sat_constant_v4i32_using_min:
 471 ; CHECK:       # %bb.0:
 472 ; CHECK-NEXT:    addis 3, 2, .LCPI30_0@toc@ha
 473 ; CHECK-NEXT:    addi 3, 3, .LCPI30_0@toc@l
 474 ; CHECK-NEXT:    lxvd2x 35, 0, 3
 475 ; CHECK-NEXT:    addis 3, 2, .LCPI30_1@toc@ha
 476 ; CHECK-NEXT:    addi 3, 3, .LCPI30_1@toc@l
 477 ; CHECK-NEXT:    vminuw 2, 2, 3
 478 ; CHECK-NEXT:    lxvd2x 35, 0, 3
 479 ; CHECK-NEXT:    vadduwm 2, 2, 3
 480 ; CHECK-NEXT:    blr
 481   %c = icmp ult <4 x i32> %x, <i32 -43, i32 -43, i32 -43, i32 -43>
 482   %s = select <4 x i1> %c, <4 x i32> %x, <4 x i32> <i32 -43, i32 -43, i32 -43, i32 -43>
 483   %r = add <4 x i32> %s, <i32 42, i32 42, i32 42, i32 42>
 484   ret <4 x i32> %r
 485 }
 486
 487 define <4 x i32> @unsigned_sat_constant_v4i32_using_cmp_sum(<4 x i32> %x) {
 488 ; CHECK-LABEL: unsigned_sat_constant_v4i32_using_cmp_sum:
 489 ; CHECK:       # %bb.0:
 490 ; CHECK-NEXT:    addis 3, 2, .LCPI31_0@toc@ha
 491 ; CHECK-NEXT:    addi 3, 3, .LCPI31_0@toc@l
 492 ; CHECK-NEXT:    lxvd2x 35, 0, 3
 493 ; CHECK-NEXT:    vadduws 2, 2, 3
 494 ; CHECK-NEXT:    blr
 495   %a = add <4 x i32> %x, <i32 42, i32 42, i32 42, i32 42>
 496   %c = icmp ugt <4 x i32> %x, %a
 497   %r = select <4 x i1> %c, <4 x i32> <i32 -1, i32 -1, i32 -1, i32 -1>, <4 x i32> %a
 498   ret <4 x i32> %r
 499 }
 500
 501 define <4 x i32> @unsigned_sat_constant_v4i32_using_cmp_notval(<4 x i32> %x) {
 502 ; CHECK-LABEL: unsigned_sat_constant_v4i32_using_cmp_notval:
 503 ; CHECK:       # %bb.0:
 504 ; CHECK-NEXT:    addis 3, 2, .LCPI32_0@toc@ha
 505 ; CHECK-NEXT:    addi 3, 3, .LCPI32_0@toc@l
 506 ; CHECK-NEXT:    lxvd2x 35, 0, 3
 507 ; CHECK-NEXT:    vadduws 2, 2, 3
 508 ; CHECK-NEXT:    blr
 509   %a = add <4 x i32> %x, <i32 42, i32 42, i32 42, i32 42>
 510   %c = icmp ugt <4 x i32> %x, <i32 -43, i32 -43, i32 -43, i32 -43>
 511   %r = select <4 x i1> %c, <4 x i32> <i32 -1, i32 -1, i32 -1, i32 -1>, <4 x i32> %a
 512   ret <4 x i32> %r
 513 }
 514
 515 define <2 x i64> @unsigned_sat_constant_v2i64_using_min(<2 x i64> %x) {
 516 ; CHECK-LABEL: unsigned_sat_constant_v2i64_using_min:
 517 ; CHECK:       # %bb.0:
 518 ; CHECK-NEXT:    addis 3, 2, .LCPI33_0@toc@ha
 519 ; CHECK-NEXT:    addi 3, 3, .LCPI33_0@toc@l
 520 ; CHECK-NEXT:    lxvd2x 35, 0, 3
 521 ; CHECK-NEXT:    addis 3, 2, .LCPI33_1@toc@ha
 522 ; CHECK-NEXT:    addi 3, 3, .LCPI33_1@toc@l
 523 ; CHECK-NEXT:    vminud 2, 2, 3
 524 ; CHECK-NEXT:    lxvd2x 35, 0, 3
 525 ; CHECK-NEXT:    vaddudm 2, 2, 3
 526 ; CHECK-NEXT:    blr
 527   %c = icmp ult <2 x i64> %x, <i64 -43, i64 -43>
 528   %s = select <2 x i1> %c, <2 x i64> %x, <2 x i64> <i64 -43, i64 -43>
 529   %r = add <2 x i64> %s, <i64 42, i64 42>
 530   ret <2 x i64> %r
 531 }
 532
 533 define <2 x i64> @unsigned_sat_constant_v2i64_using_cmp_sum(<2 x i64> %x) {
 534 ; CHECK-LABEL: unsigned_sat_constant_v2i64_using_cmp_sum:
 535 ; CHECK:       # %bb.0:
 536 ; CHECK-NEXT:    addis 3, 2, .LCPI34_0@toc@ha
 537 ; CHECK-NEXT:    xxleqv 0, 0, 0
 538 ; CHECK-NEXT:    addi 3, 3, .LCPI34_0@toc@l
 539 ; CHECK-NEXT:    lxvd2x 35, 0, 3
 540 ; CHECK-NEXT:    vaddudm 3, 2, 3
 541 ; CHECK-NEXT:    vcmpgtud 2, 2, 3
 542 ; CHECK-NEXT:    xxsel 34, 35, 0, 34
 543 ; CHECK-NEXT:    blr
 544   %a = add <2 x i64> %x, <i64 42, i64 42>
 545   %c = icmp ugt <2 x i64> %x, %a
 546   %r = select <2 x i1> %c, <2 x i64> <i64 -1, i64 -1>, <2 x i64> %a
 547   ret <2 x i64> %r
 548 }
 549
 550 define <2 x i64> @unsigned_sat_constant_v2i64_using_cmp_notval(<2 x i64> %x) {
 551 ; CHECK-LABEL: unsigned_sat_constant_v2i64_using_cmp_notval:
 552 ; CHECK:       # %bb.0:
 553 ; CHECK-NEXT:    addis 3, 2, .LCPI35_0@toc@ha
 554 ; CHECK-NEXT:    xxleqv 0, 0, 0
 555 ; CHECK-NEXT:    addi 3, 3, .LCPI35_0@toc@l
 556 ; CHECK-NEXT:    lxvd2x 35, 0, 3
 557 ; CHECK-NEXT:    addis 3, 2, .LCPI35_1@toc@ha
 558 ; CHECK-NEXT:    addi 3, 3, .LCPI35_1@toc@l
 559 ; CHECK-NEXT:    lxvd2x 36, 0, 3
 560 ; CHECK-NEXT:    vaddudm 3, 2, 3
 561 ; CHECK-NEXT:    vcmpgtud 2, 2, 4
 562 ; CHECK-NEXT:    xxsel 34, 35, 0, 34
 563 ; CHECK-NEXT:    blr
 564   %a = add <2 x i64> %x, <i64 42, i64 42>
 565   %c = icmp ugt <2 x i64> %x, <i64 -43, i64 -43>
 566   %r = select <2 x i1> %c, <2 x i64> <i64 -1, i64 -1>, <2 x i64> %a
 567   ret <2 x i64> %r
 568 }
 569
 570 define <16 x i8> @unsigned_sat_variable_v16i8_using_min(<16 x i8> %x, <16 x i8> %y) {
 571 ; CHECK-LABEL: unsigned_sat_variable_v16i8_using_min:
 572 ; CHECK:       # %bb.0:
 573 ; CHECK-NEXT:    xxlnor 36, 35, 35
 574 ; CHECK-NEXT:    vminub 2, 2, 4
 575 ; CHECK-NEXT:    vaddubm 2, 2, 3
 576 ; CHECK-NEXT:    blr
 577   %noty = xor <16 x i8> %y, <i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1>
 578   %c = icmp ult <16 x i8> %x, %noty
 579   %s = select <16 x i1> %c, <16 x i8> %x, <16 x i8> %noty
 580   %r = add <16 x i8> %s, %y
 581   ret <16 x i8> %r
 582 }
 583
 584 define <16 x i8> @unsigned_sat_variable_v16i8_using_cmp_sum(<16 x i8> %x, <16 x i8> %y) {
 585 ; CHECK-LABEL: unsigned_sat_variable_v16i8_using_cmp_sum:
 586 ; CHECK:       # %bb.0:
 587 ; CHECK-NEXT:    vaddubs 2, 2, 3
 588 ; CHECK-NEXT:    blr
 589   %a = add <16 x i8> %x, %y
 590   %c = icmp ugt <16 x i8> %x, %a
 591   %r = select <16 x i1> %c, <16 x i8> <i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1>, <16 x i8> %a
 592   ret <16 x i8> %r
 593 }
 594
 595 define <16 x i8> @unsigned_sat_variable_v16i8_using_cmp_notval(<16 x i8> %x, <16 x i8> %y) {
 596 ; CHECK-LABEL: unsigned_sat_variable_v16i8_using_cmp_notval:
 597 ; CHECK:       # %bb.0:
 598 ; CHECK-NEXT:    xxlnor 36, 35, 35
 599 ; CHECK-NEXT:    vaddubm 3, 2, 3
 600 ; CHECK-NEXT:    xxleqv 0, 0, 0
 601 ; CHECK-NEXT:    vcmpgtub 2, 2, 4
 602 ; CHECK-NEXT:    xxsel 34, 35, 0, 34
 603 ; CHECK-NEXT:    blr
 604   %noty = xor <16 x i8> %y, <i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1>
 605   %a = add <16 x i8> %x, %y
 606   %c = icmp ugt <16 x i8> %x, %noty
 607   %r = select <16 x i1> %c, <16 x i8> <i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1, i8 -1>, <16 x i8> %a
 608   ret <16 x i8> %r
 609 }
 610
 611 define <8 x i16> @unsigned_sat_variable_v8i16_using_min(<8 x i16> %x, <8 x i16> %y) {
 612 ; CHECK-LABEL: unsigned_sat_variable_v8i16_using_min:
 613 ; CHECK:       # %bb.0:
 614 ; CHECK-NEXT:    xxlnor 36, 35, 35
 615 ; CHECK-NEXT:    vminuh 2, 2, 4
 616 ; CHECK-NEXT:    vadduhm 2, 2, 3
 617 ; CHECK-NEXT:    blr
 618   %noty = xor <8 x i16> %y, <i16 -1, i16 -1, i16 -1, i16 -1, i16 -1, i16 -1, i16 -1, i16 -1>
 619   %c = icmp ult <8 x i16> %x, %noty
 620   %s = select <8 x i1> %c, <8 x i16> %x, <8 x i16> %noty
 621   %r = add <8 x i16> %s, %y
 622   ret <8 x i16> %r
 623 }
 624
 625 define <8 x i16> @unsigned_sat_variable_v8i16_using_cmp_sum(<8 x i16> %x, <8 x i16> %y) {
 626 ; CHECK-LABEL: unsigned_sat_variable_v8i16_using_cmp_sum:
 627 ; CHECK:       # %bb.0:
 628 ; CHECK-NEXT:    vadduhs 2, 2, 3
 629 ; CHECK-NEXT:    blr
 630   %a = add <8 x i16> %x, %y
 631   %c = icmp ugt <8 x i16> %x, %a
 632   %r = select <8 x i1> %c, <8 x i16> <i16 -1, i16 -1, i16 -1, i16 -1, i16 -1, i16 -1, i16 -1, i16 -1>, <8 x i16> %a
 633   ret <8 x i16> %r
 634 }
 635
 636 define <8 x i16> @unsigned_sat_variable_v8i16_using_cmp_notval(<8 x i16> %x, <8 x i16> %y) {
 637 ; CHECK-LABEL: unsigned_sat_variable_v8i16_using_cmp_notval:
 638 ; CHECK:       # %bb.0:
 639 ; CHECK-NEXT:    xxlnor 36, 35, 35
 640 ; CHECK-NEXT:    vadduhm 3, 2, 3
 641 ; CHECK-NEXT:    xxleqv 0, 0, 0
 642 ; CHECK-NEXT:    vcmpgtuh 2, 2, 4
 643 ; CHECK-NEXT:    xxsel 34, 35, 0, 34
 644 ; CHECK-NEXT:    blr
 645   %noty = xor <8 x i16> %y, <i16 -1, i16 -1, i16 -1, i16 -1, i16 -1, i16 -1, i16 -1, i16 -1>
 646   %a = add <8 x i16> %x, %y
 647   %c = icmp ugt <8 x i16> %x, %noty
 648   %r = select <8 x i1> %c, <8 x i16> <i16 -1, i16 -1, i16 -1, i16 -1, i16 -1, i16 -1, i16 -1, i16 -1>, <8 x i16> %a
 649   ret <8 x i16> %r
 650 }
 651
 652 define <4 x i32> @unsigned_sat_variable_v4i32_using_min(<4 x i32> %x, <4 x i32> %y) {
 653 ; CHECK-LABEL: unsigned_sat_variable_v4i32_using_min:
 654 ; CHECK:       # %bb.0:
 655 ; CHECK-NEXT:    xxlnor 36, 35, 35
 656 ; CHECK-NEXT:    vminuw 2, 2, 4
 657 ; CHECK-NEXT:    vadduwm 2, 2, 3
 658 ; CHECK-NEXT:    blr
 659   %noty = xor <4 x i32> %y, <i32 -1, i32 -1, i32 -1, i32 -1>
 660   %c = icmp ult <4 x i32> %x, %noty
 661   %s = select <4 x i1> %c, <4 x i32> %x, <4 x i32> %noty
 662   %r = add <4 x i32> %s, %y
 663   ret <4 x i32> %r
 664 }
 665
 666 define <4 x i32> @unsigned_sat_variable_v4i32_using_cmp_sum(<4 x i32> %x, <4 x i32> %y) {
 667 ; CHECK-LABEL: unsigned_sat_variable_v4i32_using_cmp_sum:
 668 ; CHECK:       # %bb.0:
 669 ; CHECK-NEXT:    vadduws 2, 2, 3
 670 ; CHECK-NEXT:    blr
 671   %a = add <4 x i32> %x, %y
 672   %c = icmp ugt <4 x i32> %x, %a
 673   %r = select <4 x i1> %c, <4 x i32> <i32 -1, i32 -1, i32 -1, i32 -1>, <4 x i32> %a
 674   ret <4 x i32> %r
 675 }
 676
 677 define <4 x i32> @unsigned_sat_variable_v4i32_using_cmp_notval(<4 x i32> %x, <4 x i32> %y) {
 678 ; CHECK-LABEL: unsigned_sat_variable_v4i32_using_cmp_notval:
 679 ; CHECK:       # %bb.0:
 680 ; CHECK-NEXT:    xxlnor 36, 35, 35
 681 ; CHECK-NEXT:    vadduwm 3, 2, 3
 682 ; CHECK-NEXT:    xxleqv 0, 0, 0
 683 ; CHECK-NEXT:    vcmpgtuw 2, 2, 4
 684 ; CHECK-NEXT:    xxsel 34, 35, 0, 34
 685 ; CHECK-NEXT:    blr
 686   %noty = xor <4 x i32> %y, <i32 -1, i32 -1, i32 -1, i32 -1>
 687   %a = add <4 x i32> %x, %y
 688   %c = icmp ugt <4 x i32> %x, %noty
 689   %r = select <4 x i1> %c, <4 x i32> <i32 -1, i32 -1, i32 -1, i32 -1>, <4 x i32> %a
 690   ret <4 x i32> %r
 691 }
 692
 693 define <2 x i64> @unsigned_sat_variable_v2i64_using_min(<2 x i64> %x, <2 x i64> %y) {
 694 ; CHECK-LABEL: unsigned_sat_variable_v2i64_using_min:
 695 ; CHECK:       # %bb.0:
 696 ; CHECK-NEXT:    xxlnor 36, 35, 35
 697 ; CHECK-NEXT:    vminud 2, 2, 4
 698 ; CHECK-NEXT:    vaddudm 2, 2, 3
 699 ; CHECK-NEXT:    blr
 700   %noty = xor <2 x i64> %y, <i64 -1, i64 -1>
 701   %c = icmp ult <2 x i64> %x, %noty
 702   %s = select <2 x i1> %c, <2 x i64> %x, <2 x i64> %noty
 703   %r = add <2 x i64> %s, %y
 704   ret <2 x i64> %r
 705 }
 706
 707 define <2 x i64> @unsigned_sat_variable_v2i64_using_cmp_sum(<2 x i64> %x, <2 x i64> %y) {
 708 ; CHECK-LABEL: unsigned_sat_variable_v2i64_using_cmp_sum:
 709 ; CHECK:       # %bb.0:
 710 ; CHECK-NEXT:    vaddudm 3, 2, 3
 711 ; CHECK-NEXT:    xxleqv 0, 0, 0
 712 ; CHECK-NEXT:    vcmpgtud 2, 2, 3
 713 ; CHECK-NEXT:    xxsel 34, 35, 0, 34
 714 ; CHECK-NEXT:    blr
 715   %a = add <2 x i64> %x, %y
 716   %c = icmp ugt <2 x i64> %x, %a
 717   %r = select <2 x i1> %c, <2 x i64> <i64 -1, i64 -1>, <2 x i64> %a
 718   ret <2 x i64> %r
 719 }
 720
 721 define <2 x i64> @unsigned_sat_variable_v2i64_using_cmp_notval(<2 x i64> %x, <2 x i64> %y) {
 722 ; CHECK-LABEL: unsigned_sat_variable_v2i64_using_cmp_notval:
 723 ; CHECK:       # %bb.0:
 724 ; CHECK-NEXT:    xxlnor 36, 35, 35
 725 ; CHECK-NEXT:    vaddudm 3, 2, 3
 726 ; CHECK-NEXT:    xxleqv 0, 0, 0
 727 ; CHECK-NEXT:    vcmpgtud 2, 2, 4
 728 ; CHECK-NEXT:    xxsel 34, 35, 0, 34
 729 ; CHECK-NEXT:    blr
 730   %noty = xor <2 x i64> %y, <i64 -1, i64 -1>
 731   %a = add <2 x i64> %x, %y
 732   %c = icmp ugt <2 x i64> %x, %noty
 733   %r = select <2 x i1> %c, <2 x i64> <i64 -1, i64 -1>, <2 x i64> %a
 734   ret <2 x i64> %r
 735 }
 736
 737 declare <4 x i128> @llvm.sadd.sat.v4i128(<4 x i128> %a, <4 x i128> %b);
 738
 739 define <4 x i128> @sadd(<4 x i128> %a, <4 x i128> %b) local_unnamed_addr {
 740 ; CHECK-LABEL: sadd:
 741 ; CHECK:       # %bb.0:
 742 ; CHECK-NEXT:    vadduqm 0, 2, 6
 743 ; CHECK-NEXT:    vadduqm 10, 4, 8
 744 ; CHECK-NEXT:    mfocrf 12, 32
 745 ; CHECK-NEXT:    stw 12, 8(1)
 746 ; CHECK-NEXT:    xxswapd 0, 34
 747 ; CHECK-NEXT:    xxswapd 4, 36
 748 ; CHECK-NEXT:    vadduqm 1, 3, 7
 749 ; CHECK-NEXT:    vadduqm 11, 5, 9
 750 ; CHECK-NEXT:    mffprd 3, 0
 751 ; CHECK-NEXT:    mffprd 6, 4
 752 ; CHECK-NEXT:    lwz 12, 8(1)
 753 ; CHECK-NEXT:    xxswapd 2, 35
 754 ; CHECK-NEXT:    xxswapd 5, 37
 755 ; CHECK-NEXT:    mffprd 4, 2
 756 ; CHECK-NEXT:    xxswapd 1, 32
 757 ; CHECK-NEXT:    xxswapd 6, 42
 758 ; CHECK-NEXT:    mffprd 5, 1
 759 ; CHECK-NEXT:    cmpld 6, 5, 3
 760 ; CHECK-NEXT:    mffprd 7, 6
 761 ; CHECK-NEXT:    xxswapd 3, 33
 762 ; CHECK-NEXT:    xxswapd 7, 43
 763 ; CHECK-NEXT:    mffprd 3, 3
 764 ; CHECK-NEXT:    cmpld 5, 7, 6
 765 ; CHECK-NEXT:    mffprd 6, 5
 766 ; CHECK-NEXT:    mffprd 7, 7
 767 ; CHECK-NEXT:    mfvsrd 5, 36
 768 ; CHECK-NEXT:    cmpld 3, 4
 769 ; CHECK-NEXT:    mfvsrd 3, 34
 770 ; CHECK-NEXT:    cmpld 1, 7, 6
 771 ; CHECK-NEXT:    mfvsrd 7, 32
 772 ; CHECK-NEXT:    mfvsrd 4, 35
 773 ; CHECK-NEXT:    mfvsrd 6, 37
 774 ; CHECK-NEXT:    cmpld 7, 7, 3
 775 ; CHECK-NEXT:    cmpd 2, 7, 3
 776 ; CHECK-NEXT:    mfvsrd 3, 33
 777 ; CHECK-NEXT:    crandc 21, 8, 30
 778 ; CHECK-NEXT:    crand 22, 30, 24
 779 ; CHECK-NEXT:    cmpld 6, 3, 4
 780 ; CHECK-NEXT:    cmpd 7, 3, 4
 781 ; CHECK-NEXT:    mfvsrd 4, 42
 782 ; CHECK-NEXT:    sradi 3, 3, 63
 783 ; CHECK-NEXT:    mtocrf 32, 12
 784 ; CHECK-NEXT:    crnor 21, 22, 21
 785 ; CHECK-NEXT:    crandc 23, 28, 26
 786 ; CHECK-NEXT:    crand 24, 26, 0
 787 ; CHECK-NEXT:    cmpld 4, 5
 788 ; CHECK-NEXT:    cmpd 7, 4, 5
 789 ; CHECK-NEXT:    mfvsrd 5, 43
 790 ; CHECK-NEXT:    crnor 22, 24, 23
 791 ; CHECK-NEXT:    mtfprd 5, 3
 792 ; CHECK-NEXT:    sradi 4, 4, 63
 793 ; CHECK-NEXT:    mtfprd 6, 4
 794 ; CHECK-NEXT:    crandc 25, 28, 2
 795 ; CHECK-NEXT:    crand 20, 2, 20
 796 ; CHECK-NEXT:    cmpld 5, 6
 797 ; CHECK-NEXT:    cmpd 7, 5, 6
 798 ; CHECK-NEXT:    mfvsrd 6, 38
 799 ; CHECK-NEXT:    sradi 5, 5, 63
 800 ; CHECK-NEXT:    crnor 20, 20, 25
 801 ; CHECK-NEXT:    mtfprd 7, 5
 802 ; CHECK-NEXT:    sradi 6, 6, 63
 803 ; CHECK-NEXT:    crandc 26, 28, 2
 804 ; CHECK-NEXT:    crand 27, 2, 4
 805 ; CHECK-NEXT:    crnor 23, 27, 26
 806 ; CHECK-NEXT:    mtfprd 0, 6
 807 ; CHECK-NEXT:    mfvsrd 6, 39
 808 ; CHECK-NEXT:    sradi 6, 6, 63
 809 ; CHECK-NEXT:    mtfprd 1, 6
 810 ; CHECK-NEXT:    mfvsrd 6, 40
 811 ; CHECK-NEXT:    sradi 6, 6, 63
 812 ; CHECK-NEXT:    mtfprd 2, 6
 813 ; CHECK-NEXT:    mfvsrd 6, 41
 814 ; CHECK-NEXT:    sradi 6, 6, 63
 815 ; CHECK-NEXT:    mtfprd 3, 6
 816 ; CHECK-NEXT:    sradi 6, 7, 63
 817 ; CHECK-NEXT:    mtfprd 4, 6
 818 ; CHECK-NEXT:    li 6, -1
 819 ; CHECK-NEXT:    isel 3, 0, 6, 21
 820 ; CHECK-NEXT:    isel 4, 0, 6, 22
 821 ; CHECK-NEXT:    isel 5, 0, 6, 20
 822 ; CHECK-NEXT:    isel 6, 0, 6, 23
 823 ; CHECK-NEXT:    mtfprd 8, 3
 824 ; CHECK-NEXT:    addis 3, 2, .LCPI48_0@toc@ha
 825 ; CHECK-NEXT:    mtfprd 10, 4
 826 ; CHECK-NEXT:    mtfprd 11, 5
 827 ; CHECK-NEXT:    mtfprd 12, 6
 828 ; CHECK-NEXT:    addi 3, 3, .LCPI48_0@toc@l
 829 ; CHECK-NEXT:    lxvd2x 9, 0, 3
 830 ; CHECK-NEXT:    xxspltd 45, 6, 0
 831 ; CHECK-NEXT:    xxspltd 46, 7, 0
 832 ; CHECK-NEXT:    xxspltd 34, 0, 0
 833 ; CHECK-NEXT:    xxspltd 40, 5, 0
 834 ; CHECK-NEXT:    xxspltd 35, 1, 0
 835 ; CHECK-NEXT:    xxspltd 36, 2, 0
 836 ; CHECK-NEXT:    xxspltd 38, 3, 0
 837 ; CHECK-NEXT:    xxspltd 39, 4, 0
 838 ; CHECK-NEXT:    xxspltd 41, 8, 0
 839 ; CHECK-NEXT:    xxspltd 44, 10, 0
 840 ; CHECK-NEXT:    xxspltd 47, 11, 0
 841 ; CHECK-NEXT:    xxspltd 48, 12, 0
 842 ; CHECK-NEXT:    xxlxor 0, 34, 41
 843 ; CHECK-NEXT:    xxlxor 1, 35, 44
 844 ; CHECK-NEXT:    xxswapd 37, 9
 845 ; CHECK-NEXT:    xxlxor 2, 39, 37
 846 ; CHECK-NEXT:    xxlxor 3, 40, 37
 847 ; CHECK-NEXT:    xxsel 34, 32, 2, 0
 848 ; CHECK-NEXT:    xxsel 35, 33, 3, 1
 849 ; CHECK-NEXT:    xxlxor 0, 36, 47
 850 ; CHECK-NEXT:    xxlxor 1, 45, 37
 851 ; CHECK-NEXT:    xxsel 36, 42, 1, 0
 852 ; CHECK-NEXT:    xxlxor 0, 38, 48
 853 ; CHECK-NEXT:    xxlxor 1, 46, 37
 854 ; CHECK-NEXT:    xxsel 37, 43, 1, 0
 855 ; CHECK-NEXT:    blr
 856   %c = call <4 x i128> @llvm.sadd.sat.v4i128(<4 x i128> %a, <4 x i128> %b)
 857   ret <4 x i128> %c
 858 }
 859
 860 define i64 @unsigned_sat_constant_i64_with_single_use(i64 %x) {
 861 ; CHECK-LABEL: unsigned_sat_constant_i64_with_single_use:
 862 ; CHECK:       # %bb.0:
 863 ; CHECK-NEXT:    addi 4, 3, -4
 864 ; CHECK-NEXT:    cmpld 4, 3
 865 ; CHECK-NEXT:    iselgt 3, 0, 4
 866 ; CHECK-NEXT:    blr
 867   %umin = call i64 @llvm.umin.i64(i64 %x, i64 4)
 868   %sub = sub i64 %x, %umin
 869   ret i64 %sub
 870 }
 871
 872 define i64 @unsigned_sat_constant_i64_with_multiple_use(i64 %x, i64 %y) {
 873 ; CHECK-LABEL: unsigned_sat_constant_i64_with_multiple_use:
 874 ; CHECK:       # %bb.0:
 875 ; CHECK-NEXT:    cmpldi 3, 4
 876 ; CHECK-NEXT:    li 5, 4
 877 ; CHECK-NEXT:    isellt 5, 3, 5
 878 ; CHECK-NEXT:    sub 3, 3, 5
 879 ; CHECK-NEXT:    add 4, 4, 5
 880 ; CHECK-NEXT:    mulld 3, 3, 4
 881 ; CHECK-NEXT:    blr
 882   %umin = call i64 @llvm.umin.i64(i64 %x, i64 4)
 883   %sub = sub i64 %x, %umin
 884   %add = add i64 %y, %umin
 885   %res = mul i64 %sub, %add
 886   ret i64 %res
 887 }
 888
 889 declare i64 @llvm.umin.i64(i64, i64)