gcc/config/rs6000/spe.h

   1 /* PowerPC E500 user include file.
   2    Copyright (C) 2002 Free Software Foundation, Inc.
   3    Contributed by Aldy Hernandez (aldyh@redhat.com).
   4
   5 This file is part of GNU CC.
   6
   7 GNU CC is free software; you can redistribute it and/or modify
   8 it under the terms of the GNU General Public License as published by
   9 the Free Software Foundation; either version 2, or (at your option)
  10 any later version.
  11
  12 GNU CC is distributed in the hope that it will be useful,
  13 but WITHOUT ANY WARRANTY; without even the implied warranty of
  14 MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  15 GNU General Public License for more details.
  16
  17 You should have received a copy of the GNU General Public License
  18 along with GNU CC; see the file COPYING.  If not, write to
  19 the Free Software Foundation, 59 Temple Place - Suite 330,
  20 Boston, MA 02111-1307, USA.  */
  21
  22 /* As a special exception, if you include this header file into source
  23    files compiled by GCC, this header file does not by itself cause
  24    the resulting executable to be covered by the GNU General Public
  25    License.  This exception does not however invalidate any other
  26    reasons why the executable file might be covered by the GNU General
  27    Public License.  */
  28
  29 #ifndef _SPE_H
  30 #define _SPE_H
  31
  32 #define __vector __attribute__((vector_size(8)))
  33
  34 typedef int                     int32_t;
  35 typedef unsigned                uint32_t;
  36 typedef short                   int16_t;
  37 typedef unsigned short          uint16_t;
  38 typedef long long               int64_t;
  39 typedef unsigned long long      uint64_t;
  40
  41 typedef short                   __vector __ev64_s16__;
  42 typedef unsigned short          __vector __ev64_u16__;
  43 typedef int                     __vector __ev64_s32__;
  44 typedef unsigned                __vector __ev64_u32__;
  45 typedef long long               __ev64_s64__;
  46 typedef unsigned long long      __ev64_u64__;
  47 typedef float                   __vector __ev64_fs__;
  48
  49 typedef int                     __vector __ev64_opaque__;
  50
  51 #define __v2si __ev64_opaque__
  52 #define __v2sf __ev64_fs__
  53
  54 #define __ev_addw(a,b) __builtin_spe_evaddw((__v2si) (a), (__v2si) (b))
  55 #define __ev_addiw(a,b) __builtin_spe_evaddiw ((__v2si) (a), (b))
  56 #define __ev_subfw(a,b) __builtin_spe_evsubfw ((__v2si) (a), (__v2si) (b))
  57 #define __ev_subifw(a,b) __builtin_spe_evsubifw ((__v2si) (a), (b))
  58 #define __ev_abs(a) __builtin_spe_evabs ((__v2si) (a))
  59 #define __ev_neg(a) __builtin_spe_evneg ((__v2si) (a))
  60 #define __ev_extsb(a) __builtin_spe_evextsb ((__v2si) (a))
  61 #define __ev_extsh(a) __builtin_spe_evextsh ((__v2si) (a))
  62 #define __ev_and(a,b) __builtin_spe_evand ((__v2si) (a), (__v2si) (b))
  63 #define __ev_or(a,b) __builtin_spe_evor ((__v2si) (a), (__v2si) (b))
  64 #define __ev_xor(a,b) __builtin_spe_evxor ((__v2si) (a), (__v2si) (b))
  65 #define __ev_nand(a,b) __builtin_spe_evnand ((__v2si) (a), (__v2si) (b))
  66 #define __ev_nor(a,b) __builtin_spe_evnor ((__v2si) (a), (__v2si) (b))
  67 #define __ev_eqv(a,b) __builtin_spe_eveqv ((__v2si) (a), (__v2si) (b))
  68 #define __ev_andc(a,b) __builtin_spe_evandc ((__v2si) (a), (__v2si) (b))
  69 #define __ev_orc(a,b) __builtin_spe_evorc ((__v2si) (a), (__v2si) (b))
  70 #define __ev_rlw(a,b) __builtin_spe_evrlw ((__v2si) (a), (__v2si) (b))
  71 #define __ev_rlwi(a,b) __builtin_spe_evrlwi ((__v2si) (a), (b))
  72 #define __ev_slw(a,b) __builtin_spe_evslw ((__v2si) (a), (__v2si) (b))
  73 #define __ev_slwi(a,b) __builtin_spe_evslwi ((__v2si) (a), (b))
  74 #define __ev_srws(a,b) __builtin_spe_evsrws ((__v2si) (a), (__v2si) (b))
  75 #define __ev_srwu(a,b) __builtin_spe_evsrwu ((__v2si) (a), (__v2si) (b))
  76 #define __ev_srwis(a,b) __builtin_spe_evsrwis ((__v2si) (a), (b))
  77 #define __ev_srwiu(a,b) __builtin_spe_evsrwiu ((__v2si) (a), (b))
  78 #define __ev_cntlzw(a) __builtin_spe_evcntlzw ((__v2si) (a))
  79 #define __ev_cntlsw(a) __builtin_spe_evcntlsw ((__v2si) (a))
  80 #define __ev_rndw(a) __builtin_spe_evrndw ((__v2si) (a))
  81 #define __ev_mergehi(a,b) __builtin_spe_evmergehi ((__v2si) (a), (__v2si) (b))
  82 #define __ev_mergelo(a,b) __builtin_spe_evmergelo ((__v2si) (a), (__v2si) (b))
  83 #define __ev_mergelohi(a,b) __builtin_spe_evmergelohi ((__v2si) (a), (__v2si) (b))
  84 #define __ev_mergehilo(a,b) __builtin_spe_evmergehilo ((__v2si) (a), (__v2si) (b))
  85 #define __ev_splati(a) __builtin_spe_evsplati ((a))
  86 #define __ev_splatfi(a) __builtin_spe_evsplatfi ((a))
  87 #define __ev_divws(a,b) __builtin_spe_evdivws ((__v2si) (a), (__v2si) (b))
  88 #define __ev_divwu(a,b) __builtin_spe_evdivwu ((__v2si) (a), (__v2si) (b))
  89 #define __ev_mra(a) __builtin_spe_evmra ((__v2si) (a))
  90
  91 #define __brinc __builtin_spe_brinc
  92
  93 /* Loads.  */
  94
  95 #define __ev_lddx(a,b) __builtin_spe_evlddx ((void *)(a), (b))
  96 #define __ev_ldwx(a,b) __builtin_spe_evldwx ((void *)(a), (b))
  97 #define __ev_ldhx(a,b) __builtin_spe_evldhx ((void *)(a), (b))
  98 #define __ev_lwhex(a,b) __builtin_spe_evlwhex ((a), (b))
  99 #define __ev_lwhoux(a,b) __builtin_spe_evlwhoux ((a), (b))
 100 #define __ev_lwhosx(a,b) __builtin_spe_evlwhosx ((a), (b))
 101 #define __ev_lwwsplatx(a,b) __builtin_spe_evlwwsplatx ((a), (b))
 102 #define __ev_lwhsplatx(a,b) __builtin_spe_evlwhsplatx ((a), (b))
 103 #define __ev_lhhesplatx(a,b) __builtin_spe_evlhhesplatx ((a), (b))
 104 #define __ev_lhhousplatx(a,b) __builtin_spe_evlhhousplatx ((a), (b))
 105 #define __ev_lhhossplatx(a,b) __builtin_spe_evlhhossplatx ((a), (b))
 106 #define __ev_ldd(a,b) __builtin_spe_evldd ((void *)(a), (b))
 107 #define __ev_ldw(a,b) __builtin_spe_evldw ((void *)(a), (b))
 108 #define __ev_ldh(a,b) __builtin_spe_evldh ((void *)(a), (b))
 109 #define __ev_lwhe(a,b) __builtin_spe_evlwhe ((a), (b))
 110 #define __ev_lwhou(a,b) __builtin_spe_evlwhou ((a), (b))
 111 #define __ev_lwhos(a,b) __builtin_spe_evlwhos ((a), (b))
 112 #define __ev_lwwsplat(a,b) __builtin_spe_evlwwsplat ((a), (b))
 113 #define __ev_lwhsplat(a,b) __builtin_spe_evlwhsplat ((a), (b))
 114 #define __ev_lhhesplat(a,b) __builtin_spe_evlhhesplat ((a), (b))
 115 #define __ev_lhhousplat(a,b) __builtin_spe_evlhhousplat ((a), (b))
 116 #define __ev_lhhossplat(a,b) __builtin_spe_evlhhossplat ((a), (b))
 117
 118 /* Stores.  */
 119
 120 #define __ev_stddx(a,b,c) __builtin_spe_evstddx ((__v2si)(a), (void *)(b), (c))
 121 #define __ev_stdwx(a,b,c) __builtin_spe_evstdwx ((__v2si)(a), (void *)(b), (c))
 122 #define __ev_stdhx(a,b,c) __builtin_spe_evstdhx ((__v2si)(a), (void *)(b), (c))
 123 #define __ev_stwwex(a,b,c) __builtin_spe_evstwwex ((__v2si)(a), (b), (c))
 124 #define __ev_stwwox(a,b,c) __builtin_spe_evstwwox ((__v2si)(a), (b), (c))
 125 #define __ev_stwhex(a,b,c) __builtin_spe_evstwhex ((__v2si)(a), (b), (c))
 126 #define __ev_stwhox(a,b,c) __builtin_spe_evstwhox ((__v2si)(a), (b), (c))
 127 #define __ev_stdd(a,b,c) __builtin_spe_evstdd ((__v2si)(a), (b), (c))
 128 #define __ev_stdw(a,b,c) __builtin_spe_evstdw ((__v2si)(a), (b), (c))
 129 #define __ev_stdh(a,b,c) __builtin_spe_evstdh ((__v2si)(a), (b), (c))
 130 #define __ev_stwwe(a,b,c) __builtin_spe_evstwwe ((__v2si)(a), (b), (c))
 131 #define __ev_stwwo(a,b,c) __builtin_spe_evstwwo ((__v2si)(a), (b), (c))
 132 #define __ev_stwhe(a,b,c) __builtin_spe_evstwhe ((__v2si)(a), (b), (c))
 133 #define __ev_stwho(a,b,c) __builtin_spe_evstwho ((__v2si)(a), (b), (c))
 134
 135 /* Fixed point complex.  */
 136
 137 #define __ev_mhossf(a, b) __builtin_spe_evmhossf ((__v2si) (a), (__v2si) (b))
 138 #define __ev_mhosmf(a, b) __builtin_spe_evmhosmf ((__v2si) (a), (__v2si) (b))
 139 #define __ev_mhosmi(a, b) __builtin_spe_evmhosmi ((__v2si) (a), (__v2si) (b))
 140 #define __ev_mhoumi(a, b) __builtin_spe_evmhoumi ((__v2si) (a), (__v2si) (b))
 141 #define __ev_mhessf(a, b) __builtin_spe_evmhessf ((__v2si) (a), (__v2si) (b))
 142 #define __ev_mhesmf(a, b) __builtin_spe_evmhesmf ((__v2si) (a), (__v2si) (b))
 143 #define __ev_mhesmi(a, b) __builtin_spe_evmhesmi ((__v2si) (a), (__v2si) (b))
 144 #define __ev_mheumi(a, b) __builtin_spe_evmheumi ((__v2si) (a), (__v2si) (b))
 145 #define __ev_mhossfa(a, b) __builtin_spe_evmhossfa ((__v2si) (a), (__v2si) (b))
 146 #define __ev_mhosmfa(a, b) __builtin_spe_evmhosmfa ((__v2si) (a), (__v2si) (b))
 147 #define __ev_mhosmia(a, b) __builtin_spe_evmhosmia ((__v2si) (a), (__v2si) (b))
 148 #define __ev_mhoumia(a, b) __builtin_spe_evmhoumia ((__v2si) (a), (__v2si) (b))
 149 #define __ev_mhessfa(a, b) __builtin_spe_evmhessfa ((__v2si) (a), (__v2si) (b))
 150 #define __ev_mhesmfa(a, b) __builtin_spe_evmhesmfa ((__v2si) (a), (__v2si) (b))
 151 #define __ev_mhesmia(a, b) __builtin_spe_evmhesmia ((__v2si) (a), (__v2si) (b))
 152 #define __ev_mheumia(a, b) __builtin_spe_evmheumia ((__v2si) (a), (__v2si) (b))
 153
 154 #define __ev_mhoumf __ev_mhoumi
 155 #define __ev_mheumf __ev_mheumi
 156 #define __ev_mhoumfa __ev_mhoumia
 157 #define __ev_mheumfa __ev_mheumia
 158
 159 #define __ev_mhossfaaw(a, b) __builtin_spe_evmhossfaaw ((__v2si) (a), (__v2si) (b))
 160 #define __ev_mhossiaaw(a, b) __builtin_spe_evmhossiaaw ((__v2si) (a), (__v2si) (b))
 161 #define __ev_mhosmfaaw(a, b) __builtin_spe_evmhosmfaaw ((__v2si) (a), (__v2si) (b))
 162 #define __ev_mhosmiaaw(a, b) __builtin_spe_evmhosmiaaw ((__v2si) (a), (__v2si) (b))
 163 #define __ev_mhousiaaw(a, b) __builtin_spe_evmhousiaaw ((__v2si) (a), (__v2si) (b))
 164 #define __ev_mhoumiaaw(a, b) __builtin_spe_evmhoumiaaw ((__v2si) (a), (__v2si) (b))
 165 #define __ev_mhessfaaw(a, b) __builtin_spe_evmhessfaaw ((__v2si) (a), (__v2si) (b))
 166 #define __ev_mhessiaaw(a, b) __builtin_spe_evmhessiaaw ((__v2si) (a), (__v2si) (b))
 167 #define __ev_mhesmfaaw(a, b) __builtin_spe_evmhesmfaaw ((__v2si) (a), (__v2si) (b))
 168 #define __ev_mhesmiaaw(a, b) __builtin_spe_evmhesmiaaw ((__v2si) (a), (__v2si) (b))
 169 #define __ev_mheusiaaw(a, b) __builtin_spe_evmheusiaaw ((__v2si) (a), (__v2si) (b))
 170 #define __ev_mheumiaaw(a, b) __builtin_spe_evmheumiaaw ((__v2si) (a), (__v2si) (b))
 171
 172 #define __ev_mhousfaaw __ev_mhousiaaw
 173 #define __ev_mhoumfaaw __ev_mhoumiaaw
 174 #define __ev_mheusfaaw __ev_mheusiaaw
 175 #define __ev_mheumfaaw __ev_mheumiaaw
 176
 177 #define __ev_mhossfanw(a, b) __builtin_spe_evmhossfanw ((__v2si) (a), (__v2si) (b))
 178 #define __ev_mhossianw(a, b) __builtin_spe_evmhossianw ((__v2si) (a), (__v2si) (b))
 179 #define __ev_mhosmfanw(a, b) __builtin_spe_evmhosmfanw ((__v2si) (a), (__v2si) (b))
 180 #define __ev_mhosmianw(a, b) __builtin_spe_evmhosmianw ((__v2si) (a), (__v2si) (b))
 181 #define __ev_mhousianw(a, b) __builtin_spe_evmhousianw ((__v2si) (a), (__v2si) (b))
 182 #define __ev_mhoumianw(a, b) __builtin_spe_evmhoumianw ((__v2si) (a), (__v2si) (b))
 183 #define __ev_mhessfanw(a, b) __builtin_spe_evmhessfanw ((__v2si) (a), (__v2si) (b))
 184 #define __ev_mhessianw(a, b) __builtin_spe_evmhessianw ((__v2si) (a), (__v2si) (b))
 185 #define __ev_mhesmfanw(a, b) __builtin_spe_evmhesmfanw ((__v2si) (a), (__v2si) (b))
 186 #define __ev_mhesmianw(a, b) __builtin_spe_evmhesmianw ((__v2si) (a), (__v2si) (b))
 187 #define __ev_mheusianw(a, b) __builtin_spe_evmheusianw ((__v2si) (a), (__v2si) (b))
 188 #define __ev_mheumianw(a, b) __builtin_spe_evmheumianw ((__v2si) (a), (__v2si) (b))
 189
 190 #define __ev_mhousfanw __ev_mhousianw
 191 #define __ev_mhoumfanw __ev_mhoumianw
 192 #define __ev_mheusfanw __ev_mheusianw
 193 #define __ev_mheumfanw __ev_mheumianw
 194
 195 #define __ev_mhogsmfaa(a, b) __builtin_spe_evmhogsmfaa ((__v2si) (a), (__v2si) (b))
 196 #define __ev_mhogsmiaa(a, b) __builtin_spe_evmhogsmiaa ((__v2si) (a), (__v2si) (b))
 197 #define __ev_mhogumiaa(a, b) __builtin_spe_evmhogumiaa ((__v2si) (a), (__v2si) (b))
 198 #define __ev_mhegsmfaa(a, b) __builtin_spe_evmhegsmfaa ((__v2si) (a), (__v2si) (b))
 199 #define __ev_mhegsmiaa(a, b) __builtin_spe_evmhegsmiaa ((__v2si) (a), (__v2si) (b))
 200 #define __ev_mhegumiaa(a, b) __builtin_spe_evmhegumiaa ((__v2si) (a), (__v2si) (b))
 201
 202 #define __ev_mhogumfaa __ev_mhogumiaa
 203 #define __ev_mhegumfaa __ev_mhegumiaa
 204
 205 #define __ev_mhogsmfan(a, b) __builtin_spe_evmhogsmfan ((__v2si) (a), (__v2si) (b))
 206 #define __ev_mhogsmian(a, b) __builtin_spe_evmhogsmian ((__v2si) (a), (__v2si) (b))
 207 #define __ev_mhogumian(a, b) __builtin_spe_evmhogumian ((__v2si) (a), (__v2si) (b))
 208 #define __ev_mhegsmfan(a, b) __builtin_spe_evmhegsmfan ((__v2si) (a), (__v2si) (b))
 209 #define __ev_mhegsmian(a, b) __builtin_spe_evmhegsmian ((__v2si) (a), (__v2si) (b))
 210 #define __ev_mhegumian(a, b) __builtin_spe_evmhegumian ((__v2si) (a), (__v2si) (b))
 211
 212 #define __ev_mhogumfan __ev_mhogumian
 213 #define __ev_mhegumfan __ev_mhegumian
 214
 215 #define __ev_mwhssf(a, b) __builtin_spe_evmwhssf ((__v2si) (a), (__v2si) (b))
 216 #define __ev_mwhsmf(a, b) __builtin_spe_evmwhsmf ((__v2si) (a), (__v2si) (b))
 217 #define __ev_mwhsmi(a, b) __builtin_spe_evmwhsmi ((__v2si) (a), (__v2si) (b))
 218 #define __ev_mwhumi(a, b) __builtin_spe_evmwhumi ((__v2si) (a), (__v2si) (b))
 219 #define __ev_mwhssfa(a, b) __builtin_spe_evmwhssfa ((__v2si) (a), (__v2si) (b))
 220 #define __ev_mwhsmfa(a, b) __builtin_spe_evmwhsmfa ((__v2si) (a), (__v2si) (b))
 221 #define __ev_mwhsmia(a, b) __builtin_spe_evmwhsmia ((__v2si) (a), (__v2si) (b))
 222 #define __ev_mwhumia(a, b) __builtin_spe_evmwhumia ((__v2si) (a), (__v2si) (b))
 223
 224 #define __ev_mwhumf __ev_mwhumi
 225 #define __ev_mwhumfa __ev_mwhumia
 226
 227 #define __ev_mwlssf(a, b) __builtin_spe_evmwlssf ((__v2si) (a), (__v2si) (b))
 228 #define __ev_mwlsmf(a, b) __builtin_spe_evmwlsmf ((__v2si) (a), (__v2si) (b))
 229 #define __ev_mwlumi(a, b) __builtin_spe_evmwlumi ((__v2si) (a), (__v2si) (b))
 230 #define __ev_mwlssfa(a, b) __builtin_spe_evmwlssfa ((__v2si) (a), (__v2si) (b))
 231 #define __ev_mwlsmfa(a, b) __builtin_spe_evmwlsmfa ((__v2si) (a), (__v2si) (b))
 232 #define __ev_mwlumia(a, b) __builtin_spe_evmwlumia ((__v2si) (a), (__v2si) (b))
 233 #define __ev_mwlumiaaw(a, b) __builtin_spe_evmwlumiaaw ((__v2si) (a), (__v2si) (b))
 234
 235 #define __ev_mwlufi __ev_mwlumi
 236 #define __ev_mwlufia __ev_mwlumia
 237
 238 #define __ev_mwlssfaaw(a, b) __builtin_spe_evmwlssfaaw ((__v2si) (a), (__v2si) (b))
 239 #define __ev_mwlssiaaw(a, b) __builtin_spe_evmwlssiaaw ((__v2si) (a), (__v2si) (b))
 240 #define __ev_mwlsmfaaw(a, b) __builtin_spe_evmwlsmfaaw ((__v2si) (a), (__v2si) (b))
 241 #define __ev_mwlsmiaaw(a, b) __builtin_spe_evmwlsmiaaw ((__v2si) (a), (__v2si) (b))
 242 #define __ev_mwlusiaaw(a, b) __builtin_spe_evmwlusiaaw ((__v2si) (a), (__v2si) (b))
 243 #define __ev_mwlusiaaw(a, b) __builtin_spe_evmwlusiaaw ((__v2si) (a), (__v2si) (b))
 244
 245 #define __ev_mwlumfaaw __ev_mwlumiaaw
 246 #define __ev_mwlusfaaw __ev_mwlusiaaw
 247
 248 #define __ev_mwlssfanw(a, b) __builtin_spe_evmwlssfanw ((__v2si) (a), (__v2si) (b))
 249 #define __ev_mwlssianw(a, b) __builtin_spe_evmwlssianw ((__v2si) (a), (__v2si) (b))
 250 #define __ev_mwlsmfanw(a, b) __builtin_spe_evmwlsmfanw ((__v2si) (a), (__v2si) (b))
 251 #define __ev_mwlsmianw(a, b) __builtin_spe_evmwlsmianw ((__v2si) (a), (__v2si) (b))
 252 #define __ev_mwlusianw(a, b) __builtin_spe_evmwlusianw ((__v2si) (a), (__v2si) (b))
 253 #define __ev_mwlumianw(a, b) __builtin_spe_evmwlumianw ((__v2si) (a), (__v2si) (b))
 254
 255 #define __ev_mwlumfanw __ev_mwlumianw
 256 #define __ev_mwlusfanw __ev_mwlusianw
 257
 258 #define __ev_mwssf(a, b) __builtin_spe_evmwssf ((__v2si) (a), (__v2si) (b))
 259 #define __ev_mwsmf(a, b) __builtin_spe_evmwsmf ((__v2si) (a), (__v2si) (b))
 260 #define __ev_mwsmi(a, b) __builtin_spe_evmwsmi ((__v2si) (a), (__v2si) (b))
 261 #define __ev_mwumi(a, b) __builtin_spe_evmwumi ((__v2si) (a), (__v2si) (b))
 262 #define __ev_mwssfa(a, b) __builtin_spe_evmwssfa ((__v2si) (a), (__v2si) (b))
 263 #define __ev_mwsmfa(a, b) __builtin_spe_evmwsmfa ((__v2si) (a), (__v2si) (b))
 264 #define __ev_mwsmia(a, b) __builtin_spe_evmwsmia ((__v2si) (a), (__v2si) (b))
 265 #define __ev_mwumia(a, b) __builtin_spe_evmwumia ((__v2si) (a), (__v2si) (b))
 266
 267 #define __ev_mwumf __ev_mwumi
 268 #define __ev_mwumfa __ev_mwumia
 269
 270 #define __ev_mwssfaa(a, b) __builtin_spe_evmwssfaa ((__v2si) (a), (__v2si) (b))
 271 #define __ev_mwsmfaa(a, b) __builtin_spe_evmwsmfaa ((__v2si) (a), (__v2si) (b))
 272 #define __ev_mwsmiaa(a, b) __builtin_spe_evmwsmiaa ((__v2si) (a), (__v2si) (b))
 273 #define __ev_mwumiaa(a, b) __builtin_spe_evmwumiaa ((__v2si) (a), (__v2si) (b))
 274
 275 #define __ev_mwumfaa __ev_mwumiaa
 276
 277 #define __ev_mwssfan(a, b) __builtin_spe_evmwssfan ((__v2si) (a), (__v2si) (b))
 278 #define __ev_mwsmfan(a, b) __builtin_spe_evmwsmfan ((__v2si) (a), (__v2si) (b))
 279 #define __ev_mwsmian(a, b) __builtin_spe_evmwsmian ((__v2si) (a), (__v2si) (b))
 280 #define __ev_mwumian(a, b) __builtin_spe_evmwumian ((__v2si) (a), (__v2si) (b))
 281
 282 #define __ev_mwumfan __ev_mwumian
 283
 284 #define __ev_addssiaaw(a) __builtin_spe_evaddssiaaw ((__v2si) (a))
 285 #define __ev_addsmiaaw(a) __builtin_spe_evaddsmiaaw ((__v2si) (a))
 286 #define __ev_addusiaaw(a) __builtin_spe_evaddusiaaw ((__v2si) (a))
 287 #define __ev_addumiaaw(a) __builtin_spe_evaddumiaaw ((__v2si) (a))
 288
 289 #define __ev_addusfaaw __ev_addusiaaw
 290 #define __ev_addumfaaw __ev_addumiaaw
 291 #define __ev_addsmfaaw __ev_addsmiaaw
 292 #define __ev_addssfaaw __ev_addssiaaw
 293
 294 #define __ev_subfssiaaw(a) __builtin_spe_evsubfssiaaw ((__v2si) (a))
 295 #define __ev_subfsmiaaw(a) __builtin_spe_evsubfsmiaaw ((__v2si) (a))
 296 #define __ev_subfusiaaw(a) __builtin_spe_evsubfusiaaw ((__v2si) (a))
 297 #define __ev_subfumiaaw(a) __builtin_spe_evsubfumiaaw ((__v2si) (a))
 298
 299 #define __ev_subfusfaaw __ev_subfusiaaw
 300 #define __ev_subfumfaaw __ev_subfumiaaw
 301 #define __ev_subfsmfaaw __ev_subfsmiaaw
 302 #define __ev_subfssfaaw __ev_subfssiaaw
 303
 304 /* Floating Point SIMD Instructions  */
 305
 306 /* These all return V2SF, but we need to cast them to V2SI because the SPE
 307    expect all functions to be __ev64_opaque__.  */
 308
 309 #define __ev_fsabs(a) ((__v2si) __builtin_spe_evfsabs ((__v2sf) a))
 310 #define __ev_fsnabs(a) ((__v2si) __builtin_spe_evfsnabs ((__v2sf) a))
 311 #define __ev_fsneg(a) ((__v2si) __builtin_spe_evfsneg ((__v2sf) a))
 312 #define __ev_fsadd(a, b) ((__v2si) __builtin_spe_evfsadd ((__v2sf) a, (__v2sf) b))
 313 #define __ev_fssub(a, b) ((__v2si) __builtin_spe_evfssub ((__v2sf) a, (__v2sf) b))
 314 #define __ev_fsmul(a, b) ((__v2si) __builtin_spe_evfsmul ((__v2sf) a, (__v2sf) b))
 315 #define __ev_fsdiv(a, b) ((__v2si) __builtin_spe_evfsdiv ((__v2sf) a, (__v2sf) b))
 316 #define __ev_fscfui(a) ((__v2si) __builtin_spe_evfscfui ((__v2si) a))
 317 #define __ev_fscfsi(a) ((__v2si) __builtin_spe_evfscfsi ((__v2sf) a))
 318 #define __ev_fscfuf(a) ((__v2si) __builtin_spe_evfscfuf ((__v2sf) a))
 319 #define __ev_fscfsf(a) ((__v2si) __builtin_spe_evfscfsf ((__v2sf) a))
 320 #define __ev_fsctui(a) ((__v2si) __builtin_spe_evfsctui ((__v2sf) a))
 321 #define __ev_fsctsi(a) ((__v2si) __builtin_spe_evfsctsi ((__v2sf) a))
 322 #define __ev_fsctuf(a) ((__v2si) __builtin_spe_evfsctuf ((__v2sf) a))
 323 #define __ev_fsctsf(a) ((__v2si) __builtin_spe_evfsctsf ((__v2sf) a))
 324 #define __ev_fsctuiz(a) ((__v2si) __builtin_spe_evfsctuiz ((__v2sf) a))
 325 #define __ev_fsctsiz(a) ((__v2si) __builtin_spe_evfsctsiz ((__v2sf) a))
 326
 327 /* NOT SUPPORTED IN FIRST e500, support via two instructions:  */
 328
 329 #define __ev_mwhusfaaw  __ev_mwhusiaaw
 330 #define __ev_mwhumfaaw  __ev_mwhumiaaw
 331 #define __ev_mwhusfanw  __ev_mwhusianw
 332 #define __ev_mwhumfanw  __ev_mwhumianw
 333 #define __ev_mwhgumfaa  __ev_mwhgumiaa
 334 #define __ev_mwhgumfan  __ev_mwhgumian
 335
 336 #define __ev_mwhgssfaa(a, b) __internal_ev_mwhgssfaa ((__v2si) (a), (__v2si) (b))
 337 #define __ev_mwhgsmfaa(a, b) __internal_ev_mwhgsmfaa ((__v2si) (a), (__v2si) (b))
 338 #define __ev_mwhgsmiaa(a, b) __internal_ev_mwhgsmiaa ((__v2si) (a), (__v2si) (b))
 339 #define __ev_mwhgumiaa(a, b) __internal_ev_mwhgumiaa ((__v2si) (a), (__v2si) (b))
 340 #define __ev_mwhgssfan(a, b) __internal_ev_mwhgssfan ((__v2si) (a), (__v2si) (b))
 341 #define __ev_mwhgsmfan(a, b) __internal_ev_mwhgsmfan ((__v2si) (a), (__v2si) (b))
 342 #define __ev_mwhgsmian(a, b) __internal_ev_mwhgsmian ((__v2si) (a), (__v2si) (b))
 343 #define __ev_mwhgumian(a, b) __internal_ev_mwhgumian ((__v2si) (a), (__v2si) (b))
 344
 345 #define __ev_mwhssiaaw(a, b) __internal_ev_mwhssiaaw ((__v2si) (a), (__v2si) (b))
 346 #define __ev_mwhssfaaw(a, b) __internal_ev_mwhssfaaw ((__v2si) (a), (__v2si) (b))
 347 #define __ev_mwhsmfaaw(a, b) __internal_ev_mwhsmfaaw ((__v2si) (a), (__v2si) (b))
 348 #define __ev_mwhsmiaaw(a, b) __internal_ev_mwhsmiaaw ((__v2si) (a), (__v2si) (b))
 349 #define __ev_mwhusiaaw(a, b) __internal_ev_mwhusiaaw ((__v2si) (a), (__v2si) (b))
 350 #define __ev_mwhumiaaw(a, b) __internal_ev_mwhumiaaw ((__v2si) (a), (__v2si) (b))
 351 #define __ev_mwhssfanw(a, b) __internal_ev_mwhssfanw ((__v2si) (a), (__v2si) (b))
 352 #define __ev_mwhssianw(a, b) __internal_ev_mwhssianw ((__v2si) (a), (__v2si) (b))
 353 #define __ev_mwhsmfanw(a, b) __internal_ev_mwhsmfanw ((__v2si) (a), (__v2si) (b))
 354 #define __ev_mwhsmianw(a, b) __internal_ev_mwhsmianw ((__v2si) (a), (__v2si) (b))
 355 #define __ev_mwhusianw(a, b) __internal_ev_mwhusianw ((__v2si) (a), (__v2si) (b))
 356 #define __ev_mwhumianw(a, b) __internal_ev_mwhumianw ((__v2si) (a), (__v2si) (b))
 357
 358 static inline __ev64_opaque__
 359 __internal_ev_mwhssfaaw (__ev64_opaque__ a, __ev64_opaque__ b)
 360 {
 361   __ev64_opaque__ t;
 362
 363   t = __ev_mwhssf (a, b);
 364   return __ev_addssiaaw(t);
 365 }
 366
 367 static inline __ev64_opaque__
 368 __internal_ev_mwhssiaaw (__ev64_opaque__ a, __ev64_opaque__ b)
 369 {
 370   __ev64_opaque__ t;
 371
 372   t = __ev_mwhsmi (a,b);
 373   return __ev_addssiaaw (t);
 374 }
 375
 376 static inline __ev64_opaque__
 377 __internal_ev_mwhsmfaaw (__ev64_opaque__ a, __ev64_opaque__ b)
 378 {
 379   __ev64_opaque__ t;
 380
 381   t = __ev_mwhsmf (a,b);
 382   return __ev_addsmiaaw (t);
 383 }
 384
 385 static inline __ev64_opaque__
 386 __internal_ev_mwhsmiaaw (__ev64_opaque__ a, __ev64_opaque__ b)
 387 {
 388   __ev64_opaque__ t;
 389
 390   t = __ev_mwhsmi (a,b);
 391   return __ev_addsmiaaw (t);
 392 }
 393
 394 static inline __ev64_opaque__
 395 __internal_ev_mwhusiaaw (__ev64_opaque__ a, __ev64_opaque__ b)
 396 {
 397   __ev64_opaque__ t;
 398
 399   t = __ev_mwhumi (a,b);
 400   return __ev_addusiaaw (t);
 401 }
 402
 403 static inline __ev64_opaque__
 404 __internal_ev_mwhumiaaw (__ev64_opaque__ a, __ev64_opaque__ b)
 405 {
 406   __ev64_opaque__ t;
 407
 408   t = __ev_mwhumi (a,b);
 409   return __ev_addumiaaw (t);
 410 }
 411
 412 static inline __ev64_opaque__
 413 __internal_ev_mwhssfanw (__ev64_opaque__ a, __ev64_opaque__ b)
 414 {
 415   __ev64_opaque__ t;
 416
 417   t = __ev_mwhssf (a,b);
 418   return __ev_subfssiaaw (t);
 419 }
 420
 421 static inline __ev64_opaque__
 422 __internal_ev_mwhssianw (__ev64_opaque__ a, __ev64_opaque__ b)
 423 {
 424   __ev64_opaque__ t;
 425
 426   t = __ev_mwhsmi (a,b);
 427   return __ev_subfssiaaw (t);
 428 }
 429
 430 static inline __ev64_opaque__
 431 __internal_ev_mwhsmfanw (__ev64_opaque__ a, __ev64_opaque__ b)
 432 {
 433   __ev64_opaque__ t;
 434
 435   t = __ev_mwhsmf (a,b);
 436   return __ev_subfsmiaaw (t);
 437 }
 438
 439 static inline __ev64_opaque__
 440 __internal_ev_mwhsmianw (__ev64_opaque__ a, __ev64_opaque__ b)
 441 {
 442   __ev64_opaque__ t;
 443
 444   t = __ev_mwhsmi (a,b);
 445   return __ev_subfsmiaaw (t);
 446 }
 447
 448 static inline __ev64_opaque__
 449 __internal_ev_mwhusianw (__ev64_opaque__ a, __ev64_opaque__ b)
 450 {
 451   __ev64_opaque__ t;
 452
 453   t = __ev_mwhumi (a,b);
 454   return __ev_subfusiaaw (t);
 455 }
 456
 457 static inline __ev64_opaque__
 458 __internal_ev_mwhumianw (__ev64_opaque__ a, __ev64_opaque__ b)
 459 {
 460   __ev64_opaque__ t;
 461
 462   t = __ev_mwhumi (a,b);
 463   return __ev_subfumiaaw (t);
 464 }
 465
 466 /* ** */
 467
 468 static inline __ev64_opaque__
 469 __internal_ev_mwhgssfaa (__ev64_opaque__ a, __ev64_opaque__ b)
 470 {
 471   __ev64_opaque__ t;
 472
 473   t = __ev_mwhssf (a, b);
 474   return __ev_mwsmiaa (t, ((__ev64_opaque__){1, 1}));
 475 }
 476
 477 static inline __ev64_opaque__
 478 __internal_ev_mwhgsmfaa (__ev64_opaque__ a, __ev64_opaque__ b)
 479 {
 480   __ev64_opaque__ t;
 481
 482   t = __ev_mwhsmf (a, b);
 483   return __ev_mwsmiaa (t, ((__ev64_opaque__){1, 1}));
 484 }
 485
 486 static inline __ev64_opaque__
 487 __internal_ev_mwhgsmiaa (__ev64_opaque__ a, __ev64_opaque__ b)
 488 {
 489   __ev64_opaque__ t;
 490
 491   t = __ev_mwhsmi (a, b);
 492   return __ev_mwsmiaa (t, ((__ev64_opaque__){1, 1}));
 493 }
 494
 495 static inline __ev64_opaque__
 496 __internal_ev_mwhgumiaa (__ev64_opaque__ a, __ev64_opaque__ b)
 497 {
 498   __ev64_opaque__ t;
 499
 500   t = __ev_mwhumi (a, b);
 501   return __ev_mwumiaa (t, ((__ev64_opaque__){1, 1}));
 502 }
 503
 504 static inline __ev64_opaque__
 505 __internal_ev_mwhgssfan (__ev64_opaque__ a, __ev64_opaque__ b)
 506 {
 507   __ev64_opaque__ t;
 508
 509   t = __ev_mwhssf (a, b);
 510   return __ev_mwsmian (t, ((__ev64_opaque__){1, 1}));
 511 }
 512
 513 static inline __ev64_opaque__
 514 __internal_ev_mwhgsmfan (__ev64_opaque__ a, __ev64_opaque__ b)
 515 {
 516   __ev64_opaque__ t;
 517
 518   t = __ev_mwhsmf (a, b);
 519   return __ev_mwsmian (t, ((__ev64_opaque__){1, 1}));
 520 }
 521
 522 static inline __ev64_opaque__
 523 __internal_ev_mwhgsmian (__ev64_opaque__ a, __ev64_opaque__ b)
 524 {
 525   __ev64_opaque__ t;
 526
 527   t = __ev_mwhsmi (a, b);
 528   return __ev_mwsmian (t, ((__ev64_opaque__){1, 1}));
 529 }
 530
 531 static inline __ev64_opaque__
 532 __internal_ev_mwhgumian (__ev64_opaque__ a, __ev64_opaque__ b)
 533 {
 534   __ev64_opaque__ t;
 535
 536   t = __ev_mwhumi (a, b);
 537   return __ev_mwumian (t, ((__ev64_opaque__){1, 1}));
 538 }
 539
 540 /* END OF NOT SUPPORTED */
 541
 542 /* __ev_create* functions.  */
 543
 544 #define __ev_create_ufix32_u32 __ev_create_u32
 545 #define __ev_create_sfix32_s32 __ev_create_s32
 546 #define __ev_create_sfix32_fs __ev_create_fs
 547 #define __ev_create_ufix32_fs __ev_create_fs
 548
 549 static inline __ev64_opaque__
 550 __ev_create_s16 (int16_t a, int16_t b, int16_t c, int16_t d)
 551 {
 552   union
 553   {
 554     __ev64_opaque__ v;
 555     int16_t i[4];
 556   } u;
 557
 558   u.i[0] = a;
 559   u.i[1] = b;
 560   u.i[2] = c;
 561   u.i[3] = d;
 562
 563   return u.v;
 564 }
 565
 566 static inline __ev64_opaque__
 567 __ev_create_u16 (uint16_t a, uint16_t b, uint16_t c, uint16_t d)
 568
 569 {
 570   union
 571   {
 572     __ev64_opaque__ v;
 573     uint16_t i[4];
 574   } u;
 575
 576   u.i[0] = a;
 577   u.i[1] = b;
 578   u.i[2] = c;
 579   u.i[3] = d;
 580
 581   return u.v;
 582 }
 583
 584 static inline __ev64_opaque__
 585 __ev_create_s32 (int32_t a, int32_t b)
 586 {
 587   union
 588   {
 589     __ev64_opaque__ v;
 590    int32_t i[2];
 591   } u;
 592
 593   u.i[0] = a;
 594   u.i[1] = b;
 595
 596   return u.v;
 597 }
 598
 599 static inline __ev64_opaque__
 600 __ev_create_u32 (uint32_t a, uint32_t b)
 601 {
 602   union
 603   {
 604     __ev64_opaque__ v;
 605     uint32_t i[2];
 606   } u;
 607
 608   u.i[0] = a;
 609   u.i[1] = b;
 610
 611   return u.v;
 612 }
 613
 614 static inline __ev64_opaque__
 615 __ev_create_fs (float a, float b)
 616 {
 617   union
 618   {
 619     __ev64_opaque__ v;
 620     float f[2];
 621   } u;
 622
 623   u.f[0] = a;
 624   u.f[1] = b;
 625
 626   return u.v;
 627 }
 628
 629 static inline __ev64_opaque__
 630 __ev_create_s64 (int64_t a)
 631 {
 632   union
 633   {
 634     __ev64_opaque__ v;
 635     int64_t i;
 636   } u;
 637
 638   u.i = a;
 639   return u.v;
 640 }
 641
 642 static inline __ev64_opaque__
 643 __ev_create_u64 (uint64_t a)
 644 {
 645   union
 646   {
 647     __ev64_opaque__ v;
 648     uint64_t i;
 649   } u;
 650
 651   u.i = a;
 652   return u.v;
 653 }
 654
 655 #define __ev_convert_u64(a) ((uint64_t) (a))
 656 #define __ev_convert_s64(a) ((int64_t) (a))
 657
 658 /* __ev_get_* functions.  */
 659
 660 #define __ev_get_upper_u32(a) __ev_get_u32_internal ((__ev64_opaque__) a, 0)
 661 #define __ev_get_lower_u32(a) __ev_get_u32_internal ((__ev64_opaque__) a, 1)
 662 #define __ev_get_upper_s32(a) __ev_get_s32_internal ((__ev64_opaque__) a, 0)
 663 #define __ev_get_lower_s32(a) __ev_get_s32_internal ((__ev64_opaque__) a, 1)
 664 #define __ev_get_upper_fs(a) __ev_get_fs_internal ((__ev64_opaque__) a, 0)
 665 #define __ev_get_lower_fs(a) __ev_get_fs_internal ((__ev64_opaque__) a, 1)
 666 #define __ev_get_upper_ufix32_u32(a) __ev_get_upper_u32(a)
 667 #define __ev_get_lower_ufix32_u32(a) __ev_get_lower_u32(a)
 668 #define __ev_get_upper_sfix32_s32(a) __ev_get_upper_s32(a)
 669 #define __ev_get_lower_sfix32_s32(a) __ev_get_lower_s32(a)
 670 #define __ev_get_upper_sfix32_fs(a) __ev_get_upper_fs(a)
 671 #define __ev_get_lower_sfix32_fs(a) __ev_get_lower_fs(a)
 672 #define __ev_get_upper_ufix32_fs(a) __ev_get_upper_fs(a)
 673 #define __ev_get_lower_ufix32_fs(a) __ev_get_lower_fs(a)
 674
 675 #define __ev_get_u32(a, b) __ev_get_u32_internal ((__ev64_opaque__) a, b)
 676 #define __ev_get_s32(a, b) __ev_get_s32_internal ((__ev64_opaque__) a, b)
 677 #define __ev_get_fs(a, b) __ev_get_fs_internal ((__ev64_opaque__) a, b)
 678 #define __ev_get_u16(a, b) __ev_get_u16_internal ((__ev64_opaque__) a, b)
 679 #define __ev_get_s16(a, b) __ev_get_s16_internal ((__ev64_opaque__) a, b)
 680
 681 #define __ev_get_ufix32_u32(a, b) __ev_get_u32 (a, b)
 682 #define __ev_get_sfix32_s32(a, b) __ev_get_s32 (a, b)
 683 #define __ev_get_ufix32_fs(a, b) __ev_get_fs (a, b)
 684 #define __ev_get_sfix32_fs(a, b) __ev_get_fs (a, b)
 685
 686 static inline uint32_t
 687 __ev_get_u32_internal (__ev64_opaque__ a, uint32_t pos)
 688 {
 689   union
 690   {
 691     __ev64_opaque__ v;
 692     uint32_t i[2];
 693   } u;
 694
 695   u.v = a;
 696   return u.i[pos];
 697 }
 698
 699 static inline int32_t
 700 __ev_get_s32_internal (__ev64_opaque__ a, uint32_t pos)
 701 {
 702   union
 703   {
 704     __ev64_opaque__ v;
 705     int32_t i[2];
 706   } u;
 707
 708   u.v = a;
 709   return u.i[pos];
 710 }
 711
 712 static inline float
 713 __ev_get_fs_internal (__ev64_opaque__ a, uint32_t pos)
 714 {
 715   union
 716   {
 717     __ev64_opaque__ v;
 718     float f[2];
 719   } u;
 720
 721   u.v = a;
 722   return u.f[pos];
 723 }
 724
 725 static inline uint16_t
 726 __ev_get_u16_internal (__ev64_opaque__ a, uint32_t pos)
 727 {
 728   union
 729   {
 730     __ev64_opaque__ v;
 731     uint16_t i[4];
 732   } u;
 733
 734   u.v = a;
 735   return u.i[pos];
 736 }
 737
 738 static inline int16_t
 739 __ev_get_s16_internal (__ev64_opaque__ a, uint32_t pos)
 740 {
 741   union
 742   {
 743     __ev64_opaque__ v;
 744     int16_t i[4];
 745   } u;
 746
 747   u.v = a;
 748   return u.i[pos];
 749 }
 750
 751 /* __ev_set_* functions.  */
 752
 753 #define __ev_set_u32(a, b, c) __ev_set_u32_internal ((__ev64_opaque__) a, b, c)
 754 #define __ev_set_s32(a, b, c) __ev_set_s32_internal ((__ev64_opaque__) a, b, c)
 755 #define __ev_set_fs(a, b, c) __ev_set_fs_internal ((__ev64_opaque__) a, b, c)
 756 #define __ev_set_u16(a, b, c) __ev_set_u16_internal ((__ev64_opaque__) a, b, c)
 757 #define __ev_set_s16(a, b, c) __ev_set_s16_internal ((__ev64_opaque__) a, b, c)
 758
 759 #define __ev_set_ufix32_u32 __ev_set_u32
 760 #define __ev_set_sfix32_s32 __ev_set_s32
 761 #define __ev_set_ufix32_fs __ev_set_fs
 762 #define __ev_set_sfix32_fs __ev_set_fs
 763
 764 #define __ev_set_upper_u32(a, b) __ev_set_u32(a, b, 0)
 765 #define __ev_set_lower_u32(a, b) __ev_set_u32 (a, b, 1)
 766 #define __ev_set_upper_s32(a, b) __ev_set_s32 (a, b, 0)
 767 #define __ev_set_lower_s32(a, b) __ev_set_s32 (a, b, 1)
 768 #define __ev_set_upper_fs(a, b) __ev_set_fs (a, b, 0)
 769 #define __ev_set_lower_fs(a, b) __ev_set_fs (a, b, 1)
 770 #define __ev_set_upper_ufix32_u32 __ev_set_upper_u32
 771 #define __ev_set_lower_ufix32_u32 __ev_set_lower_u32
 772 #define __ev_set_upper_sfix32_s32 __ev_set_upper_s32
 773 #define __ev_set_lower_sfix32_s32 __ev_set_lower_s32
 774 #define __ev_set_upper_sfix32_fs __ev_set_upper_fs
 775 #define __ev_set_lower_sfix32_fs __ev_set_lower_fs
 776 #define __ev_set_upper_ufix32_fs __ev_set_upper_fs
 777 #define __ev_set_lower_ufix32_fs __ev_set_lower_fs
 778
 779 #define __ev_set_acc_vec64(a) __builtin_spe_evmra ((__ev64_opaque__)(a))
 780
 781 static inline __ev64_opaque__
 782 __ev_set_acc_u64 (uint64_t a)
 783 {
 784   __ev_mra (a);
 785   return (__ev64_opaque__) a;
 786 }
 787
 788 static inline __ev64_opaque__
 789 __ev_set_acc_s64 (int64_t a)
 790 {
 791   __ev_mra (a);
 792   return (__ev64_opaque__) a;
 793 }
 794
 795 static inline __ev64_opaque__
 796 __ev_set_u32_internal (__ev64_opaque__ a, uint32_t b, uint32_t pos )
 797 {
 798   union
 799   {
 800     __ev64_opaque__ v;
 801     uint32_t i[2];
 802   } u;
 803
 804   u.v = a;
 805   u.i[pos] = b;
 806   return u.v;
 807 }
 808
 809 static inline __ev64_opaque__
 810 __ev_set_s32_internal (__ev64_opaque__ a, int32_t b, uint32_t pos )
 811 {
 812   union
 813   {
 814     __ev64_opaque__ v;
 815     int32_t i[2];
 816   } u;
 817
 818   u.v = a;
 819   u.i[pos] = b;
 820   return u.v;
 821 }
 822
 823 static inline __ev64_opaque__
 824 __ev_set_fs_internal (__ev64_opaque__ a, float b, uint32_t pos )
 825 {
 826   union
 827   {
 828     __ev64_opaque__ v;
 829     float f[2];
 830   } u;
 831
 832   u.v = a;
 833   u.f[pos] = b;
 834   return u.v;
 835 }
 836
 837 static inline __ev64_opaque__
 838 __ev_set_u16_internal (__ev64_opaque__ a, uint16_t b, uint32_t pos )
 839 {
 840   union
 841   {
 842     __ev64_opaque__ v;
 843     uint16_t i[4];
 844   } u;
 845
 846   u.v = a;
 847   u.i[pos] = b;
 848   return u.v;
 849 }
 850
 851 static inline __ev64_opaque__
 852 __ev_set_s16_internal (__ev64_opaque__ a, int16_t b, uint32_t pos )
 853 {
 854   union
 855   {
 856     __ev64_opaque__ v;
 857     int16_t i[4];
 858   } u;
 859
 860   u.v = a;
 861   u.i[pos] = b;
 862   return u.v;
 863 }
 864
 865 /* Predicates.  */
 866
 867 #define __pred_all      0
 868 #define __pred_any      1
 869 #define __pred_upper    2
 870 #define __pred_lower    3
 871
 872 #define __ev_any_gts(a, b) \
 873         __builtin_spe_evcmpgts (__pred_any, (__v2si)(a), (__v2si)(b))
 874 #define __ev_all_gts(a, b) \
 875         __builtin_spe_evcmpgts (__pred_all, (__v2si)(a), (__v2si)(b))
 876 #define __ev_upper_gts(a, b) \
 877         __builtin_spe_evcmpgts (__pred_upper, (__v2si)(a), (__v2si)(b))
 878 #define __ev_lower_gts(a, b) \
 879         __builtin_spe_evcmpgts (__pred_lower, (__v2si)(a), (__v2si)(b))
 880 #define __ev_select_gts(a, b, c, d) \
 881         ((__v2si) __builtin_spe_evsel_gts ((__v2si)(a), (__v2si)(b), \
 882                                            (__v2si)(c), (__v2si)(d)))
 883
 884 #define __ev_any_gtu(a, b) \
 885         __builtin_spe_evcmpgtu (__pred_any, (__v2si)(a), (__v2si)(b))
 886 #define __ev_all_gtu(a, b) \
 887         __builtin_spe_evcmpgtu (__pred_all, (__v2si)(a), (__v2si)(b))
 888 #define __ev_upper_gtu(a, b) \
 889         __builtin_spe_evcmpgtu (__pred_upper, (__v2si)(a), (__v2si)(b))
 890 #define __ev_lower_gtu(a, b) \
 891         __builtin_spe_evcmpgtu (__pred_lower, (__v2si)(a), (__v2si)(b))
 892 #define __ev_select_gtu(a, b, c, d) \
 893         ((__v2si) __builtin_spe_evsel_gtu ((__v2si)(a), (__v2si)(b), \
 894                                            (__v2si)(c), (__v2si)(d)))
 895
 896 #define __ev_any_lts(a, b) \
 897         __builtin_spe_evcmplts (__pred_any, (__v2si)(a), (__v2si)(b))
 898 #define __ev_all_lts(a, b) \
 899         __builtin_spe_evcmplts (__pred_all, (__v2si)(a), (__v2si)(b))
 900 #define __ev_upper_lts(a, b) \
 901         __builtin_spe_evcmplts (__pred_upper, (__v2si)(a), (__v2si)(b))
 902 #define __ev_lower_lts(a, b) \
 903         __builtin_spe_evcmplts (__pred_lower, (__v2si)(a), (__v2si)(b))
 904 #define __ev_select_lts(a, b, c, d) \
 905         ((__v2si) __builtin_spe_evsel_lts ((__v2si)(a), (__v2si)(b), \
 906                                            (__v2si)(c), (__v2si)(d)))
 907
 908 #define __ev_any_ltu(a, b) \
 909         __builtin_spe_evcmpltu (__pred_any, (__v2si)(a), (__v2si)(b))
 910 #define __ev_all_ltu(a, b) \
 911         __builtin_spe_evcmpltu (__pred_all, (__v2si)(a), (__v2si)(b))
 912 #define __ev_upper_ltu(a, b) \
 913         __builtin_spe_evcmpltu (__pred_upper, (__v2si)(a), (__v2si)(b))
 914 #define __ev_lower_ltu(a, b) \
 915         __builtin_spe_evcmpltu (__pred_lower, (__v2si)(a), (__v2si)(b))
 916 #define __ev_select_ltu(a, b, c, d) \
 917         ((__v2si) __builtin_spe_evsel_ltu ((__v2si)(a), (__v2si)(b), \
 918                                            (__v2si)(c), (__v2si)(d)))
 919 #define __ev_any_eq(a, b) \
 920         __builtin_spe_evcmpeq (__pred_any, (__v2si)(a), (__v2si)(b))
 921 #define __ev_all_eq(a, b) \
 922         __builtin_spe_evcmpeq (__pred_all, (__v2si)(a), (__v2si)(b))
 923 #define __ev_upper_eq(a, b) \
 924         __builtin_spe_evcmpeq (__pred_upper, (__v2si)(a), (__v2si)(b))
 925 #define __ev_lower_eq(a, b) \
 926         __builtin_spe_evcmpeq (__pred_lower, (__v2si)(a), (__v2si)(b))
 927 #define __ev_select_eq(a, b, c, d) \
 928         ((__v2si) __builtin_spe_evsel_eq ((__v2si)(a), (__v2si)(b), \
 929                                           (__v2si)(c), (__v2si)(d)))
 930
 931 #define __ev_any_fs_gt(a, b) \
 932         __builtin_spe_evfscmpgt (__pred_any, (__v2sf)(a), (__v2sf)(b))
 933 #define __ev_all_fs_gt(a, b) \
 934         __builtin_spe_evfscmpgt (__pred_all, (__v2sf)(a), (__v2sf)(b))
 935 #define __ev_upper_fs_gt(a, b) \
 936         __builtin_spe_evfscmpgt (__pred_upper, (__v2sf)(a), (__v2sf)(b))
 937 #define __ev_lower_fs_gt(a, b) \
 938         __builtin_spe_evfscmpgt (__pred_lower, (__v2sf)(a), (__v2sf)(b))
 939 #define __ev_select_fs_gt(a, b, c, d) \
 940         ((__v2si) __builtin_spe_evsel_fsgt ((__v2sf)(a), (__v2sf)(b), \
 941                                             (__v2sf)(c), (__v2sf)(d)))
 942
 943 #define __ev_any_fs_lt(a, b) \
 944         __builtin_spe_evfscmplt (__pred_any, (__v2sf)(a), (__v2sf)(b))
 945 #define __ev_all_fs_lt(a, b) \
 946         __builtin_spe_evfscmplt (__pred_all, (__v2sf)(a), (__v2sf)(b))
 947 #define __ev_upper_fs_lt(a, b) \
 948         __builtin_spe_evfscmplt (__pred_upper, (__v2sf)(a), (__v2sf)(b))
 949 #define __ev_lower_fs_lt(a, b) \
 950         __builtin_spe_evfscmplt (__pred_lower, (__v2sf)(a), (__v2sf)(b))
 951 #define __ev_select_fs_lt(a, b, c, d) \
 952         ((__v2si) __builtin_spe_evsel_fslt ((__v2sf)(a), (__v2sf)(b), \
 953                                             (__v2sf)(c), (__v2sf)(d)))
 954
 955 #define __ev_any_fs_eq(a, b) \
 956         __builtin_spe_evfscmpeq (__pred_any, (__v2sf)(a), (__v2sf)(b))
 957 #define __ev_all_fs_eq(a, b) \
 958         __builtin_spe_evfscmpeq (__pred_all, (__v2sf)(a), (__v2sf)(b))
 959 #define __ev_upper_fs_eq(a, b) \
 960         __builtin_spe_evfscmpeq (__pred_upper, (__v2sf)(a), (__v2sf)(b))
 961 #define __ev_lower_fs_eq(a, b) \
 962         __builtin_spe_evfscmpeq (__pred_lower, (__v2sf)(a), (__v2sf)(b))
 963 #define __ev_select_fs_eq(a, b, c, d) \
 964         ((__v2si) __builtin_spe_evsel_fseq ((__v2sf)(a), (__v2sf)(b), \
 965                                             (__v2sf)(c), (__v2sf)(d)))
 966
 967 #define __ev_any_fs_tst_gt(a, b) \
 968         __builtin_spe_evfststgt (__pred_any, (__v2sf)(a), (__v2sf)(b))
 969 #define __ev_all_fs_tst_gt(a, b) \
 970         __builtin_spe_evfststgt (__pred_all, (__v2sf)(a), (__v2sf)(b))
 971 #define __ev_upper_fs_tst_gt(a, b) \
 972         __builtin_spe_evfststgt (__pred_upper, (__v2sf)(a), (__v2sf)(b))
 973 #define __ev_lower_fs_tst_gt(a, b) \
 974         __builtin_spe_evfststgt (__pred_lower, (__v2sf)(a), (__v2sf)(b))
 975 #define __ev_select_fs_tst_gt(a, b, c, d) \
 976         ((__v2si) __builtin_spe_evsel_fststgt ((__v2sf)(a), (__v2sf)(b), \
 977                                                (__v2sf)(c), (__v2sf)(d)))
 978
 979 #define __ev_any_fs_tst_lt(a, b) \
 980         __builtin_spe_evfststlt (__pred_any, (__v2sf)(a), (__v2sf)(b))
 981 #define __ev_all_fs_tst_lt(a, b) \
 982         __builtin_spe_evfststlt (__pred_all, (__v2sf)(a), (__v2sf)(b))
 983 #define __ev_upper_fs_tst_lt(a, b) \
 984         __builtin_spe_evfststlt (__pred_upper, (__v2sf)(a), (__v2sf)(b))
 985 #define __ev_lower_fs_tst_lt(a, b) \
 986         __builtin_spe_evfststlt (__pred_lower, (__v2sf)(a), (__v2sf)(b))
 987 #define __ev_select_fs_tst_lt(a, b, c, d) \
 988         ((__v2si) __builtin_spe_evsel_fststlt ((__v2sf)(a), (__v2sf)(b), \
 989                                                (__v2sf)(c), (__v2sf)(d)))
 990
 991 #define __ev_any_fs_tst_eq(a, b) \
 992         __builtin_spe_evfststeq (__pred_any, (__v2sf)(a), (__v2sf)(b))
 993 #define __ev_all_fs_tst_eq(a, b) \
 994         __builtin_spe_evfststeq (__pred_all, (__v2sf)(a), (__v2sf)(b))
 995 #define __ev_upper_fs_tst_eq(a, b) \
 996         __builtin_spe_evfststeq (__pred_upper, (__v2sf)(a), (__v2sf)(b))
 997 #define __ev_lower_fs_tst_eq(a, b) \
 998         __builtin_spe_evfststeq (__pred_lower, (__v2sf)(a), (__v2sf)(b))
 999 #define __ev_select_fs_tst_eq(a, b, c, d) \
1000         ((__v2si) __builtin_spe_evsel_fststeq ((__v2sf)(a), (__v2sf)(b), \
1001                                                (__v2sf)(c), (__v2sf)(d)))
1002
1003 /* SPEFSCR accesor functions.  */
1004
1005 #define __SPEFSCR_SOVH          0x80000000
1006 #define __SPEFSCR_OVH           0x40000000
1007 #define __SPEFSCR_FGH           0x20000000
1008 #define __SPEFSCR_FXH           0x10000000
1009 #define __SPEFSCR_FINVH         0x08000000
1010 #define __SPEFSCR_FDBZH         0x04000000
1011 #define __SPEFSCR_FUNFH         0x02000000
1012 #define __SPEFSCR_FOVFH         0x01000000
1013 /* 2 unused bits */
1014 #define __SPEFSCR_FINXS         0x00200000
1015 #define __SPEFSCR_FINVS         0x00100000
1016 #define __SPEFSCR_FDBZS         0x00080000
1017 #define __SPEFSCR_FUNFS         0x00040000
1018 #define __SPEFSCR_FOVFS         0x00020000
1019 #define __SPEFSCR_MODE          0x00010000
1020 #define __SPEFSCR_SOV           0x00008000
1021 #define __SPEFSCR_OV            0x00004000
1022 #define __SPEFSCR_FG            0x00002000
1023 #define __SPEFSCR_FX            0x00001000
1024 #define __SPEFSCR_FINV          0x00000800
1025 #define __SPEFSCR_FDBZ          0x00000400
1026 #define __SPEFSCR_FUNF          0x00000200
1027 #define __SPEFSCR_FOVF          0x00000100
1028 /* 1 unused bit */
1029 #define __SPEFSCR_FINXE         0x00000040
1030 #define __SPEFSCR_FINVE         0x00000020
1031 #define __SPEFSCR_FDBZE         0x00000010
1032 #define __SPEFSCR_FUNFE         0x00000008
1033 #define __SPEFSCR_FOVFE         0x00000004
1034 #define __SPEFSCR_FRMC          0x00000003
1035
1036 #define __ev_get_spefscr_sovh() (__builtin_spe_mfspefscr () & __SPEFSCR_SOVH)
1037 #define __ev_get_spefscr_ovh() (__builtin_spe_mfspefscr () & __SPEFSCR_OVH)
1038 #define __ev_get_spefscr_fgh() (__builtin_spe_mfspefscr () & __SPEFSCR_FGH)
1039 #define __ev_get_spefscr_fxh() (__builtin_spe_mfspefscr () & __SPEFSCR_FXH)
1040 #define __ev_get_spefscr_finvh() (__builtin_spe_mfspefscr () & __SPEFSCR_FINVH)
1041 #define __ev_get_spefscr_fdbzh() (__builtin_spe_mfspefscr () & __SPEFSCR_FDBZH)
1042 #define __ev_get_spefscr_funfh() (__builtin_spe_mfspefscr () & __SPEFSCR_FUNFH)
1043 #define __ev_get_spefscr_fovfh() (__builtin_spe_mfspefscr () & __SPEFSCR_FOVFH)
1044 #define __ev_get_spefscr_finxs() (__builtin_spe_mfspefscr () & __SPEFSCR_FINXS)
1045 #define __ev_get_spefscr_finvs() (__builtin_spe_mfspefscr () & __SPEFSCR_FINVS)
1046 #define __ev_get_spefscr_fdbzs() (__builtin_spe_mfspefscr () & __SPEFSCR_FDBZS)
1047 #define __ev_get_spefscr_funfs() (__builtin_spe_mfspefscr () & __SPEFSCR_FUNFS)
1048 #define __ev_get_spefscr_fovfs() (__builtin_spe_mfspefscr () & __SPEFSCR_FOVFS)
1049 #define __ev_get_spefscr_mode() (__builtin_spe_mfspefscr () & __SPEFSCR_MODE)
1050 #define __ev_get_spefscr_sov() (__builtin_spe_mfspefscr () & __SPEFSCR_SOV)
1051 #define __ev_get_spefscr_ov() (__builtin_spe_mfspefscr () & __SPEFSCR_OV)
1052 #define __ev_get_spefscr_fg() (__builtin_spe_mfspefscr () & __SPEFSCR_FG)
1053 #define __ev_get_spefscr_fx() (__builtin_spe_mfspefscr () & __SPEFSCR_FX)
1054 #define __ev_get_spefscr_finv() (__builtin_spe_mfspefscr () & __SPEFSCR_FINV)
1055 #define __ev_get_spefscr_fdbz() (__builtin_spe_mfspefscr () & __SPEFSCR_FDBZ)
1056 #define __ev_get_spefscr_funf() (__builtin_spe_mfspefscr () & __SPEFSCR_FUNF)
1057 #define __ev_get_spefscr_fovf() (__builtin_spe_mfspefscr () & __SPEFSCR_FOVF)
1058 #define __ev_get_spefscr_finxe() (__builtin_spe_mfspefscr () & __SPEFSCR_FINXE)
1059 #define __ev_get_spefscr_finve() (__builtin_spe_mfspefscr () & __SPEFSCR_FINVE)
1060 #define __ev_get_spefscr_fdbze() (__builtin_spe_mfspefscr () & __SPEFSCR_FDBZE)
1061 #define __ev_get_spefscr_funfe() (__builtin_spe_mfspefscr () & __SPEFSCR_FUNFE)
1062 #define __ev_get_spefscr_fovfe() (__builtin_spe_mfspefscr () & __SPEFSCR_FOVFE)
1063 #define __ev_get_spefscr_frmc() (__builtin_spe_mfspefscr () & __SPEFSCR_FRMC)
1064
1065 static inline void
1066 __ev_clr_spefscr_field (int mask)
1067 {
1068   int i;
1069
1070   i = __builtin_spe_mfspefscr ();
1071   i &= ~mask;
1072   __builtin_spe_mtspefscr (i);
1073 }
1074
1075 #define __ev_clr_spefscr_sovh() __ev_clr_spefscr_field (__SPEFSCR_SOVH)
1076 #define __ev_clr_spefscr_sov() __ev_clr_spefscr_field (__SPEFSCR_SOV)
1077 #define __ev_clr_spefscr_finxs() __ev_clr_spefscr_field (__SPEFSCR_FINXS)
1078 #define __ev_clr_spefscr_finvs() __ev_clr_spefscr_field (__SPEFSCR_FINVS)
1079 #define __ev_clr_spefscr_fdbzs() __ev_clr_spefscr_field (__SPEFSCR_FDBZS)
1080 #define __ev_clr_spefscr_funfs() __ev_clr_spefscr_field (__SPEFSCR_FUNFS)
1081 #define __ev_clr_spefscr_fovfs() __ev_clr_spefscr_field (__SPEFSCR_FOVFS)
1082
1083 /* Set rounding mode:
1084      rnd = 0 (nearest)
1085      rnd = 1 (zero)
1086      rnd = 2 (+inf)
1087      rnd = 3 (-inf)
1088 */
1089 static inline void
1090 __ev_set_spefscr_frmc (int rnd)
1091 {
1092   int i;
1093
1094   i = __builtin_spe_mfspefscr ();
1095   i &= ~__SPEFSCR_FRMC;
1096   i |= rnd;
1097 }
1098
1099 #endif /* _SPE_H */