blasblisacc/src/ti_cblas_cblas_zsyr2k.c

   1 /******************************************************************************
   2  * Copyright (c) 2013-2015, Texas Instruments Incorporated - http://www.ti.com/
   3  *   All rights reserved.
   4  *
   5  *   Redistribution and use in source and binary forms, with or without
   6  *   modification, are permitted provided that the following conditions are met:
   7  *       * Redistributions of source code must retain the above copyright
   8  *         notice, this list of conditions and the following disclaimer.
   9  *       * Redistributions in binary form must reproduce the above copyright
  10  *         notice, this list of conditions and the following disclaimer in the
  11  *         documentation and/or other materials provided with the distribution.
  12  *       * Neither the name of Texas Instruments Incorporated nor the
  13  *         names of its contributors may be used to endorse or promote products
  14  *         derived from this software without specific prior written permission.
  15  *
  16  *   THIS SOFTWARE IS PROVIDED BY THE COPYRIGHT HOLDERS AND CONTRIBUTORS "AS IS"
  17  *   AND ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE
  18  *   IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE
  19  *   ARE DISCLAIMED. IN NO EVENT SHALL THE COPYRIGHT OWNER OR CONTRIBUTORS BE
  20  *   LIABLE FOR ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR
  21  *   CONSEQUENTIAL DAMAGES (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF
  22  *   SUBSTITUTE GOODS OR SERVICES; LOSS OF USE, DATA, OR PROFITS; OR BUSINESS
  23  *   INTERRUPTION) HOWEVER CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN
  24  *   CONTRACT, STRICT LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE)
  25  *   ARISING IN ANY WAY OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF
  26  *   THE POSSIBILITY OF SUCH DAMAGE.
  27  *****************************************************************************/
  28
  29 #include "ti_cblas.h"
  30
  31 #ifdef __cplusplus
  32 extern "C" {
  33 #endif
  34     void __real_cblas_zsyr2k(const enum CBLAS_ORDER Order, const enum CBLAS_UPLO Uplo, const enum CBLAS_TRANSPOSE Trans, const int N, const int K, const void *alpha, const void *A, const int lda, const void *B, const int ldb, const void *beta, void *C, const int ldc) ;
  35
  36 #ifdef __cplusplus
  37 }
  38 extern "C"
  39 #endif
  40 void cblas_zsyr2k(const enum CBLAS_ORDER Order, const enum CBLAS_UPLO Uplo, const enum CBLAS_TRANSPOSE Trans, const int N, const int K, const void *alpha, const void *A, const int lda, const void *B, const int ldb, const void *beta, void *C, const int ldc)
  41 {
  42
  43         /* Do an init on first use */
  44         if (!ti_cblas_init_done) ti_cblas_init();
  45         TI_CBLAS_DEBUG_PRINT("Intercepted call to %s\n", "cblas_zsyr2k");
  46
  47         TI_CBLAS_PROFILE_START();
  48
  49         /* Dynamic condtional offload to ARM */
  50         if ((TI_CBLAS_L3_OFFLOAD == TI_CBLAS_OFFLOAD_NONE) || ((TI_CBLAS_L3_OFFLOAD == TI_CBLAS_OFFLOAD_SIZE) && (!zsyr2k_offload_dsp(Order,N,K)))) {
  51                 TI_CBLAS_DEBUG_PRINT("Executing ARM %s\n", "cblas_zsyr2k");
  52                 __real_cblas_zsyr2k(Order,Uplo,Trans,N,K,alpha,A,lda,B,ldb,beta,C,ldc);
  53                 TI_CBLAS_PROFILE_REPORT("  Entire %s call (ARM) took %8.2f us\n","cblas_zsyr2k", (float) clock_diff);
  54                 return ;
  55         }
  56         /* End ARM offload */
  57
  58         /******************************************************************/
  59         /* DSP offload WILL be done if control reaches here */
  60                 TI_CBLAS_DEBUG_PRINT("Offloading to DSP %s\n", "cblas_zsyr2k");
  61
  62         /* Lookup kernel pointer from global table */
  63 #ifdef __cplusplus
  64         Event e;
  65         Kernel* __K;
  66 #else
  67         cl_kernel __K;
  68 #endif
  69         __K =  ti_cblas_get_kernel(TI_CBLAS_CBLAS_ZSYR2K_IDX, "ocl_cblas_zsyr2k");
  70 #ifdef __cplusplus
  71         try
  72 #else
  73         cl_int err = CL_SUCCESS;
  74 #endif
  75         {
  76
  77
  78 #ifdef __cplusplus
  79                 __K->setArg(0, Order);
  80 #else
  81                 err |= clSetKernelArg(__K, 0, sizeof(Order), &Order);
  82 #endif
  83
  84 #ifdef __cplusplus
  85                 __K->setArg(1, Uplo);
  86 #else
  87                 err |= clSetKernelArg(__K, 1, sizeof(Uplo), &Uplo);
  88 #endif
  89
  90 #ifdef __cplusplus
  91                 __K->setArg(2, Trans);
  92 #else
  93                 err |= clSetKernelArg(__K, 2, sizeof(Trans), &Trans);
  94 #endif
  95
  96 #ifdef __cplusplus
  97                 __K->setArg(3, N);
  98 #else
  99                 err |= clSetKernelArg(__K, 3, sizeof(N), &N);
 100 #endif
 101
 102 #ifdef __cplusplus
 103                 __K->setArg(4, K);
 104 #else
 105                 err |= clSetKernelArg(__K, 4, sizeof(K), &K);
 106 #endif
 107                 /* For const arguments we use CL_MEM_USE_READ_ONLY */
 108
 109 #ifdef __cplusplus
 110                 Buffer buf_alpha(*ti_cblas_ocl_context, CL_MEM_READ_ONLY|CL_MEM_USE_HOST_PTR, 2*sizeof(double), (void *)alpha);
 111                 __K->setArg(5, buf_alpha);
 112 #else
 113                 cl_mem buf_alpha = clCreateBuffer(ti_cblas_ocl_context, CL_MEM_READ_ONLY|CL_MEM_USE_HOST_PTR, 2*sizeof(double), (void *)alpha, &err);
 114                 TI_CBLAS_OCL_CHKERROR("clCreateBuffer",err);
 115                 err |= clSetKernelArg(__K, 5, sizeof(buf_alpha), &buf_alpha);
 116                 TI_CBLAS_OCL_CHKERROR("clSetKernelArg",err);
 117 #endif
 118                 /* For const arguments we use CL_MEM_USE_READ_ONLY */
 119
 120                 int size_bufA;
 121                 size_bufA = 2*BLAS_ORD_T(Order,Trans,N,K)*lda*sizeof(double);
 122                 size_bufA = MAX(size_bufA,1);
 123
 124 #ifdef __cplusplus
 125                 Buffer buf_A(*ti_cblas_ocl_context, CL_MEM_READ_ONLY|CL_MEM_USE_HOST_PTR, size_bufA, (void *)A);
 126                 __K->setArg(6, buf_A);
 127 #else
 128                 cl_mem buf_A = clCreateBuffer(ti_cblas_ocl_context, CL_MEM_READ_ONLY|CL_MEM_USE_HOST_PTR, size_bufA, (void *)A, &err);
 129                 TI_CBLAS_OCL_CHKERROR("clCreateBuffer",err);
 130                 err |= clSetKernelArg(__K, 6, sizeof(buf_A), &buf_A);
 131                 TI_CBLAS_OCL_CHKERROR("clSetKernelArg",err);
 132 #endif
 133
 134 #ifdef __cplusplus
 135                 __K->setArg(7, lda);
 136 #else
 137                 err |= clSetKernelArg(__K, 7, sizeof(lda), &lda);
 138 #endif
 139                 /* For const arguments we use CL_MEM_USE_READ_ONLY */
 140
 141                 int size_bufB;
 142                 size_bufB = 2*BLAS_ORD_T(Order,Trans,N,K)*ldb*sizeof(double);
 143                 size_bufB = MAX(size_bufB,1);
 144
 145 #ifdef __cplusplus
 146                 Buffer buf_B(*ti_cblas_ocl_context, CL_MEM_READ_ONLY|CL_MEM_USE_HOST_PTR, size_bufB, (void *)B);
 147                 __K->setArg(8, buf_B);
 148 #else
 149                 cl_mem buf_B = clCreateBuffer(ti_cblas_ocl_context, CL_MEM_READ_ONLY|CL_MEM_USE_HOST_PTR, size_bufB, (void *)B, &err);
 150                 TI_CBLAS_OCL_CHKERROR("clCreateBuffer",err);
 151                 err |= clSetKernelArg(__K, 8, sizeof(buf_B), &buf_B);
 152                 TI_CBLAS_OCL_CHKERROR("clSetKernelArg",err);
 153 #endif
 154
 155 #ifdef __cplusplus
 156                 __K->setArg(9, ldb);
 157 #else
 158                 err |= clSetKernelArg(__K, 9, sizeof(ldb), &ldb);
 159 #endif
 160                 /* For const arguments we use CL_MEM_USE_READ_ONLY */
 161
 162 #ifdef __cplusplus
 163                 Buffer buf_beta(*ti_cblas_ocl_context, CL_MEM_READ_ONLY|CL_MEM_USE_HOST_PTR, 2*sizeof(double), (void *)beta);
 164                 __K->setArg(10, buf_beta);
 165 #else
 166                 cl_mem buf_beta = clCreateBuffer(ti_cblas_ocl_context, CL_MEM_READ_ONLY|CL_MEM_USE_HOST_PTR, 2*sizeof(double), (void *)beta, &err);
 167                 TI_CBLAS_OCL_CHKERROR("clCreateBuffer",err);
 168                 err |= clSetKernelArg(__K, 10, sizeof(buf_beta), &buf_beta);
 169                 TI_CBLAS_OCL_CHKERROR("clSetKernelArg",err);
 170 #endif
 171
 172                 int size_bufC;
 173                 size_bufC = 2*N*ldc*sizeof(double);
 174                 size_bufC = MAX(size_bufC,1);
 175
 176 #ifdef __cplusplus
 177                 Buffer buf_C(*ti_cblas_ocl_context, CL_MEM_READ_WRITE|CL_MEM_USE_HOST_PTR, size_bufC, (void *)C);
 178                 __K->setArg(11, buf_C);
 179 #else
 180                 cl_mem buf_C = clCreateBuffer(ti_cblas_ocl_context, CL_MEM_READ_WRITE|CL_MEM_USE_HOST_PTR, size_bufC, (void *)C, &err);
 181                 TI_CBLAS_OCL_CHKERROR("clCreateBuffer",err);
 182                 err |= clSetKernelArg(__K, 11, sizeof(buf_C), &buf_C);
 183                 TI_CBLAS_OCL_CHKERROR("clSetKernelArg",err);
 184 #endif
 185
 186 #ifdef __cplusplus
 187                 __K->setArg(12, ldc);
 188 #else
 189                 err |= clSetKernelArg(__K, 12, sizeof(ldc), &ldc);
 190 #endif
 191                 void *msmc_ptr;
 192                 msmc_ptr = ti_cblas_mem_alloc(MSMC_BUF_SIZE);
 193 #ifdef __cplusplus
 194                 //Buffer buf_MSMC(ti_cblas_ocl_context, CL_MEM_READ_WRITE|CL_MEM_USE_MSMC_TI, MSMC_BUF_SIZE);
 195                 Buffer buf_MSMC(*ti_cblas_ocl_context, CL_MEM_READ_WRITE|CL_MEM_USE_HOST_PTR, MSMC_BUF_SIZE, (void *)msmc_ptr);
 196                 __K->setArg(13, buf_MSMC);
 197
 198 #else
 199                 //cl_mem buf_MSMC = clCreateBuffer(ti_cblas_ocl_context, CL_MEM_READ_WRITE|CL_MEM_USE_MSMC_TI, MSMC_BUF_SIZE, NULL, &err);
 200                 cl_mem buf_MSMC = clCreateBuffer(ti_cblas_ocl_context, CL_MEM_READ_WRITE|CL_MEM_USE_HOST_PTR, MSMC_BUF_SIZE, (void *)msmc_ptr, &err);
 201                 TI_CBLAS_OCL_CHKERROR("clCreateBuffer",err);
 202                 err |= clSetKernelArg(__K, 13, sizeof(buf_MSMC), &buf_MSMC);
 203                 TI_CBLAS_OCL_CHKERROR("clSetKernelArg",err);
 204 #endif
 205
 206 #ifdef __cplusplus
 207                 __K->setArg(14, __local(L2_BUF_SIZE));
 208 #else
 209                 err |= clSetKernelArg(__K, 14, L2_BUF_SIZE, NULL);
 210 #endif
 211
 212 #ifdef __cplusplus
 213                 ti_cblas_ocl_Q->enqueueTask(*__K, 0, &e);
 214                 e.wait();
 215 #else
 216                 cl_event e;
 217                 err |= clEnqueueTask(ti_cblas_ocl_Q, __K, 0, 0, &e);
 218                 TI_CBLAS_OCL_CHKERROR("clEnqueueTask",err);
 219                 err |= clWaitForEvents(1, &e);
 220                 TI_CBLAS_OCL_CHKERROR("clWaitForEvents",err);
 221                 err |= clReleaseEvent(e);
 222                 TI_CBLAS_OCL_CHKERROR("clReleaseEvent",err);
 223
 224 #endif
 225                 ti_cblas_mem_free(msmc_ptr);
 226
 227                 ti_cblas_delete_kernel(__K);
 228
 229                 TI_CBLAS_DEBUG_PRINT("Finished executing %s\n", "cblas_zsyr2k");
 230                 TI_CBLAS_PROFILE_REPORT("  Entire %s call (DSP) took %8.2f us\n","cblas_zsyr2k", (float) clock_diff);
 231                 return ;
 232         }
 233
 234 #ifdef __cplusplus
 235         catch (Error err)
 236         {
 237                 ti_cblas_error(err.what(),err.err());
 238                 return ;
 239         }
 240 #endif
 241 }
 242