OpenCL/m10410_a3.cl

   1 /**
   2  * Author......: Jens Steube <jens.steube@gmail.com>
   3  * License.....: MIT
   4  */
   5
   6 #define _MD5_
   7
   8 #include "include/constants.h"
   9 #include "include/kernel_vendor.h"
  10
  11 #define DGST_R0 0
  12 #define DGST_R1 1
  13 #define DGST_R2 2
  14 #define DGST_R3 3
  15
  16 #include "include/kernel_functions.c"
  17 #include "OpenCL/types_ocl.c"
  18 #include "OpenCL/common.c"
  19
  20 #define COMPARE_S "OpenCL/check_single_comp4.c"
  21 #define COMPARE_M "OpenCL/check_multi_comp4.c"
  22
  23 __constant u32 padding[8] =
  24 {
  25   0x5e4ebf28,
  26   0x418a754e,
  27   0x564e0064,
  28   0x0801faff,
  29   0xb6002e2e,
  30   0x803e68d0,
  31   0xfea90c2f,
  32   0x7a695364
  33 };
  34
  35 typedef struct
  36 {
  37   u8 S[256];
  38
  39   u32 wtf_its_faster;
  40
  41 } RC4_KEY;
  42
  43 static void swap (__local RC4_KEY *rc4_key, const u8 i, const u8 j)
  44 {
  45   u8 tmp;
  46
  47   tmp           = rc4_key->S[i];
  48   rc4_key->S[i] = rc4_key->S[j];
  49   rc4_key->S[j] = tmp;
  50 }
  51
  52 static void rc4_init_16 (__local RC4_KEY *rc4_key, const u32 data[4])
  53 {
  54   u32 v = 0x03020100;
  55   u32 a = 0x04040404;
  56
  57   __local u32 *ptr = (__local u32 *) rc4_key->S;
  58
  59   #pragma unroll
  60   for (u32 i = 0; i < 64; i++)
  61   {
  62     ptr[i] = v; v += a;
  63   }
  64
  65   const u32 d0 = data[0] >>  0;
  66   const u32 d1 = data[0] >>  8;
  67   const u32 d2 = data[0] >> 16;
  68   const u32 d3 = data[0] >> 24;
  69   const u32 d4 = data[1] >>  0;
  70
  71   u32 j = 0;
  72
  73   #pragma unroll
  74   for (u32 i = 0; i < 255; i += 5)
  75   {
  76     j += rc4_key->S[i + 0] + d0; swap (rc4_key, i + 0, j);
  77     j += rc4_key->S[i + 1] + d1; swap (rc4_key, i + 1, j);
  78     j += rc4_key->S[i + 2] + d2; swap (rc4_key, i + 2, j);
  79     j += rc4_key->S[i + 3] + d3; swap (rc4_key, i + 3, j);
  80     j += rc4_key->S[i + 4] + d4; swap (rc4_key, i + 4, j);
  81   }
  82
  83   j += rc4_key->S[255] + d0; swap (rc4_key, 255, j);
  84 }
  85
  86 static u8 rc4_next_16 (__local RC4_KEY *rc4_key, u8 i, u8 j, __constant u32 in[4], u32 out[4])
  87 {
  88   for (u32 k = 0; k < 4; k++)
  89   {
  90     u32 xor4 = 0;
  91
  92     u8 idx;
  93
  94     i += 1;
  95     j += rc4_key->S[i];
  96
  97     swap (rc4_key, i, j);
  98
  99     idx = rc4_key->S[i] + rc4_key->S[j];
 100
 101     xor4 |= rc4_key->S[idx] <<  0;
 102
 103     i += 1;
 104     j += rc4_key->S[i];
 105
 106     swap (rc4_key, i, j);
 107
 108     idx = rc4_key->S[i] + rc4_key->S[j];
 109
 110     xor4 |= rc4_key->S[idx] <<  8;
 111
 112     i += 1;
 113     j += rc4_key->S[i];
 114
 115     swap (rc4_key, i, j);
 116
 117     idx = rc4_key->S[i] + rc4_key->S[j];
 118
 119     xor4 |= rc4_key->S[idx] << 16;
 120
 121     i += 1;
 122     j += rc4_key->S[i];
 123
 124     swap (rc4_key, i, j);
 125
 126     idx = rc4_key->S[i] + rc4_key->S[j];
 127
 128     xor4 |= rc4_key->S[idx] << 24;
 129
 130     out[k] = in[k] ^ xor4;
 131   }
 132
 133   return j;
 134 }
 135
 136 static void m10410m (__local RC4_KEY rc4_keys[64], u32 w0[4], u32 w1[4], u32 w2[4], u32 w3[4], const u32 pw_len, __global pw_t *pws, __global kernel_rule_t *rules_buf, __global comb_t *combs_buf, __global bf_t *bfs_buf, __global void *tmps, __global void *hooks, __global u32 *bitmaps_buf_s1_a, __global u32 *bitmaps_buf_s1_b, __global u32 *bitmaps_buf_s1_c, __global u32 *bitmaps_buf_s1_d, __global u32 *bitmaps_buf_s2_a, __global u32 *bitmaps_buf_s2_b, __global u32 *bitmaps_buf_s2_c, __global u32 *bitmaps_buf_s2_d, __global plain_t *plains_buf, __global digest_t *digests_buf, __global u32 *hashes_shown, __global salt_t *salt_bufs, __global pdf_t *pdf_bufs, __global u32 *d_return_buf, __global u32 *d_scryptV_buf, const u32 bitmap_mask, const u32 bitmap_shift1, const u32 bitmap_shift2, const u32 salt_pos, const u32 loop_pos, const u32 loop_cnt, const u32 bfs_cnt, const u32 digests_cnt, const u32 digests_offset)
 137 {
 138   /**
 139    * modifier
 140    */
 141
 142   const u32 gid = get_global_id (0);
 143   const u32 lid = get_local_id (0);
 144
 145   __local RC4_KEY *rc4_key = &rc4_keys[lid];
 146
 147   /**
 148    * loop
 149    */
 150
 151   u32 w0l = w0[0];
 152
 153   for (u32 il_pos = 0; il_pos < bfs_cnt; il_pos++)
 154   {
 155     const u32 w0r = bfs_buf[il_pos].i;
 156
 157     w0[0] = w0l | w0r;
 158
 159     // now the RC4 part
 160
 161     u32 key[4];
 162
 163     key[0] = w0[0];
 164     key[1] = w0[1];
 165     key[2] = 0;
 166     key[3] = 0;
 167
 168     rc4_init_16 (rc4_key, key);
 169
 170     u32 out[4];
 171
 172     rc4_next_16 (rc4_key, 0, 0, padding, out);
 173
 174     const u32 r0 = out[0];
 175     const u32 r1 = out[1];
 176     const u32 r2 = out[2];
 177     const u32 r3 = out[3];
 178
 179     #include COMPARE_M
 180   }
 181 }
 182
 183 static void m10410s (__local RC4_KEY rc4_keys[64], u32 w0[4], u32 w1[4], u32 w2[4], u32 w3[4], const u32 pw_len, __global pw_t *pws, __global kernel_rule_t *rules_buf, __global comb_t *combs_buf, __global bf_t *bfs_buf, __global void *tmps, __global void *hooks, __global u32 *bitmaps_buf_s1_a, __global u32 *bitmaps_buf_s1_b, __global u32 *bitmaps_buf_s1_c, __global u32 *bitmaps_buf_s1_d, __global u32 *bitmaps_buf_s2_a, __global u32 *bitmaps_buf_s2_b, __global u32 *bitmaps_buf_s2_c, __global u32 *bitmaps_buf_s2_d, __global plain_t *plains_buf, __global digest_t *digests_buf, __global u32 *hashes_shown, __global salt_t *salt_bufs, __global pdf_t *pdf_bufs, __global u32 *d_return_buf, __global u32 *d_scryptV_buf, const u32 bitmap_mask, const u32 bitmap_shift1, const u32 bitmap_shift2, const u32 salt_pos, const u32 loop_pos, const u32 loop_cnt, const u32 bfs_cnt, const u32 digests_cnt, const u32 digests_offset)
 184 {
 185   /**
 186    * modifier
 187    */
 188
 189   const u32 gid = get_global_id (0);
 190   const u32 lid = get_local_id (0);
 191
 192   __local RC4_KEY *rc4_key = &rc4_keys[lid];
 193
 194   /**
 195    * digest
 196    */
 197
 198   const u32 search[4] =
 199   {
 200     digests_buf[digests_offset].digest_buf[DGST_R0],
 201     digests_buf[digests_offset].digest_buf[DGST_R1],
 202     digests_buf[digests_offset].digest_buf[DGST_R2],
 203     digests_buf[digests_offset].digest_buf[DGST_R3]
 204   };
 205
 206   /**
 207    * loop
 208    */
 209
 210   u32 w0l = w0[0];
 211
 212   for (u32 il_pos = 0; il_pos < bfs_cnt; il_pos++)
 213   {
 214     const u32 w0r = bfs_buf[il_pos].i;
 215
 216     w0[0] = w0l | w0r;
 217
 218     // now the RC4 part
 219
 220     u32 key[4];
 221
 222     key[0] = w0[0];
 223     key[1] = w0[1];
 224     key[2] = 0;
 225     key[3] = 0;
 226
 227     rc4_init_16 (rc4_key, key);
 228
 229     u32 out[4];
 230
 231     rc4_next_16 (rc4_key, 0, 0, padding, out);
 232
 233     const u32 r0 = out[0];
 234     const u32 r1 = out[1];
 235     const u32 r2 = out[2];
 236     const u32 r3 = out[3];
 237
 238     #include COMPARE_S
 239   }
 240 }
 241
 242 __kernel void __attribute__((reqd_work_group_size (64, 1, 1))) m10410_m04 (__global pw_t *pws, __global kernel_rule_t *rules_buf, __global comb_t *combs_buf, __global bf_t *bfs_buf, __global void *tmps, __global void *hooks, __global u32 *bitmaps_buf_s1_a, __global u32 *bitmaps_buf_s1_b, __global u32 *bitmaps_buf_s1_c, __global u32 *bitmaps_buf_s1_d, __global u32 *bitmaps_buf_s2_a, __global u32 *bitmaps_buf_s2_b, __global u32 *bitmaps_buf_s2_c, __global u32 *bitmaps_buf_s2_d, __global plain_t *plains_buf, __global digest_t *digests_buf, __global u32 *hashes_shown, __global salt_t *salt_bufs, __global pdf_t *pdf_bufs, __global u32 *d_return_buf, __global u32 *d_scryptV_buf, const u32 bitmap_mask, const u32 bitmap_shift1, const u32 bitmap_shift2, const u32 salt_pos, const u32 loop_pos, const u32 loop_cnt, const u32 bfs_cnt, const u32 digests_cnt, const u32 digests_offset, const u32 combs_mode, const u32 gid_max)
 243 {
 244   /**
 245    * base
 246    */
 247
 248   const u32 gid = get_global_id (0);
 249
 250   if (gid >= gid_max) return;
 251
 252   u32 w0[4];
 253
 254   w0[0] = pws[gid].i[ 0];
 255   w0[1] = pws[gid].i[ 1];
 256   w0[2] = pws[gid].i[ 2];
 257   w0[3] = pws[gid].i[ 3];
 258
 259   u32 w1[4];
 260
 261   w1[0] = 0;
 262   w1[1] = 0;
 263   w1[2] = 0;
 264   w1[3] = 0;
 265
 266   u32 w2[4];
 267
 268   w2[0] = 0;
 269   w2[1] = 0;
 270   w2[2] = 0;
 271   w2[3] = 0;
 272
 273   u32 w3[4];
 274
 275   w3[0] = 0;
 276   w3[1] = 0;
 277   w3[2] = 0;
 278   w3[3] = 0;
 279
 280   const u32 pw_len = pws[gid].pw_len;
 281
 282   /**
 283    * main
 284    */
 285
 286   __local RC4_KEY rc4_keys[64];
 287
 288   m10410m (rc4_keys, w0, w1, w2, w3, pw_len, pws, rules_buf, combs_buf, bfs_buf, tmps, hooks, bitmaps_buf_s1_a, bitmaps_buf_s1_b, bitmaps_buf_s1_c, bitmaps_buf_s1_d, bitmaps_buf_s2_a, bitmaps_buf_s2_b, bitmaps_buf_s2_c, bitmaps_buf_s2_d, plains_buf, digests_buf, hashes_shown, salt_bufs, pdf_bufs, d_return_buf, d_scryptV_buf, bitmap_mask, bitmap_shift1, bitmap_shift2, salt_pos, loop_pos, loop_cnt, bfs_cnt, digests_cnt, digests_offset);
 289 }
 290
 291 __kernel void __attribute__((reqd_work_group_size (64, 1, 1))) m10410_m08 (__global pw_t *pws, __global kernel_rule_t *rules_buf, __global comb_t *combs_buf, __global bf_t *bfs_buf, __global void *tmps, __global void *hooks, __global u32 *bitmaps_buf_s1_a, __global u32 *bitmaps_buf_s1_b, __global u32 *bitmaps_buf_s1_c, __global u32 *bitmaps_buf_s1_d, __global u32 *bitmaps_buf_s2_a, __global u32 *bitmaps_buf_s2_b, __global u32 *bitmaps_buf_s2_c, __global u32 *bitmaps_buf_s2_d, __global plain_t *plains_buf, __global digest_t *digests_buf, __global u32 *hashes_shown, __global salt_t *salt_bufs, __global pdf_t *pdf_bufs, __global u32 *d_return_buf, __global u32 *d_scryptV_buf, const u32 bitmap_mask, const u32 bitmap_shift1, const u32 bitmap_shift2, const u32 salt_pos, const u32 loop_pos, const u32 loop_cnt, const u32 bfs_cnt, const u32 digests_cnt, const u32 digests_offset, const u32 combs_mode, const u32 gid_max)
 292 {
 293   /**
 294    * base
 295    */
 296
 297   const u32 gid = get_global_id (0);
 298
 299   if (gid >= gid_max) return;
 300
 301   u32 w0[4];
 302
 303   w0[0] = pws[gid].i[ 0];
 304   w0[1] = pws[gid].i[ 1];
 305   w0[2] = pws[gid].i[ 2];
 306   w0[3] = pws[gid].i[ 3];
 307
 308   u32 w1[4];
 309
 310   w1[0] = pws[gid].i[ 4];
 311   w1[1] = pws[gid].i[ 5];
 312   w1[2] = pws[gid].i[ 6];
 313   w1[3] = pws[gid].i[ 7];
 314
 315   u32 w2[4];
 316
 317   w2[0] = 0;
 318   w2[1] = 0;
 319   w2[2] = 0;
 320   w2[3] = 0;
 321
 322   u32 w3[4];
 323
 324   w3[0] = 0;
 325   w3[1] = 0;
 326   w3[2] = 0;
 327   w3[3] = 0;
 328
 329   const u32 pw_len = pws[gid].pw_len;
 330
 331   /**
 332    * main
 333    */
 334
 335   __local RC4_KEY rc4_keys[64];
 336
 337   m10410m (rc4_keys, w0, w1, w2, w3, pw_len, pws, rules_buf, combs_buf, bfs_buf, tmps, hooks, bitmaps_buf_s1_a, bitmaps_buf_s1_b, bitmaps_buf_s1_c, bitmaps_buf_s1_d, bitmaps_buf_s2_a, bitmaps_buf_s2_b, bitmaps_buf_s2_c, bitmaps_buf_s2_d, plains_buf, digests_buf, hashes_shown, salt_bufs, pdf_bufs, d_return_buf, d_scryptV_buf, bitmap_mask, bitmap_shift1, bitmap_shift2, salt_pos, loop_pos, loop_cnt, bfs_cnt, digests_cnt, digests_offset);
 338 }
 339
 340 __kernel void __attribute__((reqd_work_group_size (64, 1, 1))) m10410_m16 (__global pw_t *pws, __global kernel_rule_t *rules_buf, __global comb_t *combs_buf, __global bf_t *bfs_buf, __global void *tmps, __global void *hooks, __global u32 *bitmaps_buf_s1_a, __global u32 *bitmaps_buf_s1_b, __global u32 *bitmaps_buf_s1_c, __global u32 *bitmaps_buf_s1_d, __global u32 *bitmaps_buf_s2_a, __global u32 *bitmaps_buf_s2_b, __global u32 *bitmaps_buf_s2_c, __global u32 *bitmaps_buf_s2_d, __global plain_t *plains_buf, __global digest_t *digests_buf, __global u32 *hashes_shown, __global salt_t *salt_bufs, __global pdf_t *pdf_bufs, __global u32 *d_return_buf, __global u32 *d_scryptV_buf, const u32 bitmap_mask, const u32 bitmap_shift1, const u32 bitmap_shift2, const u32 salt_pos, const u32 loop_pos, const u32 loop_cnt, const u32 bfs_cnt, const u32 digests_cnt, const u32 digests_offset, const u32 combs_mode, const u32 gid_max)
 341 {
 342   /**
 343    * base
 344    */
 345
 346   const u32 gid = get_global_id (0);
 347
 348   if (gid >= gid_max) return;
 349
 350   u32 w0[4];
 351
 352   w0[0] = pws[gid].i[ 0];
 353   w0[1] = pws[gid].i[ 1];
 354   w0[2] = pws[gid].i[ 2];
 355   w0[3] = pws[gid].i[ 3];
 356
 357   u32 w1[4];
 358
 359   w1[0] = pws[gid].i[ 4];
 360   w1[1] = pws[gid].i[ 5];
 361   w1[2] = pws[gid].i[ 6];
 362   w1[3] = pws[gid].i[ 7];
 363
 364   u32 w2[4];
 365
 366   w2[0] = pws[gid].i[ 8];
 367   w2[1] = pws[gid].i[ 9];
 368   w2[2] = pws[gid].i[10];
 369   w2[3] = pws[gid].i[11];
 370
 371   u32 w3[4];
 372
 373   w3[0] = pws[gid].i[12];
 374   w3[1] = pws[gid].i[13];
 375   w3[2] = 0;
 376   w3[3] = 0;
 377
 378   const u32 pw_len = pws[gid].pw_len;
 379
 380   /**
 381    * main
 382    */
 383
 384   __local RC4_KEY rc4_keys[64];
 385
 386   m10410m (rc4_keys, w0, w1, w2, w3, pw_len, pws, rules_buf, combs_buf, bfs_buf, tmps, hooks, bitmaps_buf_s1_a, bitmaps_buf_s1_b, bitmaps_buf_s1_c, bitmaps_buf_s1_d, bitmaps_buf_s2_a, bitmaps_buf_s2_b, bitmaps_buf_s2_c, bitmaps_buf_s2_d, plains_buf, digests_buf, hashes_shown, salt_bufs, pdf_bufs, d_return_buf, d_scryptV_buf, bitmap_mask, bitmap_shift1, bitmap_shift2, salt_pos, loop_pos, loop_cnt, bfs_cnt, digests_cnt, digests_offset);
 387 }
 388
 389 __kernel void __attribute__((reqd_work_group_size (64, 1, 1))) m10410_s04 (__global pw_t *pws, __global kernel_rule_t *rules_buf, __global comb_t *combs_buf, __global bf_t *bfs_buf, __global void *tmps, __global void *hooks, __global u32 *bitmaps_buf_s1_a, __global u32 *bitmaps_buf_s1_b, __global u32 *bitmaps_buf_s1_c, __global u32 *bitmaps_buf_s1_d, __global u32 *bitmaps_buf_s2_a, __global u32 *bitmaps_buf_s2_b, __global u32 *bitmaps_buf_s2_c, __global u32 *bitmaps_buf_s2_d, __global plain_t *plains_buf, __global digest_t *digests_buf, __global u32 *hashes_shown, __global salt_t *salt_bufs, __global pdf_t *pdf_bufs, __global u32 *d_return_buf, __global u32 *d_scryptV_buf, const u32 bitmap_mask, const u32 bitmap_shift1, const u32 bitmap_shift2, const u32 salt_pos, const u32 loop_pos, const u32 loop_cnt, const u32 bfs_cnt, const u32 digests_cnt, const u32 digests_offset, const u32 combs_mode, const u32 gid_max)
 390 {
 391   /**
 392    * base
 393    */
 394
 395   const u32 gid = get_global_id (0);
 396
 397   if (gid >= gid_max) return;
 398
 399   u32 w0[4];
 400
 401   w0[0] = pws[gid].i[ 0];
 402   w0[1] = pws[gid].i[ 1];
 403   w0[2] = pws[gid].i[ 2];
 404   w0[3] = pws[gid].i[ 3];
 405
 406   u32 w1[4];
 407
 408   w1[0] = 0;
 409   w1[1] = 0;
 410   w1[2] = 0;
 411   w1[3] = 0;
 412
 413   u32 w2[4];
 414
 415   w2[0] = 0;
 416   w2[1] = 0;
 417   w2[2] = 0;
 418   w2[3] = 0;
 419
 420   u32 w3[4];
 421
 422   w3[0] = 0;
 423   w3[1] = 0;
 424   w3[2] = 0;
 425   w3[3] = 0;
 426
 427   const u32 pw_len = pws[gid].pw_len;
 428
 429   /**
 430    * main
 431    */
 432
 433   __local RC4_KEY rc4_keys[64];
 434
 435   m10410s (rc4_keys, w0, w1, w2, w3, pw_len, pws, rules_buf, combs_buf, bfs_buf, tmps, hooks, bitmaps_buf_s1_a, bitmaps_buf_s1_b, bitmaps_buf_s1_c, bitmaps_buf_s1_d, bitmaps_buf_s2_a, bitmaps_buf_s2_b, bitmaps_buf_s2_c, bitmaps_buf_s2_d, plains_buf, digests_buf, hashes_shown, salt_bufs, pdf_bufs, d_return_buf, d_scryptV_buf, bitmap_mask, bitmap_shift1, bitmap_shift2, salt_pos, loop_pos, loop_cnt, bfs_cnt, digests_cnt, digests_offset);
 436 }
 437
 438 __kernel void __attribute__((reqd_work_group_size (64, 1, 1))) m10410_s08 (__global pw_t *pws, __global kernel_rule_t *rules_buf, __global comb_t *combs_buf, __global bf_t *bfs_buf, __global void *tmps, __global void *hooks, __global u32 *bitmaps_buf_s1_a, __global u32 *bitmaps_buf_s1_b, __global u32 *bitmaps_buf_s1_c, __global u32 *bitmaps_buf_s1_d, __global u32 *bitmaps_buf_s2_a, __global u32 *bitmaps_buf_s2_b, __global u32 *bitmaps_buf_s2_c, __global u32 *bitmaps_buf_s2_d, __global plain_t *plains_buf, __global digest_t *digests_buf, __global u32 *hashes_shown, __global salt_t *salt_bufs, __global pdf_t *pdf_bufs, __global u32 *d_return_buf, __global u32 *d_scryptV_buf, const u32 bitmap_mask, const u32 bitmap_shift1, const u32 bitmap_shift2, const u32 salt_pos, const u32 loop_pos, const u32 loop_cnt, const u32 bfs_cnt, const u32 digests_cnt, const u32 digests_offset, const u32 combs_mode, const u32 gid_max)
 439 {
 440   /**
 441    * base
 442    */
 443
 444   const u32 gid = get_global_id (0);
 445
 446   if (gid >= gid_max) return;
 447
 448   u32 w0[4];
 449
 450   w0[0] = pws[gid].i[ 0];
 451   w0[1] = pws[gid].i[ 1];
 452   w0[2] = pws[gid].i[ 2];
 453   w0[3] = pws[gid].i[ 3];
 454
 455   u32 w1[4];
 456
 457   w1[0] = pws[gid].i[ 4];
 458   w1[1] = pws[gid].i[ 5];
 459   w1[2] = pws[gid].i[ 6];
 460   w1[3] = pws[gid].i[ 7];
 461
 462   u32 w2[4];
 463
 464   w2[0] = 0;
 465   w2[1] = 0;
 466   w2[2] = 0;
 467   w2[3] = 0;
 468
 469   u32 w3[4];
 470
 471   w3[0] = 0;
 472   w3[1] = 0;
 473   w3[2] = 0;
 474   w3[3] = 0;
 475
 476   const u32 pw_len = pws[gid].pw_len;
 477
 478   /**
 479    * main
 480    */
 481
 482   __local RC4_KEY rc4_keys[64];
 483
 484   m10410s (rc4_keys, w0, w1, w2, w3, pw_len, pws, rules_buf, combs_buf, bfs_buf, tmps, hooks, bitmaps_buf_s1_a, bitmaps_buf_s1_b, bitmaps_buf_s1_c, bitmaps_buf_s1_d, bitmaps_buf_s2_a, bitmaps_buf_s2_b, bitmaps_buf_s2_c, bitmaps_buf_s2_d, plains_buf, digests_buf, hashes_shown, salt_bufs, pdf_bufs, d_return_buf, d_scryptV_buf, bitmap_mask, bitmap_shift1, bitmap_shift2, salt_pos, loop_pos, loop_cnt, bfs_cnt, digests_cnt, digests_offset);
 485 }
 486
 487 __kernel void __attribute__((reqd_work_group_size (64, 1, 1))) m10410_s16 (__global pw_t *pws, __global kernel_rule_t *rules_buf, __global comb_t *combs_buf, __global bf_t *bfs_buf, __global void *tmps, __global void *hooks, __global u32 *bitmaps_buf_s1_a, __global u32 *bitmaps_buf_s1_b, __global u32 *bitmaps_buf_s1_c, __global u32 *bitmaps_buf_s1_d, __global u32 *bitmaps_buf_s2_a, __global u32 *bitmaps_buf_s2_b, __global u32 *bitmaps_buf_s2_c, __global u32 *bitmaps_buf_s2_d, __global plain_t *plains_buf, __global digest_t *digests_buf, __global u32 *hashes_shown, __global salt_t *salt_bufs, __global pdf_t *pdf_bufs, __global u32 *d_return_buf, __global u32 *d_scryptV_buf, const u32 bitmap_mask, const u32 bitmap_shift1, const u32 bitmap_shift2, const u32 salt_pos, const u32 loop_pos, const u32 loop_cnt, const u32 bfs_cnt, const u32 digests_cnt, const u32 digests_offset, const u32 combs_mode, const u32 gid_max)
 488 {
 489   /**
 490    * base
 491    */
 492
 493   const u32 gid = get_global_id (0);
 494
 495   if (gid >= gid_max) return;
 496
 497   u32 w0[4];
 498
 499   w0[0] = pws[gid].i[ 0];
 500   w0[1] = pws[gid].i[ 1];
 501   w0[2] = pws[gid].i[ 2];
 502   w0[3] = pws[gid].i[ 3];
 503
 504   u32 w1[4];
 505
 506   w1[0] = pws[gid].i[ 4];
 507   w1[1] = pws[gid].i[ 5];
 508   w1[2] = pws[gid].i[ 6];
 509   w1[3] = pws[gid].i[ 7];
 510
 511   u32 w2[4];
 512
 513   w2[0] = pws[gid].i[ 8];
 514   w2[1] = pws[gid].i[ 9];
 515   w2[2] = pws[gid].i[10];
 516   w2[3] = pws[gid].i[11];
 517
 518   u32 w3[4];
 519
 520   w3[0] = pws[gid].i[12];
 521   w3[1] = pws[gid].i[13];
 522   w3[2] = 0;
 523   w3[3] = 0;
 524
 525   const u32 pw_len = pws[gid].pw_len;
 526
 527   /**
 528    * main
 529    */
 530
 531   __local RC4_KEY rc4_keys[64];
 532
 533   m10410s (rc4_keys, w0, w1, w2, w3, pw_len, pws, rules_buf, combs_buf, bfs_buf, tmps, hooks, bitmaps_buf_s1_a, bitmaps_buf_s1_b, bitmaps_buf_s1_c, bitmaps_buf_s1_d, bitmaps_buf_s2_a, bitmaps_buf_s2_b, bitmaps_buf_s2_c, bitmaps_buf_s2_d, plains_buf, digests_buf, hashes_shown, salt_bufs, pdf_bufs, d_return_buf, d_scryptV_buf, bitmap_mask, bitmap_shift1, bitmap_shift2, salt_pos, loop_pos, loop_cnt, bfs_cnt, digests_cnt, digests_offset);
 534 }