Merge commit '3a177a9cca924e097265b32f9282814f6b653e08'
authorMichael Niedermayer <michaelni@gmx.at>
Sat, 3 May 2014 21:36:01 +0000 (23:36 +0200)
committerMichael Niedermayer <michaelni@gmx.at>
Sat, 3 May 2014 21:36:54 +0000 (23:36 +0200)
* commit '3a177a9cca924e097265b32f9282814f6b653e08':
  swscale: Fix an undefined behaviour

Merged-by: Michael Niedermayer <michaelni@gmx.at>
1  2 
libswscale/utils.c

@@@ -388,9 -329,9 +388,9 @@@ static av_cold int initFilter(int16_t *
          FF_ALLOC_OR_GOTO(NULL, filter,
                           dstW * sizeof(*filter) * filterSize, fail);
  
 -        xDstInSrc = xInc - 0x10000;
 +        xDstInSrc = ((dstPos*(int64_t)xInc)>>7) - ((srcPos*0x10000LL)>>7);
          for (i = 0; i < dstW; i++) {
-             int xx = (xDstInSrc - ((filterSize - 2) << 16)) / (1 << 17);
+             int xx = (xDstInSrc - ((int64_t)(filterSize - 2) << 16)) / (1 << 17);
              int j;
              (*filterPos)[i] = xx;
              for (j = 0; j < filterSize; j++) {