]> git.kernelconcepts.de Git - karo-tx-linux.git/commitdiff
lib/mpi: Endianness fix
authorMichal Marek <mmarek@suse.com>
Wed, 17 Feb 2016 13:46:59 +0000 (14:46 +0100)
committerGreg Kroah-Hartman <gregkh@linuxfoundation.org>
Wed, 4 May 2016 21:48:51 +0000 (14:48 -0700)
commit 3ee0cb5fb5eea2110db1b5cb7f67029b7be8a376 upstream.

The limbs are integers in the host endianness, so we can't simply
iterate over the individual bytes. The current code happens to work on
little-endian, because the order of the limbs in the MPI array is the
same as the order of the bytes in each limb, but it breaks on
big-endian.

Fixes: 0f74fbf77d45 ("MPI: Fix mpi_read_buffer")
Signed-off-by: Michal Marek <mmarek@suse.com>
Signed-off-by: Herbert Xu <herbert@gondor.apana.org.au>
Signed-off-by: Greg Kroah-Hartman <gregkh@linuxfoundation.org>
lib/mpi/mpicoder.c

index 3db76b8c11158f5ce2b3884898e3d2abfbd6d91a..e00ff00e861cea3654dc6483e03a7bf21485b88e 100644 (file)
@@ -128,6 +128,23 @@ leave:
 }
 EXPORT_SYMBOL_GPL(mpi_read_from_buffer);
 
+static int count_lzeros(MPI a)
+{
+       mpi_limb_t alimb;
+       int i, lzeros = 0;
+
+       for (i = a->nlimbs - 1; i >= 0; i--) {
+               alimb = a->d[i];
+               if (alimb == 0) {
+                       lzeros += sizeof(mpi_limb_t);
+               } else {
+                       lzeros += count_leading_zeros(alimb) / 8;
+                       break;
+               }
+       }
+       return lzeros;
+}
+
 /**
  * mpi_read_buffer() - read MPI to a bufer provided by user (msb first)
  *
@@ -146,7 +163,7 @@ int mpi_read_buffer(MPI a, uint8_t *buf, unsigned buf_len, unsigned *nbytes,
        uint8_t *p;
        mpi_limb_t alimb;
        unsigned int n = mpi_get_size(a);
-       int i, lzeros = 0;
+       int i, lzeros;
 
        if (buf_len < n || !buf || !nbytes)
                return -EINVAL;
@@ -154,14 +171,7 @@ int mpi_read_buffer(MPI a, uint8_t *buf, unsigned buf_len, unsigned *nbytes,
        if (sign)
                *sign = a->sign;
 
-       p = (void *)&a->d[a->nlimbs] - 1;
-
-       for (i = a->nlimbs * sizeof(alimb) - 1; i >= 0; i--, p--) {
-               if (!*p)
-                       lzeros++;
-               else
-                       break;
-       }
+       lzeros = count_lzeros(a);
 
        p = buf;
        *nbytes = n - lzeros;
@@ -343,7 +353,7 @@ int mpi_write_to_sgl(MPI a, struct scatterlist *sgl, unsigned *nbytes,
        u8 *p, *p2;
        mpi_limb_t alimb, alimb2;
        unsigned int n = mpi_get_size(a);
-       int i, x, y = 0, lzeros = 0, buf_len;
+       int i, x, y = 0, lzeros, buf_len;
 
        if (!nbytes || *nbytes < n)
                return -EINVAL;
@@ -351,14 +361,7 @@ int mpi_write_to_sgl(MPI a, struct scatterlist *sgl, unsigned *nbytes,
        if (sign)
                *sign = a->sign;
 
-       p = (void *)&a->d[a->nlimbs] - 1;
-
-       for (i = a->nlimbs * sizeof(alimb) - 1; i >= 0; i--, p--) {
-               if (!*p)
-                       lzeros++;
-               else
-                       break;
-       }
+       lzeros = count_lzeros(a);
 
        *nbytes = n - lzeros;
        buf_len = sgl->length;