Dividir cadeia grande em pedaços de tamanho n em JavaScript

208

Gostaria de dividir uma string muito grande (digamos, 10.000 caracteres) em pedaços de tamanho N.

Qual seria a melhor maneira em termos de desempenho para fazer isso?

Por exemplo: "1234567890"dividir por 2 se tornaria["12", "34", "56", "78", "90"] .

Seria possível usar algo assim e, nesse String.prototype.matchcaso, seria a melhor maneira de fazê-lo em termos de desempenho?

tribe84
fonte

Respostas:

456

Você pode fazer algo assim:

"1234567890".match(/.{1,2}/g);
// Results in:
["12", "34", "56", "78", "90"]

O método ainda funcionará com strings cujo tamanho não é um múltiplo exato do tamanho do pedaço:

"123456789".match(/.{1,2}/g);
// Results in:
["12", "34", "56", "78", "9"]

Em geral, para qualquer string da qual você deseja extrair no máximo substrings de tamanho n , você faria:

str.match(/.{1,n}/g); // Replace n with the size of the substring

Se sua string puder conter novas linhas ou retornos de carro, você faria:

str.match(/(.|[\r\n]){1,n}/g); // Replace n with the size of the substring

Quanto ao desempenho, tentei isso com aproximadamente 10k caracteres e demorou um pouco mais de um segundo no Chrome. YMMV.

Isso também pode ser usado em uma função reutilizável:

function chunkString(str, length) {
  return str.match(new RegExp('.{1,' + length + '}', 'g'));
}
Vivin Paliath
fonte
8
Como essa resposta agora tem quase 3 anos, eu queria tentar o teste de desempenho feito pelo @Vivin novamente. Então, para sua informação, dividir 100k caracteres dois a dois usando o regex fornecido é instantâneo no Chrome v33.
aymericbeaumet
1
@Fmstrat O que você quer dizer com "se sua string contém espaços, ela não conta no comprimento"? Sim, .não corresponde à nova linha. Vou atualizar a resposta para que ele leva \ne \rem conta.
Vivin Paliath
2
Algo como var chunks = str.split("").reverse().join().match(/.{1, 4}/).map(function(s) { return s.split("").reverse().join(); });. Isso ocorre em partes de 4. Não sei ao certo o que você quer dizer com "menos ou mais". Lembre-se de que isso não funcionará em geral, especialmente com strings que contêm caracteres combinados e também podem quebrar strings Unicode.
Vivin Paliath
2
De acordo com developer.mozilla.org/pt-BR/docs/Web/JavaScript/Reference/…, você pode combinar qualquer caractere, incluindo novas linhas, com [^]. Com isso, seu exemplo resultaria em:str.match(/[^]{1,n}/g)
Francesc Rosas
1
Para quem procura chunking de string realmente rápido com benchmarks de desempenho no jsperf, veja minha resposta . Usar um regex é o método de chunking mais lento de todos.
Justin Warkentin
34

Eu criei várias variantes mais rápidas que você pode ver no jsPerf . Meu favorito é este:

function chunkSubstr(str, size) {
  const numChunks = Math.ceil(str.length / size)
  const chunks = new Array(numChunks)

  for (let i = 0, o = 0; i < numChunks; ++i, o += size) {
    chunks[i] = str.substr(o, size)
  }

  return chunks
}
Justin Warkentin
fonte
2
então isso funcionou fabulosamente em seqüências longas (cerca de 800k - 9m caracteres), exceto quando eu defini o tamanho para 20 por algum motivo, o último pedaço não foi retornado ... comportamento muito estranho.
David David
1
@DavidAnderton Good catch. Corrigi e, curiosamente, parece correr ainda mais rápido. Estava arredondando quando deveria estar fazendo Math.ceil()para determinar o número correto de pedaços.
Justin Warkentin
1
Obrigado! Eu coloquei seu conjunto, como um módulo de NPM com suporte a Unicode opcional - github.com/vladgolubev/fast-chunk-string
Vlad Holubiev
33

Bottom line:

  • matché muito ineficiente, sliceé melhor, no Firefox substr/ substringé melhor ainda
  • match é ainda mais ineficiente para cadeias curtas (mesmo com regex em cache - provavelmente devido ao tempo de configuração da análise de regex)
  • match é ainda mais ineficiente para um tamanho grande de bloco (provavelmente devido à incapacidade de "pular")
  • para cordas mais longas com tamanho de bloco muito pequeno, matchsupera o desempenho sliceno IE mais antigo, mas ainda perde em todos os outros sistemas
  • rochas jsperf
Tgr
fonte
19

Essa é uma solução rápida e direta -

function chunkString (str, len) {
  const size = Math.ceil(str.length/len)
  const r = Array(size)
  let offset = 0
  
  for (let i = 0; i < size; i++) {
    r[i] = str.substr(offset, len)
    offset += len
  }
  
  return r
}

console.log(chunkString("helloworld", 3))
// => [ "hel", "low", "orl", "d" ]

// 10,000 char string
const bigString = "helloworld".repeat(1000)
console.time("perf")
const result = chunkString(bigString, 3)
console.timeEnd("perf")
console.log(result)
// => perf: 0.385 ms
// => [ "hel", "low", "orl", "dhe", "llo", "wor", ... ]

Obrigado
fonte
1
Você tem que usar em substr()vez de substring().
Leif
2
Estou curioso, por que os sublinhados nos nomes das variáveis?
Felipe Valdes
@FelipeValdes Suponho que não os confunda com variáveis ​​globais / parâmetros ou os denote como de escopo particular.
Mr. Polywhirl
15

Surpresa! Você pode usar dividir para dividir.

var parts = "1234567890 ".split(/(.{2})/).filter(O=>O)

Resulta em [ '12', '34', '56', '78', '90', ' ' ]

Fozi
fonte
Esta é a resposta mais impressionante.
28718 galkin
2
Para que serve filter (o=>o)?
Ben Carp
2
O regex atual cria elementos vazios da matriz entre os pedaços. filter(x=>x)é usado para filtrar os elementos vazios
artemdev
Curto e inteligente, mas itera sobre a entrada várias vezes. Esta resposta é mais do que 4x mais lenta do que outras soluções neste segmento.
Obrigado
6
@BenCarp É o operador de moto. Isso faz com que seja mais rápido. ;)
Fozi 9/10/19
7
var str = "123456789";
var chunks = [];
var chunkSize = 2;

while (str) {
    if (str.length < chunkSize) {
        chunks.push(str);
        break;
    }
    else {
        chunks.push(str.substr(0, chunkSize));
        str = str.substr(chunkSize);
    }
}

alert(chunks); // chunks == 12,34,56,78,9
FishBasketGordo
fonte
5

Eu escrevi uma função estendida, para que o comprimento do pedaço também possa ser uma matriz de números, como [1,3]

String.prototype.chunkString = function(len) {
    var _ret;
    if (this.length < 1) {
        return [];
    }
    if (typeof len === 'number' && len > 0) {
        var _size = Math.ceil(this.length / len), _offset = 0;
        _ret = new Array(_size);
        for (var _i = 0; _i < _size; _i++) {
            _ret[_i] = this.substring(_offset, _offset = _offset + len);
        }
    }
    else if (typeof len === 'object' && len.length) {
        var n = 0, l = this.length, chunk, that = this;
        _ret = [];
        do {
            len.forEach(function(o) {
                chunk = that.substring(n, n + o);
                if (chunk !== '') {
                    _ret.push(chunk);
                    n += chunk.length;
                }
            });
            if (n === 0) {
                return undefined; // prevent an endless loop when len = [0]
            }
        } while (n < l);
    }
    return _ret;
};

O código

"1234567890123".chunkString([1,3])

retornará:

[ '1', '234', '5', '678', '9', '012', '3' ]
Egon Schmid
fonte
4

Divida a string grande em Pequenas strings de determinadas palavras .

function chunkSubstr(str, words) {
  var parts = str.split(" ") , values = [] , i = 0 , tmpVar = "";
  $.each(parts, function(index, value) {
      if(tmpVar.length < words){
          tmpVar += " " + value;
      }else{
          values[i] = tmpVar.replace(/\s+/g, " ");
          i++;
          tmpVar = value;
      }
  });
  if(values.length < 1 &&  parts.length > 0){
      values[0] = tmpVar;
  }
  return values;
}
Haseeb
fonte
3
var l = str.length, lc = 0, chunks = [], c = 0, chunkSize = 2;
for (; lc < l; c++) {
  chunks[c] = str.slice(lc, lc += chunkSize);
}
Poetro
fonte
2

Eu usaria um regex ...

var chunkStr = function(str, chunkLength) {
    return str.match(new RegExp('[\\s\\S]{1,' + +chunkLength + '}', 'g'));
}
alex
fonte
1
const getChunksFromString = (str, chunkSize) => {
    var regexChunk = new RegExp(`.{1,${chunkSize}}`, 'g')   // '.' represents any character
    return str.match(regexChunk)
}

Ligue conforme necessário

console.log(getChunksFromString("Hello world", 3))   // ["Hel", "lo ", "wor", "ld"]
Ben Carp
fonte
1

Aqui está uma solução que eu criei para seqüências de caracteres de modelo depois de um pouco de experiência:

Uso:

chunkString(5)`testing123`

function chunkString(nSize) {
    return (strToChunk) => {
        let result = [];
        let chars = String(strToChunk).split('');

        for(let i = 0; i < (String(strToChunk).length / nSize); i++) {
            result = result.concat(chars.slice(i*nSize,(i+1)*nSize).join(''));
        }
        return result
    }
}

document.write(chunkString(5)`testing123`);
// returns: testi,ng123

document.write(chunkString(3)`testing123`);
// returns: tes,tin,g12,3

Alex W
fonte
1

Você pode usar reduce()sem qualquer regex:

(str, n) => {
  return str.split('').reduce(
    (acc, rec, index) => {
      return ((index % n) || !(index)) ? acc.concat(rec) : acc.concat(',', rec)
    },
    ''
  ).split(',')
}
bitterCode
fonte
Eu acho que vai ajudar muito se você fornecer exemplos de como usar seu reducemétodo.
kiatng 30/03
0

Na forma de uma função de protótipo:

String.prototype.lsplit = function(){
    return this.match(new RegExp('.{1,'+ ((arguments.length==1)?(isFinite(String(arguments[0]).trim())?arguments[0]:false):1) +'}', 'g'));
}
Awesomolocity
fonte
0

Aqui está o código que estou usando, ele usa String.prototype.slice .

Sim, é bastante longo para responder, pois tenta seguir os padrões atuais o mais próximo possível e, é claro, contém uma quantidade razoável de comentários do JSDOC . No entanto, uma vez minificado, o código tem apenas 828 bytes e uma vez compactado para transmissão, tem apenas 497 bytes.

O método 1 que isso adiciona String.prototype(usando Object.defineProperty, quando disponível) é:

  1. toChunks

Vários testes foram incluídos para verificar a funcionalidade.

Preocupado que o comprimento do código afete o desempenho? Não precisa se preocupar, http://jsperf.com/chunk-string/3

Grande parte do código extra existe para garantir que o código responda da mesma forma em vários ambientes javascript.

/*jslint maxlen:80, browser:true, devel:true */

/*
 * Properties used by toChunks.
 */

/*property
    MAX_SAFE_INTEGER, abs, ceil, configurable, defineProperty, enumerable,
    floor, length, max, min, pow, prototype, slice, toChunks, value,
    writable
*/

/*
 * Properties used in the testing of toChunks implimentation.
 */

/*property
    appendChild, createTextNode, floor, fromCharCode, getElementById, length,
    log, pow, push, random, toChunks
*/

(function () {
    'use strict';

    var MAX_SAFE_INTEGER = Number.MAX_SAFE_INTEGER || Math.pow(2, 53) - 1;

    /**
     * Defines a new property directly on an object, or modifies an existing
     * property on an object, and returns the object.
     *
     * @private
     * @function
     * @param {Object} object
     * @param {string} property
     * @param {Object} descriptor
     * @return {Object}
     * @see https://goo.gl/CZnEqg
     */
    function $defineProperty(object, property, descriptor) {
        if (Object.defineProperty) {
            Object.defineProperty(object, property, descriptor);
        } else {
            object[property] = descriptor.value;
        }

        return object;
    }

    /**
     * Returns true if the operands are strictly equal with no type conversion.
     *
     * @private
     * @function
     * @param {*} a
     * @param {*} b
     * @return {boolean}
     * @see http://www.ecma-international.org/ecma-262/5.1/#sec-11.9.4
     */
    function $strictEqual(a, b) {
        return a === b;
    }

    /**
     * Returns true if the operand inputArg is undefined.
     *
     * @private
     * @function
     * @param {*} inputArg
     * @return {boolean}
     */
    function $isUndefined(inputArg) {
        return $strictEqual(typeof inputArg, 'undefined');
    }

    /**
     * The abstract operation throws an error if its argument is a value that
     * cannot be converted to an Object, otherwise returns the argument.
     *
     * @private
     * @function
     * @param {*} inputArg The object to be tested.
     * @throws {TypeError} If inputArg is null or undefined.
     * @return {*} The inputArg if coercible.
     * @see https://goo.gl/5GcmVq
     */
    function $requireObjectCoercible(inputArg) {
        var errStr;

        if (inputArg === null || $isUndefined(inputArg)) {
            errStr = 'Cannot convert argument to object: ' + inputArg;
            throw new TypeError(errStr);
        }

        return inputArg;
    }

    /**
     * The abstract operation converts its argument to a value of type string
     *
     * @private
     * @function
     * @param {*} inputArg
     * @return {string}
     * @see https://people.mozilla.org/~jorendorff/es6-draft.html#sec-tostring
     */
    function $toString(inputArg) {
        var type,
            val;

        if (inputArg === null) {
            val = 'null';
        } else {
            type = typeof inputArg;
            if (type === 'string') {
                val = inputArg;
            } else if (type === 'undefined') {
                val = type;
            } else {
                if (type === 'symbol') {
                    throw new TypeError('Cannot convert symbol to string');
                }

                val = String(inputArg);
            }
        }

        return val;
    }

    /**
     * Returns a string only if the arguments is coercible otherwise throws an
     * error.
     *
     * @private
     * @function
     * @param {*} inputArg
     * @throws {TypeError} If inputArg is null or undefined.
     * @return {string}
     */
    function $onlyCoercibleToString(inputArg) {
        return $toString($requireObjectCoercible(inputArg));
    }

    /**
     * The function evaluates the passed value and converts it to an integer.
     *
     * @private
     * @function
     * @param {*} inputArg The object to be converted to an integer.
     * @return {number} If the target value is NaN, null or undefined, 0 is
     *                   returned. If the target value is false, 0 is returned
     *                   and if true, 1 is returned.
     * @see http://www.ecma-international.org/ecma-262/5.1/#sec-9.4
     */
    function $toInteger(inputArg) {
        var number = +inputArg,
            val = 0;

        if ($strictEqual(number, number)) {
            if (!number || number === Infinity || number === -Infinity) {
                val = number;
            } else {
                val = (number > 0 || -1) * Math.floor(Math.abs(number));
            }
        }

        return val;
    }

    /**
     * The abstract operation ToLength converts its argument to an integer
     * suitable for use as the length of an array-like object.
     *
     * @private
     * @function
     * @param {*} inputArg The object to be converted to a length.
     * @return {number} If len <= +0 then +0 else if len is +INFINITY then
     *                   2^53-1 else min(len, 2^53-1).
     * @see https://people.mozilla.org/~jorendorff/es6-draft.html#sec-tolength
     */
    function $toLength(inputArg) {
        return Math.min(Math.max($toInteger(inputArg), 0), MAX_SAFE_INTEGER);
    }

    if (!String.prototype.toChunks) {
        /**
         * This method chunks a string into an array of strings of a specified
         * chunk size.
         *
         * @function
         * @this {string} The string to be chunked.
         * @param {Number} chunkSize The size of the chunks that the string will
         *                           be chunked into.
         * @returns {Array} Returns an array of the chunked string.
         */
        $defineProperty(String.prototype, 'toChunks', {
            enumerable: false,
            configurable: true,
            writable: true,
            value: function (chunkSize) {
                var str = $onlyCoercibleToString(this),
                    chunkLength = $toInteger(chunkSize),
                    chunked = [],
                    numChunks,
                    length,
                    index,
                    start,
                    end;

                if (chunkLength < 1) {
                    return chunked;
                }

                length = $toLength(str.length);
                numChunks = Math.ceil(length / chunkLength);
                index = 0;
                start = 0;
                end = chunkLength;
                chunked.length = numChunks;
                while (index < numChunks) {
                    chunked[index] = str.slice(start, end);
                    start = end;
                    end += chunkLength;
                    index += 1;
                }

                return chunked;
            }
        });
    }
}());

/*
 * Some tests
 */

(function () {
    'use strict';

    var pre = document.getElementById('out'),
        chunkSizes = [],
        maxChunkSize = 512,
        testString = '',
        maxTestString = 100000,
        chunkSize = 0,
        index = 1;

    while (chunkSize < maxChunkSize) {
        chunkSize = Math.pow(2, index);
        chunkSizes.push(chunkSize);
        index += 1;
    }

    index = 0;
    while (index < maxTestString) {
        testString += String.fromCharCode(Math.floor(Math.random() * 95) + 32);
        index += 1;
    }

    function log(result) {
        pre.appendChild(document.createTextNode(result + '\n'));
    }

    function test() {
        var strLength = testString.length,
            czLength = chunkSizes.length,
            czIndex = 0,
            czValue,
            result,
            numChunks,
            pass;

        while (czIndex < czLength) {
            czValue = chunkSizes[czIndex];
            numChunks = Math.ceil(strLength / czValue);
            result = testString.toChunks(czValue);
            czIndex += 1;
            log('chunksize: ' + czValue);
            log(' Number of chunks:');
            log('  Calculated: ' + numChunks);
            log('  Actual:' + result.length);
            pass = result.length === numChunks;
            log(' First chunk size: ' + result[0].length);
            pass = pass && result[0].length === czValue;
            log(' Passed: ' + pass);
            log('');
        }
    }

    test();
    log('');
    log('Simple test result');
    log('abcdefghijklmnopqrstuvwxyz'.toChunks(3));
}());
<pre id="out"></pre>

Xotic750
fonte
0

Usando o método slice ():

function returnChunksArray(str, chunkSize) {
  var arr = [];
  while(str !== '') {
    arr.push(str.slice(0, chunkSize));
    str = str.slice(chunkSize);
  }
  return arr;
}

O mesmo pode ser feito usando o método substring ().

function returnChunksArray(str, chunkSize) {
  var arr = [];
  while(str !== '') {
    arr.push(str.substring(0, chunkSize));
    str = str.substring(chunkSize);
  }
  return arr;
}
Plácido
fonte
0

Meu problema com a solução acima é que ela carrega a corda em pedaços de tamanho formal, independentemente da posição nas frases.

Eu acho que a seguir uma abordagem melhor; embora precise de alguns ajustes no desempenho:

 static chunkString(str, length, size,delimiter='\n' ) {
        const result = [];
        for (let i = 0; i < str.length; i++) {
            const lastIndex = _.lastIndexOf(str, delimiter,size + i);
            result.push(str.substr(i, lastIndex - i));
            i = lastIndex;
        }
        return result;
    }
Ahmad Alhyari
fonte
0

Você pode definitivamente fazer algo como

let pieces = "1234567890 ".split(/(.{2})/).filter(x => x.length == 2);

para conseguir esta:

[ '12', '34', '56', '78', '90' ]

Se você deseja inserir / ajustar dinamicamente o tamanho do pedaço, de modo que os pedaços tenham o tamanho n, faça o seguinte:

n = 2;
let pieces = "1234567890 ".split(new RegExp("(.{"+n.toString()+"})")).filter(x => x.length == n);

Para encontrar todos os pedaços possíveis de tamanho n na string original, tente o seguinte:

let subs = new Set();
let n = 2;
let str = "1234567890 ";
let regex = new RegExp("(.{"+n.toString()+"})");     //set up regex expression dynamically encoded with n

for (let i = 0; i < n; i++){               //starting from all possible offsets from position 0 in the string
    let pieces = str.split(regex).filter(x => x.length == n);    //divide the string into chunks of size n...
    for (let p of pieces)                 //...and add the chunks to the set
        subs.add(p);
    str = str.substr(1);    //shift the string reading frame
}

Você deve terminar com:

[ '12', '23', '34', '45', '56', '67', '78', '89', '90', '0 ' ]
Adrian
fonte
-1
    window.format = function(b, a) {
        if (!b || isNaN(+a)) return a;
        var a = b.charAt(0) == "-" ? -a : +a,
            j = a < 0 ? a = -a : 0,
            e = b.match(/[^\d\-\+#]/g),
            h = e && e[e.length - 1] || ".",
            e = e && e[1] && e[0] || ",",
            b = b.split(h),
            a = a.toFixed(b[1] && b[1].length),
            a = +a + "",
            d = b[1] && b[1].lastIndexOf("0"),
            c = a.split(".");
        if (!c[1] || c[1] && c[1].length <= d) a = (+a).toFixed(d + 1);
        d = b[0].split(e);
        b[0] = d.join("");
        var f = b[0] && b[0].indexOf("0");
        if (f > -1)
            for (; c[0].length < b[0].length - f;) c[0] = "0" + c[0];
        else +c[0] == 0 && (c[0] = "");
        a = a.split(".");
        a[0] = c[0];
        if (c = d[1] && d[d.length -
                1].length) {
            for (var d = a[0], f = "", k = d.length % c, g = 0, i = d.length; g < i; g++) f += d.charAt(g), !((g - k + 1) % c) && g < i - c && (f += e);
            a[0] = f
        }
        a[1] = b[1] && a[1] ? h + a[1] : "";
        return (j ? "-" : "") + a[0] + a[1]
    };

var str="1234567890";
var formatstr=format( "##,###.", str);
alert(formatstr);


This will split the string in reverse order with comma separated after 3 char's. If you want you can change the position.
Murali Krish
fonte
-1

E esse pequeno pedaço de código:

function splitME(str, size) {
    let subStr = new RegExp('.{1,' + size + '}', 'g');
    return str.match(subStr);
};
Hari
fonte
-2
function chunkString(str, length = 10) {
    let result = [],
        offset = 0;
    if (str.length <= length) return result.push(str) && result;
    while (offset < str.length) {
        result.push(str.substr(offset, length));
        offset += length;
    }
    return result;
}
Alexandr Stepanov
fonte
4
Sua resposta não adiciona nada de novo (em comparação com as outras respostas) e não possui descrição como as outras respostas.
flob