Dividir documento em vários arquivos por informação de coluna [RESOLVIDO]

msoliver escreveu:



Boa noite DeidyC.
Segue o script:

#!/bin/bash

NL=$(awk 'END {print NR}' $1)

while FS=" " read -r c1 c2 c3 c4;do

for ((i=1;i<=$NL;i++));do

if [ $c4 -eq $i ];then

echo "$c1 $c2 $c3 $c4" >> arquivo"$i"

fi

done

done < $1

 

OBS.:
Salve em um arquivo de texto, e de permissão para execução:

chmod +x nomedoscript 

Para EXECUTAR, faça:
./nomedoscript.sh ARQUIVO_FONTE
Onde:
ARQUIVO_FONTE é o seu arquivo com os dados.

cat ARQUIVO_FONTE

101 TIO TIO 1

102 TIO TIO 1

101 TIA TIA 3

102 TIA TIA 3

101 TIO TIO 5

102 TIO TIO 5

 

--------------------------------------------------------------------------------------------------------
Se resolver, marque como resolvido, por favor.
Gostando da resposta, marque-a como MELHOR, dessa forma, ganho uns pontinhos,
o que incentiva a continuar colaborando, ajudando, participando e compartilhando conhecimentos . . . :)
--------------------------------------------------------------------------------------------------------
Att.:
Marcelo

# apt-get purge systemd (não é prá digitar isso!)

Encryption works. Properly implemented strong crypto systems are one of the few things that you can rely on. Unfortunately, endpoint security is so terrifically weak that NSA can frequently find ways around it. — Edward Snowden

listeiro_037 escreveu:

Esse programa não mostra coisa alguma porque ele já cria os arquivos no seu HD.
Experimente ver se os arquivos foram criados no seu disco.

Para ficar mais visível, experimente criar um diretório chamado TESTE, copiar o seu arquivo de texto principal e o arquivo de script dentro dele. Entre no diretório TESTE no terminal e execute.

Você pode abrir outra instância do terminal e dar ls dentro do diretório e ver se ele vai criando os arquivos.

----------------------------------------------------------------------------------------------------------------

msoliver escreveu:



Boa noite DeidyC.
Segue o script:

#!/bin/bash

NL=$(awk 'END {print NR}' $1)

while FS=" " read -r c1 c2 c3 c4;do

for ((i=1;i<=$NL;i++));do

if [ $c4 -eq $i ];then

echo "$c1 $c2 $c3 $c4" >> arquivo"$i"

fi

done

done < $1

 

OBS.:
Salve em um arquivo de texto, e de permissão para execução:

chmod +x nomedoscript 

Para EXECUTAR, faça:
./nomedoscript.sh ARQUIVO_FONTE
Onde:
ARQUIVO_FONTE é o seu arquivo com os dados.

cat ARQUIVO_FONTE

101 TIO TIO 1

102 TIO TIO 1

101 TIA TIA 3

102 TIA TIA 3

101 TIO TIO 5

102 TIO TIO 5

 

--------------------------------------------------------------------------------------------------------
Se resolver, marque como resolvido, por favor.
Gostando da resposta, marque-a como MELHOR, dessa forma, ganho uns pontinhos,
o que incentiva a continuar colaborando, ajudando, participando e compartilhando conhecimentos . . . :)
--------------------------------------------------------------------------------------------------------
Att.:
Marcelo

Oi, Marcelo, desculpa incomodar novamente, a programação que você fez roda certinho com arquivo pequenos, experimentei um com 20 linhas, mas quando utilizo arquivos grandes, meu arquivo 1 000 000 de linhas (1,5 GB) , ele não funciona, deixei rodar por dois dias e nada de acabar, além disso ele gera arquivos totalmente incompletos, será que ele tem algum problema de otimização você tem alguma sugestão.
Muito Obrigado!

DeidyC escreveu:
Oi, Marcelo, desculpa incomodar novamente, a programação que você fez roda certinho com arquivo pequenos, experimentei um com 20 linhas, mas quando utilizo arquivos grandes, meu arquivo 1 000 000 de linhas (1,5 GB) , ele não funciona, deixei rodar por dois dias e nada de acabar, além disso ele gera arquivos totalmente incompletos, será que ele tem algum problema de otimização você tem alguma sugestão.
Muito Obrigado!

time ./ORDENA-04.sh arq3 

real	0m1.370s

user	0m0.060s

sys	0m0.120s

 

#!/bin/bash

# USO: ./ORDENA-04.sh arquivo_dados

[ $1 ] || { sed -n 2p $0 ; exit ; }

> ARQ_TEMP.txt

ARQTMP="ARQ_TEMP.txt"

NL=$(awk 'END {print NR}' $1)

for ((i=1;i<=$NL;i++));do

if egrep " $i$" "$1" > $ARQTMP ;then

ARQ=$(printf "ARQUIVO-%07d\n" $i)

cat ARQ_TEMP.txt >> $ARQ

fi

done 

msoliver escreveu:


----------------------------------------------------------------------------------------------------------------------------------
Boa tarde Deidy.
Quais as configurações seu PC?

Eliminei o WHILE, testei com uma arquivo de 500 linhas,
gerou 250 ARQUIVOS:

time ./ORDENA-04.sh arq3 

real	0m1.370s

user	0m0.060s

sys	0m0.120s

 

NOVO SCRIPT:

#!/bin/bash

# USO: ./ORDENA-04.sh arquivo_dados

[ $1 ] || { sed -n 2p $0 ; exit ; }

> ARQ_TEMP.txt

ARQTMP="ARQ_TEMP.txt"

NL=$(awk 'END {print NR}' $1)

for ((i=1;i<=$NL;i++));do

if egrep " $i$" "$1" > $ARQTMP ;then

ARQ=$(printf "ARQUIVO-%07d\n" $i)

cat ARQ_TEMP.txt >> $ARQ

fi

done 

OBS:
Tendo em vista que seu arquivo é bastante grande, recomendo RODAR o SCRIPT, somente com o MODO TEXTO CARREGADO.

abç.:
Marcelo