MySQL carrega valores NULL a partir de dados CSV

Eu tenho um arquivo que pode conter de 3 a 4 colunas de valores numéricos que são separados por vírgula. Os campos vazios são definidos com exceção quando estão no final da linha:

1,2,3,4,5
1,2,3,,5
1,2,3

A tabela a seguir foi criada no MySQL:

+ ------- + -------- + ------ + ----- + --------- + ------- +
| Campo Tipo | Nulo Chave Padrão | Extra |
+ ------- + -------- + ------ + ----- + --------- + ------- +
| um | int (1) | SIM | NULL |
| dois | int (1) | Sim | NULL |
| três | int (1) | SIM | NULL |
| quatro | int (1) | SIM | NULL |
| cinco | int (1) | SIM | NULL |
+ ------- + -------- + ------ + ----- + --------- + ------- +

Estou tentando carregar os dados usando o comando MySQL LOAD:

LOAD DATA INFILE '/tmp/testdata.txt' INTO TABLE moo FIELDS 
TERMINATED BY "," LINES TERMINATED BY "\n";

A tabela resultante:

+ ------ + ------ + ------- + ------ + ------ +
| um | dois | três | quatro | cinco |
+ ------ + ------ + ------- + ------ + ------ +
| 1 | 2 3 4 | 5
| 1 | 2 3 0 5
| 1 | 2 3 NULL NULL
+ ------ + ------ + ------- + ------ + ------ +

O problema está no fato de que quando um campo está vazio nos dados brutos e não é definido, o MySQL, por algum motivo, não usa o valor padrão das colunas (que é NULL) e usa zero. NULL é usado corretamente quando o campo está ausente.

Infelizmente, eu tenho que ser capaz de distinguir entre NULL e 0 nesta fase, para que qualquer ajuda seja apreciada.

Obrigado S.

editar

A saída de SHOW WARNINGS:

+ --------- + ------ + -------------------------------- ------------------------ +
| Nível | Código Mensagem |
+ --------- + ------ + -------------------------------- ------------------------ +
| Aviso | 1366 Valor inteiro incorreto: '' para a coluna 'quatro' na linha 2 |
| Aviso | 1261 Linha 3 não contém dados para todas as colunas |
| Aviso | 1261 Linha 3 não contém dados para todas as colunas |
+ --------- + ------ + -------------------------------- ------------------------ +

Isso fará o que você quiser. Ele lê o quarto campo em uma variável local e, em seguida, define o valor real do campo como NULL, se a variável local acabar contendo uma sequência vazia:

LOAD DATA INFILE '/tmp/testdata.txt'
INTO TABLE moo
FIELDS TERMINATED BY ","
LINES TERMINATED BY "\n"
(one, two, three, @vfour, five)
SET four = NULLIF(@vfour,'')
;

Se todos estiverem vazios, você os lerá em variáveis ​​e terá várias instruções SET, como esta:

LOAD DATA INFILE '/tmp/testdata.txt'
INTO TABLE moo
FIELDS TERMINATED BY ","
LINES TERMINATED BY "\n"
(@vone, @vtwo, @vthree, @vfour, @vfive)
SET
one = NULLIF(@vone,''),
two = NULLIF(@vtwo,''),
three = NULLIF(@vthree,''),
four = NULLIF(@vfour,'')
;

O manual do MySQL diz:

Ao ler dados com LOAD DATA INFILE, as colunas vazias ou ausentes são atualizadas com ''. Se você deseja um valor NULL em uma coluna, use \ N no arquivo de dados. A palavra literal "NULL" também pode ser usada em algumas circunstâncias.

Então, você precisa substituir os espaços em branco por \ N assim:

1,2,3,4,5
1,2,3,\N,5
1,2,3

O comportamento é diferente dependendo da configuração do banco de dados. No modo estrito, isso geraria um erro ou um aviso. A consulta a seguir pode ser usada para identificar a configuração do banco de dados.

mysql> show variables like 'sql_mode';

Pré-processe seu CSV de entrada para substituir entradas em branco por \ N.

Tentativa em um regex: s / ,, /, \ n, / ge es /, $ /, \ N / g

Boa sorte.

(variável1, @ variável2, ..) SET variável2 = nullif (@ variável2, '' ou '') >> você pode colocar qualquer condição

mostrar variáveis

Show variables like "`secure_file_priv`";

Nota: mantenha seu arquivo csv no local indicado pelo comando acima.

create table assessments (course_code varchar(5),batch_code varchar(7),id_assessment int, assessment_type varchar(10), date int , weight int);

Nota: aqui a datecoluna ' ' possui alguns valores em branco no arquivo csv.

LOAD DATA INFILE 'C:/ProgramData/MySQL/MySQL Server 8.0/Uploads/assessments.csv' 
INTO TABLE assessments
FIELDS TERMINATED BY ',' 
OPTIONALLY ENCLOSED BY '' 
LINES TERMINATED BY '\n' 
IGNORE 1 ROWS 
(course_code,batch_code,id_assessment,assessment_type,@date,weight)
SET date = IF(@date = '', NULL, @date);