Форум пользователей MySQL

kaiseri · 09.05.2019 09:31:12

Добрый день, подскажите плиз, версия mysql 5.7.26-0ubuntu0.16.04.1

В таблице есть поле json, и есть виртуальное поле `reg_virtual` (json_unquote(json_extract(`teh_reg_json`,'$[0]')))

При любом изменении, попытке добавить или удалить новый столбец в таблицу, изменить данные в поле json получаю ошибку
/* Ошибка SQL (1048): Column 'reg_virtual' cannot be null */

Как исправить?

deadka · 09.05.2019 09:48:09

Добрый день, покажите show create table t;
и какие данные у Вас в таблице?

kaiseri · 09.05.2019 10:30:41

CREATE TABLE `parse` (

    `id` INT(11) NOT NULL AUTO_INCREMENT,

    `teh_reg_json` JSON NOT NULL,

    `a_organ_regnumber` VARCHAR(120) NOT NULL,

    `a_status` INT(11) NULL DEFAULT NULL,

    `a_id_signer` INT(11) NOT NULL DEFAULT '0',

    `a_signer` VARCHAR(255) NOT NULL,

    `a_id_legal_subject` INT(11) NOT NULL DEFAULT '0',

    `a_product_id_group` JSON NOT NULL,

    `a_cert_doc_type` INT(11) NOT NULL,

    `a_cert_doc_issued_rss_certification_scheme` LONGTEXT NULL,

    `reg_virtual` INT(11) AS (json_unquote(json_extract(`teh_reg_json`,'$[0]'))) VIRTUAL,

    `reg1_virtual` INT(11) AS (json_unquote(json_extract(`teh_reg_json`,'$[1]'))) VIRTUAL,

    `reg2_virtual` INT(11) AS (json_unquote(json_extract(`teh_reg_json`,'$[2]'))) VIRTUAL,

    PRIMARY KEY (`id`),

    INDEX `a_reg_number` (`a_reg_number`),

    INDEX `a_name_declarant` (`a_name_declarant`),

    INDEX `a_reg_number_organ` (`a_reg_number_organ`),

    INDEX `a_laborant` (`a_laborant`) USING BTREE,

    INDEX `did` (`did`),

    INDEX `a_product_info_rss_product_ts_tn_ved` (`a_product_info_rss_ts_tn_ved`),

    INDEX `parse` (`a_parse`)

)

COLLATE='utf8_general_ci'

ENGINE=MyISAM

ROW_FORMAT=DYNAMIC

AUTO_INCREMENT=948627

;

kaiseri · 09.05.2019 10:33:48

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (925217, 'null', 0, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (1, '[]', 0, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (915156, '[97167]', 97167, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (913286, '[5]', 5, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (913313, '[6]', 6, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (912923, '[8]', 8, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (913435, '[10]', 10, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (912915, '[11]', 11, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (913200, '[12]', 12, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (912910, '[14]', 14, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (913507, '[16]', 16, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (912956, '[17]', 17, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (916658, '[18]', 18, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (913113, '[19]', 19, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (912943, '[20]', 20, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (913177, '[24]', 24, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (913292, '[26]', 26, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (913556, '[29]', 29, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (913070, '[30]', 30, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (914218, '[33]', 33, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (913132, '[36]', 36, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (915191, '[37]', 37, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (912922, '[39]', 39, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (918295, '[40]', 40, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (914929, '[1]', 1, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (913088, '[56]', 56, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (913621, '[97210]', 97210, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (927564, '[97147]', 97147, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (914501, '[5, 14]', 5, 14, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (912947, '[11, 14]', 11, 14, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (912906, '[11, 24]', 11, 24, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (919620, '[12, 14]', 12, 14, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (914603, '[14, 11]', 14, 11, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (920099, '[14, 12]', 14, 12, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (924294, '[14, 16]', 14, 16, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (913985, '[14, 24]', 14, 24, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (914347, '[14, 5]', 14, 5, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (916604, '[17, 24]', 17, 24, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (921085, '[16, 14]', 16, 14, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (916110, '[16, 24]', 16, 24, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (913074, '[24, 11]', 24, 11, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (914512, '[24, 14]', 24, 14, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (913394, '[24, 17]', 24, 17, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (935064, '[18, 37]', 18, 37, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (920771, '[39, 17]', 39, 17, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (920074, '[37, 18]', 37, 18, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (937287, '[14, 24, 0]', 14, 24, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (938159, '[1, 0, 0]', 1, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (941325, '[40, 0, 0]', 40, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (937426, '[19, 0, 0]', 19, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (937185, '[11, 24, 0]', 11, 24, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (937349, '[56, 0, 0]', 56, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (937558, '[14, 11, 5]', 14, 11, 5);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (916608, '[14, 11, 24]', 14, 11, 24);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (946805, '[97147, 0, 0]', 97147, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (937160, '[24, 11, 0]', 24, 11, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (947617, '[14, 24, 11]', 14, 24, 11);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (937161, '[11, 0, 0]', 11, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (937718, '[97210, 0, 0]', 97210, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (937659, '[33, 0, 0]', 33, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (937916, '[14, 5, 0]', 14, 5, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (937484, '[24, 14, 0]', 24, 14, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (938895, '[17, 24, 0]', 17, 24, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (930430, '[97147, 24, 11]', 97147, 24, 11);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (937198, '[24, 17, 0]', 24, 17, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (938854, '[5, 14, 0]', 5, 14, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (938250, '[26, 0, 0]', 26, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (941167, '[24, 19, 0]', 24, 19, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (937209, '[30, 0, 0]', 30, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (937301, '[5, 0, 0]', 5, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (937169, '[36, 0, 0]', 36, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (938038, '[6, 0, 0]', 6, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (913324, '[24, 14, 11]', 24, 14, 11);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (914887, '[24, 11, 14]', 24, 11, 14);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (916501, '[24, 17, 11]', 24, 17, 11);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (930774, '[24, 19, 11]', 24, 19, 11);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (946722, '[24, 19, 17]', 24, 19, 17);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (913486, '[24, 16, 11]', 24, 16, 11);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (937158, '[39, 0, 0]', 39, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (937159, '[17, 0, 0]', 17, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (937157, '[8, 0, 0]', 8, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (939049, '[16, 14, 0]', 16, 14, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (941216, '[14, 11, 0]', 14, 11, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (937482, '[10, 0, 0]', 10, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (937248, '[0, 0, 0]', 0, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (937210, '[12, 0, 0]', 12, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (937514, '[29, 0, 0]', 29, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (937183, '[14, 0, 0]', 14, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (940628, '[37, 0, 0]', 37, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (937219, '[16, 0, 0]', 16, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (913445, '[11, 14, 24]', 11, 14, 24);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (940199, '[11, 17, 24]', 11, 17, 24);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (924258, '[11, 16, 24]', 11, 16, 24);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (937449, '[11, 14, 0]', 11, 14, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (937170, '[24, 0, 0]', 24, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (938459, '[97167, 0, 0]', 97167, 0, 0);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (941402, '[24, 14, 11, 5]', 24, 14, 11);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (932540, '[24, 16, 14, 11]', 24, 16, 14);

INSERT INTO `parse` (`id`, `teh_reg_json`, `reg_virtual`, `reg1_virtual`, `reg2_virtual`) VALUES (930755, '[24, 19, 11, 5]', 24, 19, 11);

kaiseri · 09.05.2019 13:26:51

Сделал дамп, перенес на другой сервер. Спокойно удалил виртуальную колонку. sql_mode на двух серверах одинаковый. Что еще может быть?

paulus · 09.05.2019 19:34:45

Звучит как ошибка в самой таблице. Пробовали делать REPAIR / пересоздать на том же сервере?

kaiseri · 10.05.2019 18:44:17

да, REPAIR делал не помогло.

решил проблему как раз, да, перенс на другой, посмотрел, что там все нормально, сделал нужные изменения и вернул обратно. Теперь работает. А вообще как искать такую проблему в базе? и как лечить, если REPAIR не помог.

paulus · 10.05.2019 19:33:39

Выглядит как какая-то ошибка с данными. REPAIR обычно чинит только индексы, поэтому не помогало.
Скорее всего, помогло бы полное перестроение (CREATE TABLE parse_new LIKE parse; INSERT INTO parse_new SELECT * FROM parse; DROP TABLE parse; RENAME TABLE parse_new TO parse).

У Вас специально используется MyISAM? Давно с ним не пересекался. Сейчас обычно используют InnoDB,
он более устойчив к падениям сервера (а потому меньше вероятность побить табличку).

kaiseri · 12.05.2019 13:39:59

нет ), остался от старта работ.

Но перед переводом надо проверить, поскольку в базе практически весь вывод идет с подсчетом документов, то есть практически в каждом запросе используется

COUNT(*) GROUP BY `feild` ORDER BY  COUNT(*)

И так местами притормаживает, а count пишут в innodb медленный.

paulus · 12.05.2019 13:56:17

Попробуйте, думаю, что с теми запросами, которые Вы написали, должно работать не хуже MyISAM (особенно при наличии индекса на `field`)

Форум пользователей MySQL

#1 09.05.2019 09:31:12

Ошибка 1048

#2 09.05.2019 09:48:09

Re: Ошибка 1048

#3 09.05.2019 10:30:41

Re: Ошибка 1048

#4 09.05.2019 10:33:48

Re: Ошибка 1048

#5 09.05.2019 13:26:51

Re: Ошибка 1048

#6 09.05.2019 19:34:45

Re: Ошибка 1048

#7 10.05.2019 18:44:17

Re: Ошибка 1048

#8 10.05.2019 19:33:39

Re: Ошибка 1048

#9 12.05.2019 13:39:59

Re: Ошибка 1048

#10 12.05.2019 13:56:17

Re: Ошибка 1048

Board footer