拓扑园

  • O&M
    • Universal部署
    • PHP+VUE+Laravel相关
  • Oracle性能优化
  • Oracle项目案例
    • Oracle近期项目案例(目录)
    • Oracle实战问题解析(目录)
    • Oracle数据库名变更流程(2种方式)
    • Oracle数据库目录更换流程(使用Oracle的clone工具)
    • Oracle数据库迁移方案(目录)
    • 标准化文档系列
  • Oracle基础知识
    • LLL的Oracle培训(分类)
    • LLL的docker培训(分类)
    • 标准化文档系列--(分类)
    • Oracle核心经典分析(分类)
    • 图灵小队----(分类并包含以下文章)
    • --MySQL8.0/Oracle/Memcached/Redis等安装配置于RHEL/OL6/7/8.X系列-运行环境最优配置
    • --PG安装配置于RHEL/9X系列-运行环境最优配置
    • --自动维护任务详解-开启、关闭信息统计收集(统计信息)
    • --图灵小队—Oracle/PostgreSQL下创建一个用户测试表(自行定义数据行)
    • --图灵小队-Oracle存储过程导出表的明细_UTL_FILE(文章)
    • --图灵小队-Oracle数据库删除/卸载操作指南(文章)
    • --图灵小队-Oracle常用性能查询SQL语句(文章)
    • --图灵小队-Oracle数据库上线前检查(文章)
    • --图灵小队-Oracle常用SQL语句(文章)
    • --图灵小队—Linux/Oracle脚本/MySQL合集(持续更新)
    • --图灵小队-Oracle技巧记录(文章)
    • ADG
    • RAC
    • ASM
    • OGG
    • RMAN
    • EXPDP/IMPDP
    • 工厂数据导入导出系列
  • MySQL
    • MySQL数据库规范
    • MySQL项目案例
    • MySQL安装配置
    • MYSQL集群项目
    • MySQL常见处理
    • MySQL-Sysbench专题
    • MySQL-Percona Toolkit专题
  • Linux
    • Shell编程
    • kubernetes
    • docker
    • Linux
    • PHP
    • Nginx
    • haproxy
    • mail
    • 网站
    • 域名
    • 网址收藏
  • 数据中心
    • 新框架系统集合
    • 工作文档
    • EBS数据文件扩容
    • VMware虚拟化
    • EBS系列
    • 大数据
    • SVN
    • zabbix
    • SAP
    • 备份相关
    • FC交换机
    • SVN
  • K-Studing
    • D8-Python学习
    • Oracle/MySQl等面试题
    • LG-MySQL
    • LG-Docker/K8S
    • LG-PostgreSQL
    • LG-ORACLE_BBED
    • LG-ORACLE
    • LG-Elasticsearch(ES)+ELK
    • Oracle-19C-OCP
    • WERN_ORACLE培训
    • redis数据库
    • Nginx培训学习系列
  • 其他
    • 外研英语4年级下册-听力
    • 影视系列
    • 如何使用iTunes软件通过抓包下载旧版本的ios的app
天高任鸟飞
Oracle/MySQL数据库恢复/数据迁移/生产规范报告技术交流:TEL:18562510581(微信同号);加微信入群
  1. 首页
  2. Oracle项目案例
  3. 近期项目案例
  4. 正文

expdp/impdp解决方案—MES数据库列字段被篡改(需要进行修改为原大小)

2023年7月10日 771点热度 0人点赞 0条评论

目录

  • 一、MES数据库问题描述
    • 1、现象
      • (1)开发描述,mes_prd用户下的很多表的列属性变为了4000。
      • (2)所有表的列数量
    • 2、分析原因
  • 二、解决方案测试
    • 1、需要的数据和库
      • (1)需要的数据
      • (2)需要的数据库库 -192.168.20.222
    • 2、导出生产库A的数据-192.168.20.219
    • 3、导出生产库B的数据结构-192.168.20.220
    • 4、测试库C的操作-192.168.20.222
      • (1)创建用户和表空间等
      • (3)导入生产库数据库A的数据
  • 三、根据告警,处理相关数据
    • 1、处理超出字段列长度的表
    • (1)从日志中获取表信息
    • (2)删除上述表,并获取表中数据最大的长度
      • (3)导入原悲愤中此表数据
      • (4)修改表的列长
    • 2、处理有值为null的
      • (1)获取有null值的表
      • (2)然后呢?
    • 3、处理其他问题

一、MES数据库问题描述

1、现象

(1)开发描述,mes_prd用户下的很多表的列属性变为了4000。

(2)所有表的列数量

2、分析原因

在早期,数据库曾中毒,后期数据导入后,没有再进行检查,最近测试才发现。

二、解决方案测试

使用expdp/impdp导入导出功能进行测试。

1、需要的数据和库

(1)需要的数据

有问题的生产库A的数据导出(expdp)-192.168.20.219

正常的生产库B的数据结构导出(expdp)-192.168.20.220

(2)需要的数据库库 -192.168.20.222

测试库C:用于导入生产库B的数据结构和生产库A的数据。

2、导出生产库A的数据-192.168.20.219

expdp mes_prd/mes800 directory=BACKUP_PRD dumpfile=lyyw20230711-expdp.dmp logfile=expdp_metadata2.log content=METADATA_ONLY exclude=statistics

3、导出生产库B的数据结构-192.168.20.220

expdp mes_prd/mes800 directory=BACKUP_PRD dumpfile=expdp_metdata.dmp logfile=expdp_metadata.log content=METADATA_ONLY exclude=statistics

4、测试库C的操作-192.168.20.222

(1)创建用户和表空间等

drop user mes_prd cascade;
drop tablespace mes_prd including conntents and datafiles;
drop tablespace MES_PRD_TEMP_NEW including contents and datafiles;
drop tablespace MES_MM including contents and datafiles;
drop tablespace MES_MM_TEMP including contents and datafiles; 
create user mes_prd identified by mes800;
grant dba to mes_prd;
grant read,write on directory backup_mes to mes_prd;

create tablespace MES_PRD datafile '/oradata/oradata/MES_PRD_DATA.dbf' size 4000M autoextend on next 500M maxsize unlimited uniform size 1M logging extent management local segment space management auto;
ALTER TABLESPACE MES_PRD ADD DATAFILE '/oradata/oradata/MES_PRD_DATA01.dbf' SIZE 1000M AUTOEXTEND ON NEXT 500M MAXSIZE UNLIMITED; 
ALTER TABLESPACE MES_PRD ADD DATAFILE '/oradata/oradata/MES_PRD_DATA02.dbf' SIZE 1000M AUTOEXTEND ON NEXT 500M MAXSIZE UNLIMITED; 
ALTER TABLESPACE MES_PRD ADD DATAFILE '/oradata/oradata/MES_PRD_DATA03.dbf' SIZE 1000M AUTOEXTEND ON NEXT 500M MAXSIZE UNLIMITED; 
ALTER TABLESPACE MES_PRD ADD DATAFILE '/oradata/oradata/MES_PRD_DATA04.dbf' SIZE 1000M AUTOEXTEND ON NEXT 500M MAXSIZE UNLIMITED; 
ALTER TABLESPACE MES_PRD ADD DATAFILE '/oradata/oradata/MES_PRD_DATA05.dbf' SIZE 1000M AUTOEXTEND ON NEXT 500M MAXSIZE UNLIMITED; 
ALTER TABLESPACE MES_PRD ADD DATAFILE '/oradata/oradata/MES_PRD_DATA06.dbf' SIZE 1000M AUTOEXTEND ON NEXT 500M MAXSIZE UNLIMITED;

create temporary tablespace MES_PRD_TEMP_NEW TEMPFILE '/oradata/oradata/MES_PRD_TEMP_NEW.dbf' size 1000M reuse autoextend on next 200M maxsize unlimited;
create user MES_PRD identified by **** default tablespace MES_PRD temporary tablespace MES_PRD_TEMP_NEW;
grant connect,dba,resource to MES_PRD ;
create or replace directory backup_PRD as '/oradata/expdp';
GRANT READ,WRITE ON DIRECTORY backup_PRD to MES_PRD;
GRANT READ,WRITE ON DIRECTORY backup_PRD to system;
create tablespace MES_MM datafile '/oradata/oradata/MES_MM_DATA.dbf' size 4000M autoextend on next 500M maxsize unlimited uniform size 1M logging extent management local segment space management auto;
create temporary tablespace MES_MM_TEMP TEMPFILE '/oradata/oradata/MES_MM_TEMP.dbf' size 500M reuse autoextend on next 20M maxsize unlimited;

(2)导入生产库B的数据结构

impdp mes_prd/mes800 directory=BACKUP_PRD dumpfile=expdp_metdata.dmp logfile=expdp_metadata.log exclude=statistics

(3)导入生产库数据库A的数据

impdp mes_prd/mes800 directory=BACKUP_PRD dumpfile=MESPRD_20230711001000.DMP logfile=lyyw20230715.log TABLE_EXISTS_ACTION=append exclude=statistics

三、根据告警,处理相关数据

日志lyyw20230715

1、处理超出字段列长度的表

(1)从日志中获取表信息

KUP-11007: conversion error loading table "MES_PRD"."MES_DRAWING_PIC"
ORA-12899: value too large for column PICNAME (actual: 60, maximum: 50)
KUP-11007: conversion error loading table "MES_PRD"."MES_BAN_STATUS"
ORA-12899: value too large for column BUFFER79 (actual: 51, maximum: 50)

KUP-11007: conversion error loading table "MES_PRD"."MES_SO_MAIN_YW"
ORA-12899: value too large for column BUFFER30 (actual: 54, maximum: 50)
KUP-11007: conversion error loading table "MES_PRD"."MES_QM_COMPLAIN"
ORA-12899: value too large for column BUFFER7 (actual: 53, maximum: 50)
KUP-11009: data for row: BUFFER7 : 0X'514996FE5EA6FF1A539F68370036002053CD99886837003100'

(2)删除上述表,并获取表中数据最大的长度

(3)导入原悲愤中此表数据

(4)修改表的列长

2、处理有值为null的

(1)获取有null值的表

KUP-11007: conversion error loading table "MES_PRD"."NEIP_LOG"
KUP-11007: conversion error loading table "MES_PRD"."SYSSTB"
KUP-11007: conversion error loading table "MES_PRD"."MES_JMT_SEND"
KUP-11007: conversion error loading table "MES_PRD"."PRDIFO"
KUP-11007: conversion error loading table "MES_PRD"."MES_JMT_DELIVERSHEETS"
KUP-11007: conversion error loading table "MES_PRD"."MES_JMT_QMDEAL"
KUP-11007: conversion error loading table "MES_PRD"."HRCQA"
KUP-11007: conversion error loading table "MES_PRD"."MES_SO_OTHERMAIN"
KUP-11007: conversion error loading table "MES_PRD"."OO_USERFUNC"
KUP-11007: conversion error loading table "MES_PRD"."NEIP_RELATIONSHIPSETLOG"
KUP-11007: conversion error loading table "MES_PRD"."SA_PERSALLO"

(2)然后呢?

想想。

3、处理其他问题

ORA-31693: Table data object "MES_PRD"."MES_SO_MAIN_YW" failed to load/unload and is being skipped due to error:
ORA-00001: unique constraint (MES_PRD.UNIQUE_MES_SO_MAIN_YW) violated
ORA-31693: Table data object "MES_PRD"."MES_SO_APPRESULT" failed to load/unload and is being skipped due to error:
ORA-00001: unique constraint (MES_PRD.PK_MES_SO_APPRESULT) violated
ORA-31693: Table data object "MES_PRD"."MES_WC_PROPER" failed to load/unload and is being skipped due to error:
ORA-00001: unique constraint (MES_PRD.PK_MES_WC_PROPER) violated
ORA-31693: Table data object "MES_PRD"."MES_SO_OTHERDETAIL" failed to load/unload and is being skipped due to error:
ORA-00001: unique constraint (MES_PRD.PK_MES_SO_OTHERDETAIL) violated


本作品采用 知识共享署名 4.0 国际许可协议 进行许可
标签: 暂无
最后更新:2023年9月7日

admin

这个人很懒,什么都没留下

打赏 点赞
< 上一篇
下一篇 >

COPYRIGHT © 2022 拓扑园. ALL RIGHTS RESERVED.

Theme Kratos Made By Seaton Jiang

鲁ICP备2021020523号

鲁ICP备2021020523号