DBImport v3.3 中文版发布:数据库数据互导及文档生成工具(IT人员必备)

简介:

前言:

好久没写文了, 距离上一篇文章是3个月前的事了,虽然工作很忙,主要还是缺少写作的内容和激情,所以没怎么动手。

之前有一个来月不断面试不同层次来应聘的人员,很有想写文的冲动,后来还是忍住了。

估计写了也是那种说人坏话、恨铁不成钢的情绪文,没啥营养,所以情绪过了就没想写了。

在公司除了管理上的事情之外,另外也研发了一套适用信息系统的快速开发框架,这个有机会再写写文和大伙分享了。 

下面言归正文了。

背景:

关于这个DBImport工具,发布的版本不多,仅有:V1.0、V2.0、V3.0、V3.2和今天发布的V3.3。

由于自己平时用到这个工具(导数据、导数据脚本、生成数据库文档)的频率并不频繁,

加上上一个版本已经很稳定,基本满足个人需求,所以更新的频率不高,从V3.0开始,一年多才发布一个版本。

此次版本更新的动力主要来自(付费或非付费)用户的需求和CYQ.Data底层框架的驱动。

下面看看历史正文:

DBImport V3.3版本更新的内容如下:

1:增加MSSQL、MySql、Oracle间的数据互导时,同时转换相关的字段说明。

PS:导数据的时候,把说明也带过去,如果你想复制公司的一个数据库,又没有导入导出备份等权限时,用这工具导就O了。

2:数据库脚本导出增加字段说明脚本。

PS:有了1,2也顺理出来了。 

3:增加小数位的处理,各数据间互导时不会出现精度丢失。

PS:之前的版本在小数位上,如果需要精准导过去,需要手工处理下生成的表结构,改好小数再导,这次直接做足这方面的事了。 

4:数据库文档导出增加小数位字段显示。

PS:有了3,4也顺理出来了。 

5:增加N种数据类型的处理,这些数据类型可能不见常。

PS:这个说的比较泛,是因为把MSSQL的所有类型都给处理了,底层代码也改了不少,所以东西太多就用更泛的词来解释了。

6:配置项增加是否使用存储过程分页设置。

PS:由于底层CYQ.Data框架去掉Oracle的分页存储过程,对于MSSQL的分布存储过程也增加了配置项可不启用,所以软件上也多了这么个配置项。

7:配置项增加以下操作项:

A:批量插入【包含主键】

B:批量插入【忽略主键】

C:批量更新【根据主键自动识别】

D:插入或更新【根据主键自动识别】

 

PS:这个功能很强大,通过D选项,几乎可以实现两个数据库间的数据同步,而且重复导N次也不怕不怕了。 


下载地址:
http://www.cyqdata.com/download/article-detail-42517

 

新版上图:

 

分享本次版本更新遇到的问题:

1:MSSQL:

A:timestamp 类型,存储的是二进制数据,其它数据库类型是日期,需要特殊处理。

B:识别各数据库版本号,可以通过Connection对象的ServerVersion属性获取,以前竟然没在意这个字段。

C:使用SqlBulkCopy批量插入,要注意数据长度问题,如果长度被截断,会引发MSSQL服务直接挂掉,很变态的结果。 

D:numeric 类型木有对应的SqlDbType。

E:当where in id(1,2,3,4,...) 表达式直接上1万时,MSSQL2000直接就超时挂了,其它版本数据库正常。 

F:MSSQL2000 木有Xml字段,同样也木有max相关的东西,都需要转换其它类型处理。 

G:向MSSQL数据库里插二进制数据,可以这么整:

UPDATE AllType SET
b5=newid(),
-- b7='<aa>dddd</aa>'
a1=(SELECT * FROM OPENROWSET(BULK N'C:\Users\cyq\Pictures\ico\taobao.ico', SINGLE_BLOB) AS aa)

WHERE id=1

2:SQLite:

A:如果字段为自增,那么这个字段必须为主键,而且只能存在这一个主键。

B:如果为自增加,数据库脚本关键字字义必须提前,不能后面定义,如:

正解的:
"ID" INTEGER PRIMARY KEY AUTOINCREMENT NOT NULL,
错误的:
"ID" INTEGER  AUTOINCREMENT NOT NULL,
PRIMARY KEY ("ID") 

C:对于GUID类型的字段,由于存储结构为16进制,所以查询比较麻烦,需要进行以下的转换后,才能进行比较查询:

string gv=BitConverter.ToString(new Guid(&#8220;509e4e37-43ed-4e3d-b3bc-1c0929f0d151&#8221;).ToByteArray()).Replace("-", ""); 

最后的 条件就变成where id=x'gv这串东西'

3:Access:

A:对于GUID,正常是where id='509e4e37-43ed-4e3d-b3bc-1c0929f0d151',但是这种条件只有在查询和***时是正常的,更新的时候,还得这么写:

where id='{509e4e37-43ed-4e3d-b3bc-1c0929f0d151}' 所以有事没事都自己补加个括号吧。

4:MySql:

A:对于Text或Blob字段,不能设置为主键。

B:对于TinyInt字段,想用0-255,应该定义成:TinyInt(3) UNSIGNED

C:只能存在一个自增列,若存在,必须定义为主键。 

D:(中文内容或注释)乱码问题还是去配置MySql安装目录下my.ini的编码。 

5:Oracle:

A:对于设置为Not Null 属性的字段,不允许插入空值,解决的方法是插入一个空的字符串。

B:ORA-08002: 序列 SEQ1.CURRVAL 尚未在此会话中定义,这个问题需要先调用SEQ1.nextval。

C:对于where id in(1,2,3,4,5...) 最大表达式为1000,超过这个数,需要分拆成where id in(1,2,..1000) or id in(1001,1002...2000)...

D:批量执行多条语句时,一般可以用:

begin
    语句1;
    语句2;
    语句3;
end;

但是也有用不了的时候,比如语句是comment on column 表.字段 is 说明。解决的方法是分折成一条一条执行了。


总结:

时间也不早了,明天还得上班,得下了,对于仗义留言给32个赞支持的哥妹姐弟:

这两天只要将软件上的联系作者(Tab)下的本地信息发往联系信息下的邮箱地址,将有概率获得随机送出的软件注册码。

Thanks~~~

 



     本文转自cyq1162 51CTO博客,原文链接:http://blog.51cto.com/cyq1162/1421297,如需转载请自行联系原作者



相关文章
|
12天前
|
存储 SQL 监控
Visual Basic与数据库交互:实现数据访问和管理
【4月更文挑战第27天】本文探讨了使用Visual Basic进行数据库编程的基础,包括数据库基础、连接、数据访问技术如ADO.NET,数据绑定,事务处理,存储过程与视图。还强调了性能优化、安全性、测试与调试,以及持续维护的重要性。通过掌握这些概念和技巧,开发者能构建高效、可靠的数据驱动应用。
|
14天前
|
关系型数据库 数据库
关系型数据库的数据完整性
关系型数据库通过一系列机制和技术手段来确保数据的完整性,从而为用户提供准确、一致和可靠的数据服务。这些措施对于保障数据的质量、满足用户需求以及维护系统的稳定运行具有重要意义。
20 5
|
17天前
|
SQL 存储 关系型数据库
数据库开发之图形化工具以及表操作的详细解析
数据库开发之图形化工具以及表操作的详细解析
30 0
|
17天前
|
关系型数据库 Apache 流计算
手把手教你实现 OceanBase 数据到阿里云数据库 SelectDB 内核版 Apache Doris 的便捷迁移|实用指南
本文介绍了如何将数据从 OceanBase 迁移到阿里云数据库 SelectDB 内核版 Apache Doris。提供 3 种数据同步方法 1. 使用 DataX,下载 DataX 并编写配置文件,通过 OceanBaseReader 和 DorisWriter 进行数据迁移。 2. 利用 Apache Doris 的 Catalog功 能,将 OceanBase 表映射到 Doris 并插入数据。 3. 通过Flink CDC,设置 OceanBase 环境,配置 Flink 连接器,实现实时数据同步。
手把手教你实现 OceanBase 数据到阿里云数据库 SelectDB 内核版 Apache Doris 的便捷迁移|实用指南
|
9天前
|
监控 关系型数据库 MySQL
初体验:数据库监控、管理和可观测性工具(PMM)
Percona Monitoring and Management (PMM) 是一个开源工具,用于监控MySQL、PostgreSQL和MongoDB的性能。它提供实时监控、数据可视化、故障排除和管理功能,支持本地和云端数据库。要安装PMM,首先需安装Docker,然后通过提供的脚本部署PMM服务器和客户端。在MySQL服务器上创建PMM用户后,使用`pmm-admin`命令添加数据库。访问PMM的HTTPS网址(默认用户名和密码为admin)进行配置。本文还包含了安装Docker和PMM的命令行步骤。
初体验:数据库监控、管理和可观测性工具(PMM)
|
9天前
|
DataWorks Oracle 关系型数据库
DataWorks操作报错合集之尝试从Oracle数据库同步数据到TDSQL的PG版本,并遇到了与RAW字段相关的语法错误,该怎么处理
DataWorks是阿里云提供的一站式大数据开发与治理平台,支持数据集成、数据开发、数据服务、数据质量管理、数据安全管理等全流程数据处理。在使用DataWorks过程中,可能会遇到各种操作报错。以下是一些常见的报错情况及其可能的原因和解决方法。
28 0
|
2天前
|
NoSQL 关系型数据库 数据库
数据库同步 Elasticsearch 后数据不一致,怎么办?
数据库同步 Elasticsearch 后数据不一致,怎么办?
8 0
|
8天前
|
SQL 关系型数据库 MySQL
【MySQL-1】理解关系型数据库&数据的数据模型
【MySQL-1】理解关系型数据库&数据的数据模型
|
9天前
|
Java 关系型数据库 测试技术
Java代码一键生成数据库文档(案例详解)
Screw是一个自动化数据库文档生成工具,能根据数据库表结构快速生成简洁、多格式(HTML、Word、Markdown)的文档,支持MySQL、MariaDB等多数据库。它使用Freemarker模板,允许用户自定义样式。依赖包括HikariCP数据库连接池和对应JDBC驱动。通过在Java代码或Maven插件中配置,可方便生成文档。示例代码展示了如何在测试用例中使用Screw。文档效果依赖于数据库中的表和字段注释。
|
9天前
|
Java 关系型数据库 MySQL
springboot业务开发--springboot一键生成数据库文档
Screw是一个数据库文档生成工具,能自动化根据数据库表结构生成文档,减轻开发人员工作负担,支持MySQL、MariaDB、TiDB等多种数据库和HTML、Word、Markdown等格式。它依赖HikariCP数据库连接池和Freemarker模板引擎。通过在Spring Boot项目中添加相关依赖并配置,可以用代码或Maven插件方式生成文档。示例代码展示了如何在JUnit测试中使用Screw生成HTML文档。