数据库技术-日排行
在openGauss数据库源码解析系列文章——openGauss开发快速入门（中），介绍了openGauss基本使用，本篇将从openGauss的开发和编译、参与openGauss社区开源项目两方面展开具体介绍。 三、 开发和编译 作为openGauss数据库开发者，在基于openGauss开源产品 ...
又遇到 sql表去重，这次记录一下。 第一个sql，先查询重复的数据。 SELECT o.sid, count( 1 ) FROM iot_one o GROUP BY o.sid HAVING count( 1 ) > 1; 第二个sql，查询重复数据中 id最小的一个数据的id值。 SELECT ...
1.Spark SQL出现的 原因是什么? 由于MapReduce这种计算模型执行效率比较慢，所以Spark SQL的应运而生，它是将Spark SQL转换成RDD，然后提交到集群执行，执行效率非常快，同时Spark SQL也支持从Hive中读取数据。 2.用spark.read 创建DataFra ...
06 Spark SQL 及其DataFrame的基本操作 1.Spark SQL出现的 原因是什么? 随着Spark的发展，对于野心勃勃的Spark团队来说，Shark对于Hive的太多依赖（如采用Hive的语法解析器、查询优化器等等），制约了Spark的One Stack Rule Them A ...
在DAO层的动态SQL： //订单新增，查询配件主数据 @SuppressWarnings("rawtypes") public PageInfoDto getPartsForPartOrder(ElemBean condition) { // String oldDate="2015-01-01" ...
Spark SQL 及其 DataFrame 的基本操作 Q & A 1. Spark SQL 出现的原因是什么? 关系数据库已经流行多年，能较好的满足各类商业公司的业务数据管理需求，但关系数据库在大数据时代已经不能满足各种新增的用户需求。用户需要从不同数据源执行各种操作（包括结构化和非结构化数据） ...
1.Spark SQL出现的 原因是什么? Spark SQL是Spark用来处理结构化数据的一个模块，它提供了一个叫作Data Frame的编程抽象结构数据模型(即带有Schema信息的RDD),Spark SQL的前身是 Shark，由于 Shark过于依赖Hive，因此在版本迭代时很难添加新的 ...
1.Spark SQL出现的 原因是什么? 随着Spark的发展，对于野心勃勃的Spark团队来说，Shark对于Hive的太多依赖（如采用Hive的语法解析器、查询优化器等等），制约了Spark的One Stack Rule Them All的既定方针，制约了Spark各个组件的相互集成，所以提出 ...
mysql中为什么删除一个表中的主键约束后该字段不能为空? SQL语句执行顺序 From ON JOIN WHERE GROUP BY SELECT HAVING ORDER BY LIMIT ...
一、DDL 1.创建表 CREATE TABLE mytable ( # int 类型，不为空，自增 id INT NOT NULL AUTO_INCREMENT, # int 类型，不可为空，默认值为 1，不为空 col1 INT NOT NULL DEFAULT 1, # 变长字符串类型，最长为 ...
一.EXPLAIN查看SQL执行计划 EXPLAIN语句解析 expain解析出来的信息有10列，分别是id、select_type、table、type、possible_keys、key、key_len、ref、rows、Extra id:选择标识符 select_type:表示查询的类型。 t ...
Mysql提供了Explain关键字，用来对SELECT语句进行解析，一般用于进行慢查询分析与优化。 使用方法示例： EXPLAIN SELECT * FROM `user_info` WHERE id < 100; Explain输出内容如下： mysql> explain select * fr ...
三级模式： 两级映射： 规范化理论： 范式： 第一范式（1NF）：在关系模式R中，当且仅当所有域只包含原子值，即每个分量都是不可再分的数据项，则称R是第一范式。 第二范式（2NF）：当且仅当R是1NF,且每一个非主属性完全依赖主键（不存在部分依赖）时，则称R是第二范式。 第三范式（3NF）：当且仅当 ...
一、先说锁的概念 锁级别： 1.行级锁： InnoDB引擎（也支持表级锁，默认是行级锁），开销大，加锁慢；会出现死锁。锁定粒度最小，发生锁冲突的概率最低，并发度最高。 2.表级锁：MylSAM引擎和Memory引擎，开销小，加锁快；不会出现死锁，锁定粒度最大，发生锁冲突的概率最高，并发度最低。 3. ...
Transact-SQL简介 SQL是关系型数据库的标准语言，几乎所有的关系型数据库都支持SQL。但SQL不支持流程控制，使用起来不太方便。 因此，大型关系型数据库在SQL基础上推出了结构化的SQL编程语言，如SQL Server 2012的Transact-SQL、Oracle 11g的PL/SQ ...
MySQL函数写法 首先要查看数据库中是否存在次函数 查看数据库函数的命令 SHOW FUNCTION STATUS; CREATE FUNCTION test (id CHAR(100)) RETURN INTEGER; 创建一个函数BEGIN 开始 DECLARE temp INTEGER; 声 ...
dble 简介与整体架构 dble简介 dble是上海爱可?信息技术股份有限公司基于mysql的?可扩展性的分布式中间件，存在以下?个优势特性： 数据?平拆分 随着业务的发展，您可以使?dble来替换原始的单个MySQL实例。 兼容Mysql 与MySQL协议兼容，在?多数情况下，您可以?它替换My ...
报异常： A second operation started on this context before a previous operation completed. This is usually caused by different threads using the same inst ...
Oracle创建directory 一般创建directory都是为了用数据泵导入/导出数据用，其实directory还有很多别的用处，本文不做阐述 1、新建directory的语法 CREATE [OR REPLACE] DIRECTORY directory AS 'pathname'; 例如： ...
测试类： public class DbTest { private JdbcTemplate jdbcTemplate; private DataSourceTransactionManager txManager; private DefaultTransactionDefinition txD ...