数据库技术-日排行
1.Spark SQL出现的 原因是什么? 随着Spark的发展，对于野心勃勃的Spark团队来说，Shark对于Hive的太多依赖（如采用Hive的语法解析器、查询优化器等等），制约了Spark的One Stack Rule Them All的既定方针，制约了Spark各个组件的相互集成，所以提出 ...
一、about centos7.3 + mysql5.7.20 MySQL多实例的本质在一台机器上开启多个不同的MySQL实例，也就是各实例监听不同的端口，提供不同的服务。多个实例公用一套MySQL安装程序，启动程序和配置文件可以是一个也可以是多个(推荐多个)；各自的数据文件隔离；逻辑上各实例彼此隔 ...
DECLARE @hr INT , @fso INT, @drive CHAR(1)='F', /* To demonstrate have hard coded the drive letter to F */ @odrive INT, @TotalSize BIGINT, @freespace ...
CREATE TABLE [dbo].[ip]( [ip_start] [varchar](50) NULL, [ip_end] [varchar](50) NULL, [ip_start_num] [bigint] NULL, [ip_end_num] [bigint] NULL, [contin ...
1.查看所有容器 docker ps -a 2.进入mysql容器 docker exec -it [容器号] bash 3.导出函数 mysqldump -u username -ntd -R [数据库名称]> 自定义文件名.sql 参数说明： -n表示--no-data -t表示--no-cre ...
1.Spark SQL出现的 原因是什么? 尽管数据库的事务和查询机制较好胡满足胃各类商业公司胡业务数据管理需求，但关系数据库在大数据时代不能满足各类新增的用户需求，用户需要从不同胡数据源执行各种操作，用户需要执行高级分析，比如机器学习和图像处理，而spark sql的出现填补了这个鸿沟，spakr ...
查看mysql系统自带root用户的密码 grep 'temporary password' /var/log/mysqld.log ...
1.Spark SQL出现的 原因是什么? 原因是可以提升效率，sparksql是把sql语句转换成rdd然后提交集群执行，可以让执行效率大大提升 2.用spark.read 创建DataFrame Spark SQL DataFrame的基本操作 创建： spark.read.text() spa ...
1.MongoDB开发环境搭建 1.1.MongoDB介绍 MongoDB是一个基于分布式文件存储的数据库。由C++语言编写，旨在为WEB应用提供可扩展的高性能数据存储解决方案。 MongoDB是一个介于关系数据库和非关系数据库之间的产品，是非关系数据库中功能最丰富，最像关系数据库的。它支持的数据结 ...
转自：https://www.cnblogs.com/zjfjava/p/6920407.html 一、 表设计规范 库名、表名、字段名必须使用小写字母，“_”分割。 库名、表名、字段名必须不超过12个字符。 库名、表名、字段名见名知意,建议使用名词而不是动词。 建议使用InnoDB存储引擎。 存储 ...
1.Spark SQL出现的 原因是什么? spark sql是spark用来处理结构化数据的一个模块，与hive的hql不同，hive需要将hql转化成MapReduce然后提交执行，sparksql将sql语句转换成rdd然后提交集群执行，将执行效率大大提升 2.用spark.read 创建Da ...
一、对象的创建分法 new Object() 工厂模式 建造者模式 二、优劣性2.1 直接创建对象构造方法多个参数时无法明确含义，比如Object(String name, String phone)和Object(String name, String addr)当参数大于4个时，需要组合所有参数 ...
#写在前面 我又来更新了~~~，今天内容较少，主要是利用Docker快速部署Mysql和初始化数据 ##利用Docker下载Mysql 简洁明了，在命令提示符中输入 docker pull mysql:8.0 docker pull mysql:5.0 想必大家都看出来了，这是分别下载mysql8. ...
1.Spark SQL出现的 原因是什么? Spark SQL是Spark用来处理结构化数据的一个模块，它提供了一个叫作Data Frame的编程抽象结构数据模型(即带有Schema信息的RDD)，Spark SQL作为分布式SQL查询引擎，让用户可以通过SQL、DataFrame API和Data ...
一、用户名@白名单 MySQL支持用户名@白名单的方式连接，有以下几种方式： 链接方式描述备注 wordpress@'10.0.0.%' 只允许10网段连接 常用 wordpress@'%' 所有地址 wordpress@'10.0.0.200' 只允许某一个地址链接 wordpress@'loca ...
最近因为客户的项目数据量过多，导致数据库经常出现CPU使用率100%、服务器卡死等问题。搞得我焦头乱额。 发现有几个地方出现了严重的问题。 1、分表设计 当时并未考虑到用户的数据居然会有一日几十万条。只做了一张表来存储。并未做分表设计。导致数据量过多。查询极慢。 解决方案：对数据量大的表进行分表处理 ...
1.Spark SQL出现的 原因是什么? 关系数据库已经流行多年，能较好的满足各类商业公司的业务数据管理需求，但关系数据库在大数据时代已经不能满足各种新增的用户需求。用户需要从不同数据源执行各种操作（包括结构化和非结构化数据），也需要执行高级分析（在实际大数据应用中，经常需要融合关系查询和复杂分析 ...
创建数据表 CREATE TABLE 表名( 列名 类型 [约束], 列名 类型 [约束] ... ); 注意：在MySQL中，大小写不敏感，即关键字大写还是小写都是可以且效果是一样的 常用类型 数值型 名称 字节 说明 int 4 bigint 8 double double(M,D) doubl ...
各位小伙伴们大家好，由于我的随笔全部都是记录日常工作当中遇到的bug及解决办法，所以涉及的知识点比较杂乱，希望可以对调试相同bug的小伙伴们有所帮助。后期有时间会将知识点分模块整理，尽请期待。 一、如何将idea的快捷键变成Eclipse 快捷键，替换字符的快捷键，切换成夜间模式： 1、File→s ...
如果在插入或批量插入时出现冲突可以使用on conflict (field)关键字处理冲突，括号内为冲突字段 1.忽略冲突数据，继续执行。 在语句末尾加上on conflict (id) do nothing 2.冲突数据，执行更新。 在语句末尾加上 on conflict (id) do upda ...