-
SparkSQL数据加载和保存实例讲解
一、前置知识详解SparkSQL重要是操作DataFrame，DataFrame本身提供了save和load的操作，Load：可以创建DataFrame，Save：把DataFrame中的数据保存到文件或者说与具体的格式来指明我们要读取的文件的类型以及与具体的格式来指出我们要输出的文件是什么类型。二、SparkSQL读写数据代码实战importorg.apache.spark.SparkConf;importorg.apache.spark.api.java.JavaRDD;importorg.apache.spark.api.java.JavaSparkContext;importorg.apache.spark.api.java.function.Function;importorg.apache.spark.sql.*;importorg.apache.spark.sql.types.DataTypes;importorg.apache.spark.sql.types.StructField;importorg.apache.spark.sql.types.StructType;...
数据库操作教程 2022-09-23 18:09:06 -
解析SQLServer聚焦移除（BookmarkLookup、RIDLookup、KeyLookup）
前言前面几节都是讲的基础内容，本节我们讲讲索引性能优化，当对大数据进行处理时首先想到的就是索引，一旦遇到这样的问题则手忙脚乱，各种查资料，为何平常不扎实基本功呢，我们由浅入深，简短的内容，深入的理解，而非一上来就把问题给框死，立马给出解决方案，抛出问题，再到解决问题，你GET了没有。BookmarkLookup、RIDLookup、KeyLookup定义一说到这三者，如果对索引研究不深的童鞋估计是懵逼的，什么玩意，我们姑且将上面三者翻译为：标签查找、行ID查找、键查找...
数据库操作教程 2022-09-23 17:59:22 -
使用phpMyAdmin修改MySQL数据库root用户密码的方法
点击顶部的“SQL”标签进入sql命令输入界面。输入以下命令：复制代码代码如下:updatemysql.usersetpassword=PASSWORD('jb51$123456')whereuser='root';然后点击右下角的“执行”，没有报错就表示修改成功...
数据库操作教程 2022-09-23 17:57:15 -
Win10下安装SqlServer2014反复提示需安装.NETFramework3.5SP1的解决方案
一.首先安装.NETFramework3.5离线安装方式：1.装载相对应的系统安装盘，我是Windows10x64企业版，所以装载Windows10x64企业版安装镜像ISO，盘符为H。2.以管理员身份运行命令提示符(Win键+X键，选择命令提示符(管理员))，输入以下命令：dism.exe/online/enable-feature/featurename:NetFX3/Source:H:sourcessxs等待部署完成即可...
数据库操作教程 2022-09-23 17:53:40 -
SqlServer应用之sys.dm_os_waiting_tasks引发的疑问(下)
sys.dm_os_waiting_tasks引发的疑问(下)前面写了两篇了，其实不光是说sys.dm_os_waiting_tasks的应用，研究了挺长时间的并行，自己有了一些理解，所以分享出来希望有什么理解错误的地方大神们及时纠正！！ 给出前两篇的连接：SqlServer应用之sys.dm_os_waiting_tasks引发的疑问(上)SqlServer应用之sys.dm_os_waiting_tasks引发的疑问(中)前面两篇的编写有一个疑惑...最初认为的并行比如这个语句： select*fromt1innerjoint2ont1.a=t2.aOPTION(querytraceon8649) 在我的理解并行是开几个线程去获取T1数据，另外几个线程获取T2数据，然后关联结果形成最后结果集。可是试验了才发现自己原来想的和看到的结果不太一样呀！！！！ 下面我们用前两篇的例子继续做试验... 这次我们2张表同时给锁住，看看等待里是什么情况...
数据库操作教程 2022-09-23 17:49:13 -
SqlServer应用之sys.dm_os_waiting_tasks引发的疑问(上)
很多人在查看SQL语句等待的时候都是通过sys.dm_exec_requests查看,等待类型也是通过wait_type得出,sys.dm_os_waiting_tasks也可以看到session的等待那么有什么区别呢.... 废话不多说直接开整. 测试版本2012 sys.dm_os_waiting_tasks的字段说明:waiting_task_addressvarbinary(8)等待任务的地址。session_idsmallint与任务关联的会话的ID...
数据库操作教程 2022-09-23 17:44:21 -
SqlServer应用之sys.dm_os_waiting_tasks引发的疑问(中)
通过上篇文章给大家介绍了SqlServer应用之sys.dm_os_waiting_tasks引发的疑问(上)，说了一下sys.dm_exec_requests和sys.dm_os_waiting_tasks在获取并行等待的时候得不同结果，这一篇我们谈论下我的第二个疑问：为什么一个并行计划（4线程）却一下出现了那么多等待，SQL的并行到底是怎么执行的！！！！ 先贴以下上篇sys.dm_os_waiting_tasks的结果图： 我们分析一下这个结果的task_address可以看出去掉重复其实只有9个，也就是说一个并行（4线程，配置不同，情况也不同）会有9个task。又是线程，又是task,还有worker,schedulers这些都是什么？这个有必要先说一下，因为这篇博客前我也是乱乱的...
数据库操作教程 2022-09-23 17:44:07 -
DDL、DML和DCL的区别与理解
DML、DDL、DCL区别.总体解释：DML（datamanipulationlanguage）：它们是SELECT、UPDATE、INSERT、DELETE，就象它的名字一样，这4条命令是用来对数据库里的数据进行操作的语言DDL（datadefinitionlanguage）：DDL比DML要多，主要的命令有CREATE、ALTER、DROP等，DDL主要是用在定义或改变表（TABLE）的结构，数据类型，表之间的链接和约束等初始化工作上，他们大多在建立表时使用DCL（DataControlLanguage）：是数据库控制功能。是用来设置或更改数据库用户或角色权限的语句，包括（grant,deny,revoke等）语句...
数据库操作教程 2022-09-23 17:15:30 -
SQLSERVER如何查看索引缺失及DMV使用介绍
当大家发现数据库查询性能很慢的时候，大家都会想到加索引来优化数据库查询性能，但是面对一个复杂的SQL语句，找到一个优化的索引组合对人脑来讲，真的不是一件很简单的事。好在SQLSERVER提供了两种“自动”功能，给你建议，该怎么调整索引第一种是使用DMV第二种是使用DTA(databaseenginetuningadvisor)数据库引擎优化顾问这篇文章主要讲第一种从SQL2005以后，在SQLSERVER对任何一句语句做编译的时候，都会去评估一下，这句话是不是缺少什么索引的支持，如果他认为是，他还会预估，如果有这麽一个索引他的性能能提高多少SQLSERVER有几个动态管理视图sys.dm_db_missing_index_detailssys.dm_db_missing_index_groupssys.dm_db_missing_index_group_statssys.dm_db_missing_index_columns(index_handle)sys.dm_db_missing_index_details这个DMV记录了当前数据库下所有的missingindex的信息,他针对的...
数据库操作教程 2022-09-23 17:09:44 -
Sql学习第二天——SQLDML与CTE概述
DML(DataManipulationLanguage)与CTE(CommonTableExpression)今天看书时遇到的两个缩写，不知道其含义，于是就百度了一下，特地在此记录下来，以便于下次复习使用。关于DML(DataManipulationLanguage)：数据操纵语言，用户能够查询数据库以及操作已有数据库中的数据的计算机语言...
数据库操作教程 2022-09-23 17:07:07 -
SQLServer误区30日谈第13天在SQLServer2000兼容模式下不能使用DMV
误区#13.在SQLServer2000兼容模式下不能使用DMV错误 对于兼容模式已经存在了很多误解。80的兼容模式的数据库是否意味着能够附加或恢复到SQLServer2000数据库?当然不是...
数据库操作教程 2022-09-23 17:06:42 -
SQLServer2016里的sys.dm_exec_input_buffer的问题
我们都知道DBCC命令有点尴尬，因为你不能在T-SQL查询里调用它们，你也不能关联它们的输出到其它DMV/DMF。例如你想为每个用户会话返回最后一个执行的SQL语句....sys.dm_exec_input_buffer在SQLServer2016里，事情就变得简单多，因为微软为你提供了一个新DMFsys.dm_exec_input_buffer，它和DBCCINPUTBUFFER一样做同样的工作...
数据库操作教程 2022-09-23 16:44:14
