-
SQLServer性能优化--间接实现函数索引或者Hash索引
SQLServer中没有函数索引，在某些场景下查询的时候要根据字段的某一部分做查询或者经过某种计算之后做查询，如果使用函数或者其他方式作用在字段上之后，就会限制到索引的使用，不过我们可以间接地实现类似于函数索引的功能。另外一个就是如果查询字段较大或者字段较多的时候，所建立的索引就显得有点笨重，效率也不高，就需要考虑使用一个较小的"替代性"字段做等价替换，类似于Hash索引，本文粗浅地介绍两种上述两种问题的解决方式，仅供参考...
数据库操作教程 2022-09-23 18:22:57 -
SparkSQL数据加载和保存实例讲解
一、前置知识详解SparkSQL重要是操作DataFrame，DataFrame本身提供了save和load的操作，Load：可以创建DataFrame，Save：把DataFrame中的数据保存到文件或者说与具体的格式来指明我们要读取的文件的类型以及与具体的格式来指出我们要输出的文件是什么类型。二、SparkSQL读写数据代码实战importorg.apache.spark.SparkConf;importorg.apache.spark.api.java.JavaRDD;importorg.apache.spark.api.java.JavaSparkContext;importorg.apache.spark.api.java.function.Function;importorg.apache.spark.sql.*;importorg.apache.spark.sql.types.DataTypes;importorg.apache.spark.sql.types.StructField;importorg.apache.spark.sql.types.StructType;...
数据库操作教程 2022-09-23 18:09:06 -
解析SQLServer聚焦移除（BookmarkLookup、RIDLookup、KeyLookup）
前言前面几节都是讲的基础内容，本节我们讲讲索引性能优化，当对大数据进行处理时首先想到的就是索引，一旦遇到这样的问题则手忙脚乱，各种查资料，为何平常不扎实基本功呢，我们由浅入深，简短的内容，深入的理解，而非一上来就把问题给框死，立马给出解决方案，抛出问题，再到解决问题，你GET了没有。BookmarkLookup、RIDLookup、KeyLookup定义一说到这三者，如果对索引研究不深的童鞋估计是懵逼的，什么玩意，我们姑且将上面三者翻译为：标签查找、行ID查找、键查找...
数据库操作教程 2022-09-23 17:59:22 -
Win10下安装SqlServer2014反复提示需安装.NETFramework3.5SP1的解决方案
一.首先安装.NETFramework3.5离线安装方式：1.装载相对应的系统安装盘，我是Windows10x64企业版，所以装载Windows10x64企业版安装镜像ISO，盘符为H。2.以管理员身份运行命令提示符(Win键+X键，选择命令提示符(管理员))，输入以下命令：dism.exe/online/enable-feature/featurename:NetFX3/Source:H:sourcessxs等待部署完成即可...
数据库操作教程 2022-09-23 17:53:40 -
SqlServer应用之sys.dm_os_waiting_tasks引发的疑问(下)
sys.dm_os_waiting_tasks引发的疑问(下)前面写了两篇了，其实不光是说sys.dm_os_waiting_tasks的应用，研究了挺长时间的并行，自己有了一些理解，所以分享出来希望有什么理解错误的地方大神们及时纠正！！ 给出前两篇的连接：SqlServer应用之sys.dm_os_waiting_tasks引发的疑问(上)SqlServer应用之sys.dm_os_waiting_tasks引发的疑问(中)前面两篇的编写有一个疑惑...最初认为的并行比如这个语句： select*fromt1innerjoint2ont1.a=t2.aOPTION(querytraceon8649) 在我的理解并行是开几个线程去获取T1数据，另外几个线程获取T2数据，然后关联结果形成最后结果集。可是试验了才发现自己原来想的和看到的结果不太一样呀！！！！ 下面我们用前两篇的例子继续做试验... 这次我们2张表同时给锁住，看看等待里是什么情况...
数据库操作教程 2022-09-23 17:49:13 -
SqlServer应用之sys.dm_os_waiting_tasks引发的疑问(上)
很多人在查看SQL语句等待的时候都是通过sys.dm_exec_requests查看,等待类型也是通过wait_type得出,sys.dm_os_waiting_tasks也可以看到session的等待那么有什么区别呢.... 废话不多说直接开整. 测试版本2012 sys.dm_os_waiting_tasks的字段说明:waiting_task_addressvarbinary(8)等待任务的地址。session_idsmallint与任务关联的会话的ID...
数据库操作教程 2022-09-23 17:44:21 -
SqlServer应用之sys.dm_os_waiting_tasks引发的疑问(中)
通过上篇文章给大家介绍了SqlServer应用之sys.dm_os_waiting_tasks引发的疑问(上)，说了一下sys.dm_exec_requests和sys.dm_os_waiting_tasks在获取并行等待的时候得不同结果，这一篇我们谈论下我的第二个疑问：为什么一个并行计划（4线程）却一下出现了那么多等待，SQL的并行到底是怎么执行的！！！！ 先贴以下上篇sys.dm_os_waiting_tasks的结果图： 我们分析一下这个结果的task_address可以看出去掉重复其实只有9个，也就是说一个并行（4线程，配置不同，情况也不同）会有9个task。又是线程，又是task,还有worker,schedulers这些都是什么？这个有必要先说一下，因为这篇博客前我也是乱乱的...
数据库操作教程 2022-09-23 17:44:07 -
关于重新组织和重新生成索引sp_RefreshIndex的介绍
开始：--------------------------------------------------------------------------------在上周，客户反映一个系统问题，当处理大量数据的时候，出现网络超时。后来，我们跟踪测试，发现是由于索引碎片多而引起的网络超时...
数据库操作教程 2022-09-23 17:18:49 -
SQLServer误区30日谈第27天使用BACKUPWITHCHECKSUM可以替代DBCCCheckDB
误区#27:使用BACKUP...WITHCHECKSUM可以替代DBCCCheckDB错误 乍一看，由于BACKUPWITHCHECKSUM会检测所有分配出去的页的校验和的值，这个误区貌似是这么回事，但实际上并不是这么回事，原因如下: 由SQLServer2000或是更早版本升上来的数据库pagechecksums必须开启，在开启后，并不是数据库中所有的页都会被叫上页校验和，当页损坏发生时，IO系统可不会区分损坏的页是有页校验和还是没有校验和的。所以使用BACKUP...WITHCHECKSUM就有可能导致一些损坏页不被发现，造成的后果…… 除此之外，还有一个问题是完整备份的时间间隔相对比较长，假如说一个月，而相对于DBCCCheckDB的最佳实践是一个礼拜，这导致WITHCHECKSUM不能替代CHECKDB...
数据库操作教程 2022-09-23 17:03:22 -
sql2005HashBytes加密函数
有关函数HashBytes请参考：http://msdn.microsoft.com/en-us/library/ms174415.aspx 在做项目的时候，在sql中使用了hashbytes函数，运用md5算法去加密一密码。代码如下 DECLARE@pswnvarchar(20) SET@psw='admin' SELECThashbytes('md5',@psw) 输出结果：0x19A2854144B63A8F7617A6F225019B12前面的0x是16进制的意思...
数据库操作教程 2022-09-23 16:55:22 -
学会sql数据库关系图(Petshop)
很久以前就知道微软的Petshop的很经典，昨天抽出时间去学习，一开始还真的不适应，什么成员资格，还真的看不太懂，运行petshop想从登陆学起，但是用户名和密码都不知道，后来发现有更注册的页面，自己注册了一个页面，才发现还得从数据库出发。花了这么多时间最终还是回到了数据库，但是数据库中一张一张的表格找不到脚本，也不是自己设计的数据库，完全没有一点头绪，后来突然想起来sql有个数据库关系图，可以很快的适合数据库程序员很快的掌握数据库表之间的关系...
数据库操作教程 2022-09-23 16:51:22 -
用SQL脚本读取Excel中的sheet数量及名称的方法代码
复制代码代码如下:--Gettable(worksheet)orcolumn(field)listingsfromanexcelspreadsheet --设置变量 declare@linkedServerNamesysname='TempExcelSpreadsheet' declare@excelFileUrlnvarchar(1000)='D:text.xlsx' --/SET --删除链接服务（如果它已经存在） ifexists(selectnullfromsys...
数据库操作教程 2022-09-23 16:46:48
