关于SQLServer2005的学习笔记(一)——前言

简介:
关于SQLServer2005 的学习笔记(一)——前言
 
关于 SQL Server ,个人一直认为它是比较简单却又很神秘的数据库;简单之处在于他完全通过图形化界面便可实现所有大型数据库的安装、维护、备份、优化等等;神秘呢在于它所有的一切都隐藏在了图形化界面之下,让人琢磨不透,当需要更深层次的去了解他的时候,却无能为力。
我开始使用 SQL Server 自 2002 年起,做了一年多基于 SQL Server 数据库的程序开发,然后 04 、 05 年又做了两年基于 SQL Server 的数据仓库,因为数据量太大和性能原因所以需要不断进行性能优化和调整。
       印象最深刻的是 05 年在某移动公司实施基于 SQL Server2000 的数据仓库项目。那台数据仓库机器的硬件配置也不高, 4G 内存,好像是 4 个 CPU ,跑的是 Windows Server2003 ;当时每天的数据量为 1.2GB ,整个数据仓库包括一年的历史数据,总计达到了将近 800GB ,业务数据源主要来自于一个 oracle 数据库,当然还有大量的话务文件,话务信息总是以二进制文本存在,并通过解析工具不断的解析到数据库中。
 
对于 SQLServer2000 来说,难点主要如下:
1、 单表超过 1000 万记录,查询更新删除性能急转直下
很不幸的是,话单信息每天都要超过 3000 万了,即使经过处理后的话单也将近 1000 万;
2、 SQL Server 的锁机制问题, SQLServer2000 采用的是已提交读的悲观并发控制,在读和写之间非常容易造成死锁。
3、 业务逻辑处理复杂度太高,导致性能问题
一条话务可能会出现几十条话单(最高记录为 50 条左右,大概是 IVR 流程设置的问题),最终的话单会被一个长达七八百行的存储过程解析为 3 条话单,而这个过程基本是连续的;这三条话单再经过 ETL 处理转变成可统计的话务指标。
4、 OLAP 也存在严重的性能问题,当时的一个 MOLAP 就将近 100GB 了
5、 系统稳定性不够,总是莫名其妙的出现作业当掉的情况
针对以上情况,我做了不断的尝试和优化,例如优化表结构设计,把表做成当前表和历史表,历史表再切分成分月表;优化业务逻辑存储过程;增加检验和处理死锁;并针对稳定性问题向微软上海进行咨询和处理,最后下载了一堆的补丁和工具进行反复实践。
说实在的,用 SQLServer2000 做 BI/DW 项目,最大的好处是完全通过联机帮助就可以上手,而最大的问题就是稳定性和性能问题,使用 SQL Server 的这段的经验确实让人很痛苦,因为你无从解决。
       再后来,转向了 Oracle 一段时间,同样我对 Oracle 的整体架构、性能优化和开发稍微了解一些,但无奈的是自己对 linux 的了解实在匮乏,所以很难专进去。个人认为自个对 Oracle 的体系架构认识的要比 SQLServer 更深刻一些。
       最近一段时间同步阅读了一下《 SQLServe2005 技术内幕存储引擎》《 SQLServe2005 技术内幕程序设计》、《 SQLServe2005 技术内幕 T-SQL 查询》,对 SQLServer2005 有了一些新的认识,总得感觉 2005 比 2000 有了质的飞跃,微软也在与 Oracle 、 IBM 的不断竞争中成长,而数据库在竞争中不断趋同。
       读书第一遍只是为粗略的看一下,不敢去发表什么个人观点;读第二遍的时候把自己熟悉的部分会做下实践和印证;如果还是无法理解,再去读第三遍;这是我对读书的态度。
       我会在这段时间陆陆续续把自己对以上三本书的学习心得不断记录下来,并在 SQLServer 和 Oracle 之间进行比较,在 SQLServer2000 和 SQLServer2005 之间进行比较。
 



本文转自baoqiangwang51CTO博客,原文链接:http://blog.51cto.com/baoqiangwang/310470 ,如需转载请自行联系原作者
相关文章
|
2天前
|
云安全 人工智能 算法
以“AI对抗AI”,阿里云验证码进入2.0时代
三层立体防护,用大模型打赢人机攻防战
1293 1
|
9天前
|
编解码 人工智能 自然语言处理
⚽阿里云百炼通义万相 2.6 视频生成玩法手册
通义万相Wan 2.6是全球首个支持角色扮演的AI视频生成模型,可基于参考视频形象与音色生成多角色合拍、多镜头叙事的15秒长视频,实现声画同步、智能分镜,适用于影视创作、营销展示等场景。
702 4
|
2天前
|
机器学习/深度学习 安全 API
MAI-UI 开源:通用 GUI 智能体基座登顶 SOTA!
MAI-UI是通义实验室推出的全尺寸GUI智能体基座模型,原生集成用户交互、MCP工具调用与端云协同能力。支持跨App操作、模糊语义理解与主动提问澄清,通过大规模在线强化学习实现复杂任务自动化,在出行、办公等高频场景中表现卓越,已登顶ScreenSpot-Pro、MobileWorld等多项SOTA评测。
563 3
|
3天前
|
人工智能 Rust 运维
这个神器让你白嫖ClaudeOpus 4.5,Gemini 3!还能接Claude Code等任意平台
加我进AI讨论学习群,公众号右下角“联系方式”文末有老金的 开源知识库地址·全免费
|
2天前
|
存储 弹性计算 安全
阿里云服务器4核8G收费标准和活动价格参考:u2a实例898.20元起,计算型c9a3459.05元起
现在租用阿里云服务器4核8G价格是多少?具体价格及配置详情如下:云服务器ECS通用算力型u2a实例,配备4核8G配置、1M带宽及40G ESSD云盘(作为系统盘),其活动价格为898.20元/1年起;此外,ECS计算型c9a实例4核8G配置搭配20G ESSD云盘,活动价格为3459.05元/1年起。在阿里云的当前活动中,4核8G云服务器提供了多种实例规格供用户选择,不同实例规格及带宽的组合将带来不同的优惠价格。本文为大家解析阿里云服务器4核8G配置的实例规格收费标准与最新活动价格情况,以供参考。
242 150
|
9天前
|
机器学习/深度学习 人工智能 前端开发
构建AI智能体:七十、小树成林,聚沙成塔:随机森林与大模型的协同进化
随机森林是一种基于决策树的集成学习算法,通过构建多棵决策树并结合它们的预测结果来提高准确性和稳定性。其核心思想包括两个随机性:Bootstrap采样(每棵树使用不同的训练子集)和特征随机选择(每棵树分裂时只考虑部分特征)。这种方法能有效处理大规模高维数据,避免过拟合,并评估特征重要性。随机森林的超参数如树的数量、最大深度等可通过网格搜索优化。该算法兼具强大预测能力和工程化优势,是机器学习中的常用基础模型。
356 164