惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

G
Google Developers Blog
博客园 - 司徒正美
Last Week in AI
Last Week in AI
Recent Announcements
Recent Announcements
Y
Y Combinator Blog
博客园 - 聂微东
M
MIT News - Artificial intelligence
博客园_首页
Jina AI
Jina AI
博客园 - 叶小钗
酷 壳 – CoolShell
酷 壳 – CoolShell
H
Hackread – Cybersecurity News, Data Breaches, AI and More
J
Java Code Geeks
F
Fortinet All Blogs
aimingoo的专栏
aimingoo的专栏
小众软件
小众软件
Vercel News
Vercel News
The Cloudflare Blog
钛媒体:引领未来商业与生活新知
钛媒体:引领未来商业与生活新知
云风的 BLOG
云风的 BLOG
N
Netflix TechBlog - Medium
B
Blog
Google DeepMind News
Google DeepMind News
freeCodeCamp Programming Tutorials: Python, JavaScript, Git & More

博客园 - 牛啊牛

程序员最郁闷的十件事 varchar和nvarchar的区别 架构师向左,项目经理向右?? 由布局学习CSS——IE6,7,8(Q)的浮动行内元素在某些情况下发生折行的bug Microsoft Document Explorer 2005安装失败解决方案 . 关于.NET的探针 学习之路九:深入剖析Web分页原理 HTTP 错误 500.21 - Internal Server Error DataTable导出到Excel时身份证号信息自动转换为科学计数法的解决方案 肌肉男MuscleNerd宣告全新iPad越狱成功 windows 2003 server iis6.0 完整安装包 带无法复制解决方法 SQL SERVER 2005无法远程连接 用jquery刷新aspx中的iframe的src并进行刷新 C结构入门 【原译】什么是TCHAR,WCHAR,LPSTR,LPWSTR,LPCTSTR.等等 8个2012年值得关注的社会化营销趋势 电商价格战有望收敛:行业或将整体走向冷静 谈谈新站初期做优化的一些误区 提高你开发效率的十五个 Visual Studio 使用技巧
我的程序优化-尽量减少数据库连接操作
牛啊牛 · 2012-05-02 · via 博客园 - 牛啊牛

最近做一个项目,做的比较郁闷,现在把项目经验总结在这里。项目的主要功能就是为第三方程序提供数据,并根据客户端的调用提供数据更新。我的程序属于服务端。服务端以站点形式部署,以Xml的数据格式输出。


项目以我自己的设计编码完成,并整合测试。初始化数据时,问题出现了。刚开始体现在客户端接受数据很慢。测试环境环境下,数据库服务器部署在国外,网站部署在公司内部,而且我一直认为我的程序在数据库数据处理这里已经做了足够的优化,包括索引和主键已经做到了合理使用。综上所述,起初的速度问题一直没有引起我的关注。


然而最后问题的关键恰恰出在数据库连接查询方面,频繁查询导致数据初始化速度很慢。刚开始我采取的方法是即用即查:需要数据的时候就从数据库查,有比较多的单表查询返回单个字段的情况。假如我有大概3000条左右的数据集合,我循环取出其中的每一条,再从其它数据表里查询得到需要的字段,这样无故增加了3000多次数据库连接和关闭操作,当网络速度不理想时,程序速度就无法忍耐了。

坚持一条原则:尽量减少数据库连接操作。跟前端开发优化中的尽量少Http请求类似。


最终我采取的方案是将所需要的数据经过多个数据表统一放到一个List对象中,也就是放到内存中,在根据LINQ查询其中的每条数据,这样速度会快很多。这样似乎破坏力一个原则,之前我遵循的多表查询最好不要inner join3个以上的表,而这次出现了多次一个sql语句就inner join3个表以上的情况.虽然破坏了这个原则,但是相比速度极慢,连功能都实现不了的情况,显然inner join 也可以让人接受。