喜悦国际村 
» 游客:  注册 | 登录 | 搜索 | 统计 | 帮助

RSS 订阅当前论坛  

喜悦证交所已经关闭

上一主题 下一主题
 21  2/3  <  1  2  3  > 
     
标题: [问题] 近百万条数据频繁检索有何好方案  
 
xieaotian (老老仙)
版主
Rank: 7Rank: 7Rank: 7


UID 82205
精华 1
积分 1295
帖子 1546
金钱 1295 喜悦币
威望 0
人脉 0
阅读权限 100
注册 2006-10-26
来自 老老神仙部落
状态 离线
还是我的分表建议好些,你可以先试试吧



http://www.okpython.com
让中国的python发展的更快。
2008-7-3 07:48 AM#11
查看资料  访问主页  Blog  发短消息  QQ . .   顶部
 
delta (delta)
新手上路
Rank: 1
初级会员



UID 20824
精华 0
积分 27
帖子 27
金钱 27 喜悦币
威望 0
人脉 0
阅读权限 10
注册 2003-6-17
状态 离线
[推荐阅读] 求一个从从字符串中提取URL的正则表达式,谢谢了!!
数据库的结构很简单

代码,名称,参数1,参数2,参数3,参数4

查询主要针对"名称", 代码有分级, 从代码可以识别大中小类,
已经对代码和名称字段建索引的

虽然很简单,确但每天的查询量太大,可能达到上百万次,很耗服务器资源

由于记录数太多,采用硬盘缓存的方式不太可行,缓存文件数可能上百万个,效率不会更高

因为搜索比较简单, 是否有把数据不做成mysql, 而用单一文件的形式, 用API编程效率会好些呢?
2008-7-3 10:03 AM#12
查看资料  发短消息  顶部
 
游戏人间
版主
Rank: 7Rank: 7Rank: 7
☞风云山庄大少爷☜


UID 62639
精华 2
积分 14655
帖子 7758
金钱 14505 喜悦币
威望 20
人脉 130
阅读权限 100
注册 2004-12-21
来自 广西人在北京
状态 离线
[推荐阅读] windows 2003自动登录
如果真的是"死"数据,那没啥好说的,第一次肯定是比较费时间.

最好不要放文本里,文本在你对数据库的原理还不是很了解的情况不用为妙.




 
群号:6025396/6025252/19520091(广西PHP交流/PHP高级编程/算法交流) 寧可在嘗試中失敗,也不在保守中成功! 不為失敗找理由,只為成功找方法! 饿踢Blog
 
2008-7-3 10:32 AM#13
查看资料  访问主页  Blog  发短消息  顶部
 
yanglei1979 (高老庄二庄主)
高级会员
Rank: 4
天蓬元帅


UID 73676
精华 0
积分 763
帖子 752
金钱 763 喜悦币
威望 0
人脉 0
阅读权限 50
注册 2006-5-19
来自 深圳
状态 在线
[推荐阅读] 求php兼职份工作
分表的话,查询分页的问题也不好解决啊

如果用多表链接查询的话,会更慢




今霄酒醒何处?杨柳岸,晓风残月。
2008-7-3 11:40 AM#14
查看资料  访问主页  发短消息  QQ . .   Yahoo!  顶部
 
七夜
中级会员
Rank: 3Rank: 3
中级会员


UID 29623
精华 2
积分 387
帖子 347
金钱 367 喜悦币
威望 20
人脉 0
阅读权限 30
注册 2004-6-25
来自 北京朝阳
状态 离线
[推荐阅读] 哥们我年纪小,问各位大哥一个严肃问题
你的服务器大于2G的内存,可以来找我。我帮你 定制一套检索系统。



1.让你的PHP4用上SQLite3. PHP的SQLite3模块扩展
2008-7-7 09:34 AM#15
查看资料  发短消息  顶部
 
niexa123
注册会员
Rank: 2
中级会员



UID 50950
精华 0
积分 152
帖子 259
金钱 152 喜悦币
威望 0
人脉 0
阅读权限 20
注册 2004-11-18
状态 离线
[推荐阅读] 这是啥玩意?
我也想听听大家的见解



http://www.ml188.org
2008-7-7 07:58 PM#16
查看资料  访问主页  Blog  发短消息  QQ . .   顶部
 
delta (delta)
新手上路
Rank: 1
初级会员



UID 20824
精华 0
积分 27
帖子 27
金钱 27 喜悦币
威望 0
人脉 0
阅读权限 10
注册 2003-6-17
状态 离线
[推荐阅读] 辽宁抚顺网通1g独享带宽租用18万/年QQ:563064084(网通直销!)


QUOTE:
原帖由 七夜 于 2008-7-7 09:34 AM 发表
你的服务器大于2G的内存,可以来找我。我帮你 定制一套检索系统。
先谢了, 服务器内存是2G的
2008-7-7 11:29 PM#17
查看资料  发短消息  顶部
 
dhgdmw
新手上路
Rank: 1



UID 77055
精华 0
积分 22
帖子 23
金钱 22 喜悦币
威望 0
人脉 0
阅读权限 10
注册 2006-7-26
状态 离线
[推荐阅读] phper求职!
自己做权值表
2008-7-8 12:04 PM#18
查看资料  发短消息  顶部
 
netorg (netorg)
金牌会员
Rank: 6Rank: 6
资深会员



UID 25606
精华 0
积分 1243
帖子 1286
金钱 1243 喜悦币
威望 0
人脉 0
阅读权限 70
注册 2004-1-4
状态 离线
[推荐阅读] 诚聘技术经理,薪资+期权(上海)
楼主可能对大数据量很少测试,现在数据库上百万条已经是很少数据量的了。现在一般的桌面型数据库就可以应对上百万能条的数据,如果不进行大量的更新与插入操作,而只进行SELECT动作,优化好了桌面型数据库就可以搞定了。如果是Server类的数据库,再加上现在普通的电脑,只要带宽跟得上,跑起来是非常顺的。



巴壁虎:http://www.babihu.com
2008-7-8 02:58 PM#19
查看资料  访问主页  发短消息  顶部
 
airwin
新手上路
Rank: 1



UID 77757
精华 0
积分 38
帖子 41
金钱 38 喜悦币
威望 0
人脉 0
阅读权限 10
注册 2006-8-5
状态 离线
[推荐阅读] 招聘PHP开发人员
死数据 又是这么大的查询量
做查询缓存不是挺好么 临时表、内存缓存 等等
2008-7-9 08:42 AM#20
查看资料  发短消息  顶部
 21  2/3  <  1  2  3  > 
     


  可打印版本 | 推荐给朋友 | 订阅主题 | 收藏主题 | 开通个人空间  


 




Powered by Discuz! 6.1.0  © 2001-2010 Comsenz Inc.
Processed in 0.155093 second(s), 6 queries

(冀ICP备05009913号) 管理员:sadly 邮箱/MSN: sadly@phpx.com QQ:824008(长隐) 清除 Cookies - - Archiver - WAP