zrp1994
V2EX  ›  服务器

千万条数据级服务器的配置应该是什么样子

  •  
  •   zrp1994 · Oct 20, 2015 · 4275 views
    This topic created in 4048 days ago, the information mentioned may be changed or developed.

    现在有个服务器,每天新增两百万条数据左右,然后总数据已经达到 5000W+,但是 PV 较小,每天 1000+左右吧。请问至少服务器要达到什么样的配置才能不吃力。

    12 replies  •  2015-10-20 13:48:46 +08:00
    ryd994
    ryd994
    Oct 20, 2015
    1
    0.现在什么情况?什么配置?为什么吃力查清了么?
    1.是什么数据?旧数据能不能优化走?分库分机
    2.有多少索引?索引多大?内存大小应当参照索引大小配。
    既然请求量不大,那可以忽略缓存部分( memcached/redis 在没有大量重复查询的时候没什么用)
    3.机械硬盘应该是顶的住的,如果你不介意延迟的话
    4.如果软 raid ,考虑软 raid 的计算量
    zrp1994
    zrp1994
    OP
    Oct 20, 2015
    2
    @ryd994
    1. 主要是 8G 内存几乎占满, CPU 和 IO 占用都稍低。主要是 Select 语句查询太慢,现在正在考虑分表,但是感觉按天分是不是太多了
    2. 由于数据量大的部分的表结构是其他人规定的,发现他们没有给索引……而且查询的时候也不按索引查询。
    3.机械硬盘,没有加缓存。
    vibrance
    vibrance
    Oct 20, 2015 via iPhone
    3
    站群? 5000 万多才千访问,为什么不关啦
    zrp1994
    zrp1994
    OP
    Oct 20, 2015
    4
    @vibrance 不是站群
    HentaiMew
    HentaiMew
    Oct 20, 2015
    5
    5000 万的数据量 oracle 应该能驾驭,不过没索引当然慢了…
    newtonisaac
    newtonisaac
    Oct 20, 2015
    6
    索引
    kn007
    kn007
    Oct 20, 2015
    7
    没索引,你怎么换都坑爹
    zrp1994
    zrp1994
    OP
    Oct 20, 2015
    8
    @kn007
    @newtonisaac
    @HentaiMew
    确实是,但是要改也只能等到下一期了,至少还有半个月……坑爹
    ryd994
    ryd994
    Oct 20, 2015 via Android
    9
    必须加索引!没索引你居然也能活到现在……
    没索引除非你内存能放下整个数据库,然而即使那样也比索引慢
    没索引,换什么配置都药丸
    zrp1994
    zrp1994
    OP
    Oct 20, 2015
    10
    @ryd994 好吧……吓得我立马滚去在本地鸡上测试下
    uleh
    uleh
    Oct 20, 2015
    11
    每天才 1000+的 PV ,好一点的 PC 配置都可以承受了吧
    关键还是数据库要索引。。
    oott123
    oott123
    Oct 20, 2015 via Android
    12
    难道每次查询都要扫全表吗…
    为服务器的硬盘感到默哀
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   4339 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 34ms · UTC 05:57 · PVG 13:57 · LAX 21:57 · JFK 00:57
    ♥ Do have faith in what you're doing.