摘要： 测试硬件环境 MacPro 处理器名称： Intel Core i7 处理器速度： 2.5 GHz 处理器数目： 1 核总数： 4 L2 缓存（每个核）： 256 KB L3 缓存： 6 MB 内存： 16 GB 测试软件环境 MongoDB v3.2.4 300W存量数据 1.1 单条插入性能测试 阅读全文

摘要： 基本思想 将MongoDB用作内存数据库（in-memory database），也即，根本就不让MongoDB把数据保存到磁盘中的这种用法，引起了越来越多的人的兴趣。这种用法对于以下应用场合来讲，超实用： 置于慢速RDBMS系统之前的写操作密集型高速缓存 嵌入式系统 无需持久化数据的PCI兼容系统 阅读全文

摘要： 【IT168现场报道】2013年4月18-20日，第四届中国数据库技术大会(DTCC 2013)在北京福朋喜来登酒店拉开序幕。在为期三天的会议中，大会将围绕大数据应用、数据架构、数据管理(数据治理)、传统数据库软件等技术领域展开深入探讨，并将邀请一批国内顶尖的技术专家来进行分享。本届大会将在保留数据 阅读全文

摘要： 结论 1：SSD卡显著改善磁盘IO，io占用在50%以下 2：SSD卡使mongodb性能稳定。在200并发，数据量是内存5倍的情况下仍然保证每秒1500次插入和4500次查询。 数据如下： 1：每秒IO完成次数【均在内存用完的时候】 有SSD卡的每秒完成磁盘次数 以及相应次数下磁盘占用% 没有ss 阅读全文

摘要： On this page files 集合 chunks 集合 On this page files 集合 chunks 集合 在对 GridFS 存储进行分片时,需要注意以下的情况: files 集合 大多数情况下不需要对 files 集合进行分片,这个集合通常很小,只包含了一些元信息.集合中也没 阅读全文

摘要： 导入图片引入模块，其中gridfs模块不需要单独安装，引入了pymongo即可直接引入from pymongo import MongoClientfrom gridfs import *import os#链接mongodbclient=MongoClient('localhost',27017) 阅读全文

摘要： 正文 在这篇文章中，提到了Master进程对信号的处理函数，其中有两个信号比较有意思。 SIGHUP：用来热更新（Reload）应用 SIGUSR2：用来在线升级（upgrade on the fly）gunicorn 下面来详细看一下： SIGHUP: Reload the configurati 阅读全文

摘要： 1. supervisor简介 1.1. 官网 http://supervisord.org/ 1.2. 介绍 Supervisor是一个进程控制系统. 它是一个C/S系统(注意: 其提供WEB接口给用户查询和控制), 它允许用户去监控和控制在类UNIX系统的进程. 它的目标与launchd, da 阅读全文

摘要： 背景： 项目中遇到有些脚本需要通过后台进程运行，保证不被异常中断，之前都是通过nohup、&、screen来实现，带着能否做一个start/stop/restart/reload的服务启动的想法找到里Supervisor。关于supervisor的介绍在网上大致搜索总结如下： Supervisor是 阅读全文

摘要： flask-limiter 是一个对客户端的访问速率进行限制的flask扩展.可以自定义一些访问的(速度)限制条件来把那些触发限制的请求拒之门外.一般常用来进行对爬虫的限制. 下面就常见的用法,举了一些例子.更多的例子,请自己查看原始文档. from flask import Flask, requ 阅读全文