在Python应用中使用MongoDB
2016/12/30 · 工具与框架

Python是开发社区中用于许多不同类型应用的强大编程语言。很多人都知道它是可以处理几乎任何任务的灵活语言。因此，在Python应用中需要一个什么样的与语言本身一样灵活的数据库呢？那就是NoSQL，比如MongoDB

阅读全文 »

使用 psutil 和 MongoDB 做系统监控
2016/10/02 · 实践项目

这篇入门文章描述了怎样创建一系列的图表来监控一台或多台服务器的负载。使用 Python（psutil 和 bottle），MongoDB 和 jquery。不管你使用什么样的数据库或 WEB 框架，思路都是一样的。在最后，你将有一个 web 页面为每台服务器展示图表，图表中显示了 cpu， memory， 和 disk usage。

阅读全文 »

Tornado+MongoDB 实现微信公众号自动回复
2016/04/02 · 实践项目

之前公众号有人关注之后会发送一些指令查询 PyTips，今天抽时间实现了一下微信公众号自动回复的功能。

阅读全文 »

在 Pylons 中使用 MongoDB 的例子
2016/01/10 · 工具与框架

Pylons 虽是山寨 Rails 而生，但作为一个纯 Python 的 Web 框架，它有一个鲜明的特点：可定制性强。框架每一层都没重新发明轮子，而是尽量整合现有的 Python 库。

阅读全文 »

通过pymongo测试MongoDB的高可用性
2015/06/24 · 工具与框架

mongodb数据库用于生产环境中，除了考虑它的scalability以外，对于重要数据，肯定要考虑的就是HA。mongodb通过replica set这种PRIMARY/SECONDARY备份技术来实现高可用性，本文通过三个节点的mongodb环境，使用pymongo对其HA进行简单的测试

阅读全文 »

Scrapy+Flask+Mongodb+Swift开发全攻略（3）
2015/05/18 · 工具与框架, 框架

不知不觉已经到了第三篇了。那么我们经过之前的学习，掌握了哪些内容呢？1.学会了如何用python的scrapy框架来趴一些数据。2.学会了把爬虫爬来的数据存入mongodb。3.学会了怎么用Flask写一个简单的接口。

阅读全文 »

Scrapy+Flask+Mongodb+Swift开发全攻略（2）
2015/05/18 · 工具与框架, 框架

好的，这期开始之前，我们先要干两件事。第一件事是找到spiders文件夹里的dbmeizi_scrapy.py。打开他，上一篇教程里，这个爬虫文件是这么写的。

阅读全文 »

Scrapy + Flask + Mongodb + Swift 开发爬虫全攻略（1）
2015/04/30 · 工具与框架, 框架

先一一介绍一下上面4个东西。第一个叫做Scrapy的东西是用python写的爬虫框架。Flask是python写的一个非常有名的web开发框架，python界有两个名气最大的web开发框架，Flask是其中之一，另一个叫做Djang

阅读全文 »

Python下用Scrapy和MongoDB构建爬虫系统（2）
2015/04/24 · 实践项目, 工具与框架, 框架, 系列教程 · 3 条评论

在上一篇中，我们实现了一个基本网络爬虫，它可以从StackOverflow上下载最新的问题，并将它们存储在MongoDB数据库中。在本文中，我们将对其扩展，使它能够爬取每个网页底部的分页链接，并从每一页中下载问题（包含问题标题和URL）。

阅读全文 »

Python下用Scrapy和MongoDB构建爬虫系统（1）
2015/04/24 · 实践项目, 工具与框架, 框架, 系列教程 · 5 条评论

这篇文章将根据真实的兼职需求编写一个爬虫，用户想要一个Python程序从Stack Overflow抓取数据，获取新的问题（问题标题和URL）。抓取的数据应当存入MongoDB。值得注意的是，Stack Overflow已经提供了可用于读取同样数据的API。但是用户想要一个爬虫，那就给他一个爬虫。

阅读全文 »

跳到底部
返回顶部