pymongo数据库
A. python中mongodb怎么连接其他服务器的数据库
1、基于mongo实现远程连接
[plain] view plain
mongo -u admin -p admin 192.168.0.197:27017/pagedb
通过mongo实现连接，可以非常灵活的选择参数选项，参看命令帮助，如下所示：
[plain] view plain
mongo --help
MongoDB shell version: 1.8.3
usage: mongo [options] [db address] [file names (ending in .js)]
db address can be:
foo foo database on local machine
192.169.0.5/foo foo database on 192.168.0.5 machine
192.169.0.5:9999/foo foo database on 192.168.0.5 machine on port 9999
options:
--shell run the shell after executing files
--nodb don't connect to mongod on startup - no 'db address'
arg expected
--quiet be less chatty
--port arg port to connect to
--host arg server to connect to
--eval arg evaluate javascript
-u [ --username ] arg username for authentication
-p [ --password ] arg password for authentication
-h [ --help ] show this usage information
--version show version information
--verbose increase verbosity
--ipv6 enable IPv6 support (disabled by default)
2、基于MongoDB支持的javascript实现远程连接
当你已经连接到一个远程的MongoDB数据库服务器（例如，通过mongo连接到192.168.0.184），现在想要在这个会话中连接另一个远程的数据库服务器（192.168.0.197），可以执行如下命令：
[plain] view plain
> var x = new Mongo('192.168.0.197:27017')
> var ydb = x.getDB('pagedb');
> use ydb
switched to db ydb
> db
ydb
> ydb.page.findOne()
{
"_id" : ObjectId("4eded6a5bf3bfa0014000003"),
"content" : "巴黎是浪漫的城市，可是...",
"pubdate" : "2006-03-19",
"title" : "巴黎：从布鲁塞尔赶到巴黎",
"url" : "http://france.bytravel.cn/Scenery/528/cblsegdbl.html"
}
上述通过MongoDB提供的JavaScript脚本，实现对另一个远程数据库服务器进行连接，操作指定数据库pagedb的page集合。
如果启用了安全认证模式，可以在获取数据库连接实例时，指定认证账号，例如：
[plain] view plain
> var x = new Mongo('192.168.0.197:27017')
> var ydb = x.getDB('pagedb', 'shirdrn', '(jkfFS$343$_\=\,.F@3');
> use ydb
switched to db ydb
B. django 怎么查询mongodb数据
清单 1. 您可以尝试对 MongoDB 使用的样例 JavaScript 命令
var x = "0";
x === 0;
typeof({});
您不必成为一名 JavaScript 专家之后才开始使用 MongoDB；这里提供几个有用的概念：
您可以使用对象字面量语法 (object literal syntax) 创建对象，换句话说，会使用两个花括号（如 var myCollection = {};）。
您可以使用方括号（[]）来创建数组。
除了数字、布尔值、null 和未定义值以外，JavaScript 中的其他所有值都是一个对象。
如果您想要了解关于 JavaScript 其他特性的更多信息，比如原型的面向对象的编程 (OOP)、范围规则，及其函数式编程特性，请参阅 参考资料。
MongoDB 是一种无模式数据库，与关系型数据库完全相反。无模式数据库没有使用表格，而是使用由文档组成的集合。这些文档是使用对象字面量语法创建的，如 清单 2 所示。
清单 2. 文档创建示例
var person1 = {name:"John Doe", age:25};
var person2 = {name:"Jane Doe", age:26, dept: 115};
现在，请执行 清单 3 中所示的命令来创建一个新集合。
清单 3. 创建集合
db.employees.save(person1);
db.employees.save(person2);
由于 MongoDB 具有无模式特性，所以 person1 和 person2 不必具有相同的列类型，甚至不必拥有相同的列编号。并且，MongoDB 本身具有动态特性，所以它会创建 employees 而不是抛出一个错误。您可以通过 find() 方法检索文档。要获取 employees 中的所有文档，可以直接调用 find()，无需使用任何参数，如 清单 4 所示。
清单 4. 一个简单的 MongoDB 查询
> db.employees.find();
// returns
[
{ "_id" : { "$oid" : "4e363c4dcc93747e68055fa1" },
"name" : "John Doe", "age" : 25 },
{ "_id" : { "$oid" : "4e363c53cc93747e68055fa2" },
"name" : "Jane Doe", "dept" : 115, "age" : 26 }
]
注意，_id 等效于一个主键。要运行具体的查询，则需要使用键/值对传递另一个对象来指示您所要查询的内容，如 清单 5 所示。
清单 5. 通过一个搜索参数进行查询
> db.employees.find({name: "John Doe"});
// returns
[
{ "_id" : { "$oid" : "4e363c4dcc93747e68055fa1" },
"name" : "John Doe", "age" : 25 }
]
要查询年龄大于 25 岁的员工，请执行 清单 6 中的命令。
清单 6. 查询年龄大于 25 岁的员工
> db.employees.find({age:{'$gt':25}});
// returns
[
{ "_id" : { "$oid" : "4e363c53cc93747e68055fa2" },
"name" : "Jane Doe", "dept" : 115, "age" : 26 }
]
$gt 是一个特殊操作符，表示大于。表 1 列出了其他修饰符。
表 1. 可以对 MongoDB 使用的修饰符
修饰符
描述
$gt 大于
$lt 小于
$gte 大于或等于
$lte 小于或等于
$in 检查某个数组是否存在，类似于 'in' SQL 操作符。
当然，您也可以使用 update() 方法更新记录。您可以更新整条记录，如 清单 7 所示。
清单 7. 更新整条记录
> db.employees.update({
name:"John Doe", // Document to update
{name:"John Doe", age:27} // updated document
});
此外，您还可以使用 $set 操作符仅更新一个值，如 清单 8 所示。
清单 8. 仅更新记录中的一个值
> db.employees.update({name:"John Doe",
{ '$set': {age:27} }
});
要清空集合，可以调用 remove() 方法，无需使用任何参数。例如，如果您想要从 employees 集合中移除 John Doe，那么您可以执行 清单 9所示的操作。
清单 9. 从 employees 集合中移除 John Doe
> db.employees.remove({"name":"John Doe"});
> db.employees.find();
// returns
[
{ "_id" : { "$oid" : "4e363c53cc93747e68055fa2" }, "name" : "Jane Doe",
"dept" : 115, "age" : 26 }
]
此内容对于刚开始使用 MongoDB 的您来说已经足够了。当然，您可以继续浏览官方网站，该网站提供了简洁的、基于 Web 的交互式 mongodb 命令提示符，以及指南和官方文档。请参阅 参考资料。
回页首
将 Django 与 MongoDB 集成
有几个从 Python 或 Django 访问 MongoDB 的选项。第一个选项是使用 Python 模块，即 PyMongo。清单 10 是一个简单的 PyMongo 会话，假设您已经安装了 MongoDB，并且已经拥有一个在端口上运行的实例。
清单 10. 样例 PyMongo 会话
from pymongo import Connection
databaseName = "sample_database"
connection = Connection()
db = connection[databaseName]
employees = db['employees']
person1 = { "name" : "John Doe",
"age" : 25, "dept": 101, "languages":["English","German","Japanese"] }
person2 = { "name" : "Jane Doe",
"age" : 27, "languages":["English","Spanish","French"] }
print "clearing"
employees.remove()
print "saving"
employees.save(person1)
employees.save(person2)
print "searching"
for e in employees.find():
print e["name"] + " " + unicode(e["languages"])
PyMongo 允许您同时运行多个数据库。要定义一个连接，只需将数据库名字传递给连接实例。在本例中，Python 词典代替了 JavaScript 对象字面量来创建新文档定义，而 Python 列表代替了 JavaScript 数组。find 方法会返回一个您可以进行迭代的数据库游标对象。
语法的简易性使 MongoDB 命令行与包含 PyMongo 的运行命令之间的切换变得容易。例如，清单 11 展示了如何使用 PyMongo 运行一个查询。
清单 11. 使用 PyMongo 运行一个查询
for e in employees.find({"name":"John Doe"}):
print e
您从 Python 调用 MongoDB 的另一个选项是 MongoEngine，如果您使用过 Django 的内置 ORM，那么您对此应该感到非常熟悉。MongoEngine 是一个文档到对象的映射器，从概念上说，它与映射到 ORM 的映射器类似。清单 12 显示了一个使用 MongoEngine 的示例会话。
清单 12. MongoEngine 示例会话
from mongoengine import *
connect('employeeDB')
class Employee(Document):
name = StringField(max_length=50)
age = IntField(required=False)
john = Employee(name="John Doe", age=25)
john.save()
jane = Employee(name="Jane Doe", age=27)
jane.save()
for e in Employee.objects.all():
print e["id"], e["name"], e["age"]
Employee 对象继承自 mongoengine.Document。在本示例中，使用了两种字段类型：StringField 和 IntField。与 Django 的 ORM 相似，要通过查询获得集合中的所有文档，请调用 Employee.objects.all()。请注意，要访问惟一的对象 ID，请使用 "id" 而非 "_id"。
回页首
一个样例博客
现在要创建一个名为 Blongo 的简单博客。您将使用 Python 1.7、Django 1.3、MongoDB 1.8.2、MongoEngine 0.4 和 Hypertext Markup Language (HTML) 5。如果您想要重现我的精确设置，我习惯使用 Ubuntu linux 和 FireFox。Blongo 在网页加载后就会显示所输入的所有博客条目，并且允许对任何条目执行更新和删除操作，换句话说，允许进行所有的标准 CRUD 操作。Django 视图拥有三个方法：index、update 和delete。
层叠样式表 (CSS) 定义被引入一个单独的静态文件。相关内容我不想在此处赘述，您可以随意浏览 下载 部分中包含的源代码。
假设已安装好所需的所有工具，并且这些组件都能良好运行，那么请创建一个新的 Django 项目和必要的组件，如 清单 13 所示。
清单 13. 创建 Django 博客项目的命令
$ django-admin.py startproject blongo
$ cd blongo
$ django-admin.py startapp blogapp
$ mkdir templates
$ cd blogapp
$ mkdir static
Django 1.3 的新增内容是一个已包含在 Django 中的贡献型应用程序，可使用它来改进静态文件的处理。通过向任何应用程序目录添加一个静态目录（例如，本例中的 blogapp）并确保 django.contrib.staticfiles 包含在已安装应用程序中，Django 可以查找到诸如 .css 和 .js 的静态文件，而无需使用其他任何方法。清单 14 显示了设置文件的代码行，这些代码行已经进行了相应修改（来自默认的 settings.py 文件），使博客应用程序能够正常运行。
C. mongo数据库是怎么创建索引
2种方式：
（1）mongo shell
db.yourCollectionName.createIndex({fieldName: 1})
举例：
db.gameShortLink.createIndex({shortLink: 1})
（2）pymongo代码
indexKeyList = [
("fieldName", pymongo.ASCENDING),
]
mongoCollection.create_index(indexKeyList)
注：
一次性创建多个索引，举例：
import pymongo
from pymongo import IndexModel
# from pymongo import ASCENDING, DESCENDING
indexShortLink = IndexModel([("shortLink", pymongo.ASCENDING)], name="shortLink")
indexIsParseOk = IndexModel([("parsedLink.isParseOk", pymongo.ASCENDING)], name="parsedLink_isParseOk")
indexErrType = IndexModel([("parsedLink.errType", pymongo.ASCENDING)], name="parsedLink_errType")
indexRealGameName = IndexModel([("parsedGame.realGameName", pymongo.ASCENDING)], name="parsedGame_realGameName")
indexGameTheme = IndexModel([("parsedGame.gameTheme", pymongo.ASCENDING)], name="parsedGame_gameTheme")
indexModelList = [
indexShortLink,
indexIsParseOk,
indexErrType,
indexRealGameName,
indexGameTheme,
]
mongoCollectionShortlink.create_indexes(indexModelList)
详见：（网络搜）
【已解决】用mongo的shell给MongoDB创建索引以提高查询速度
【已解决】PyMongo中如何一次性创建多个index索引
D. pymongo 查看数据有多少条
清单 1. 您可以尝试对 MongoDB 使用的样例 JavaScript 命令var x = "0"; x === 0; typeof({}); 您不必成为一名 JavaScript 专家之后才开始使用 MongoDB；这里提供几个有用的概念： 您可以使用对象字面量语法 (object literal syntax) 创建对象，...
E. python 怎样通过遍历以下文件后全部读到mongodb数据库中
python 访问 mongodb 需要先安装 pymongo，如下：
1pipinstallpymongotxt 文件格式：
代码如下：
#coding=utf-=MongoClient('127.0.0.1',27017)#连接test数据库，没有则自动创建db=conn.test#使用students集合，没有则自动创建students=db.students#打开学生信息文件,并将数据存入到数据库withopen('students.txt','r')asf:forlineinf.readlines():#分割学生信息items=line.strip(' ').strip(' ').split(',')#添加到数据库students.insert({'stu_id':items[0],'name':items[1],'grade':int(items[2])})#数据库查询学生信息并打印出来forsinstudents.find():print(s)
F. pymongo和mongoengine的区别
Tornado 中 PyMongo Motor MongoEngine 的性能测试
最近在使用 Tornado 开发 API，数据库选择了 MongoDB，因为想使用 Geo 搜索的特性。Python 可供选择的 MongoDB Drivers 可以在官网查找。
在这些 Drivers 中，GitHub 上 Star 数最多的有 3 个：
PyMongo
Motor（适用于 Tornado 的异步 driver）
MongoEngine（ORM-like Layers）
Motor 和 MongoEngine 都是基于 PyMongo，Motor 的最新版是基于 PyMongo 2.8，Motor 的优势就在于异步，而 PyMongo 在 2.2 以后的版本，就开始支持 gevent。
MongoEngine 借鉴了 Django 的 ORM，提供了一个ORM-like layer，官方称作 Document-Object Mapper，可以像使用 Django 的 ORM 一样，简单的操作和处理数据。
面对这么多选择，就想探究这些选择都有哪些特点，性能如何，所以有了这篇文章。你可以在这里找到所有的测试代码和测试数据
从测试的结果来看，Motor 的性能确实很好，gevent 几乎没有性能提升，PyMongo 2.8 的性能很差，MongoEngine 是在 PyMongo 的基础上有封装了一层，但是两者性能相差不大。
Tornado 的单线程的，同步的数据库 Driver 会将 Tornado 阻塞住，导致无法处理其他的请求。
最后给出一组数据，百分比请求的最大响应时间。下面这张图，左边坐标的单位是毫秒。例如 Motor 有 50% 的请求是在 376 毫秒内完成的。
PyMongo 2.8，PyMongo 2.8 + gevent，MongoEngine + PyMongo 2.8 三条线重叠在了一起，它们之间的性能相当。
G. 如何判断pymongo 查询为空
清单 1. 您可以尝试对 MongoDB 使用的样例 JavaScript 命令var x = "0";
x === 0;
typeof({});
您不必成为一名 JavaScript 专家之后才开始使用 MongoDB；这里提供几个有用的概念：
您可以使用对象字面量语法 (object literal syntax) 创建对象，换句话说，会使用两个花括号（如 var myCollection = {};）。
您可以使用方括号（[]）来创建数组。
除了数字、布尔值、null 和未定义值以外，JavaScript 中的其他所有值都是一个对象。
如果您想要了解关于 JavaScript 其他特性的更多信息，比如原型的面向对象的编程 (OOP)、范围规则，及其函数式编程特性，请参阅 参考资料。
MongoDB 是一种无模式数据库，与关系型数据库完全相反。无模式数据库没有使用表格，而是使用由文档组成的集合。这些文档是使用对象字面量语法创建的，如 清单 2 所示。
清单 2. 文档创建示例
var person1 = {name:"John Doe", age:25};
var person2 = {name:"Jane Doe", age:26, dept: 115};
现在，请执行 清单 3 中所示的命令来创建一个新集合。
清单 3. 创建集合
db.employees.save(person1);
db.employees.save(person2);
H. python爬虫学习教程哪个好
第一阶段
Python开发基础和核心特性1.变量及运算符2.分支及循环3.循环及字符串4.列表及嵌套列表5.字典及项目练习6.函数的使用7.递归及文件处理8.文件9.面向对象10.设计模式及异常处理11.异常及模块的使用12.坦克大战13.核心编程14.高级特性15.内存管理
第二阶段
数据库和linux基础1.并发编程2.网络通信3.MySQL4.Linux5.正则表达式
第三阶段
web前端开发基础1.html基本标签2.css样式3.css浮动和定位4.js基础5.js对象和函数6.js定时器和DOM7.js事件响应8.使用jquery9.jquery动画特效10.Ajax异步网络请求
第四阶段
Python Web框架阶段1.Django-Git版本控制2.Django-博客项目3.Django-商城项目4.Django模型层5.Django入门6.Django模板层7.Django视图层8.Tornado框架
第五阶段
Python 爬虫实战开发1.Python爬虫基础2.Python爬虫Scrapy框架
I. 为什么连接不到本机的mongodn数据库,总是报connect fail的错
Mongoengine是一个可以操作MongoDB数据库的对象-文档映射器（Object-Document Mapper）。出于工作需要，最近在使用MongoDB+Django实现一个数据录入系统小网站的过程中，出现通过Mongoengine无法从 Python 调用 MongoDB，在connect()数据库一步的时候出现下面错误：
>>> from mongoengine import connect
>>> connect(‘healthmanager‘)
Traceback (most recent call last):
File "<console>", line 1, in <mole>
File "/usr/local/python2.7/lib/python2.7/site-packages/mongoengine/connection.py", line 164, in connect
return get_connection(alias)
File "/usr/local/python2.7/lib/python2.7/site-packages/mongoengine/connection.py", line 126, in get_connection
raise ConnectionError("Cannot connect to database %s :\n%s" % (alias, e))
ConnectionError: Cannot connect to database default :
False is not a read preference.
其原因在于，通过“pip install mongoengine”安装的mongoengine为0.9.0版本，同时该命令把pymongo-3.0.2的模块依赖也装好了，而pymongo-3.0.2跟mongoengine-0.9.0之间存在兼容问题，从而导致默认的数据库无法connect成功。
>>> import pymongo
>>> pymongo.version
‘3.0.2‘
另外，CentOS 6.5下用“pip install pymongo”安装的pymongo为3.0.2版本，而mongoengine作为pymongo的一个扩展包，是没有安装的。因此在使用mongoengine的时候，安装完mongoengine后，需要降低pymongo版本至3.0以下。、
解决方法：
=> pip install mongoengine # 安装mongoengine
=> pip uninstall pymongo # 卸载pymongo-3.0.2
=> pip install pymongo==2.8 # 安装pymongo-2.8
重新connect：
>>> from mongoengine import connect
>>> connect(‘healthmanager‘)
MongoClient(‘localhost‘, 27017)
J. 如何使用python获取mongoDB数据库中表格的字段名
db = pymongo.MongoClient().test
dates = db.user.find()
print type(dates)
for i in dates:
print i.keys()
break
创建连接，取到dates数据，不就是一个字典列表啊，取一个值然后字典操作.keys()不就可以了。