Пользовательская система хранения для GridFS (MongoDB)?
Вопрос
Кто-нибудь может указать мне на какие-либо проекты / приложения django, которые предоставляют подключаемую пользовательскую систему хранения, чтобы я мог использовать GridFS с Django для хранения загруженных файлов?
Я нашел django-mongodb, но, похоже, он не поддерживает GRIDFS, равно как и django-storages.
Я планирую запускать mysql для обычных запросов к базе данных и использовать mongodb только для хранения файлов, поэтому, чтобы было ясно, я не хочу использовать mongodb в качестве своей основной базы данных.
Решение
Я работаю над PyMongo, драйвером MongoDB для Python, и не слышал ни о каком проекте по предоставлению пользовательского хранилища для Django с использованием GridFS.Похоже, что было бы не очень сложно написать поверх PyMongo:вероятно , это мог бы быть прямой перевод API GridFS - интерфейс на API хранилища Django.Возможно, в какой-то момент можно было бы подумать о том, чтобы собрать что-нибудь вместе, но это был бы отличный проект с открытым исходным кодом для всех, кто хочет принять в нем участие.
Другие советы
Недавно я внедрил Поддержка GridFS в Mongoengine который вы, возможно, захотите оформить.Это включает в себя серверную часть хранилища Django, которую вы можете подключать прямо к своим проектам и использовать с ImageField и т.д.Я использую эти технологии в производстве, и пока все отлично держится.
django-mongodb-движок возможно, стоит взглянуть, поскольку это позволяет вам делать это без необходимости вносить изменения в существующий код Django.
Мне нужно было именно это для EDMS майя, подключаемое хранилище и разделение баз данных.Используя последнюю библиотеку PyMongo Майкла Диролфа, запустить базовый класс было довольно тривиально.
Чтобы использовать его:
from gridfsstorage import GridFSStorage
file = models.FileField(storage=GridFSStorage())
файл gridfsstorage.py :
import os
from django.core.files.storage import Storage
from django.utils.encoding import force_unicode
from django.conf import settings
from pymongo import Connection
from gridfs import GridFS
class GridFSStorage(Storage):
def __init__(self, *args, **kwargs):
self.db = Connection(host=settings.GRIDFS_HOST,
port=settings.GRIDFS_PORT)[settings.DATABASE_NAME]
self.fs = GridFS(self.db)
def save(self, name, content):
while True:
try:
# This file has a file path that we can move.
if hasattr(content, 'temporary_file_path'):
self.move(content.temporary_file_path(), name)
content.close()
# This is a normal uploadedfile that we can stream.
else:
# This fun binary flag incantation makes os.open throw an
# OSError if the file already exists before we open it.
newfile = self.fs.new_file(filename=name)
try:
for chunk in content.chunks():
newfile.write(chunk)
finally:
newfile.close()
except Exception, e:
raise
else:
# OK, the file save worked. Break out of the loop.
break
return name
def open(self, name, *args, **kwars):
return self.fs.get_last_version(name)
def delete(self, name):
oid = self.fs.get_last_version(name)._id
self.fs.delete(oid)
def exists(self, name):
return self.fs.exists(filename=name)
def path(self, name):
return force_unicode(name)
def size(self, name):
return self.fs.get_last_version(name).length
def move(self, old_file_name, name, chunk_size=1024*64):
# first open the old file, so that it won't go away
old_file = open(old_file_name, 'rb')
try:
newfile = self.fs.new_file(filename=name)
try:
current_chunk = None
while current_chunk != '':
current_chunk = old_file.read(chunk_size)
newfile.write(current_chunk)
finally:
newfile.close()
finally:
old_file.close()
try:
os.remove(old_file_name)
except OSError, e:
# Certain operating systems (Cygwin and Windows)
# fail when deleting opened files, ignore it. (For the
# systems where this happens, temporary files will be auto-deleted
# on close anyway.)
if getattr(e, 'winerror', 0) != 32 and getattr(e, 'errno', 0) != 13:
raise