Хранение, обработка и отдача статики с использованием \Zend\File. Опыт социальной сети starlook.ru

Хранение, обработка и отдача
статики
Мокевнин Кирилл, undev.ru

Хранение загруженных файлов
Хранилище:
• Локальная файловая система.
• База данных.
• NFS.
• Amazon S3.
• Webdav.
Организация файлов в локальной ФС:
• Соглашения.
• Общий подход.

WEBDAV
- это современный и защищённый сетевой протокол
высокого уровня, работающий поверх HTTP для
доступа к объектам и коллекциям объектов.
• Выполнение основных файловых операций над
объектами на удаленном сервере.
• ngx_http_dav_module или mod_dav.
• Для использования в ZF - Zend_Http_Client.

Сервера и их взаимодействие

Сервера и их взаимодействие
• Один сервер -> VPS -> Кластер.
• Storage хранит только исходники картинок.
• На storage серверах стоит nginx с модулем
ngx_http_dav_module.
• Create_full_put_path on.
• Webdav используется только для загрузки
картинок на storage.

Организация хранилища (пути),
взаимодействие с базой и связь с
сущностями приложения.
Загрузка

Загрузка файлов
• Для каждого файла своя запись в таблице.
• is_deleted и is_ready для отложенной
обработки.
• На основе id генерируется путь
161/374/000473161 до файла на storage
сервере.
• Каждая сущность в базе, имеющая
файл(ы), связывается с id файла.

Формирование урлов, конфигурация
превью картинок.
Отдача файлов

Конфигурационный файл с типами картинок и
настройками для ресайза, картинка по
умолчанию (заглушка).
[user_avatar]
resize.big.OutputFileFormat = jpg
resize.big.width = 236
resize.big.height = 177
resize.medium.keepFrame = true
resize.medium.width = 144
resize.medium.height = 108

View Helper для генерации ссылок.
$this->image($avatar_file_id, 'user_avatar', 'big')
• http://static.starlook.ru/sets-medium-947826-
4fc400fb-image.jpg
• HTTP_UrlSigner (dklab.ru)
• Если avatar_file_id == null, то возвращает
путь на заглушку.

Устройство ресайзера. Кеширование.

Устройство ресайзера. Кеширование.
• Кеширует nginx, ресайзит php.
• Кешируем на клиенте навсегда.
• В скрипте ресайзера не нужно поднимать
bootstrap ZF).
• В nginx нужно разделять пулы коннектов для
отдачи из кеша и ресайза.
• Благодаря цифровому подписыванию ресайзит
только в разрешенные размеры.

Собирая все вместе
• Создание записи в базе при загрузке картинки и
перемещение исходного файла в необходимую
директорию.
• Файл конфигурации.
• Вью хелпер для урлов.
• Скрипт для генерации картинок (с
кешированием).

$client = new Ext_Webdav_Client($connect_params);
$adapter = new Ext_File_Adapter_Webdav();
$adapter->setClient($adapter);
$transfer = new Ext_File_Transfer();
$transfer->setAdapter($adapter);
Ext_Form_Element_File::setTransfer($transfer);
return $transfer;

public function configure(Ext_File $file) {
$table = new File();
$row = $table->createRow();
list($row->width, $row->height) =
getimagesize($file->getFilePath());
$row->save();
$this->getAdapter()->setUri($this-
>generateUri($row->id));
return $row;

$element = new Ext_Form_Element_File('files');
$element->setIsArray(true);
$element->setConfigurator(new
File_Configurator_WebdavDb());
$value = $element->getValue();
foreach ($value as $row) {
// processing
}

Спасибо за внимание!
E-mail: mokevnin@gmail.com
Блог: www.wddx.ru
twitter.com/mokevnin

Хранение, обработка и отдача статики с использованием \Zend\File. Опыт социальной сети starlook.ru

Related slideshows

More Related Content

Хранение, обработка и отдача статики с использованием \Zend\File. Опыт социальной сети starlook.ru