Страница 1 из 2

Количество файлов вложений в папке files - какие ограничения?

Добавлено: 03.02.2018 9:24
Beer
У меня сейчас там 46 862 шт. вместе с превью на 1,8Гб.
Подключаюсь к FTP периодически для синхронизации.
Переехал у хостера на другой сервер (с возможностью выбора версии php), все работает штатно, но в какой-то момент заметил, что в FTP менеджере Total Commander я не вижу все файлы :shock:
Т.к. бекап старого форума не удален - подключился быстренько к старому серверу - вижу все (отображается через 30 сек., пока читается директория), тут же через 3 сек отдача прекращается и я вижу только 9998шт. и все. :o

Написал хостеру - что за шаманство тут?
Получил ответ:
Больше 10 000 файлов по FTP вы не увидите.
В общем случае, это не нормально когда в одной директории столько файлов. Если скрипт позволяет. нужно делать вложенную структуру как можно скорее.


Так сколько файлов должно быть в директории files и есть ли ограничения?
Это правда, что >10 000 файлов по FTP вы не увидеть?

Я ведь на другом сервере вижу все 46 862 шт.....


Прошу гуру PHP-хостинго-VPS-VDS и еще чего там разъяснить танкисту!

Re: Количество файлов вложений в папке files - какие ограничения?

Добавлено: 03.02.2018 10:01
Gubkin
Beer писал(а): 03.02.2018 9:24 тут же через 3 сек отдача прекращается и я вижу только 9998шт. и все
а как копировал, папку целиком или вошел внутрь неё нажал ctrl + a и потом копируешь ?

другим клиентом пробовал там WinSCP или filezilla ?
вообще пишут, что листинг файлов даёт сервер, к нему и все вопросы )

Re: Количество файлов вложений в папке files - какие ограничения?

Добавлено: 03.02.2018 12:40
Siava
Вложенная структура давно нужна. В одной директории держать туеву хучу файлов это жесть.
К слову, у меня почти 80тыс. FTP не пользуюсь)

Re: Количество файлов вложений в папке files - какие ограничения?

Добавлено: 03.02.2018 12:42
Sumanai
Beer, при таком количестве файлов FTP для пофайлового копирования всё равно не эффективен. Лучше архивируйте на сервере и скачивайте одним большим архивом. И вот эта фраза
Beer писал(а): 03.02.2018 9:24В общем случае, это не нормально когда в одной директории столько файлов.
чистая правда, у меня даже на рамдиске тупит на секунду на директории в 20к файлов, а тут в два раза больше, и наверняка на медленном диске.

Отправлено спустя 47 секунд:
Siava писал(а): 03.02.2018 12:40Вложенная структура давно нужна
Расширением это не починить? Я то могу и файлы модифицировать, но для простого phpBB это не подходит.

Re: Количество файлов вложений в папке files - какие ограничения?

Добавлено: 03.02.2018 13:15
Джим
Beer писал(а): 03.02.2018 9:24Больше 10 000 файлов по FTP вы не увидите.
Ха, у меня 7.6 миллионов вложений, я их давно не вижу. Проблема из-за этого при загрузке, грузится каждый второй файл, но которые загрузились, отображаются нормально. Что делать - не знаю. Уперся в юниксовые ограничения файловой системы. :cry: Что-то там с индексацией такого большого количества файлов в одной папке.

Re: Количество файлов вложений в папке files - какие ограничения?

Добавлено: 03.02.2018 16:05
Mr. Anderson
Джим, решение вашей (и, право слово, не только вашей) проблемы - в разработке.
Правда идет едва-едва... А спонсоров/краудфандеров не нашлось :(

Re: Количество файлов вложений в папке files - какие ограничения?

Добавлено: 03.02.2018 17:19
Джим
Mr. Anderson писал(а): 03.02.2018 16:05А спонсоров/краудфандеров не нашлось
А это Вы разрабатываете? Может, я проспонсирую по мере сил?

Re: Количество файлов вложений в папке files - какие ограничения?

Добавлено: 03.02.2018 18:48
Vlad__
Sumanai писал(а): 03.02.2018 12:43Расширением это не починить?
Мод вроде такой был: [RC] Attachments in subfolders [Вложения в подпапках]
"Господа, уточню в рамках небольшого оффтопа - мод по этим же инструкциям ставится на phpbb 3.1, проблем с работой пока не выявил. Единственное не тестировал скрипт переноса в подпапки, но у меня уже было рассортировано всё."

Re: Количество файлов вложений в папке files - какие ограничения?

Добавлено: 03.02.2018 23:19
Татьяна5
Есть проблемы с тем модом на 3.1. И с расширениями на его основе тоже есть

Re: Количество файлов вложений в папке files - какие ограничения?

Добавлено: 04.02.2018 20:45
Beer
Напасть какая-то получается....
В SMF можно было новую папку создавать и следующие файлы лить уже туда, а тут как-то это никого и не беспокоит. Даже странно.

Целиком папку ради десятка-двух файлов скачивать жесть. :(

https://github.com/phpbb/phpbb/pull/4968

Re: Количество файлов вложений в папке files - какие ограничения?

Добавлено: 04.02.2018 23:04
SStone
Mr. Anderson писал(а): 03.02.2018 16:05решение вашей (и, право слово, не только вашей) проблемы - в разработке.
Правда идет едва-едва... А спонсоров/краудфандеров не нашлось
А где ознакомится с темой по сбору средств?
Может на guru сделаете такой раздел, думаю, среди посетителей много владельцев форумов, у которых с files сложности.
Да и вообще краудфандинг мог бы породить массу полезных расширений для phpBB.
Если в расширении будет еще и возможность хранить files в подпапках, да на внешнем сервере, записывайте сразу же.

Ну или маркет с готовыми платными расширениями (у IPB, например, есть) :roll:

Re: Количество файлов вложений в папке files - какие ограничения?

Добавлено: 04.02.2018 23:35
Mr. Anderson
SStone писал(а): 04.02.2018 23:04где ознакомится с темой
Здесь ее не было и, вероятнее всего, никогда не будет
SStone писал(а): 04.02.2018 23:04Может на guru сделаете такой раздел
Еще менее вероятно.
SStone писал(а): 04.02.2018 23:04возможность хранить files в подпапках
Само собой разумеющийся функционал.
SStone писал(а): 04.02.2018 23:04да на внешнем сервере
Излишнее усложнение и умножение сущностей и зависимостей (в плане надежности как минимум). В базе - наименее вероятно. Аддоном - может быть.

Re: Количество файлов вложений в папке files - какие ограничения?

Добавлено: 19.04.2018 19:42
SStone
Может кто подскажет, почему в files после загрузки изображения создается папка plupload с index.htm? Какой функционал она несет?

Re: Количество файлов вложений в папке files - какие ограничения?

Добавлено: 19.04.2018 19:49
Sheer
Временное хранилище файлов, загруженных plupload

Re: Количество файлов вложений в папке files - какие ограничения?

Добавлено: 01.05.2018 16:17
Gubkin
преодолел 10 тыс. файлов и 1000 MB
всё читается по FTP
1212.jpg