Bitrix — способ очистки папки upload/iblock от ненужных файлов — WordPress и Woocommerce плагины

<?php

require($_SERVER[«DOCUMENT_ROOT»] . «/bitrix/header.php»);

?>

<?php

global $USER;

if (!$USER->IsAdmin()) {

    echo «Одумайся или авторизуйся…»;

    return;

}

$time_start = microtime(true);

echo ‘<br>’;

///////////////////////////////////////////////////////////////////

define(«NO_KEEP_STATISTIC», true);

define(«NOT_CHECK_PERMISSIONS», true);

$deleteFiles = ‘no’; //Удалять ли найденые файлы yes/no

$saveBackup = ‘yes’; //Создаст бэкап файла yes/no

//Папка для бэкапа

$patchBackup = $_SERVER[‘DOCUMENT_ROOT’] . «/upload/zixnru_Backup/»;

//Целевая папка для поиска файлов

$rootDirPath = $_SERVER[‘DOCUMENT_ROOT’] . «/upload/iblock»;

//Создание папки для бэкапа

if (!file_exists($patchBackup)) {

    CheckDirPath($patchBackup);

}

// Получаем записи из таблицы b_file

$arFilesCache = array();

$result = $DB->Query(‘SELECT FILE_NAME, SUBDIR FROM b_file WHERE MODULE_ID = «iblock»‘);

while ($row = $result->Fetch()) {

    $arFilesCache[$row[‘FILE_NAME’]] = $row[‘SUBDIR’];

}

$hRootDir = opendir($rootDirPath);

$count = 0;

$contDir = 0;

$countFile = 0;

$i = 1;

$removeFile=0;

while (false !== ($subDirName = readdir($hRootDir))) {

    if ($subDirName == ‘.’ || $subDirName == ‘..’) {

        continue;

    }

    //Счётчик пройденых файлов

    $filesCount = 0;

    $subDirPath = «$rootDirPath/$subDirName»; //Путь до подкатегорий с файлами

    $hSubDir = opendir($subDirPath);

    while (false !== ($fileName = readdir($hSubDir))) {

        if ($fileName == ‘.’ || $fileName == ‘..’) {

            continue;

        }

        $countFile++;

        if (array_key_exists($fileName, $arFilesCache)) { //Файл с диска есть в списке файлов базы — пропуск

            $filesCount++;

            continue;

        }

        $fullPath = «$subDirPath/$fileName»; // полный путь до файла

        $backTrue = false; //для создание бэкапа

        if ($deleteFiles === ‘yes’) {

            if (!file_exists($patchBackup . $subDirName)) {

                if (CheckDirPath($patchBackup . $subDirName . ‘/’)) { //создал поддиректорию

                    $backTrue = true;

                }

            } else {

                $backTrue = true;

            }

            if ($backTrue) {

                if ($saveBackup === ‘yes’) {

                    CopyDirFiles($fullPath, $patchBackup . $subDirName . ‘/’ . $fileName); //копия в бэкап

                }

            }

            //Удаление файла

            if (unlink($fullPath)) {

                $removeFile++;

                echo «Удалил: » . $fullPath . ‘<br>’;

            }

        } else {

            $filesCount++;

            echo ‘Кандидат на удаление — ‘ . $i . ‘) ‘ . $fullPath . ‘<br>’;

        }

        $i++;

        $count++;

        unset($fileName, $backTrue);

    }

    closedir($hSubDir);

    //Удалить поддиректорию, если удаление активно и счётчик файлов пустой — т.е каталог пуст

    if ($deleteFiles && !$filesCount) {

        rmdir($subDirPath);

    }

    $contDir++;

}

if ($count < 1) {

    echo ‘Не нашёл данных для удаления<br>’;

}

if ($saveBackup === ‘yes’) {

     echo ‘Бэкап файлов поместил в: <strong>’ . $patchBackup . ‘</strong><br>’;

}

echo ‘Всего файлов удалил: <strong>’ . $removeFile . ‘</strong><br>’;

echo ‘Всего файлов в ‘ . $rootDirPath . ‘: <strong>’ . $countFile . ‘</strong><br>’;

echo ‘Всего подкаталогов в ‘ . $rootDirPath . ‘: <strong>’ . $contDir . ‘</strong><br>’;

echo ‘Всего записей в b_file: <strong>’ . count($arFilesCache) . ‘</strong><br>’;

closedir($hRootDir);

////////////////////////////////////////////////////////////////////

echo ‘<br>’;

$time_end = microtime(true);

$time = $time_end — $time_start;

echo «Время выполнения $time секунд\n»;

require($_SERVER[«DOCUMENT_ROOT»] . «/bitrix/footer.php»);

?>

zixn.ru

Битрикс — Мастер очистки сайта

marketplace.1c-bitrix.ru

Мастер очистки сайта — Модуль для 1С-Битрикс

Технические данные

Дата публикации:

29.11.2014

Дата обновления:

23.10.2019

Адаптивность:

Да

Поддержка композита:

Да

Число установок:

Более 1000 раз

Совместимые редакции

Описание

Возможности:
— пошаговое удаление элементов инфоблоков (для очистки например. демо-данных, не создавая нагрузки на сервер)
— очистка сообщений форума по автору, его ip, либо спам-подстроке
— очистка папки upload на предмет неиспользуемых файлов
— удаление неактивных сайтов и связанных с ними инфоблоками
— удаление неиспользуемых шаблонов сайта
— удаление неактивных элементов инфоблоков
— очистка неактивных почтовых шаблонов
— удаление неактивных пользователей и пользователей без авторизации
— удаление истории заказов за выбранный период
— удаление кеша
— очистка журнала вторжений
— удаление истории веб статистики с выбором периода
— удаление брошенных корзин
— очистка несуществующих адресов подписчиков
— очистка истории почтовых событий за выбранный период
— очистка результатов вебформ за выбранный период
— удаление неиспользуемых языковых файлов
— удаление неиспользуемых модулей (в статусе удален)
— удаление неиспользуемых компонентов
— очистка выпусков рассылки за выбранный период
— удаление статистики монитора производительности
— очистка последних просмотренных заказов

Важные ограничения:
— в демо версии можно провести только диагностику проблемных мест функционал очистки доступен в полной коммерческой  версии —  модуль теоретически  должен работать на старых версиях Битрикса начиная с  версии 14,0,8 но  учитывая что и Битрикс и мы постоянно выпускаем  обновления продуктов  важно понимать что гарантирована совместимость  только на актуальных  версиях обновлений как ядра БУС так и нашего  модуля. Тестировать  решение на всех предыдущих версиях не целесообразно и  поэтому мы  поддерживаем полную совместимость только на стабильных  версиях  продуктов
— читайте внимательно условия оказания  технической  поддержки, при отсутствии доступа к сайту бесплатная тех  поддержка не  оказывается
— возврат денежных средств за  приобретенные  решения не предусмотрен законодательством РФ так как это  не товар или  услуга а право пользования
— настройка ваших серверов  под  оптимальную работу сайта и устранение ошибок стандартных тестов  системы  управления сайтом 1С-Битрикс проводятся на платной основе,  поэтому  внимательно читайте предупреждение появляющееся перед установкой модуля,  какие тесты сайта должны проходить без ошибок, ведь это важно не только  ради стабильной работы модуля но еще для стабильной работы системы в  целом, разработчики не ради красоты эти тесты разрабатывали

Режим работы техподдержки веб-студии АКРИТ

Понедельник-пятница с10:00 — 17:00 по московскому времени.
Выходные дни: суббота и воскресение, праздничные дни.

Время реакции на обращение – 8 часов.

Гарантированный бесплатный SLA мы заявляем в течение 5 рабочих дней.
Для    решения срочных вопросов вы всегда можете выбрать платную критичность    обращения. Ваш вопрос будет рассмотрен в срочном порядке на платной    основе.

Сообщить о проблеме можно :

1. Через функционал на сайте разработчика (необходима регистрация) здесь.
   
2. Через форму на вкладке Техподдержка интерфейса модуля.
   

При создании обращения необходимо предоставить нам:

1. Административный доступ на сайт

• адрес сайта,
  
• логин,
  
• пароль.
  

• имя хоста,
  
• логин,
  
• пароль.
  

ВНИМАНИЕ! Прежде чем создать обращение, пожалуйста, прочтите

При    возникновении проблем в работе, просьба проверить настройки,    ознакомится с инструкциями и, в первую очередь, проверить корректность    работы платформы.
Модуль установлен, и работает большом количестве    сайтов. Ошибки практически исключены. Случаи, с которыми сталкивается    наша техподдержка, как правило, выявляют ошибки на сервере и самом    сайте. Крайне редко возникает ошибка скачивания решения из    маркетплейса.

Хостинг должен соответствовать минимальным техническим требованиям системы 1С-Битрикс. Проверить соответствие можно

• Через скрипт проверки  сервера http://www.1c-bitrix.ru/download/files/scripts/bitrix_server_test.php
  
• В административной панели вашего сайта http:// *ваш_сайт.ру* /bitrix/admin/site_checker.php?lang=ru
  
• В административной панели  http:// *ваш_сайт.ру* /bitrix/admin/perfmon_panel.php?lang=ru
  

Важные ограничения!

1. В Демо-режиме количество товаров в одном профиле выгрузки ограничено 50-ю товарами.

2. В    редакциях Первый сайт, Старт, Стандарт и Эксперт не будут работать    условия. Функционал условий требует наличия модуля Торговый  каталог,    которого в этих редакциях нет.

3. Гарантирована    совместимость только на актуальных версиях обновлений Битрикс Управление    сайтом. Теоретически модуль должен работать на версиях Битрикса   начиная  с  версии 14.0.8, но  учитывая тестировать  решение на всех   предыдущих  версиях не целесообразно, мы  поддерживаем полную   совместимость только  на стабильных  версиях  продуктов.

4. При отсутствии предоставления доступа к сайту бесплатная техподдержка не  оказывается.

5. Возврат    денежных средств за приобретенные решения не предусмотрен    законодательством РФ, так как это  не товар или  услуга, а право    пользования.

6. Настройка сервера клиента и устранение    ошибок стандартных тестов системы 1С-Битрикс проводятся на платной    основе. Внимательно читайте предупреждения, появляющиеся перед    установкой модуля. Тесты сайта должны проходить без ошибок.

7. Для работы решения с соцсетями минимально необходимая версия PHP –  5.4 желательно 5.6.

8. Ряд    порталов предъявляют требования к фотографиям на текущий момент     рекомендуемое разрешение 2160х3840 UHD (4K) поэтому учитывайте этот    фактор при экспорте данных.

www.acrit-studio.ru

Оптимизация размера сайта на платформе 1С-Битрикс / Sandbox / Habr

Как системные администраторы сталкиваются с этой проблемой?

Следует отметить, что подавляющее большинство сайтов на сервере были созданы на основе 1С-Битрикс, которая имеет свои особенности в плане дискового пространства:

• Во первых, платформа Битрикс компенсирует проблемы производительности, используя кэш, который при дефолтных настройках представляет собой файловый кэш в папке сайта. Это объясняет регулярное увеличение занимаемого дискового пространства на хостинге. Это составляло большую проблему на старых версиях платформы, доходило до того, что сайт размером ~200Мб создавал кэш размеров в ~600Мб. Точно утверждать не могу, но у меня сложилось ощущение, что такое поведение было исправлено только в версии 14.0
• Во вторых, сам дистрибутив 1С-Битрикс содержит много лишних файлов. В частности это — несколько демо-сайтов для разработчиков в каждом дистрибутиве платформы. Опытные разработчики сразу удаляют их (папки /bitrix/wizards/bitrix/demo, /bitrix/modules/bitrix.eshop, /bitrix/modules/bitrix.sitecorporate), но это происходит далеко не всегда.
  

Проведем небольшой опыт.
Разворачиваем пустой сайт, используя скрипт bitrixsetup.php с официального сайта. Для установки выбираем версию «Малый бизнес». Выбор кодировки — cp1251

После установки сайт, абсолютно не содержащий контента занимает ~366Мб.

366M new

55M new/bitrix/wizards
11M new/bitrix/modules/bitrix.sitecorporate
42M new/bitrix/modules/bitrix.eshop

На скорую руку был написан скрипт для поиска проблемных папок на сервере, которым мне бы и хотелось поделиться:

#!/bin/bash

if [ -z "$1" ];
then
	echo "please, use this with web-root path as first argument"
	echo "for removing files use --remove as second argument"
	exit 1
fi

#путь к web-root
path=$1


find $path -name "wizards" -prune -type d -print0 | grep -FzZ 'bitrix/wizards' |  xargs --null -0 du -sh
find $path -name "bitrix.sitecorporate" -prune -type d -print0 |  xargs --null -0 du -sh

if [[ "$2" == "--remove" ]];
then
	find $path -name "wizards" -prune -type d -print0 | grep -FzZ 'bitrix/wizards' |  xargs --null -0 rm -rf
	find $path -name "bitrix.sitecorporate" -prune -type d -print0 |  xargs --null -0 rm -rf
fi

exit 0

Скрипт запускается с параметром, содержащим путь к папке, в которой будет происходить поиск.
При указании вторым параметром —remove, найденные папки будут автоматически удалены.

habr.com

1С-Битрикс. Как массово и достаточно быстро удалить все разделы в инфоблоке?

Всё это из за того что разделы это NESTED SETS деревья. При добавлении/удалении раздела происходит вычисление LEFT_MARGIN и RIGHT_MARGIN для каждого раздела во всем инфоблоке.

Для добавления и обновления (CIBlockSection::Add, CIBlockSection::Update) есть параметр метода $bResort, который позволяет отключить этот перерасчёт в момент их выполнения.
Только после этого ОБЯЗАТЕЛЬНО надо выполнять CIBlockSection::Resort.

Это можно использовать при большом количестве операций Update и Add. Сначала выполняете все операции Update и Add с $bResort=false, а после них CIBlockSection::Resort

НО!! К сожалению, такой параметр для CIBlockSection::Delete не доступен. И вот тут начинается жесть.
Каждый вызов CIBlockSection::Delete, это:

• пересчет границ NESTED SETS,
  
• CIblockElement::GetList (поиск вложенных элементов)
  
• CIblockElement::Delete (если в разделе были элементы),
  
• Запрос к таблице которая хранит множественные привязки элемента к разделам (поиск значений и их удаление)
  
• CIBlockSection::GetList (поиск вложенных разделов)
  
• CIBlockSection::Delete (удаление вложенных разделов)
  
• Переиндексирование поиска
  
• Запросы к UF_* полям раздела (поиск значений и их удаление)
  
• При заполненных SEO полях, запросы к таблицам которые их хранят (поиск значений и их удаление)
  
• При расширенном управлении правами это еще запросы к таблицам которые хранят эти настройки (поиск значений и их удаление)
  

и это скорее всего не полный список, а только то что могу назвать по памяти….

Нельзя быстро удалить разделы стандартным API без написания своих запросов к БД которые проделают всё что описано выше. В идеале надо взять код стандартного CIBlockSection::Delete, внимательно его изучить и написать свой метод который будет с помощью прямых запросов делать тоже самое, но оптимально.

Если же вопрос стоит в том чтобы удалить эти разделы за ЛЮБОЕ количество времени, тогда можно написать страничку с пошаговым удалением разделов, через ajax запросы. Причем надо учитывать, что вначале разделы будут удаляться ОЧЕНЬ медленно и ajax запрос может отвалиться по таймауту, поэтому надо будет за один шаг удалять пару разделов. А ближе к границе в 10к разделов, за один шаг можно будет удалять уже большее количество.

qna.habr.com

1С-Битрикс Разработчикам — Если на хостинге закончилось место

N.B. Внизу поста скрипт на php!

Если есть ssh доступ

Скачиваем zip архив, записываем на сайт. Далее подключаемся по ssh (для этого есть замечательная программа PuTTy).
Перед запуском скрипта надо сделать его исполняемым:

Разными цветами обозначаются разные уровни вложенности.

Размер текущей папки взят за 100%, показаны все папки и файлы внутри текущей, размер которых превышает 10%. Можно установить свой минимум. Например, если надо отобразить все файлы и папки, размером более 5% от текущей:

Дополнение от 06.11.2014

Можно сразу скачать скрипт на удаленный сервер через короткую ссылку:

wget http://bit.do/mydisk
chmod +x mydisk

Как узнать размер базы данных

Открываем страницу резервного копирования, переходим на вкладку Расширенные, там рядом с опцией «Архивировать базу данных» показан размер базы:

Тут же отображается размер данных статистики и поисковой индекс.

Если надо получить подробную информацию по таблицам, в настройках модуля «Монитор производительности» включаем опцию «Просмотр таблиц». Теперь можно перейти на страницу Настройки — Производительность — Таблицы и увидеть отдельно размер каждой таблицы.

P.S. Скрипт изначально делал для себя, решил поделиться. Вот теперь думаю: может для большинства удобнее было бы иметь скрипт на php чтобы работал через браузер?

Дополнение от 05.09.2011

Подсчет размеров файлов через браузер

Восполнил пробел и сделал аналогичный по функциональности скрипт mydisk.php, подсчитывающий размер файлов в текущей папке через браузер. Работает по шагам (т.е. ограничение на время выполнение скриптов не хостинге не будет мешать), результат сохраняет во временный файл.

С визуализацией не стал заморачиваться, фактически переписал код на php. Самым сложным оказалось — правильно сохранить промежуточный результат сканирования между шагами.

dev.1c-bitrix.ru