htmlbook.ru - настольная книга администратора

Файловый Архив

  • Неограниченное количество категорий и суб-категорий
  • Настройки прав доступа по группам
  • Настройки прав доступа по каждой категории
  • Предпросмотр медиа файлов: FLV, IFLV, F4A, F4V, MP4, MP3, MOV и других...
  • Мультизагрузка файлов - SWFUploader
  • Добавление файлов с сервера
Подробности и история обновлений продукта в этой теме
Loading

Go Back   форум vBSupport.org > > >
Register Изображения Меню vBsupport Files Manager Аллея Звёзд Реклама на форуме Search Today's Posts Mark Forums Read
  • Мемберка
  • Администраторам
  • Premoderation
  • For English speaking users
  • Изменения в правах
  • Каталог Фрилансеров
Пароли на скачивание файлов в Member Area меняются автоматически каждый день
Если вам нужно скачать какой то скрипт, за паролем ко мне в ЛС
привет какирам kerk
Ещё раз обращаем Ваше внимание: всё, что Вы скачиваете и устанавливаете на свой форум, Вы устанавливаете исключительно на свой страх и риск.
Сообщество vBSupport'а физически не в состоянии проверять все стили, хаки и нули, выкладываемые пользователями.
Помните: безопасность Вашего проекта - Ваша забота.
Убедительная просьба: при обнаружении уязвимостей или сомнительных кодов обязательно отписывайтесь в теме хака/стиля
Спасибо за понимание
На форуме введена премодерация ВСЕХ новых пользователей

Почта с временных сервисов, типа mailinator.com, gawab.com и/или прочих, которые предоставляют временный почтовый ящик без регистрации и/или почтовый ящик для рассылки спама, отслеживается и блокируется, а так же заносится в спам-блок форума, аккаунты удаляются
for English speaking users:
You may be surprised with restriction of access to the attachments of the forum. The reason is the recent change in vbsupport.org strategy:

- users with reputation < 10 belong to "simple_users" users' group
- if your reputation > 10 then administrator (kerk, Luvilla) can decide to move you into an "improved" group, but only manually

Main idea is to increase motivation of community members to share their ideas and willingness to support to each other. You may write an article for the subject where you are good enough, you may answer questions, you may share vbulletin.com/org content with vbsupport.org users, receiving "thanks" equal your reputation points. We should not only consume, we should produce something.

- you may:
* increase your reputation (doing something useful for another members of community) and being improved
* purchase temporary access to the improved category:
10 $ for 3 months. - this group can download attachments, reputation/posts do not matter.
20 $ for 3 months. - this group can download attachments, reputation/posts do not matter + adds eliminated + Inbox capacity increased + files manager increased permissions.

Please contact kerk or Luvilla regarding payments.

Important!:
- if your reputation will become less then 0, you will be moved into "simple_users" users' group automatically.*
*for temporary groups (pre-paid for 3 months) reputation/posts do not matter.
Не можете скачать вложение?
Изменения в правах групп пользователей
внимательно читаем эту и эту темы
Короткая версия - тут
Уважаемые пользователи!

На форуме открыт новый раздел "Каталог фрилансеров"

и отдельный раздел для платных заказов "Куплю/Закажу"

 
 
Первый пост
Old  
kerk
k0t
 
kerk's Avatar
Default 0

если скрипт нЕ запущен - форум работает нормально
запускаешь скрипт - начинает тормозить
сам скрипт, пара строк "указующего" кода, только команды
логично предположить, что проблема не в нем, значит сервак не справляется...
 
Bot
Yandex Bot Yandex Bot is online now
 
Join Date: 05.05.2005
Реклама на форуме А что у нас тут интересного? =)
Old  
kerk
k0t
 
kerk's Avatar
Default 0

создал тестовый файлик с содержимым

Code:
#!/bin/bash

DESDIR="/path/to/backup"
cd  $DESDIR
/bin/ls -t *.tar.gz | /usr/bin/tail +5 | /usr/bin/xargs > log
выполняю его из консоли и получаю ошибку
Quote:
/usr/bin/tail: cannot open `+5' for reading: No such file or directory
пути прописаны правильно, может в команде что то не так?
то же самое и с командами без полных путей к исп. файлам
лог создается но там пусто
в этот каталог напихал фейковых файлов с разными именами и расширением .tar.gz

если выполнять команду без "тайл", в консоли принтит список файлов
 
Old  
Smalesh
Эксперт
Default 1

Quote:
Originally Posted by kerk View Post
/usr/bin/tail: cannot open `+5' for reading: No such file or directory
поставь
Code:
tail -n+5
Хотя...
Code:
$ ls -t *.sql.gz | tail +5
db_forum_014_2013-11-04_15-21-01.sql.gz
db_forum_014_2013-11-04_09-21-01.sql.gz
db_forum_014_2013-11-04_03-21-01.sql.gz
db_forum_014_2013-11-03_21-21-01.sql.gz
db_forum_014_2013-11-03_15-21-01.sql.gz
db_forum_014_2013-11-03_09-21-01.sql.gz
db_forum_014_2013-11-03_03-21-01.sql.gz
db_forum_014_2013-11-02_21-21-02.sql.gz
db_forum_014_2013-11-02_15-21-01.sql.gz
db_forum_014_2013-11-02_09-21-01.sql.gz
db_forum_014_2013-11-02_03-21-01.sql.gz
$ ls -t *.sql.gz | tail -n+5
db_forum_014_2013-11-04_15-21-01.sql.gz
db_forum_014_2013-11-04_09-21-01.sql.gz
db_forum_014_2013-11-04_03-21-01.sql.gz
db_forum_014_2013-11-03_21-21-01.sql.gz
db_forum_014_2013-11-03_15-21-01.sql.gz
db_forum_014_2013-11-03_09-21-01.sql.gz
db_forum_014_2013-11-03_03-21-01.sql.gz
db_forum_014_2013-11-02_21-21-02.sql.gz
db_forum_014_2013-11-02_15-21-01.sql.gz
db_forum_014_2013-11-02_09-21-01.sql.gz
db_forum_014_2013-11-02_03-21-01.sql.gz
PS - правда у меня не линь)
 
Old  
kerk
k0t
 
kerk's Avatar
Default 0

добавил ключ -n
сейчас просто выполняется команда но ничего не принтит
наверное нужно реальных файлов подкинуть?
ну или с разным временем создания файла
===
ок
в логе есть запись о двух файлах
 
Old  
kerk
k0t
 
kerk's Avatar
Default 0

а, вот еще такой момент...
в коде синхронизации есть указание временной папки
Code:
DIRTMP="/full/path/to/folder/tmp"
/usr/bin/rsync -r --delete $SRCDIR $DIRTMP
ок, создал рядом еще одну, что в ней будет лежать?
все вложения с подкаталогами или архив?
дело в том, что хочу не только для аттачей прикрутить сие скрипт, но и для контента файловика и хранить эти архивы в одной папке, для быстрого доступа
но если там будет куча из папок/файлов вложений да + все каталоги с файлами из файловика, это ж ппц, какой бардак
тогда наверное разносить эти временные папки на два каталога, как то так
в скрипте крона для вложений
Code:
DIRTMP="/full/path/to/folder/attach_tmp"
/usr/bin/rsync -r --delete $SRCDIR $DIRTMP
и в скрипте крона для файлов из файловика
Code:
DIRTMP="/full/path/to/folder/files_tmp"
/usr/bin/rsync -r --delete $SRCDIR $DIRTMP
ну и совсем гутт, если в системный крон запихать только один файл с двумя заданиями =)
 
Old  
kerk
k0t
 
kerk's Avatar
Default 0

т.е. скрипт для обработки не одной а двух каталогов будет примерно такой:
Code:
#!/bin/bash
#START

# Close Forum
/usr/bin/php /full/path/to/folder/backup/job.php

# Set variables
TIME=`date +"%b-%d-%y"`
ATTACHFILENAME="vbsppAttach-$TIME.tar.gz"
FILESFILENAME="vbsppFiles-$TIME.tar.gz"

# Directories to backup
ATTACHSRCDIR="/full/path/to/folder/attachments"
FILESSRCDIR="/full/path/to/folder/downloads"

DESDIR="/full/path/to/folder/backup"

ATTACHDIRTMP="/full/path/to/folder/backup/attach_tmp"
FILESDIRTMP="/full/path/to/folder/backup/files_tmp"

# Sync Attachments
/usr/bin/rsync -r --delete $ATTACHSRCDIR $ATTACHDIRTMP

# Sync Files
/usr/bin/rsync -r --delete $FILESSRCDIR $FILESDIRTMP

# Create new archive for attachments
tar -cpzf $DESDIR/$ATTACHFILENAME $ATTACHSRCDIR

# Create new archive for filesmanager files
tar -cpzf $DESDIR/$FILESFILENAME $FILESSRCDIR

# Delete old files, if file count > 3
cd  $DESDIR
ls -t vbsppAttach-*.tar.gz | tail -n+3 | xargs rm -f
ls -t vbsppFiles-*.tar.gz | tail -n+3 | xargs rm -f

# Open Forum
/usr/bin/php /full/path/to/folder/backup/job.php

#END
вот только не совсем уверен в правильности порядка выполнения каждой команды =)
 
Old  
Smalesh
Эксперт
Default 1

Quote:
Originally Posted by kerk View Post
что в ней будет лежать?
Синхронизированная копия папки источника

Quote:
Originally Posted by kerk View Post
но если там будет куча из папок/файлов вложений да + все каталоги с файлами из файловика, это ж ппц, какой бардак
Хочешь, можно сделать вот так:
В начале задаем пути
Code:
SRCDIR="/full/path/to/forum"
DESDIR="/full/path/to/folder/backup"
DIRTMP=""/full/path/to/folder/tmp"
Затем сихнронизируем все что нам надо
Code:
/usr/local/bin/rsync -r --delete $SRCDIR/attachments $DIRTMP/attachments
/usr/local/bin/rsync -r --delete $SRCDIR/data1 $DIRTMP/data1
/usr/local/bin/rsync -r --delete $SRCDIR/data2 $DIRTMP/data2
/usr/local/bin/rsync -r --delete $SRCDIR/data3 $DIRTMP/data3
/usr/local/bin/rsync -r --delete $SRCDIR/data4 $DIRTMP/data4
Затем саму $DIRTMP заворачиваем в архив в место хранения
Code:
/usr/bin/tar -cpzf $DESDIR/$FILENAME $DIRTMP
Ахтунг(!) - чистить $DIRTMP не нужно. $DIRTMP - это зеркало. Если ты его будешь чистить, то rsync опять будет перетягивать все файло вновь и никакого профита ты не получишь. Кроном чистишь $DESDIR (!)
 
Old  
kerk
k0t
 
kerk's Avatar
Default 0

Quote:
Originally Posted by Smalesh View Post
чистить $DIRTMP не нужно $DIRTMP - это зеркало
да это понятно

Quote:
Originally Posted by Smalesh View Post
Затем саму $DIRTMP заворачиваем в архив в место хранения
Code:
 /usr/bin/tar -cpzf $DESDIR/$FILENAME $DIRTMP
не не
нужно именно два отдельных архива, для каждого каталога свой
Code:
# Create new archive for attachments
tar -cpzf $DESDIR/$ATTACHFILENAME $SRCDIR/attachments
# Create new archive for filesmanager files
tar -cpzf $DESDIR/$FILESFILENAME $SRCDIR/files
ок, спасибо, сегодня и попробую
 
Old  
Smalesh
Эксперт
Default 1

Quote:
Originally Posted by kerk View Post
логично предположить, что проблема не в нем, значит сервак не справляется...
Рекомендую запускать tar с пониженным приоритетом. Rsync при повторном запуске отрабатывает очень быстро (в сравнении с первоначальным вариантом скрипта), а уже паковать можно и не спешить.
Например:
Code:
nice -n 15 ionice -c3 -n7 tar -cpzf $DESDIR/$FILESFILENAME $SRCDIR/files
Это будет достаточно щадяще к дисковой подсистеме, и тормозить в целом сервер не должен.
 
Old  
kerk
k0t
 
kerk's Avatar
Default 0

Quote:
Originally Posted by Smalesh View Post
запускать tar с пониженным приоритетом
ок
это в строке с бэкапом файлов
но если в скрипте две строчки с командой бэкапа, указывать в обеих?
Code:
nice -n 15 ionice -c3 -n7 tar -cpzf $DESDIR/$ATTACHFILENAME $DIRTMP/attachments
nice -n 15 ionice -c3 -n7 tar -cpzf $DESDIR/$FILESFILENAME $DIRTMP/files
крон отработал
в двух каталогах появились дубли файлов/аттачей + два архива
т.е. в принципе то, чего и хотели
всем спасибо =)
 
 

Thread Tools

Posting Rules
You may not post new threads
You may not post replies
You may not post attachments
You may not edit your posts

BB code is On
Smilies are On
[IMG] code is On
HTML code is Off




All times are GMT +4. The time now is 04:16 PM.


Powered by vBulletin® Version 3.5.9
Copyright ©2000 - 2016, Jelsoft Enterprises Ltd.