Хабр Курсы для всех
РЕКЛАМА
Практикум, Хекслет, SkyPro, авторские курсы — собрали всех и попросили скидки. Осталось выбрать!
Хабр доступен 24/7 благодаря поддержке друзей
Комментарии 170
sparkleshare — обёртка к Git, благодаря чему есть не только полный контроль над данными (в обе стороны), но и система отслеживания версий с уведомлениями об изменениях.
В целом нужно понимать, что RealSync — это не синхронизатор, это репликатор
вот это я не понимаю, т.е. понимаю что — но не понимаю зачем
В целом нужно понимать, что RealSync — это не синхронизатор, это репликатор
вот это я не понимаю, т.е. понимаю что — но не понимаю зачем
У sparkleshare и RealSync совершенно разные предназначения. RealSync — это просто решение проблем лагов Samba (когда проект большой и хочется запустить поиск по файлам, например, по Samba это будет происходить безумно медленно). Т.е. своего рода способ организации сетевой папки, доступ к которой происходит только с вашего компьютера. Отслеживание версий и изменений здесь совершенно ни при чем — для этого есть Git.
а ещё git после push может выполнять с файлами что угодно, в том числе и копировать куда захочется ^_^
хотя может те кто все изменения делает прямо на сервере будут рады RealSync
хотя может те кто все изменения делает прямо на сервере будут рады RealSync
Например, вы пишете код, потом видите Parse error в браузере на ДЕВ-СЕРВЕРЕ (при работе с сайтом на PHP). Идете в редакторе, правите 1 букву, Ctrl+S — идете снова в браузер, все заработало. Что же, на каждую правку 1 буквы — в Git коммитить и пушить, после каждого Ctrl+S?
Речь идет о РАЗРАБОТКЕ сайта, а не о выкатке его на продакшен. Т.е. о работе с разработческим сервером, где сразу же виден результат работы с исходниками, над которыми вы прямо сейчас работаете.
Речь идет о РАЗРАБОТКЕ сайта, а не о выкатке его на продакшен. Т.е. о работе с разработческим сервером, где сразу же виден результат работы с исходниками, над которыми вы прямо сейчас работаете.
sparkleshare закоммитит и запушит за вас… а гит сервер скопирует и сделает другие действия по вашему желанию
а так да, я уже приблизился к пониманию зачем оно нужно
а так да, я уже приблизился к пониманию зачем оно нужно
> sparkleshare закоммитит и запушит за вас
С какой задержкой, вот вопрос. Я обычно выполняю последовательность Ctrl+S — Alt+Tab — Ctrl+R где-то за за 0.3 секунды. Вот за это время изменения и должны на сервер попасть.
С какой задержкой, вот вопрос. Я обычно выполняю последовательность Ctrl+S — Alt+Tab — Ctrl+R где-то за за 0.3 секунды. Вот за это время изменения и должны на сервер попасть.
не знаю как в windows, в linux по inotify спарклешаре узнает о изменениях сразу же и тут же отправляет, дело не хитрое — в итоге всё упирается в канал
а уж как гит скопирует и наколдует зависит от того как вы напишите его post-update
или по inotify bagmify (десятистрочный скрипт на bash) делает тоже самое, не помню =)
а уж как гит скопирует и наколдует зависит от того как вы напишите его post-update
или по inotify bagmify (десятистрочный скрипт на bash) делает тоже самое, не помню =)
Ну вот если вы попробуете, то увидите, что задержка получится 3-4 секунды, независимо от канала (причем чем больше файлов в проекте и чем длиннее история, тем выше). Git — вещь быстрая, но она быстрая при его использовании в качестве системы контроля версий, а не в качестве передачи каждого неатомарного Ctrl+S на другой сервер. Гвозди микроскопом можно забивать, да неудобно только.
сейчас даже не поленился и проверил
git push 0,04s user 0,01s system 3% cpu 1,290 total
это уже с учетом выполненого гитом копирования в рабочий каталог, и вывода полной инфы о результатах мне в консоль (не гит инфа, а список файлов проекта, информация о изменениях и прочие мелочи сделанные гитом и отправленные мне)
единственно излишество по сравнению с RealSync это контроль версий — в этом как плюс, так и минус…
git push 0,04s user 0,01s system 3% cpu 1,290 total
это уже с учетом выполненого гитом копирования в рабочий каталог, и вывода полной инфы о результатах мне в консоль (не гит инфа, а список файлов проекта, информация о изменениях и прочие мелочи сделанные гитом и отправленные мне)
единственно излишество по сравнению с RealSync это контроль версий — в этом как плюс, так и минус…
А осмысленное сообщение о коммите вы не будете писать? Если нет, то зачем вам гит?
нет, не я… но откатиться гитом на нужный день-минуту всяко проще)
да и почти 5 мегабайт в архиве это что-то слишком много
или в архиве скрипт + уйма зависимостей для его запуска?
да и почти 5 мегабайт в архиве это что-то слишком много
#!/bin/bash
REPO=$1
if [ x$REPO = x ];then
echo "Usage: $0 /path/to/dir"
exit 0
fi
cd $REPO
if [ -d $1 ];then
while inotifywait -r -qq -e create -e close_write -e move -e delete .; do
rsync -avz -e ssh remoteuser@remotehost:/remote/dir $REPO #можно и не ssh а на nfs/smb
done
else
echo "э... чувак, это же не директория"
fiили в архиве скрипт + уйма зависимостей для его запуска?
Ну, во-первых, скрипт у вас нерабочий. В смысле, в нём есть глюки. Во-вторых, под Виндой и Маком он у вас не заработает.
rsync под мак есть ^_^
аналог inotify вроде тоже был
скрипт рабочий, но писан на коленке меньше чем за минуту — посему далек от идеала
аналог inotify вроде тоже был
скрипт рабочий, но писан на коленке меньше чем за минуту — посему далек от идеала
В архиве в основном файлы для Windows (ssh.exe, rsync.exe, perl.exe и др.). Для не-винды достаточно файла с именем «realsync» (он в корне архива лежит) и директории bin/ВАША_ОС (для ускорения realtime-отслеживания).
Да, кстати, насчет вашего скрипта с inotifywait. Вы на каждое изменение запускаете RSYNC всей директории. Это работает более-менее сносно, только когда проект относительно небольшой, и вы на клиенте сидите на Linux или MaxOS. Если же вы работаете в Windows, то там RSYNC очень медленный: только на его запуск уходит 3-4 секунды (почему так — для меня непонятно). Да и NTFS сильно проигрывает по скорости ext4. В итоге такой способ для поимкм Ctrl+S в винде ну совершенно не подходит. Для линукса же или макоси — можно и просто в цикле RSYNC запустить (если проект небольшой, а сеть хорошая, заметьте).
согласен
но легкость найденного пути решения настораживает…
но легкость найденного пути решения настораживает…
Это у вас не путь решения, это частный случай для маленького проекта, быстрой сети и разработчика, сидящего на линуксе. А бывает еще плохая связь, огромные проекты и разработчики на винде (либо — хорошая связь, огромные проекты и разработчики на винде, либо… ну вы поняли, всего 8 вариантов еще).
А зачем оно в гите то, каждое сохранение кода при разработке? Я вот например давно привык что написал строчку и машинально сохранил. Это ж как засрётся репозиторий, если каждое сохранение пушить то?
Не сочтите за рекламу, один мой друг написал вот такую вещь: livereload.com/
С ней можно не альттабаться.
Может вы как-нибудь подружите свои проекты?
С ней можно не альттабаться.
Может вы как-нибудь подружите свои проекты?
Юрий Насретдинов такую идею высказывал уже. Я считаю ее несколько опасной — в браузере может быть открыта полузаполненная форма, которую не хочется терять, либо вообще — результат последнего POST-запроса. Мне кажется, данная штука скорее мешает отладке, чем помогает, а экономит всего лишь одно нажатие Ctrl+R (или даже F5), так что…
Сам хотел писать подобную утилиту, но так и не дошли руки.
У нас ситуация точно, как вы описали — у каждого разработчика примаунтеная локально Samba-папка, и Eclipse на ней иногда умирает.
RealSync может работать через Samba?
Мне нужно синхронизировать локальные изменения в удалённую папку на сервере, но не по SSH, а по Samba, т.е. локально рабочая папка выглядит как обычная папка (на сетевом диске).
Нужно будет содержимое локальной папки:
C:/Users/Вася Пупкин/Мои Документы/Workspace
синхронизировать в папку:
N:/путь/к/папке/на/сервере/BasilPupkin/Projects
где N: — имя диска с примонтированным smb-ресурсом.
У нас ситуация точно, как вы описали — у каждого разработчика примаунтеная локально Samba-папка, и Eclipse на ней иногда умирает.
RealSync может работать через Samba?
Мне нужно синхронизировать локальные изменения в удалённую папку на сервере, но не по SSH, а по Samba, т.е. локально рабочая папка выглядит как обычная папка (на сетевом диске).
Нужно будет содержимое локальной папки:
C:/Users/Вася Пупкин/Мои Документы/Workspace
синхронизировать в папку:
N:/путь/к/папке/на/сервере/BasilPupkin/Projects
где N: — имя диска с примонтированным smb-ресурсом.
Нет, он может работать исключительно по SSH, потому что он на удаленной стороне запускает кусочек своего perl-кода для приема изменений единичных файлов (когда вы на одном файле нажимаете Ctrl+S, он как раз и задействуется). Там все за это завязано. Сложно на сервере поднять SSH-демон?
Такие варианты:
1. К Linux-серверу есть рутовский пароль, но не охота пускать чужую программу под рутом на боевой сервер, пусть и к девелоперской папке.
2. К Windows-серверу доступ через Remote Desktop и SMB-папку.
Дома попробую вашу программу на личном вебхостинге, но на работе желательно синхронизировать только в SMB-папку.
У Microsoft есть программка для такой синхронизации, но она не может работать автоматически и в фоне — синхронизацию нужно дёргать каждый раз вручную.
1. К Linux-серверу есть рутовский пароль, но не охота пускать чужую программу под рутом на боевой сервер, пусть и к девелоперской папке.
2. К Windows-серверу доступ через Remote Desktop и SMB-папку.
Дома попробую вашу программу на личном вебхостинге, но на работе желательно синхронизировать только в SMB-папку.
У Microsoft есть программка для такой синхронизации, но она не может работать автоматически и в фоне — синхронизацию нужно дёргать каждый раз вручную.
1) добавить нерутового пользователя, дать ему доступ к папке.
2) серверов SSH много для Винды есть.
2) серверов SSH много для Винды есть.
Подождите, а зачем рутовый пароль? Пускайте под обычным юзером, дав ему доступ к девелоперским папкам предварительно. Вообще, RealSync воспринимает НА СЕРВЕРЕ только ОС *nix (Linux, MacOS, FreeBSD и т.д.), винда на сервере не поддерживается (но поддерживается НА КЛИЕНТЕ).
Важный момент по-моему, что про поддержку, что про кусочек перл-кода.
Вроде, работает.
Но при старте спрашивает пароль несколько раз.
И при изменениях (скопировал в локальную папку кучу файлов) спрашивает пароль.
Курсивом пишу вывод программы:
[20:09:32] Detected changes in more than 10 objects. Running rsync: it's faster.
Password:
После ввода пароля задумывается надолго:
sending incremental file list
И неспеша копирует файлики.
После очередного ввода пароля на выдачу следующих строк:
./
.htaccess
sent 2236587 bytes received 4416 bytes 24491.84 bytes/sec
total size is 802144234 speedup is 357.94
… ушло полминуты.
Скопировал в наблюдаемую папку папку с вашей программой, программа выдала в консоль такое:
[20:15:32] Detected 3 change(s), transmitting…
[20:15:33] DIR: ./lalatest/dklab_realsync — done
[20:15:33] FIL: ./lalatest/dklab_realsync/README.txt (8338 bytes) — done
[20:15:33] FIL: ./lalatest/dklab_realsync/realsync (40520 bytes) — done
[20:15:33] Detected changes in more than 10 objects. Running rsync: it's faster.
Password:
И ждёт ввода пароля.
Можно как-нибудь запомнить пароль, чтобы не вводить каждый раз?
Хотя бы в конфиге, открытым текстом.
Но при старте спрашивает пароль несколько раз.
И при изменениях (скопировал в локальную папку кучу файлов) спрашивает пароль.
Курсивом пишу вывод программы:
[20:09:32] Detected changes in more than 10 objects. Running rsync: it's faster.
Password:
После ввода пароля задумывается надолго:
sending incremental file list
И неспеша копирует файлики.
После очередного ввода пароля на выдачу следующих строк:
./
.htaccess
sent 2236587 bytes received 4416 bytes 24491.84 bytes/sec
total size is 802144234 speedup is 357.94
… ушло полминуты.
Скопировал в наблюдаемую папку папку с вашей программой, программа выдала в консоль такое:
[20:15:32] Detected 3 change(s), transmitting…
[20:15:33] DIR: ./lalatest/dklab_realsync — done
[20:15:33] FIL: ./lalatest/dklab_realsync/README.txt (8338 bytes) — done
[20:15:33] FIL: ./lalatest/dklab_realsync/realsync (40520 bytes) — done
[20:15:33] Detected changes in more than 10 objects. Running rsync: it's faster.
Password:
И ждёт ввода пароля.
Можно как-нибудь запомнить пароль, чтобы не вводить каждый раз?
Хотя бы в конфиге, открытым текстом.
В общем, перед каждой пачкой синхронизируемых через rsync файлов происходит запрос пароля.
Программу скачал с вашего сайта час назад.
Сейчас скачал с гитхаба последнюю версию — тоже запрашивает пароль каждый раз.
Программу скачал с вашего сайта час назад.
Сейчас скачал с гитхаба последнюю версию — тоже запрашивает пароль каждый раз.
Повысил $MIN_CHANGES_FOR_RSYNC с 10 до 1000 — теперь пароль спрашивает только два раза при старте программы.
Синхронизирует быстро.
Всё работает.
Спасибо.
Синхронизирует быстро.
Всё работает.
Спасибо.
Всё же иногда запрашивает пароль.
Например, после удаления подпапки.
Например, после удаления подпапки.
Ещё проблема: через какое-то время perl-процесс занимает 100% CPU на сервере.
Закрытие локального клиента проблему не решает, приходится убивать процесс на сервере.
Закрытие локального клиента проблему не решает, приходится убивать процесс на сервере.
Уточню пара вопросов по реализации. Perl не очень знаю, так бы сам посмотрел.
1) Правильно понимаю что в зависимости от ситуации используется rsync или свой протокол?
2) rsync натравливается на все дерево каталогов или только на ту часть, на которую «доложил» демон-нотификатор?
3) На MacOS FSEvents умеет сообщать только в каком каталоге произошло изменение, но не в каком файле. Как с этим разбираетесь?
4) На Linux по-моему Inotify не отличает переименование от удаления и создания. Используете cookie или что-то проще?
5) Храните ли снепшот дерева каталогов? Если да, то каким алгоритмом сравниваете снепшот с текущим состоянием?
1) Правильно понимаю что в зависимости от ситуации используется rsync или свой протокол?
2) rsync натравливается на все дерево каталогов или только на ту часть, на которую «доложил» демон-нотификатор?
3) На MacOS FSEvents умеет сообщать только в каком каталоге произошло изменение, но не в каком файле. Как с этим разбираетесь?
4) На Linux по-моему Inotify не отличает переименование от удаления и создания. Используете cookie или что-то проще?
5) Храните ли снепшот дерева каталогов? Если да, то каким алгоритмом сравниваете снепшот с текущим состоянием?
1. Да. RSYNC используется а) при запуске утилиты, б) когда вы изменили за раз больше N файлов (в данном случае N=10). Во всех остальных случаях используется свой протокол.
2. RSYNC натравливается на все дерево.
3. Там где-то строчек 100 про это как раз в коде. В целом — RealSync хранит в памяти дерево каталогов и при сигнале от FSEvents обновляет ту часть этого дерева, в чьих папках произошли изменения. Дальше делает diff и, если в diff меньше 10 файлов, использует свой протокол, а если больше, то RSYNC. Все это происходит незаметно.
4. Да нет, точно такой же способ, как в (3). Просто сканируются измененные папки (но не рекурсивно), этого достаточно.
5. Да, он хранится в памяти, пока утилита работает. Снимается с нуля непосредственно перед каждым запуском RSYNC (это занимает 2-3 секунды на больших проектах), а дальше поддерживается в актуальном состоянии инкрементально.
2. RSYNC натравливается на все дерево.
3. Там где-то строчек 100 про это как раз в коде. В целом — RealSync хранит в памяти дерево каталогов и при сигнале от FSEvents обновляет ту часть этого дерева, в чьих папках произошли изменения. Дальше делает diff и, если в diff меньше 10 файлов, использует свой протокол, а если больше, то RSYNC. Все это происходит незаметно.
4. Да нет, точно такой же способ, как в (3). Просто сканируются измененные папки (но не рекурсивно), этого достаточно.
5. Да, он хранится в памяти, пока утилита работает. Снимается с нуля непосредственно перед каждым запуском RSYNC (это занимает 2-3 секунды на больших проектах), а дальше поддерживается в актуальном состоянии инкрементально.
Для Notepad++ есть плагин Auto Save, который умеет сохранять все измененные файлы (в том числе на FTP) при потере фокуса приложением. В итоге когда я нажимаю Alt+Tab для того чтобы переключиться на браузер, мои измененные файлы (CSS, PHP) уже закачаны на сервер и остается только нажать F5. Для комфортной работы конечно нужен быстрый интернет и шустрый сервер с короткой трассировкой до него.
Проблему с поиском я решаю очень грубым методом, но мне этого пока хватает. Раз в неделю-две делаю бэкап всех файлов проекта, по которому можно искать. Повторюсь — для сложных проектов возможно не пойдет, но в моей ситуации выручает, т.к. ищу не часто.
Проблему с поиском я решаю очень грубым методом, но мне этого пока хватает. Раз в неделю-две делаю бэкап всех файлов проекта, по которому можно искать. Повторюсь — для сложных проектов возможно не пойдет, но в моей ситуации выручает, т.к. ищу не часто.
Штука в том, что недостаточно просто передать 1 файл на Ctrl+S. Нужно заботиться о том, чтобы ВСЕ ДЕРЕВО было идентичным, в любой момент времени. Даже в случае, если админ случайно забредет на сервер напрямую и что-то подправит в ваших файлах, или что-то с ними произойдет (например, из бэкапа восстановят вместе с другими файлами и т.д.). А это задача не очень тривиальная (если 1400 строк Perl-кода и внушительное время на отладку можно назвать нетривиальным, конечно). Нужно как минимум ловить дисконнекты и уметь запускать RSYNC в нужный момент, а также много чего еще.
Дмитрий, я не пытаюсь приуменьшить заслуги RealSync. Это действительно крутая штука, и с этим никто не спорит.
В моем случае я знаю что на сервер захожу только сам и никаких админов там нет. Я говорю только про свой случай, что мне удобнее нотпад с автосейвом. И обратите внимание, в моем предыдущем комменте я говорю о сохранении всех измененных файлов по Ctrl+S или при потере фокуса.
В моем случае я знаю что на сервер захожу только сам и никаких админов там нет. Я говорю только про свой случай, что мне удобнее нотпад с автосейвом. И обратите внимание, в моем предыдущем комменте я говорю о сохранении всех измененных файлов по Ctrl+S или при потере фокуса.
Давненько ищу подобную утилиту, но для репликации большой папки с картинками (сейчас она порядка гигабайта) с серверной в локальную папку. Естественно, синхронизировать нужно только изменения.
rsync не осилил, да и настраивать на каждом компе разработчика сложновато. Использую GoodSync, но работает оочень медленно и такое ощущение, что делает много лишних операций.
Ваша утилита для этого подойдет? Или мб вы другую подскажите, раз разбирались в этом вопросе и вероятно искали существующие решения в этой области.
rsync не осилил, да и настраивать на каждом компе разработчика сложновато. Использую GoodSync, но работает оочень медленно и такое ощущение, что делает много лишних операций.
Ваша утилита для этого подойдет? Или мб вы другую подскажите, раз разбирались в этом вопросе и вероятно искали существующие решения в этой области.
Если вы ее запустите на сервере и она сможет коннектиться к каждому разработчику на его комп (а у разработчиков Линукс или Мак), то подойдет. Но вообще, она для обратного процесса — синхронизации исходников ОТ разработчика НА сервер.
Вообще, вы точно уверены, что у каждого разработчика должен быть локальный гигабайт картинок, еще и обновляемый в реальном времени? Мне кажется это странным. Можете описать, почему такое необходимо?
Вообще, вы точно уверены, что у каждого разработчика должен быть локальный гигабайт картинок, еще и обновляемый в реальном времени? Мне кажется это странным. Можете описать, почему такое необходимо?
Нужен даже не гигабайт, а скорее нужны картинки, загруженные за последние несколько дней. Это, разумеется, можно делать и вручную, но значительно удобнее это автоматизировать, чтобы сэкономить время.
Полагаю, что задача распространенная. Нужно тестировать функционал, связанный с этими картинками — обработка, вывод и так далее. При этом каждый день появляются новые картинки на продакшн сервере, где запущен сайт.
Полагаю, что задача распространенная. Нужно тестировать функционал, связанный с этими картинками — обработка, вывод и так далее. При этом каждый день появляются новые картинки на продакшн сервере, где запущен сайт.
Ну у вас же разработчики работают не с продакшен-сервером напрямую, верно? Или вы картинки с продакшена берете, кладете разработчикам на локальные машины, а разработчики работают на локальном же веб-сервере? В этом случае я бы все же посоветовал RSYNC им настроить — это несложно, всего лишь bat-файл сделать и рядом закрытый ключ положить, сказать им, чтобы этот bat-файл запускали раз в сутки. Это явно выходит за сферу применимости RealSync.
А еще лучше — предложил бы вам написать утилиту, которая кладет разработчикам не сами картинки с продакшена, а сгенериированные заглушки с теми же именами. Тогда вообще ничего можно было бы не синхронизировать — запускаете утилиту, и все дела.
А еще лучше — предложил бы вам написать утилиту, которая кладет разработчикам не сами картинки с продакшена, а сгенериированные заглушки с теми же именами. Тогда вообще ничего можно было бы не синхронизировать — запускаете утилиту, и все дела.
Я как-то глухо не догоняю
У меня есть аккаунт на bitbucket, я использую git, и вроде никаких тулов не нужно.
Что эта штука дает по сравнению с обычным контролем версий?
У меня есть аккаунт на bitbucket, я использую git, и вроде никаких тулов не нужно.
Что эта штука дает по сравнению с обычным контролем версий?
Спасибо за отличный инструмент, раньше пользовался для этого связкой из четырёх утилит, теперь будет только одна! И да, ваша продуктивность поражает.
Дим, мне кажется было бы честным сказать, что двухсторонней репликации нет потому, что под windows не работает должным образом select() в Perl :).
Вот бы еще в 2 стороны :)
Но всё равно за утилиту спасибо!
Но всё равно за утилиту спасибо!
Даже с точки зрения интерфейса 2 стороны потребует человеческого вмешательства в случае, если вы одновременно изменили один и тот же файл и там, и там. Это довольно нетривиальная вещь. Как вы будете разрешать конфликты? Разве что открывать что-то типа WinDiff и давать на панелях сравнивать.
Задумайтесь — может быть, вам и не нужна двусторонняя синхронизация (в подавляющем большинстве случаев это так). Просто с использованием RealSync надо перестать воспринимать удаленную папку как нечто самостоятельное. Она становится лишь read-only «зеркалом» для вашей локальной папки, и если что-то хочется менять, то надо это делать в локальной папке, забыв про удаленную вообще.
Задумайтесь — может быть, вам и не нужна двусторонняя синхронизация (в подавляющем большинстве случаев это так). Просто с использованием RealSync надо перестать воспринимать удаленную папку как нечто самостоятельное. Она становится лишь read-only «зеркалом» для вашей локальной папки, и если что-то хочется менять, то надо это делать в локальной папке, забыв про удаленную вообще.
Приведу свою модель работы:
Десктоп с линукс на борту и внутренний офисный линукс сервер с личной папкой каждого сотрудника компании.
В работе использую PhpStorm напрямую с папкой сервера (соединение с сервером идет посредством sshfs, так же параллельно открыта серверная консоль, в которой произвожу коммиты и «svn up/pull»ы).
Так вот, после апдейтов серверных «svn up/pull» — третий PhpStorm не сразу сечёт изменения, и после собственных правок кода вываливает окно мержа, которое и вызывает кучу неудобств.
Скорость sshfs и перманентная загруженность сервера оставляет желать лучшего.
Соединение с удаленным сервером посредство средств PhpStorm не устраивает, по причине необходимости лишних действий с загрузкой/отгрузкой проектных данных.
Посему, на данный момент вижу авто синхронизацию 2-х сторон лучшим и удобнейшим из методов.
Десктоп с линукс на борту и внутренний офисный линукс сервер с личной папкой каждого сотрудника компании.
В работе использую PhpStorm напрямую с папкой сервера (соединение с сервером идет посредством sshfs, так же параллельно открыта серверная консоль, в которой произвожу коммиты и «svn up/pull»ы).
Так вот, после апдейтов серверных «svn up/pull» — третий PhpStorm не сразу сечёт изменения, и после собственных правок кода вываливает окно мержа, которое и вызывает кучу неудобств.
Скорость sshfs и перманентная загруженность сервера оставляет желать лучшего.
Соединение с удаленным сервером посредство средств PhpStorm не устраивает, по причине необходимости лишних действий с загрузкой/отгрузкой проектных данных.
Посему, на данный момент вижу авто синхронизацию 2-х сторон лучшим и удобнейшим из методов.
Ну ваша модель отлично ложится на RealSync. Вам только надо SVN использовать на своей же локальной машине, а не на дев-сервере (заодно и GUI какой-нибудь подтянется — в том же phpStorm-е есть средства для работы с SVN). А про серверную консоль можно забыть, она в данном случае не нужна. Файлы правятся только локально.
В PhpStorm есть работа с удаленным хостом + автоматическая выгрузка изменений (не очень понял про лишние действия с выгрузкой данных, видимо, не включен Automatic Upload). В данной схеме, RealSync выглядит 5 колесом.
Предположим, я ушел в оффлайн на несколько дней. Поправил несколько файлов (не обязательно в phpStorm-е, может быть, и в других редакторах). За это время кто-то что-то испортил в моей папке на сервере тоже. После этого я возвращаюсь в онлайн. Каковы будут действия phpStorm-а и сколько времени они займут, напишите, пожалуйста (желательно поподробнее).
Я уже писал у вас на форуме ещё при первом анонсе утилиты, ответа не получил. Напишу сюда. Win7, штатный доступ на сервер через putty, запущен pageant с ключом, через который должна происходить авторизация.
Запускаю realsync — и при _каждой_ операции он запрашивает пароль. Как объяснить ему, что надо использовать pageant или хотя бы научить запоминать пароль?
Запускаю realsync — и при _каждой_ операции он запрашивает пароль. Как объяснить ему, что надо использовать pageant или хотя бы научить запоминать пароль?
Уточните вашу конфигурацию. В общем случае пароль запрашивается 1 раз при самом-самом первом запуске утилиты, после чего генерируется открытый и закрытый ключ. Закрытый ключ используется RealSync-ом в дальнейшем, а открытый — кладется им на сервер. Я не очень понимаю, при чем тут pageant и вообще PuTTY (RealSync использует cygwin-овский ssh.exe).
Что именно из конфигурации нужно уточнить? Спрашивайте — отвечу.
Вот так выглядит сеанс создания синхронизируемого каталога: pastie.org/private/4uhrqlyxfmw9skkxt23ew После этого realsync бесконечно спрашивает password и ничего не происходит. Куда смотреть, куды бечь?
И, если у меня настроена SSH-авторизация по ключу, а не по паролю — как быть в таком случае?
Вот так выглядит сеанс создания синхронизируемого каталога: pastie.org/private/4uhrqlyxfmw9skkxt23ew После этого realsync бесконечно спрашивает password и ничего не происходит. Куда смотреть, куды бечь?
И, если у меня настроена SSH-авторизация по ключу, а не по паролю — как быть в таком случае?
Что-то странное случается: в фразе «checking if we have access without a password to this host» у вас не должен был запроситься пароль — вместо этого он должен был сказать, что доступа без пароля нет (т.к. запускается ssh -q -o PasswordAuthentication=no), и сгенерировать пару ключей. Я попробую воспроизвести это сейчас.
Если у вас в системе УЖЕ настроена SSH-авторизация по ключу, то RealSync ее автоматом подхватит и вообще не будет запрашивать пароль даже в первый раз. Только вот формат ключей (и их расположение) для PuTTY и Cygwin-овского SSH — разные. В случае ssh.exe ключ берется из %HOME%\.ssh\identity.
Попробуйте положить identity туда (в моем случае это C:\Users\d\.ssh\identity) и запустить
ssh.exe david@****.ru
в консоли Windows. Вас должно пустить по SSH на ****.ru без пароля. Если не пустило — надо смотреть, может быть, настройки на сервере какие-то не такие (или на клиенте) или еще что. Для диагностики может помочь ssh.exe -v, например.
Если у вас в системе УЖЕ настроена SSH-авторизация по ключу, то RealSync ее автоматом подхватит и вообще не будет запрашивать пароль даже в первый раз. Только вот формат ключей (и их расположение) для PuTTY и Cygwin-овского SSH — разные. В случае ssh.exe ключ берется из %HOME%\.ssh\identity.
Попробуйте положить identity туда (в моем случае это C:\Users\d\.ssh\identity) и запустить
ssh.exe david@****.ru
в консоли Windows. Вас должно пустить по SSH на ****.ru без пароля. Если не пустило — надо смотреть, может быть, настройки на сервере какие-то не такие (или на клиенте) или еще что. Для диагностики может помочь ssh.exe -v, например.
Давид, попробуйте, пожалуйста, в скрипте рядом с
-o PasswordAuthentication=no
добавить еще
-o BatchMode=yes
И посмотреть, перестанет ли он у вас спрашивать пароль сразу после фразы «checking if we have access without a password to this host». У меня хватает и PasswordAuthentication=no, но, возможно, на вашей системе этого недостаточно?
-o PasswordAuthentication=no
добавить еще
-o BatchMode=yes
И посмотреть, перестанет ли он у вас спрашивать пароль сразу после фразы «checking if we have access without a password to this host». У меня хватает и PasswordAuthentication=no, но, возможно, на вашей системе этого недостаточно?
Да, вот с этим ключом всё заработало как надо, пошла репликация.
Ок, файлы перекачались на удалённый хост, теперь каждые 3 секунды реалсинк показывает сообщение, что он что-то качает (файлы я при этом не меняю):
[18:39:00] Watching for changes in 2 folder(s)…
[18:39:00] SSH client died, restarting.
[18:39:00] Initiating a background connection with /home/david/tmp/ttt…
[18:39:00] Fast initial rsync synchronization…
defined: Событие не найдено.
sending incremental file list
sent 604 bytes received 13 bytes 411.33 bytes/sec
total size is 9606830 speedup is 15570.23
[18:39:01] Watching for changes in 2 folder(s)…
[18:39:01] SSH client died, restarting.
[18:39:01] Initiating a background connection with /home/david/tmp/ttt…
[18:39:01] Fast initial rsync synchronization…
defined: Событие не найдено.
sending incremental file list
sent 604 bytes received 13 bytes 411.33 bytes/sec
total size is 9606830 speedup is 15570.23
и так далее…
Ок, файлы перекачались на удалённый хост, теперь каждые 3 секунды реалсинк показывает сообщение, что он что-то качает (файлы я при этом не меняю):
[18:39:00] Watching for changes in 2 folder(s)…
[18:39:00] SSH client died, restarting.
[18:39:00] Initiating a background connection with /home/david/tmp/ttt…
[18:39:00] Fast initial rsync synchronization…
defined: Событие не найдено.
sending incremental file list
sent 604 bytes received 13 bytes 411.33 bytes/sec
total size is 9606830 speedup is 15570.23
[18:39:01] Watching for changes in 2 folder(s)…
[18:39:01] SSH client died, restarting.
[18:39:01] Initiating a background connection with /home/david/tmp/ttt…
[18:39:01] Fast initial rsync synchronization…
defined: Событие не найдено.
sending incremental file list
sent 604 bytes received 13 bytes 411.33 bytes/sec
total size is 9606830 speedup is 15570.23
и так далее…
«SSH client died, restarting.» означает, что умерло постоянное SSH-соединение с сервером, которое RealSync все время держит открытым поддерживает для быстрой передачи единичных файлов. Последите, пожалуйста, в списке процессов, что с ним происходит. Я лично не понимаю, почему он умирает без единого сообщения в консоль… Какая ОС, кстати? И — не запущено ли еще где-то у вас cygwin-процессов (вдруг конфликт версий)?
Cygwin у меня точно не запущен, его просто нет. ОС на сервере довольно древняя — freebsd 6.4. В логах на сервере, вроде, ничего не происходит…
Попробовал на другой системе, свежей.
[19:18:16] Watching for changes in 1 folder(s)…
[19:18:16] SSH client died, restarting.
[19:18:16] Initiating a background connection with /usr/home/david/ttt…
[19:18:16] Fast initial rsync synchronization…
defined: Event not found.
sending incremental file list
Что такое defined: Event not found? Это явно rsync говорит…
Попробовал на другой системе, свежей.
[19:18:16] Watching for changes in 1 folder(s)…
[19:18:16] SSH client died, restarting.
[19:18:16] Initiating a background connection with /usr/home/david/ttt…
[19:18:16] Fast initial rsync synchronization…
defined: Event not found.
sending incremental file list
Что такое defined: Event not found? Это явно rsync говорит…
А, стоп. У меня там шелл tcsh. И, похоже, event not found — это его… Ладно, думаю тут уже мне самому надо поэкспериментировать.
Давид, это реально проблема несовместимости с tcsh на сервере. Сейчас переключил у себя — выдает точно такие же сообщения. Я попробую сейчас сделать совместимым и с tcsh, конечно, но все же bash — наше все…
В итоге победить удалось. Дело в, мягко говоря, странной реакции TCSH на "!", даже заквоченный в АПОСТРОФЫ. Собственно, попробуйте в TCSH запустить такую команду:
echo 'a!b'
Получите «b: Событие не найдено.» — жуть просто, кто это придумал…
Сделал обходной маневр, теперь работает и в TCSH. Обновитесь. Вот коммит для интересующихся: github.com/DmitryKoterov/dklab_realsync/commit/883bf94e53c14076a7da7cf155daa5c17bff10c7
echo 'a!b'
Получите «b: Событие не найдено.» — жуть просто, кто это придумал…
Сделал обходной маневр, теперь работает и в TCSH. Обновитесь. Вот коммит для интересующихся: github.com/DmitryKoterov/dklab_realsync/commit/883bf94e53c14076a7da7cf155daa5c17bff10c7
Большое спасибо! На всякий случай, экранирование echo 'a\!b' также работает (но я не проверял, насколько оно совместимо с прочими шеллами).
Я проверял — несовместимо, к сожалению (с bash-ем, по крайней мере). Поэтому то решение и реализовано, которое реализовано.
Если я Вас ещё не очень задолбал, то сообщаю, что всё запускается, рсинкится, но обновления файлов (при работающей утилите) ни фига не отслеживаются:)
Если утилиту закрыть, а потом снова запустить, всё что изменилось нормально с rsync-ится. Но нотифай такое впечатление что не работает (хотя сам процесс живой). В консоли при изменении файлов нет никаких сообщений. Win7, 64, NTFS… ну не знаю даже, куда ещё посмотреть.
Если утилиту закрыть, а потом снова запустить, всё что изменилось нормально с rsync-ится. Но нотифай такое впечатление что не работает (хотя сам процесс живой). В консоли при изменении файлов нет никаких сообщений. Win7, 64, NTFS… ну не знаю даже, куда ещё посмотреть.
Ни в коем случае не задолбали. Чем больше фидбека — тем лучше. Попробуйте открыть директорию, в которой производите изменения, в cmd. Затем там запустить:
путь\к\realsync\bin\win32\notify.exe
Оно подвиснет и начнет ждать. Далее в Проводнике попробуйте поменять какой-нибудь файл в директории. Notify.exe должен начать печатать имена измененных файлов. Если это происходит, то проблема где-то в буферизации на стороне Perl; если нет, то может быть какая-то проблема с notify.exe на вашем компе.
путь\к\realsync\bin\win32\notify.exe
Оно подвиснет и начнет ждать. Далее в Проводнике попробуйте поменять какой-нибудь файл в директории. Notify.exe должен начать печатать имена измененных файлов. Если это происходит, то проблема где-то в буферизации на стороне Perl; если нет, то может быть какая-то проблема с notify.exe на вашем компе.
Отчитываюсь: notify.exe сам по себе работает, изменения в файлах ловит.
Я поставил $DEBUG_PATCH_TREE = 1, получается вот какой вывод (меняю файл TODO.txt):
Received: M TODO.txt
Notify: TODO.txt
Received: M TODO.txt
Notify: TODO.txt
Received: M TODO.txt
Notify: TODO.txt
Candidate: ./TODO.txt
И всё. Из того что я пока нашёл: на выходе из get_changes — пустой массив, если раскомментировать отладочную печать (стр. 611):
foreach (@cur_tree) { print $_->{name}. "\n"; } print "\n";
то выводится просто точка (".").
Я поставил $DEBUG_PATCH_TREE = 1, получается вот какой вывод (меняю файл TODO.txt):
Received: M TODO.txt
Notify: TODO.txt
Received: M TODO.txt
Notify: TODO.txt
Received: M TODO.txt
Notify: TODO.txt
Candidate: ./TODO.txt
И всё. Из того что я пока нашёл: на выходе из get_changes — пустой массив, если раскомментировать отладочную печать (стр. 611):
foreach (@cur_tree) { print $_->{name}. "\n"; } print "\n";
то выводится просто точка (".").
А, блин! Дмитрий, простите, тут я самдурак. Зачем-то вписал в исключения паттерн '.*', и он рубил, естественно, всё что в текущем каталоге:)
Сейчас вроде всё работает как надо — спасибо Вам за помощь и за терпение:)
Сейчас вроде всё работает как надо — спасибо Вам за помощь и за терпение:)
М-ммм… Давид, вообще-то, вы баг нашли. :-) Маска ".*" не должна совпадать со всеми файлами. Она должна совпадать только с файлами, начинающимися на "." (и с директориями). А совпадала она, потому что во внутреннем представлении RealSync хранит все пути в виде "./dir/file" — всегда с "." в начале, вот с этой единственной точкой и совпадала маска ".*. Баг исправлен, можно обновиться — коммит github.com/DmitryKoterov/dklab_realsync/commit/5e3e8bf6548a0b0912e9c1e914661627df536284
Тогда просто для ясности — маска накладывается строго на имя файла или на путь отн. текущего каталога? То есть, могу ли я написать маску "/abc/*.txt"? Вроде бы кроме отбрасывания начальной точки патч ничего больше не меняет.
И как работают маски в режиме rsync? Потому что у меня с маской ".*" начальный rsync всё равно синхронизировал изменённые файлы.
И как работают маски в режиме rsync? Потому что у меня с маской ".*" начальный rsync всё равно синхронизировал изменённые файлы.
Маски передаются один-в-один в rsync, в том виде, в котором они прописаны в exclude. Так что это именно маски rsync. Сам же RealSync пытается также трактовать маски как можно более ближе к тому, как это делает rsync (полной точности вряд ли удалось добиться, но для большинства случаев подходит).
Основная идея в том, что маска преобразуется в нормальное регулярное выражение (см. sub mask_to_re — правда, она достаточно сложная), после чего она матчится с относительным путем, из которого предварительно отрезана ведущая точка. В случае, если маска содержит хотя бы один "/" или последовательность "**", она воспринимается как АБСОЛЮТНАЯ и матчится с ПОЛНЫМ относительным путем (от начала и до конца). Если же "/" в ней нет, то с маской матчится хотя бы один кусочек относительного пути.
В вашем примере /abc/*.txt (равно как и маска abc/*.txt) будет матчиться только с txt-файлами в директории 1-го уровня abc, и все.
С маской ".*" начальный rsync у меня сейчас корректно передает все файлы, кроме начинающихся с точки (что есть правильно). У вас разве не так? Можете прислать лог?
Основная идея в том, что маска преобразуется в нормальное регулярное выражение (см. sub mask_to_re — правда, она достаточно сложная), после чего она матчится с относительным путем, из которого предварительно отрезана ведущая точка. В случае, если маска содержит хотя бы один "/" или последовательность "**", она воспринимается как АБСОЛЮТНАЯ и матчится с ПОЛНЫМ относительным путем (от начала и до конца). Если же "/" в ней нет, то с маской матчится хотя бы один кусочек относительного пути.
В вашем примере /abc/*.txt (равно как и маска abc/*.txt) будет матчиться только с txt-файлами в директории 1-го уровня abc, и все.
С маской ".*" начальный rsync у меня сейчас корректно передает все файлы, кроме начинающихся с точки (что есть правильно). У вас разве не так? Можете прислать лог?
Попробую. Пока что дебаг-выдача вот какая: pastie.org/private/hwqqrrkzpqism3gxugs9g
Интересно, а как вы организуете командную разработку с вашим «репликатором»? Для одного человека — более чем удобно, но где вы такое видели? Для реального мира есть гит + локал энвайронмент. Уже столько всяких штук придумали для облегчения запуска сторонних компонентов, что никаких проблем поднять на ноутбуке продакшен энвайронмент нет. Мощности лэптопов достаточно, чтобы гонять solr, memcached, postgres, rabbitmq и сам сервер приложения, да еще и на эклипс прожорливый останется.
Мне видится польза инструмента, если есть ноутбук для фильмов и сервер на кухне. И лежа в гамаке на балконе пописывать код. Но и тут гит кажется лучше.
Насчет ctrl + s -> alt + tab -> ctrl + r: Вы верстаете? Пишете js? Зачем для верстки или js весь стек поднимать? Если нет, то «обычно» большая часть времени проходит за тестами и браузер вам не особо нужен.
Мне кажется, лучше выбрать другой воркфлоу проекта и не создавать велосипеды, хотя если очень хочется, то :)
Мне видится польза инструмента, если есть ноутбук для фильмов и сервер на кухне. И лежа в гамаке на балконе пописывать код. Но и тут гит кажется лучше.
Насчет ctrl + s -> alt + tab -> ctrl + r: Вы верстаете? Пишете js? Зачем для верстки или js весь стек поднимать? Если нет, то «обычно» большая часть времени проходит за тестами и браузер вам не особо нужен.
Мне кажется, лучше выбрать другой воркфлоу проекта и не создавать велосипеды, хотя если очень хочется, то :)
Как организовывается командная разработка, можно прочитать в статье выше. Вкратце — у каждого разработчика своя директория на сервере (у каждого она своя, они независимы), и на эти директории мапятся различные домены дев-сервера (или различные порты). Например, example.com.ЛОГИН_РАЗРАБОТЧИКА.lcl или example.com: ПОРТ_РАЗРАБОТЧИКА. Синхронизация же исходников (командная работа) происходит через человеческие средства — например, через Git и SSH (это не имеет отношения к RealSync).
Вы сейчас, насколько я понимаете, говорите о локальной разработке, когда веб-сервер (и СУБД?) стоит у каждого разработчика свой, на своем ноутбуке. Я ничего не имею против такой схемы и сам ей пользуюсь для ряда проектов (см. статью выше опять же), но только есть случаи, когда она может быть не очень удобной.
Вы сейчас, насколько я понимаете, говорите о локальной разработке, когда веб-сервер (и СУБД?) стоит у каждого разработчика свой, на своем ноутбуке. Я ничего не имею против такой схемы и сам ей пользуюсь для ряда проектов (см. статью выше опять же), но только есть случаи, когда она может быть не очень удобной.
Такой воркфлоу попахивает ужасом.
Не могли бы Вы привести пример, когда локал девелопмент является неудобным?
Не могли бы Вы привести пример, когда локал девелопмент является неудобным?
1. Когда существенно используются возможности той или иной ОС на сервере (например, Линукс), а разработчики работают на винде.
2. Когда СУБД очень большая или просто часто и нетривиально меняется, так что ее приходится держать в единственном экземпляре на дев-сервере, а разработчики со своих локальных машин коннектятся к ней по сети из скриптов сайта (этот коннект — медленный, если вы работаете удаленно, а не сидите в офисе).
3. Когда разработчиков много и они не все разбираются в особенностях конфигурации, а сайт очень сложный.
4. Когда даже в дев-зоне много серверов.
Про ужас — вы не ошибаетесь, он точно так же имеет право на жизнь, как и локальная разработка. Просто для разных проектов — разные способы, надо выбирать наиболее удобный.
2. Когда СУБД очень большая или просто часто и нетривиально меняется, так что ее приходится держать в единственном экземпляре на дев-сервере, а разработчики со своих локальных машин коннектятся к ней по сети из скриптов сайта (этот коннект — медленный, если вы работаете удаленно, а не сидите в офисе).
3. Когда разработчиков много и они не все разбираются в особенностях конфигурации, а сайт очень сложный.
4. Когда даже в дев-зоне много серверов.
Про ужас — вы не ошибаетесь, он точно так же имеет право на жизнь, как и локальная разработка. Просто для разных проектов — разные способы, надо выбирать наиболее удобный.
Не удержался и написал ответ, уж очень аргументы мне не нравятся
1. Это сильный аргумент! Правда, если у вас 10 разработчиков, можно из всех пересадить на линукс.
2. Для разработки можно жить из без бд, особенное если пользоваться тестами. Кроме того, в девелопменте не всегда нужна актуальная и полная база. Достаточно структуры и нескольких тестовых записей.
3. Даже если каждый разработчки изолированно разбирается в своем куске кода (тогда зачем ему вся БД), это совсем не уменьшает удобства гита и локальной разработки. Если разработчики не умеют пользоваться гитом — то или учить или гнать.
4. Разве кол-во серверов имеет значение? Мне кажется, гораздо важнее кол-во сервисов. И установить все на средний ноутбук не составляет проблем.
1. Это сильный аргумент! Правда, если у вас 10 разработчиков, можно из всех пересадить на линукс.
2. Для разработки можно жить из без бд, особенное если пользоваться тестами. Кроме того, в девелопменте не всегда нужна актуальная и полная база. Достаточно структуры и нескольких тестовых записей.
3. Даже если каждый разработчки изолированно разбирается в своем куске кода (тогда зачем ему вся БД), это совсем не уменьшает удобства гита и локальной разработки. Если разработчики не умеют пользоваться гитом — то или учить или гнать.
4. Разве кол-во серверов имеет значение? Мне кажется, гораздо важнее кол-во сервисов. И установить все на средний ноутбук не составляет проблем.
Плюсов много, на самом деле.
1) Когда требуется достаточно много различных компонент — их администрирует штатный админ, от разработчика разбираться в нюансах софта вне его прямых обязанностей не требуется.
2) Все разработчики используют одно и то же окружение. Особенно это важно, когда хороший кусок этого окружения — самосбор, и просто так из репозитория не ставится.
3) Легко можно зайти друг к другу в каталог — чтобы помочь или скопировать себе какой-то кусок кода
4) Легко можно зайти на версию сайта от другого разработчика, при этом нет необходимости быть с ним рядом или как-то извращаться с пробросами портов, VPN и тому подобным.
5) Какие-то инфраструктурные глюки сразу заметны — если есть проблемы с версионником, или с соединением с сервером — можно выяснить у коллег, есть ли у них такое, и если есть — высвистывать поддержку.
6) Если человек по каким-то причинам пропал его код никуда не делся, даже если не закоммичен
7) Если есть необходимость с девелоперских сайтов взаимодействовать с какими-то внешними сервисами, доступ на которые ограничен по IP
В общем, для большого проекта — хороший вариант
1) Когда требуется достаточно много различных компонент — их администрирует штатный админ, от разработчика разбираться в нюансах софта вне его прямых обязанностей не требуется.
2) Все разработчики используют одно и то же окружение. Особенно это важно, когда хороший кусок этого окружения — самосбор, и просто так из репозитория не ставится.
3) Легко можно зайти друг к другу в каталог — чтобы помочь или скопировать себе какой-то кусок кода
4) Легко можно зайти на версию сайта от другого разработчика, при этом нет необходимости быть с ним рядом или как-то извращаться с пробросами портов, VPN и тому подобным.
5) Какие-то инфраструктурные глюки сразу заметны — если есть проблемы с версионником, или с соединением с сервером — можно выяснить у коллег, есть ли у них такое, и если есть — высвистывать поддержку.
6) Если человек по каким-то причинам пропал его код никуда не делся, даже если не закоммичен
7) Если есть необходимость с девелоперских сайтов взаимодействовать с какими-то внешними сервисами, доступ на которые ограничен по IP
В общем, для большого проекта — хороший вариант
А не поделитесь своими наработками по автоматической конфигурации хостов для разработчиков?
Генерите конфиги для apahe/nginx/etc по шаблонам?
У меня постоянная проблема с тем что окружение девелоперских машин не совпадает с тестовым и продакшн-окружением.
Генерите конфиги для apahe/nginx/etc по шаблонам?
У меня постоянная проблема с тем что окружение девелоперских машин не совпадает с тестовым и продакшн-окружением.
Nginx по шаблону, да. Но, на самом деле, в качестве этого шаблона выступает сам конфиг, в нем только подстроки "/web/" и ".web." заменяются на строки "/ЛОГИН/" и ".ЛОГИН." для каждого разработчика (сканируется /srv/www/ и все папки, которые нашлись там, становятся «разработчиками»). Это дело размножается и включается в конфиге nginx через include. Всего делов-то. На продакшене в /srv/www только одна папка — web, поэтому и разработчик там как бы один-единственный (с именем «web»), т.е. ничего не размножается и не сканируется как будто бы.
А имена доменов строятся по схеме ПолноеИмяНаПродакшене.ЛОГИН.КЛАСТЕР.lcl. Здесь ЛОГИН — логин разработчика (или web; типа web — это такой «виртуальный разработчик», у которого в домашней директории весь сайт, но который только пулится, ничего не коммитя). КЛАСТЕР — это dev (дев-сервер), test (сервер репитиции релиза), load (нагрузочные тесты) и prod (продакшен). А ПолноеИмяНаПродакшене — это типа example.com или my-site.ru или что угодно.
А имена доменов строятся по схеме ПолноеИмяНаПродакшене.ЛОГИН.КЛАСТЕР.lcl. Здесь ЛОГИН — логин разработчика (или web; типа web — это такой «виртуальный разработчик», у которого в домашней директории весь сайт, но который только пулится, ничего не коммитя). КЛАСТЕР — это dev (дев-сервер), test (сервер репитиции релиза), load (нагрузочные тесты) и prod (продакшен). А ПолноеИмяНаПродакшене — это типа example.com или my-site.ru или что угодно.
Ну и, естественно, конфиг nginx хранится в git, поэтому он одинаковый и не дев-сервере, и на продакшене. Этого не так уж и сложно добиться, чтобы не было завязок за всякие там ip-адреса, порты и т.д.
а конфиги nginx в том-же репозитории? Или просто отдельный репозиторий для конфигов и при добавлении юзера просто перегенерите? Я задумался тут — может такое к gitolite прикрутить ;-)
Конфиги nginx-а в том же репозитории, зачем еще один. Но сгенерированные конфиги — вне, конечно же, они же на лету генерируются и только на дев-машине (на продакшене ничего генерировать не нужно). На продакшене можно /etc/nginx симлинкой сослаться на правильную папку с конфигами nginx внутри репозитория.
Дев-окружение у меня крутится в виртуалке, чтобы максимально точно соответствовать боевому. Не то чтобы с различиями между Debian и Ubuntu реально сталкивался, но береженого… В общем почти ноутбук и сервер на кухне.
Так вот, неудобны для этого VCS по двум причинам:
1. Для проверки изменения нужно его закоммитить, запушить, переключиться на консоль дев-сервера, сделать пулл, переключиться в браузер, проверить, обнаружить опечатку, переключиться в исходники, исправить, повторить пока не заработает.
2. В репозиторий проникают коммиты «заведомо» не работающие или с ошибками, за ними следуют один или несколько с исправлениями в один-два символа.
Обеих проблем можно было бы избежать во многом, обеспечивая 100% покрытия всего кода (включая html и т. п.), но зачастую это превращается в тесты ради тестов, а главное 100% гарантии отсутствия опечаток (бог с ними с логическими ошибками) они не дают.
Так вот, неудобны для этого VCS по двум причинам:
1. Для проверки изменения нужно его закоммитить, запушить, переключиться на консоль дев-сервера, сделать пулл, переключиться в браузер, проверить, обнаружить опечатку, переключиться в исходники, исправить, повторить пока не заработает.
2. В репозиторий проникают коммиты «заведомо» не работающие или с ошибками, за ними следуют один или несколько с исправлениями в один-два символа.
Обеих проблем можно было бы избежать во многом, обеспечивая 100% покрытия всего кода (включая html и т. п.), но зачастую это превращается в тесты ради тестов, а главное 100% гарантии отсутствия опечаток (бог с ними с логическими ошибками) они не дают.
тестировать вьюхи — это действительно жестко.
Кстати, поднимать виртуальное работчее окружение можно с помощью chef, но это уже задача админов делать рецепты. Зато если сделать — не будет проблем поднять виртуалку еще одному разработчику. Еще более простое решение — сделать один настроенный образ на всех разработчиков.
Кстати, поднимать виртуальное работчее окружение можно с помощью chef, но это уже задача админов делать рецепты. Зато если сделать — не будет проблем поднять виртуалку еще одному разработчику. Еще более простое решение — сделать один настроенный образ на всех разработчиков.
Начиная новый проект с нуля я чувствую либо необходимость в компромиссе какую часть кода не тестировать (даже не вьюхи, а шаблоны вьюх), либо необходимость тестировать всё, без оглядки на здравый смысл (по началу, пока вёрстка не готова, в тестах проверять наличие, например, тега
html корневым, тега head прямым и первым его «ребёнком», а тега title прямым «ребёнком» тега head, а потом сравнивать с вёрсткой от верстальщика с её адаптацией под тесты — это если верстаю не я). Если следовать букве TDD, то последнее это логично («ни строчки кода без теста, который без неё не выполняется»), но субъективно избыточно — мое представление о вёрстке тесты на основе селекторов могут проверить, но что она будет выглядеть как я представляю — нет)Я совсем не понимаю зачем тестировать вьюхи. Особенно верстку и шаблоны. Зачем?
Юнит и интеграционных тестов вполне достаточно.
Юнит и интеграционных тестов вполне достаточно.
Как я понял основной принцип TDD — у каждой строчки (утрируя, на самом деле — у каждой лексемы) кода должно быть обоснование в виде порушенного (в свое время) теста. Минимум — любое значимое изменение кода (включая изменение, например, тега a на тег b в коде шаблона) должно влечь за собой нарушение тестов. Иначе мои тесты не охватывают весь входной диапазон параметров (включая текст шаблонов), либо неправильно охватывают диапазон выходных параметров (например, видят тег head с нужным содержанием, но не обращают внимания на то, что он где-то внутри div'а третьего уровня вложенности, а не первый наследник тега html).
Другими словами, приемочные тесты, анализирующие вывод скрипта на наличие какой-то строки, но не анализирующие его положение (включая его соотношение с другими элементами DOM), не являются достаточными для хоть какой-нибудь гарантии работы веб-приложения. То же относится к форматам вывода типа XML или JSON.
Полноценные приемочные тесты должны анализировать и (прежде всего?) семантику, а не только синтаксис. В случае XML вывод скрипта должен, как минимум, соответствовать DTD или Scheme — они могут (но не обязаны) гарантировать семантическую целостность. В случае других языков вывода (html, css, js и т. п.) гарантировать хоть как-то, что конечный вывод (читай — содержимое окна) пользователю соответствует ожидаемому формально очень сложно без анализа полного текста документа (про разнообразие интерпретации браузерами, что html, что css, что js, я, пожалуй, промочу).
Другими словами, приемочные тесты, анализирующие вывод скрипта на наличие какой-то строки, но не анализирующие его положение (включая его соотношение с другими элементами DOM), не являются достаточными для хоть какой-нибудь гарантии работы веб-приложения. То же относится к форматам вывода типа XML или JSON.
Полноценные приемочные тесты должны анализировать и (прежде всего?) семантику, а не только синтаксис. В случае XML вывод скрипта должен, как минимум, соответствовать DTD или Scheme — они могут (но не обязаны) гарантировать семантическую целостность. В случае других языков вывода (html, css, js и т. п.) гарантировать хоть как-то, что конечный вывод (читай — содержимое окна) пользователю соответствует ожидаемому формально очень сложно без анализа полного текста документа (про разнообразие интерпретации браузерами, что html, что css, что js, я, пожалуй, промочу).
Про chef забыл написать — пытался освоить его или puppet, но решил что для моих задач они избыточны. Прежде всего потому что они представляют (в отличии от капистрано), что веб-сервера это их клиенты. На моих задачах обычно наоборот: сервер — это сервер, он должен обслуживать запросы клиентов (пускай и с рутовыми правами) — такой системы, чтобы задавала извне требования по соответствию состоянию и с DSL-синтаксисом я не нашёл. Chef- и Puppet- клиенты (которые в «нормальной жизни» серверы) пытаются соответствовать тому описанию, которое ему сообщает сервер по их запросу меня не устраивают, а капистрано для таких задач не заточен — нарисовать можно, но от обычных bash-скриптов отличаться не будет по сути.
не совсем понял, чем вам не подходит chef.
Я говорил про шеф в контексте развертки окружения разработчика.Не обязательно держать на chef-сервере всю конфигурацию и цеплять клиентов. Достаточного одного репозитория с шеф-соло, с помощью которого разворачиваются новые машины.
Я говорил про шеф в контексте развертки окружения разработчика.Не обязательно держать на chef-сервере всю конфигурацию и цеплять клиентов. Достаточного одного репозитория с шеф-соло, с помощью которого разворачиваются новые машины.
Тем, что нет бесплатных приватных серверов chef, аналогичных по сути бесплатным приватным git/hg репозиториям на bitbucket.org.
Тем, что нужен хоть один хост с развернутым chef-сервером, который может принимать внешние соединения от chef-клиентов.
Тем, что нет возможности сделать инверсию управления по отношению к серверам.
P.S. Может я не слишком вникал в возможности chef, но читая гайды, топики на хабре, и нагугленные блоги (последовательность рандомная, начинал с хабра), я понял, что без хоста, способного слушать порты в сети, к которым обращаются сервера с разворачивающейся средой, не обойтись. Управляющий центр — пассивный хост, который только отвечает на вопросы типа «я активный хост, каким я должен быть», но не активный хост, который говорит пассивным «я бог — слушай меня: твое окружение должно соответствовать такому-то».
P.P.S. Может мои соображения меркантильны, но, по-моему, нет смысла держать два vds, чтобы обеспечить развёртывание второго при смене второго на основание конфигов первого. Буду очень благодарен, если кто мне подскажет сценарий использования chef на локальном хосте, не имеющем возможности слушать порты извне (провайдерский NAT) для разворачивания инстансов моих приложений на (v)ds под управлением debian/ubuntu. Или очень дешевый (~1$ в месяц) способ содержать «вечно» полноценный chef-сервер для развертывания среды исполнения приложений под «голым» Debian/Ubuntu.
Тем, что нужен хоть один хост с развернутым chef-сервером, который может принимать внешние соединения от chef-клиентов.
Тем, что нет возможности сделать инверсию управления по отношению к серверам.
P.S. Может я не слишком вникал в возможности chef, но читая гайды, топики на хабре, и нагугленные блоги (последовательность рандомная, начинал с хабра), я понял, что без хоста, способного слушать порты в сети, к которым обращаются сервера с разворачивающейся средой, не обойтись. Управляющий центр — пассивный хост, который только отвечает на вопросы типа «я активный хост, каким я должен быть», но не активный хост, который говорит пассивным «я бог — слушай меня: твое окружение должно соответствовать такому-то».
P.P.S. Может мои соображения меркантильны, но, по-моему, нет смысла держать два vds, чтобы обеспечить развёртывание второго при смене второго на основание конфигов первого. Буду очень благодарен, если кто мне подскажет сценарий использования chef на локальном хосте, не имеющем возможности слушать порты извне (провайдерский NAT) для разворачивания инстансов моих приложений на (v)ds под управлением debian/ubuntu. Или очень дешевый (~1$ в месяц) способ содержать «вечно» полноценный chef-сервер для развертывания среды исполнения приложений под «голым» Debian/Ubuntu.
Когда на работе перешёл на таскаемый туда-сюда ноут, задумался о том как бы было проще синхронизировать и что бы код был всегда локально. Первое на что наткнулся — realsync. Юзаю около двух месяцев. Пока вообще никаких нареканий.
З.Ы. Когда прописал в .gitignore .realsync подошёл один из сотрудников и спросил — неужели я правда пользуюсь realsync. Оказалось что он один из тех что что-то писал для этой тулзы.
З.Ы. Когда прописал в .gitignore .realsync подошёл один из сотрудников и спросил — неужели я правда пользуюсь realsync. Оказалось что он один из тех что что-то писал для этой тулзы.
Вспомнил что не хватает, только даже мыслей нет как реализовать. Проект мультиязыный, но разработка ведётся на одном языке. Иногда надо потестить как там в переводах выглядит и тогда на девел сервере запускается скрипт перевода, который создаёт папку (на девеле сервере) с шаблонами. Всё отлично потестили. Но как только переключаешь ветку на локальной машине — все переведённые шаблоны удаляются. Есть какой-нить эксклюд для серверной стороны?
Сори если не заметил, но чем это отличается от подобных фич в ideшках?
Из статьи: «Почти все IDE поддерживают передачу измененного файла (по FTP или SSH) на удаленный сервер при нажатии Ctrl+S. Но только здесь две проблемы. Во-первых, вы не сможете изменять файлы «мимо» IDE (например, сделать git pull из командной строки на локальной машине). Во-вторых, если вы на несколько дней исчезнете из реальности интернета, а потом вернетесь с измененными файлами, IDE уже не сможет определить, какие файлы изменились (особенно если они еще случайно и на сервере поменялись почему-то независимо от вас), и в лучшем случае начнет полное копирование, что займет полчаса.»
На форуме уже спрашивал, не получил ответа.
В чем преимущества перед "Unison file synchronizer"? В отличии от realsync есть двухсторонняя кроссплатформенная автоматическая синхронизация.
В чем преимущества перед "Unison file synchronizer"? В отличии от realsync есть двухсторонняя кроссплатформенная автоматическая синхронизация.
Что выглядит не очень хорошо:
1) Запрашиваются пароли для ssh. Адекватные разработчики паролей для SSH давно не имеют, работают иключительно с помощью ключей. Putty и pageant, как я вижу по исходникам, не поддерживаются? А ели и будут поддерживаться, начнутся проблемы с rsync.
2) как отслеживаются изменения в директориях? Используется ли под windows интерфейс операционной системы для этого?
WinSCP всех этих недостатков не имеет (имеет другие) — вот оно реальная альтернатива. Если бы только не его недостатки, то был бы идепльный синхронизатор.
1) Запрашиваются пароли для ssh. Адекватные разработчики паролей для SSH давно не имеют, работают иключительно с помощью ключей. Putty и pageant, как я вижу по исходникам, не поддерживаются? А ели и будут поддерживаться, начнутся проблемы с rsync.
2) как отслеживаются изменения в директориях? Используется ли под windows интерфейс операционной системы для этого?
WinSCP всех этих недостатков не имеет (имеет другие) — вот оно реальная альтернатива. Если бы только не его недостатки, то был бы идепльный синхронизатор.
1. Положите ваш приватный ключ в C:\Users\ВашЛогин\.ssh\identity — он подхватится RealSync-ом при первом запуске, и пароль не будет спрашиваться вообще ни разу. Просто ключ для PuTTY и ключ для SSH — разные (зачем-то PuTTY пошел по такому непонятному пути, хотя в нем есть утилита конвертации).
2. Да. Для каждой ОС используется ее нативный механизм.
WinSCP:
— неустойчив к разрывам связи (вернее, устойчив через пень-колоду)
— очень долго проводит начальную синхронизацию (в десятки раз медленнее, чем rsync в RealSync-е)
— не так легко конфигурируется, как RealSync
Но да, это одна из альтернатив для сильных духом мужчин.
2. Да. Для каждой ОС используется ее нативный механизм.
WinSCP:
— неустойчив к разрывам связи (вернее, устойчив через пень-колоду)
— очень долго проводит начальную синхронизацию (в десятки раз медленнее, чем rsync в RealSync-е)
— не так легко конфигурируется, как RealSync
Но да, это одна из альтернатив для сильных духом мужчин.
Ну как это пароль не будет спрашиваться ни разу? А пароль для приватного ключа откуда будет браться? Или генерировать приватные ключи без пароля? Страшновато. putty пошёл по своему понятной причине — формат большого значения не имеет, а вот наличие pageant как раз имеет значение, и ssh реализовать функционал pageant не может никак, откуда и интерес именно к putty. Может быть получится запускать rsync с учётом путтевских запросов — есть минимум одно решение для этого, утилита cygnative.exe, но работает не очень надёжно и не всегда.
Остаётся один вопрос — если у меня 500 директорий в проекте, то насколько быстро будут изменения в них отражаться на сервере? Не всех сразу, а одного файла в одной из них.
Остаётся один вопрос — если у меня 500 директорий в проекте, то насколько быстро будут изменения в них отражаться на сервере? Не всех сразу, а одного файла в одной из них.
В принципе, вместо ssh.exe можно подсунуть SSH-клиент от PuTTY, но я не пробовал. И наверняка там опции командной строки другие. Да, пароль на ключи не поддерживаются.
Насчет 500 (или 50000) директорий — изменения будут отображаться моментально, сколько бы ни было файлов и директорий. Потому что используются нативные средства ОС для отслеживания изменений.
Насчет 500 (или 50000) директорий — изменения будут отображаться моментально, сколько бы ни было файлов и директорий. Потому что используются нативные средства ОС для отслеживания изменений.
насчёт putty проблема более серьёзная чем параметры, проблема и решение описаны в diario.beerensalat.info/tags/plink/, иногда у меня оно работает, иногда нет.
… забыл еще одну проблему у WinSCP, кстати — касается блокировок
1. Он папки держит (держал?) заблокированными. Т.е. я не могу ее удалить, если она отсинкалась — винда говорит «папка используется, удалить не могу».
2. Если у вас есть там, например, excel-файл или csv даже, и вы открываете его в Excel, то на Ctrl+S в Excel WinSCP этот файл передавать не будет — он будет ждать, когда Excel его «отпустит» (в свое время именно это меня сподвигло на написание RealSync-а, т.к. в проекте существенно использовались excel-файлы в качестве одного из источников метаинформации для кодогенерации «на лету»).
1. Он папки держит (держал?) заблокированными. Т.е. я не могу ее удалить, если она отсинкалась — винда говорит «папка используется, удалить не могу».
2. Если у вас есть там, например, excel-файл или csv даже, и вы открываете его в Excel, то на Ctrl+S в Excel WinSCP этот файл передавать не будет — он будет ждать, когда Excel его «отпустит» (в свое время именно это меня сподвигло на написание RealSync-а, т.к. в проекте существенно использовались excel-файлы в качестве одного из источников метаинформации для кодогенерации «на лету»).
Дмитрий, у меня как раз обратная ситуация.
Пытался пару месяцев назад использовать realsync на Win7 — после запуска и синхронизации он лочит файлы и не дает их переименовывать (пример: при запущенном realsync в проводнике создаем файл — создается. Пытаемся переименовать — не дает).
Пришлось верстальщику жить с winscp, а ему бы realsync подошел очень…
Пытался пару месяцев назад использовать realsync на Win7 — после запуска и синхронизации он лочит файлы и не дает их переименовывать (пример: при запущенном realsync в проводнике создаем файл — создается. Пытаемся переименовать — не дает).
Пришлось верстальщику жить с winscp, а ему бы realsync подошел очень…
Ух ты. Вы только что баг в Проводнике поймали. Файлы реально никто не держит — это видно по procmon-у хотя бы, а также потому, что они переименовываются везде, кроме Проводника. Попробую обойти эту проблему.
А, нет, извиняюсь, такой эффект при переименовании наблюдается только для файлов, находящихся в корневой папке. Проводник тут не виноват, я сам директорию открывал не в том режиме. Проблема исправлена, обновитесь (поменялся файл notify.exe), см. коммит github.com/DmitryKoterov/dklab_realsync/commit/ec31f68b44eddbe684b67c8cb17b34a76b9fd36d.
Как можно явно указать путь к ключу? Например, вагрант хранит ключ в .vagrant/machines/default/virtualbox/private_key, хотелось бы его использовать вместо создания отдельных для realsync
тема! аналоги не пробовал, но эта тулза мне по душе. работая в офисе использовал sshfs так как инфраструктура позволяла — dev серевер стоял в соседней комнате в одой подсети. а вот при работе из вне, sshfs работал как таможня какая то, приходилось руками по ssh rsync'ом заливать.
но только я заупускал ее в консоли, натравлявая на папку проекта:
но только я заупускал ее в консоли, натравлявая на папку проекта:
realsync ~/path/to/project, вот notify в «трэй» чего то не получилось «ввинтить». как быть?Да, к сожалению, и Samba, и SSHFS, и NFS не обладают достаточным функционалом кэширования для того, чтобы не тормозить при их таком использовании (хотя вполне могли бы). Насколько я знаю, сейчас еще не существует сетевой файловой системы с кэшированием достаточного уровня — везде полумеры.
Не совсем понимаю зачем это нужно, если есть сам rsync (и cwRsync на Windows).
В Eclipse очень легко настраивается еще один билдер, который запускает rsync при сохранении файла и все работает как часы.
В Eclipse очень легко настраивается еще один билдер, который запускает rsync при сохранении файла и все работает как часы.
Как очень тормозные часы — задержка при запуске RSYNC в Windows будет около 5-6 секунд на проекте с 10000 файлами (да и с 10 файлами будет секунды 4 все равно — на Windows RSYNC медленный; на Linux будет побыстрее, но при условии хорошего канала). Очень неудобно ждать на каждый чих столь долго. Вообще, все это описано и в статье, и в комментариях уже несколько раз — пошли по четвертому кругу.
У меня при тысячах файлов задержка не болеее 1 с. (Windows 7 -> Ubuntu VM)
Для справки: при 10000 файлах в проекте RSYNC из Windows в Linux гоняет по сети туда-сюда порядка 200 килобайт даже при холостом запуске, когда ничего не изменилось. Кроме того, на просто старт RSYNC уходит порядочно времени — у меня около 2-3 секунды (NTFS, SSD, Windows Vista). Я очень рад за вас, что у вас в этих условиях все работает быстро.
Тем более что в phpStorm, например, поиск по всем локальным файлам даже очень большого проекта работает ощутимо быстрее grep-а и занимает 1-2 секунды (как они этого добились — для меня загадка; видимо, индексируют что-то заранее).
Скажу больше, индексы есть и хранятся локально, т.ч. поиск работает так же замечательно и для проектов на самбе.
Такое пожелание. У меня в каталоге на сервере, помимо копий файлов с домашней машины, имеются ещё несколько симлинков на другие ресурсы, необходимых для нормальной работы скриптов. Может быть это плохой стиль, может быть нет, но это так. Реалсинк, разумеется, эти симлинки трёт, поскольку на домашней машине их нет. Соответственно, было бы здорово, если бы в конфиге можно было указать пути на сервере, которые игнорируются при репликации.
Замечательная программа, вот только мне не хватает все же возможности получать измененные данные со стороны сервера, вариант исключения определенных папок из синхронизации не устраивает.
Вы уверены, что вам это действительно нужно? В статье про это есть, в комментариях про это обсуждали, плюс в README realsync-а описаны подробности, почему это может быть НЕ нужно на самом деле (хотя кажется, что нужно).
Постоянная обратная синхронизация действительно пожалуй не нужна, но все же часто требуется сделать upload папки с обновившимися скриптами.
А вы читали выше перечисленное? Откуда они возьмутся, эти обновившиеся скрипты, если вы все правки делаете на локальной машине?
Это если отсутствует система обновлений, или если не создаются новые файлы в процессе работы программы, не всегда есть возможность их локализовать в одном месте.
Скрипты не скрипты, а вот логи, например, иногда хочется посмотреть никуда с IDE не переключаясь. Или файлы зааплоаженные. То есть то, что приложение создало. Попробовал из другой консоли rsync обратный сделать — сработало, но как-то есть опаска, что в некоторых ситуациях может себя неожидаемо с первого взгляда повести.
А ведь можно шарить папку на машине разработчика и монтировать ее на сервере. Зачем сторонние тулзы? Неужели быстрее?
Обратный шаринг — идея остроумная, и я ее тоже в свое время пробовал. К сожалению, когда вы сидите не рядом с сервером, задержки все равно оказываются велики, но на этот раз все даже хуже — если у вас в проекте при запуске страницы подключается, например, 30 PHP-файлов с удаленного ноутбука, начинаются жуткие тормоза. Не говоря уж о проблемах при нестабильности связи.
Было бы очень удобно добавить следующие функции:
- Настройка репликации. Например, не реплицировать определенный папки в дереве. К примеру папку кэша. Или файлы по маске. К примеру, svn/git.
- Синхранизация с сервером. Единовременное скачивание с сервера всего дерева файлов на клиент по запросу пользователя. Т.е. репликация в обратную сторону с сохранением фильтров репликации. К примеру, программист ведет разработку с разных компов. Дома и с работы. Поработав на работе, он приходит домой, нажимает кнопку синхранизации и получает у себя на компе свежее дерево файлов с которым можно работать
1. Можно же настраивать исключения, см. конфиг-файл .realsync (директива exclude). Кстати, svn, git, cvs и еще много всего там по умолчанию уже в исключениях.
2. Это не задача realsync, про это есть в англоязычной документации рассуждения. Для поддержания идентичности файлах на нескольких рабочих машинах используйте, например, dropbox или систему контроля версий.
2. Это не задача realsync, про это есть в англоязычной документации рассуждения. Для поддержания идентичности файлах на нескольких рабочих машинах используйте, например, dropbox или систему контроля версий.
Есть такой нюанс (баг?), что когда сохраняешь под тем же именем картинку (проще говоря — редактируешь), то realsync её сразу не подхватывает — помогает переименовать её во что-то, а потом вернуть обратно. Это всё-таки баг или техническая особенность?
realsync делает синхронизацию раза в 2-3 быстрей нежели phpstorm. но вот usability issue:
— я работаю в macos x
— запускаю ide
— запускаю консоль и realsync <app_path>
вопрос: есть ли способ приучить запускаться (и останавливаться при закрытии) realsync вместе с phpstorm на определенном проекте?
— я работаю в macos x
— запускаю ide
— запускаю консоль и realsync <app_path>
вопрос: есть ли способ приучить запускаться (и останавливаться при закрытии) realsync вместе с phpstorm на определенном проекте?
в macos 90% проца сжирает. У вас как?
Коммент мой конечно очень запоздал, но такая же проблема. Если вдруг решили — откликнитесь?
Пришлите, пожалуйста, скриншот top, где видно, какой именно процесс сжирает, а также что при этом пишется в консоли realsync. Не должно такого быть. (А кстати, вы сделали chmod +x на файле notify, как пишется в инструкции по установке?)
Рад быстрому ответу:) Вот скриншот: d.pr/i/9kak
в консоли: d.pr/i/UEIv
notify исполняемым сделал. единственное в чем мог ошибиться — я его в дирректорию с realsync поместил
в консоли: d.pr/i/UEIv
notify исполняемым сделал. единственное в чем мог ошибиться — я его в дирректорию с realsync поместил
Ну его надо было оставить там, где он лежал, ./bin/darwin/notify — иначе realsync его не найдет просто. Там вот такой код:
Он вообще работает в фоне у вас сейчас?
sub get_notify_daemon_cmd {
my $bin = $BINDIR . '/bin/darwin/notify';
return if !-f $bin;
die "ATTENTION! You must perform:\n chmod +x '$bin'\nto work with RealSync. Please do it now.\n" if !-x $bin;
my $cmd = '"' . $bin . '" "' . main::cfg("local") . '"';
return $cmd;
}
Он вообще работает в фоне у вас сейчас?
Да. Вам нужно запускать его так: perl /Users/nikolay/Downloads/dklab_realsync/realsync /path/to/project
Тогда у вас должен появиться процесс notify.
Тогда у вас должен появиться процесс notify.
А можно сделать так что-бы он при старте не затирал на сервере файлы без моего согласия? и не синхронизировал прямо таки все.
Попытаюсь обьяснить, у меня много проектов, в каждом по несколько тысяч папок, синхронизировать все каждый раз долго, и не всегда нужно.
Еще такой момент, не все файлы появляються на сервере с локальной машины, некоторые загружаються через веб-интерфейс, некоторые создаються скриптами, запихивать все в exclude не выход. Так же остаеться велика вероятность что при старте realsync потрет что то важное.
Итого:
1 — Хотелось бы делать синхронизацю конкретного проекта по требованию, но при этом что бы мониторинг был над всеми проектами, и быстро стартовать без синхронизации.
2 — Перед тем как что то удалить, спросить моего мнения, и хотелось бы как то запретить удаление в некоторых папках например, но разрешить репликацию.
Попытаюсь обьяснить, у меня много проектов, в каждом по несколько тысяч папок, синхронизировать все каждый раз долго, и не всегда нужно.
Еще такой момент, не все файлы появляються на сервере с локальной машины, некоторые загружаються через веб-интерфейс, некоторые создаються скриптами, запихивать все в exclude не выход. Так же остаеться велика вероятность что при старте realsync потрет что то важное.
Итого:
1 — Хотелось бы делать синхронизацю конкретного проекта по требованию, но при этом что бы мониторинг был над всеми проектами, и быстро стартовать без синхронизации.
2 — Перед тем как что то удалить, спросить моего мнения, и хотелось бы как то запретить удаление в некоторых папках например, но разрешить репликацию.
>> При этом используется SSH-соединение
А, есть ли возможность использовать не SSH, а к примеру FTP для закачки?
А, есть ли возможность использовать не SSH, а к примеру FTP для закачки?
Вероятно это не связано с RealSync, но так как я не администратор — не могу пока найти решение проблемы, может подскажете:
Что получается:
Файлы синхронизируются, т.е. по крайней мере попадают в директорию, но в консоли такая ошибка (в цикле):
Если поставить other — rwx — не помогает
Помогает только если поставить директории owner — fog, но не хотелось бы этого делать, т.к. хотелось бы добавить и других пользователей.
Как бы это исправить?
- Для хранения сайтов я на сервере создал от пользователя root директорию /www/project
- Создал группу webdev, добавил в неё пользователя fog, от которого хожу через RealSync.
- Поставил директориям (www и /www/project) группу webdev и группе дал права rwx — clip2net.com/s/5oZ1uI
Что получается:
Файлы синхронизируются, т.е. по крайней мере попадают в директорию, но в консоли такая ошибка (в цикле):
*****
rsync: failed to set times on "/wx/test/.": Operation not permitted (1)
sent 4267 bytes received 55 bytes 2881.33 bytes/sec total size is 688926 speedup is 159.40
rsync error: some files/attrs were not transferred (see previous errors) (code 23) at main.c(1039) [sender=3.0.6]
[11:25:55] Rsync exited with code 23, retrying...
[11:25:55] Detected changes in more than 10 objects. Running rsync: it's faster.
sending incremental file list
./
rsync: failed to set times on "/wx/test/.": Operation not permitted (1)
sent 4267 bytes received 55 bytes 2881.33 bytes/sec total size is 688926 speedup is 159.40
rsync error: some files/attrs were not transferred (see previous errors) (code 23) at main.c(1039) [sender=3.0.6]
[11:25:56] Rsync exited with code 23, retrying...
[11:25:56] Detected changes in more than 10 objects. Running rsync: it's faster.
sending incremental file list
./
rsync: failed to set times on "/wx/test/.": Operation not permitted (1)
sent 4267 bytes received 55 bytes 2881.33 bytes/sec total size is 688926 speedup is 159.40
rsync error: some files/attrs were not transferred (see previous errors) (code 23) at main.c(1039) [sender=3.0.6]
[11:25:57] Rsync exited with code 23, retrying...
[11:25:57] Detected changes in more than 10 objects. Running rsync: it's faster.
*****Если поставить other — rwx — не помогает
Помогает только если поставить директории owner — fog, но не хотелось бы этого делать, т.к. хотелось бы добавить и других пользователей.
Как бы это исправить?
Более года пользовался этой замечательной утилитой и столкнулся с проблемой после установки на рабочий компьютер Криптопро, его плагина для браузеров и Рутокена. Проблему описал в issue github.com/DmitryKoterov/dklab_realsync/issues/26
Зарегистрируйтесь на Хабре, чтобы оставить комментарий
RealSync — односторонняя синхронизация исходников в реальном времени для веб-разработчиков