Пузомерки(тИЦ, ПР, ДМОЗ, ЯК етс) тоже «стучат» не плохо и спустя месяц показывают в выдаче страницы на которые вообще ни одна ссылка не ведёт в сети и ни в каких роботах не упоминается. Банальный текстовик в папке сайта.
То есть любой аддон в браузере, с «фичами» от поисковиков (даже сторонний), может сообщить поисковику о странице.
Умиляют порой заявления, об взломах без вредительства, что нанесён ущерб не на один миллион долларов. Когда ущерб это тупо латание своих дыр.
Когда простой компании за вредительство или потеря клиентов за слитие баз, тогда ещё разумно. Но ни когда свои косяки выявленные «добрым» хакером, пробуют на его шею возложить ИТ отделы.
Просто именно хакеров, ловят мало. Так же как и кардеров. А всяких скрипткиди и дропов, ловят часто. Но на этом «горячую» новость не сделать. Ведь новости в основном для кого пишут и кем? Точно не для разбирающихся в теме и не спецами. На них много рейтинга не сделать для обычного издания общего профиля. Вот и вешают на скрипткиди «хакер». А на дропа «кардер» или чаще так же «хакер».
Но это лучше чем когда официальные государственные лица, крупных структур, заявляют об «электромагнитной атаки на сайт хакерами». :-)
Вопрос может не совсем в тему. Но колебаюсь сейчас взять Grab или искать(писать) аналоги.
Так вот вопрос:
Есть ли замеры по производительности/нагрузке? Особенно когда нужно грабить большой объём страниц и большой объём данных на каждой странице.
Ну и так же каковы пожелания по аппаратной составляющей сервера, на котором всё это будет крутится (под большие объёмы, постоянного граббинга).
Вдогонку. Помните тему с ex.ua? Файловым хостингом. Что его закрывали на Украине.
А потом несколько ребят случайно нашли открытый ФТП в интернет, с папкой Install на сервере МВД Украины. Так тоже в новостях писали некоторые "Хакеры взломали сайт МВД и выложили все данные оттуда в Интернете(ФОТО)".
Проблема что не всегда люди пишущие, понимают то о чём пишут. Ну или стараются «приукрасить», чтобы поддать жару новости и быстрее выдвинуть её в топ.
Не нервничайте.
Администратор сайта это кто? Первый раз просто слышу. Да есть всякие подобии контент менеджеров с правами, которых то администраторами то модераторами называют. Но не более.
Про ваш перечень обязанностей да, верно, это можно на сисадмина по вешать. Но не более. Появилась вирусня в файлах движка — перезалил из бэкапа.
Прошёл дефейс через файлы — залил из бэкапа.
Упала база данных в ошибки, поднял из бэкапа? А данные устарели! Нужно восстановить повреждённую.
Нашлась критическая ошибка в работе служб сайта, залил из бэкапа?
Необходимо изменить функционал сайта, ибо выяснилось что при добавлении 1001 транзакции, её не видно. Или в минус уходит баланс. Залил из бэкапа?
С ростом посещаемости, начал сайт тормозить, тупить. Залил из бэкапа?
Найдена критическая уязвимость в обработке массивов пхп/питоне/асп/… Залил из бэкапа?
Я говорю что не сисадминское дело поддерживать серьёзный сайт. А отдельный человек и именно программист, широкого профиля. Который и интерпретатор на сервере поднять может, и кэш поднят, да подружить с цмс. И в любой момент пофиксить возникшую ошибку в коде.
В вашем же варианте, этим занимается полусисадмин отдельно нанятый для сайта. Или штатный сисадмин. При этом при возникновении серьёзных проблем, обращается к левому кодеру/компании. А это время и деньги и тот самый «хороший имидж банка».
В данном случае сисадмин выступает в роли вспомогательного инструмента всё таки. Или дополнительного. Но никак не единственного.
Просто, ну нашёл что есть какая-то там xss уязвимость. Сисадмин должен в сорцы лезть и её закрывать?
А почему тогда не уборщица Мария Ивановна?
Вы не путайте профессии, как некоторые работодатели. Вэб-программист и сисадмин это разные профессии. Даже вэбкодеры могут делиться на всякие асп, питон, пхп etc.
Как человек не разбирающийся в устройстве и работе сайта, может его поддерживать и «ремонтировать»?
Про «хорошую зарплату» вы загнули немножечко. Так как правило, если нормально не относятся к вэбу, то это пущено на самотёк, в плоть до студентов на пол ставки берут, за беляш и коллу.
То есть любой аддон в браузере, с «фичами» от поисковиков (даже сторонний), может сообщить поисковику о странице.
Домены третьего уровня прекрасно разносятся на разные банки(ИП).
Когда простой компании за вредительство или потеря клиентов за слитие баз, тогда ещё разумно. Но ни когда свои косяки выявленные «добрым» хакером, пробуют на его шею возложить ИТ отделы.
Но это лучше чем когда официальные государственные лица, крупных структур, заявляют об «электромагнитной атаки на сайт хакерами». :-)
Так вот вопрос:
Есть ли замеры по производительности/нагрузке? Особенно когда нужно грабить большой объём страниц и большой объём данных на каждой странице.
Ну и так же каковы пожелания по аппаратной составляющей сервера, на котором всё это будет крутится (под большие объёмы, постоянного граббинга).
Грузится кое как.
img
А потом несколько ребят случайно нашли открытый ФТП в интернет, с папкой Install на сервере МВД Украины. Так тоже в новостях писали некоторые "Хакеры взломали сайт МВД и выложили все данные оттуда в Интернете(ФОТО)".
Проблема что не всегда люди пишущие, понимают то о чём пишут. Ну или стараются «приукрасить», чтобы поддать жару новости и быстрее выдвинуть её в топ.
Администратор сайта это кто? Первый раз просто слышу. Да есть всякие подобии контент менеджеров с правами, которых то администраторами то модераторами называют. Но не более.
Про ваш перечень обязанностей да, верно, это можно на сисадмина по вешать. Но не более. Появилась вирусня в файлах движка — перезалил из бэкапа.
Прошёл дефейс через файлы — залил из бэкапа.
Упала база данных в ошибки, поднял из бэкапа? А данные устарели! Нужно восстановить повреждённую.
Нашлась критическая ошибка в работе служб сайта, залил из бэкапа?
Необходимо изменить функционал сайта, ибо выяснилось что при добавлении 1001 транзакции, её не видно. Или в минус уходит баланс. Залил из бэкапа?
С ростом посещаемости, начал сайт тормозить, тупить. Залил из бэкапа?
Найдена критическая уязвимость в обработке массивов пхп/питоне/асп/… Залил из бэкапа?
Я говорю что не сисадминское дело поддерживать серьёзный сайт. А отдельный человек и именно программист, широкого профиля. Который и интерпретатор на сервере поднять может, и кэш поднят, да подружить с цмс. И в любой момент пофиксить возникшую ошибку в коде.
В вашем же варианте, этим занимается полусисадмин отдельно нанятый для сайта. Или штатный сисадмин. При этом при возникновении серьёзных проблем, обращается к левому кодеру/компании. А это время и деньги и тот самый «хороший имидж банка».
:-)
Просто, ну нашёл что есть какая-то там xss уязвимость. Сисадмин должен в сорцы лезть и её закрывать?
Вы не путайте профессии, как некоторые работодатели. Вэб-программист и сисадмин это разные профессии. Даже вэбкодеры могут делиться на всякие асп, питон, пхп etc.
Как человек не разбирающийся в устройстве и работе сайта, может его поддерживать и «ремонтировать»?