Апгрейд серверной файлопомойки
i
+impulse+
Добрый день, камрады!
Имеется файлопомойка на 4х Saegate ST1000DM003 на контроллере Intel в RAID10.
В связи с растущими потребностями этой шары уже стало сильно не хватать.
Как лучше поступить:
Разобрать нынешний рейд, заменить диски на 4шт по 4Тб и собрать новый рейд, молясь, что всё получится, или купить пару 8Тб и сделать основную шару на 1 диске, второй - под бэкапы по ночам в среду
Сильно ли будет заметна разница между рэйдом и 1 диском. Сеть - местами гигабитная, работает по 40-60 человек одновременно. В основном документики, но иногда и фотографии/видео перекидывают.
Есть мнение, что рэйд умеет неплохо кешировать и вообще не зря умные дяди зарплаты получают, значит должен быть быстрее, но критично ли это в моём случае - большой вопрос... Линейные чтение-запись на мой взгляд неплохо так шагнули с момента выхода имеющихся дисков, что и 1 новый диск переплюнет пару...
И да - если всё пойдёт не лучшим образом, сумеет ли контроллер собрать обратно рейд из 1 терабайтников? Есть у кого опыт работы?
Основной головняк в том, что на этом рейде крутится контроллер домена, дискам по 5-7 лет и я вообще удивлён, что они ещё живы. Работают 24/7.
Ещё вариант - собрать рейд на контроллере матплаты, но имхо работать будет не так хорошо, как отдельное устройство.
Материнка Supermicro X9DR3-F
ещё есть пара серваков: Intel S5000VSA и Intel S2600CP. первый - совсем унылый, ибо думаю, что более 2Тб он не умеет, второй - сильно загружен, но если надо будет - можно перенести на супермикро часть виртуалок... не критично...
минусистам привет.
Было бы неплохо призвать в тему идеафикса
Имеется файлопомойка на 4х Saegate ST1000DM003 на контроллере Intel в RAID10.
В связи с растущими потребностями этой шары уже стало сильно не хватать.
Как лучше поступить:
Разобрать нынешний рейд, заменить диски на 4шт по 4Тб и собрать новый рейд, молясь, что всё получится, или купить пару 8Тб и сделать основную шару на 1 диске, второй - под бэкапы по ночам в среду
Сильно ли будет заметна разница между рэйдом и 1 диском. Сеть - местами гигабитная, работает по 40-60 человек одновременно. В основном документики, но иногда и фотографии/видео перекидывают.
Есть мнение, что рэйд умеет неплохо кешировать и вообще не зря умные дяди зарплаты получают, значит должен быть быстрее, но критично ли это в моём случае - большой вопрос... Линейные чтение-запись на мой взгляд неплохо так шагнули с момента выхода имеющихся дисков, что и 1 новый диск переплюнет пару...
И да - если всё пойдёт не лучшим образом, сумеет ли контроллер собрать обратно рейд из 1 терабайтников? Есть у кого опыт работы?
Основной головняк в том, что на этом рейде крутится контроллер домена, дискам по 5-7 лет и я вообще удивлён, что они ещё живы. Работают 24/7.
Ещё вариант - собрать рейд на контроллере матплаты, но имхо работать будет не так хорошо, как отдельное устройство.
Материнка Supermicro X9DR3-F
ещё есть пара серваков: Intel S5000VSA и Intel S2600CP. первый - совсем унылый, ибо думаю, что более 2Тб он не умеет, второй - сильно загружен, но если надо будет - можно перенести на супермикро часть виртуалок... не критично...
минусистам привет.
Было бы неплохо призвать в тему идеафикса
s
smol
на мой взгляд неплохо так шагнули с момента выхода имеющихся дисков, что и 1 новый диск переплюнет пару...
Наивняк - это птица, сидящая на иве.
S
Shtasi
ИМХО - кому нужна скорость - переползли на ССД. старый-добрый НЖМД это сейчас именно файло-помойка Линейные чтение-запись на мой взгляд неплохо так шагнули с момента выхода имеющихся дисков, что и 1 новый диск переплюнет пару...
главное - регулярно молиться чтобы первый винт не сдох во вторник вечером
купить пару 8Тб и сделать основную шару на 1 диске, второй - под бэкапы по ночам в среду
i
+impulse+
А разве при повышении плотности записи не возрастает скорость?
Не подписанный ST8000VE0004
Фотография из Фотогалереи на E1.ru
Фотография из Фотогалереи на E1.ru
Я и спрашиваю тех, кто реально сталкивался - как лучше сделать.
Хотя любая тема на форуме в большинстве своём разговор самого с собой Остальные участники охотно навесят минусов, накидают на вентилятор и уйдут довольные
Так что особо не питаю надежд на форум...
главное - регулярно молиться чтобы первый винт не сдох во вторник вечером
Бекапы обычно делаю через день... Не ежедневно по причине того, что периодически ловят шифровальщиков, и если бекап затрётся зашифрованными файлами - будет ад и израиль
Касперский шифровальщиков не замечает, RestrictRun некоторым не получается настроить ввиду специфики работы...
f
fill1962
Бэкапы делаются по четным и не четным дням. Т.е. их два.
i
+impulse+
Бэкапы делаются по четным и не четным дням. Т.е. их два.
Бекап файлопомойки?
Через планировщик windows указываем когда запускаться - четные/нечетные, в конкретный день недели, после события и т.п.
Планировщик запускает bat скрипт, куда зашиты команды...
На самом деле там довольно много интересного. Что-то бекапится в архив 7z, что-то просто файлами через robocopy или freefilesync
Б
Бухалов™
С точки зрения производительности случайного доступа конечно лучше 4х4Тб. С точки зрения линейного чтения/записи - без разницы. Если рассмотреть экономическую составляющую - то скорее всего будет лучше 2х8Тб.
M
Miiiix
Всем привет!
<a href=https://seo-favorite.ru/>seo продвижение в Санкт-Петербурге</a>
Если ты из Питера и у тебя есть свой сайт, то тебе точно нужно перейти по этой ссылке <a href=https://seo-favorite.ru/>seo продвижение в Санкт-Петербурге</a>
Ю
-=ЮрсаН=-
На самом деле там довольно много интересного. Что-то бекапится в архив 7z, что-то просто файлами через robocopy или freefilesync
Я Вам как доктор посоветую, против всяких шифровальщиков это вас не спасет.
А вот если будете цеплять как айскази и бекапить туда а после отмонтировать - то вот это тема.
По КПД. Если помойка активная - лучше 4 по 1Тб в 0+1. Если пофиг то 8 в зеркало.
T
TorukMakto
Сильно ли будет заметна разница между рэйдом и 1 диском
Я думаю одиночный диск будет быстрее всего вашего fakeRADE в любой его комбинации И да, не путать с fake с fuck ...
Есть мнение, что рэйд умеет неплохо
но не fake
В основном документики,
Сложно мне представить, что у вас там за документики, ибо судя по приведенным цифрам там на каждого более 100 гигов места, на КАЖДОГО.
Ю
-=ЮрсаН=-
Сложно мне представить, что у вас там за документики, ибо судя по приведенным цифрам там на каждого более 100 гигов места, на КАЖДОГО
Каждая баба должна выложить +100500 одинаковых фото с корпаратива.
i
+impulse+
Сложно мне представить, что у вас там за документики, ибо судя по приведенным цифрам там на каждого более 100 гигов места, на КАЖДОГО.
Основная масса объёма - обучающие фильмы/диски/презенташки. Они нужны не каждый день, но место занимают.
Ежедневно редактируются текстовые документы - word, таблицы excel, презентации...
Учреждение - образовательное.
У многих в личных папках "любимые фоточки с выпускных".
У меня лежат образы винды, драйвера на весь зоопарк оргтехники.
Много софта для ЕГЭ
Так что вопрос объёма - дело десятое, вопрос производительности остаётся открытым...
А вот если будете цеплять как айскази и бекапить туда а после отмонтировать - то вот это тема.
Интересный диагноз, а почему же такое не спасёт, если зараженный шифровальщиком компьютер - это не тот, на котором лежит шара.
Шифровальщики шифруют примонтированные диски, а это - только общая шара и личная папка, не считая диска C: и флешек
По КПД. Если помойка активная - лучше 4 по 1Тб в 0+1. Если пофиг то 8 в зеркало.
дак сейчас и есть 4 по 1Тб 0+1 - это 2Тб шары, чего уже не хватает, да и диски старые - поменять хочу, пока всё не рухнуло...
I
IdeaFix
Было бы неплохо призвать в тему идеафикса
Вот вапще зря.... он в крайности впадает.... то начинает рекламмировать старые адаптеки по 5 копеек за пучок, то норовит на ком-нибудь испытать ZFS на каком-нибудт хитром Oracle F20...
I
IdeaFix
Ну а теперь, серьезно...
Сейчас есть полупрограммная десятка видимо с SMB шарой под Windows и максимум GBE линком. Предположить производительность такого решения не сложно и откровений тут быть не должно. Особенно, если фирмвари свежие и msm/rst рекомендованные.
Хочется видимо и объём увеличить и скорость как минимум не потерять.... немного не хватает вводных, либо я не внимательно читал, ног давайте начнем фантазировать! И тут же прервём фантазии.... В указанной микре стоит по сути "обычный южник" с 2*SATA3+4*SATA2 и... Intel ESRT2, который по некоторым данным является LSI1064/1068 в зависимости от количества портов. Могу ошибаться, но если я всё же угадал HPY чип, на котором реализован SAS HBA, то получается что ни поддержки 4TB HDD ни аппаратного XORтам и не ночевало.
Вывод первый - надо уточнить в мануалах, умеет ли данная реализация Intel ESRT2 на данной плате большие SATA диски.
Продолжаем мечтать... у нас Windows.... у нас установлены ОБА процессора и нет проблем с PCI-E. Что мы можем сделать? Мы можем сделать программный ред средствами Windows или средствами LSI IR фирмвари и драйвера. Вплоть до пятерки. Запись и 4К блоки у пятерки будут так себе. В остальном это вполне равносильные решения.
Соответственно, если покупать только диски и провода, надо тогда свериться с HCL, а потом подкинуть монетку чтобы решить какой из программный рейдов юзать.
Вариант второй - покупать (ведь в госконору купить по 5 копеек за пучок на АЛИ не вариант?) что-то типа ASR6805 и выше. Есть способы уложиться тысячи в две-три за 6805 с проводами, флешевым модулем и суперкапом. Тогда всё просто - пятерка на четырех дисках и норм.
Если покупать за фуллпрайс - это конечно не вариант, но... я умудрялся в университет покупать на али и списывать деньги. Тут вопрос только в лояльности и доверии руководства.
Вариант третий - будь мужиком, сделай нормальную NFS полку!
Что касается Intel S5000VSA, я бы не списывал его раньше времени. Если там реально 8 тредов, много-много фбдиммов и он в правильном корпусе, который позволит установить две корзины (на 4 и 6 дисков с экспандеами), там можно собрать очень веселую UFS/ZFS полку. Расшарить её винде по NFS и видеть её как локальную ФС. Такое решение на продакшен я бы не рекомендовал, без опыта и понимания творимого, но в качестве чумного барака или быстрого/дешевого датастора на случай клевка жаренного петуха, такой вариант можно рассматривать.
И еще один момент.... raid с cache+bbu как бы не кэширует данные целенаправленно. По хорошему, всё это нужно чтобы хоть как-то улучшить запись у 5-6 и при этом ОТКЛЮЧИТЬ кеш винтов. Да, в пределах объема кеша контроллера в кристалдискмарке всё будет круто, но не более. Не ждите каких-то чудес от 512-1024mb каши на борту контроллера.
Сейчас есть полупрограммная десятка видимо с SMB шарой под Windows и максимум GBE линком. Предположить производительность такого решения не сложно и откровений тут быть не должно. Особенно, если фирмвари свежие и msm/rst рекомендованные.
Хочется видимо и объём увеличить и скорость как минимум не потерять.... немного не хватает вводных, либо я не внимательно читал, ног давайте начнем фантазировать! И тут же прервём фантазии.... В указанной микре стоит по сути "обычный южник" с 2*SATA3+4*SATA2 и... Intel ESRT2, который по некоторым данным является LSI1064/1068 в зависимости от количества портов. Могу ошибаться, но если я всё же угадал HPY чип, на котором реализован SAS HBA, то получается что ни поддержки 4TB HDD ни аппаратного XORтам и не ночевало.
Вывод первый - надо уточнить в мануалах, умеет ли данная реализация Intel ESRT2 на данной плате большие SATA диски.
Продолжаем мечтать... у нас Windows.... у нас установлены ОБА процессора и нет проблем с PCI-E. Что мы можем сделать? Мы можем сделать программный ред средствами Windows или средствами LSI IR фирмвари и драйвера. Вплоть до пятерки. Запись и 4К блоки у пятерки будут так себе. В остальном это вполне равносильные решения.
Соответственно, если покупать только диски и провода, надо тогда свериться с HCL, а потом подкинуть монетку чтобы решить какой из программный рейдов юзать.
Вариант второй - покупать (ведь в госконору купить по 5 копеек за пучок на АЛИ не вариант?) что-то типа ASR6805 и выше. Есть способы уложиться тысячи в две-три за 6805 с проводами, флешевым модулем и суперкапом. Тогда всё просто - пятерка на четырех дисках и норм.
Если покупать за фуллпрайс - это конечно не вариант, но... я умудрялся в университет покупать на али и списывать деньги. Тут вопрос только в лояльности и доверии руководства.
Вариант третий - будь мужиком, сделай нормальную NFS полку!
Что касается Intel S5000VSA, я бы не списывал его раньше времени. Если там реально 8 тредов, много-много фбдиммов и он в правильном корпусе, который позволит установить две корзины (на 4 и 6 дисков с экспандеами), там можно собрать очень веселую UFS/ZFS полку. Расшарить её винде по NFS и видеть её как локальную ФС. Такое решение на продакшен я бы не рекомендовал, без опыта и понимания творимого, но в качестве чумного барака или быстрого/дешевого датастора на случай клевка жаренного петуха, такой вариант можно рассматривать.
И еще один момент.... raid с cache+bbu как бы не кэширует данные целенаправленно. По хорошему, всё это нужно чтобы хоть как-то улучшить запись у 5-6 и при этом ОТКЛЮЧИТЬ кеш винтов. Да, в пределах объема кеша контроллера в кристалдискмарке всё будет круто, но не более. Не ждите каких-то чудес от 512-1024mb каши на борту контроллера.
T
TorukMakto
С таким подходом вам никогда места не хватит. Начните с удаления личного говна - личному не место в рабочем, ага.
i
+impulse+
на протяжении 2х лет подхожу к людям и настоятельно прошу удалить личный хлам, доходило до служебок моему руководству, что место кончается по причине обилия фоточек.
Заканчивалось всё только разговорами - ну у нас же там есть ещё немного места. Почисти и будет хватать (с).
На вопрос - почему личные фото-видео-сериальчики(!) лежат в личных папках - разводят руками
Некоторые убирают быстро, некоторые - игнорируют.
Будет критично - начнутся репрессии видать.
Но по последним данным мониторинга там много места занимают папки литераторов и учителей искусства: картины-экранизации произведений и т.п.
T
TorukMakto
некоторые - игнорируют.
Странные у вас отношения с пользователями
Не пробовали привлекать административный ресурс? - обычно предложение двух вариантов на выбор руководству типа "либо нужно кучу денег на обновление хардвари - либо настучать пользователям по голове за неправомерное использование места и придать ослушавшихся серверной анафеме типа readonly" весьма способствует, а главное развязывает руки на дальнейшие экзекуции.
[Сообщение изменено пользователем 27.08.2019 01:28]
I
IdeaFix
картины-экранизации произведений и т.п.
Разок по 146-й провести физика и всё будет в норме.... с сериальчиками кстати та же фигня.
Ну или надо освоить NTFS'ные квоты.
m
master099
Я думаю одиночный диск будет быстрее всего вашего fakeRADE в любой его комбинации
современный одиночный будет быстрее, но не быстрее 10 рейда из современных дисков.
зеркало будет медленнее одиночного диска
я бы поставил 1 диск и копировал его по ночам.
раз это файлоПОМОЙКА, то работа 24-7 не нужна, народ сможет пережить пару(3-4?) часов восстановления в случае чего.
и да, скорость копирования на диск все равно ограничена 1 Гигабитом сети.
а рейд после разборки не уверен, что можно собрать. если отключить диски, вытащить контроллер, то, возможно, но если собрать на контроллере новый рейд, а потом решить подключить старый, то, так просто не получится.
m
master099
Заканчивалось всё только разговорами - ну у нас же там есть ещё немного места. Почисти и будет хватать (с).
раз в полгода переношу хлам на другой диск. по дате.
если кто вспомнит в течении года, то отдаю, а не вспомнит, до свидания
m
master099
Шифровальщики шифруют примонтированные диски
неа
сканируют сеть и все что в доступе - шифруют
I
IdeaFix
зеркало будет медленнее одиночного диска
Чередующееся чтение с зеркала? Не, не слышали! :-)
Вот достаточно тпичная ситуация для зеркала на хорошем контроллере:
Cache:
Surface:
Т.е. SEQ READ у зеркала значительно выше чем у одиночного диска. В идеале - в два раза.
У хорошего страйпа мирроров дела в этом плане получше, у миррора страйпов - еще лучше. Но, это арифметика...
[Сообщение изменено пользователем 29.08.2019 23:00]
T
TorukMakto
У хорошего страйпа мирроров дела в этом плане получше, у миррора страйпов - еще лучше. Но, это арифметика...
Только твоя арифметика не особу нужна для fakeraid ....
I
IdeaFix
Т.е. Вы утверждаете что LSI с XOR (коим является интел у ТС) не читает распределенно со всех дисков миррора? Если да - Ваше утверждение ложно.
Ну а чтобы не было заявлений типа "ололо-пыщ-пыщ, я не пустобрёх, просто ТС не сказал какой у него контроллер", покажите мне пожалуйста в HCL у вмвари списочек факерейдов поддерживаемых, десятку на которых вмварь импортирует как один датастор :-) Ну или признайтесь что Вы слабы в предмете...
Я же пока сниму тесты зеркала и десятки под виндой на ICH10r, а ну как окажется, что Вы совсем слабы в предмете :-)
[Сообщение изменено пользователем 30.08.2019 12:35]
I
IdeaFix
И так.... ASUS P5E-VM DO (Q35/ICH9R/DO), биос крайний. Контроллер в режиме AHCI, драйвер 10.8.0.1003.
Три одинаковых диска WD2500AAKS
WIN7 X64, грязненькая....
Опыт номер раз - а не собрать ли нам зеркальный том средствами Windows? Ведь факерейдуквадрате просто!
https://sun9-20.userapi.com/c850424/v850424193/19b... - консоль.
Зеркало:
Отдельный диск:
Конечно не в два раза, но и не медленнее зеркало, а чуть-чуть быстрее :-)
Если система просто запустится в raid режиме - дам тесты с OPROM'ного fakeraid... если нет, переставлять заради этого не буду.
Три одинаковых диска WD2500AAKS
WIN7 X64, грязненькая....
Опыт номер раз - а не собрать ли нам зеркальный том средствами Windows? Ведь факерейдуквадрате просто!
https://sun9-20.userapi.com/c850424/v850424193/19b... - консоль.
Зеркало:
Отдельный диск:
Конечно не в два раза, но и не медленнее зеркало, а чуть-чуть быстрее :-)
Если система просто запустится в raid режиме - дам тесты с OPROM'ного fakeraid... если нет, переставлять заради этого не буду.
Авторизуйтесь, чтобы принять участие в дискуссии.