[solved ]не заводится ISCSI target

поставил iscsitarget-9999.ebuild (так как стабильные пакеты ставятся на ядро <3.6 )
уперся в sustemd нету .service а писать как обычно его как то стремно, вот из-за этого

#!/sbin/runscript
# Copyright 1999-2010 Gentoo Technologies, Inc.
# Distributed under the terms of the GNU General Public License, v2 or later
# $Header: /var/cvsroot/gentoo-x86/sys-block/iscsitarget/files/ietd-init.d-2,v 1.2 2010/12/15 11:50:05 fauli Exp $

MEM_SIZE=1048576
DAEMON=/usr/libexec/ietd
CONFIG_FILE=/etc/ietd.conf
PID_FILE=/var/run/ietd.pid
NAME="iSCSI Enterprise Target"

ARGS=""
[ -n "$USER" ] && ARGS="${ARGS} --uid=${USER}"
[ -n "$GROUP" ] && ARGS="${ARGS} --gid=${GROUP}"
[ -n "$ISNS" ] && ARGS="${ARGS} --isns=${ISNS}"
[ -n "$PORT" ] && ARGS="${ARGS} --port=${PORT}"
[ -n "$ADDRESS" ] && ARGS="${ARGS} --address=${ADDRESS}"
[ -n "$DEBUGLEVEL" ] && ARGS="${ARGS} --debug=${DEBUGLEVEL}"

depend() {
	use net
	after modules
}
checkconfig() {
	if [ ! -f $CONFIG_FILE ]; then
		eerror "Config file $CONFIG_FILE does not exist!"
		return 1
	fi
	if [ -z "$DISABLE_MEMORY_WARNINGS" ]; then
		check_memsize
	fi
}

check_memsize() {
	local wr md sysctl_key v k
	for wr in r w; do
		for md in max default; do
			sysctl_key="net.core.${wr}mem_${md}"
			v="$(sysctl -n ${sysctl_key})"
			if [ "${v}" -lt "${MEM_SIZE}" ]; then
				ewarn "$sysctl_key ($v) is lower than recommended ${MEM_SIZE}"
			fi
		done
	done
	for wr in "" r w; do
		sysctl_key="net.ipv4.tcp_${wr}mem"
		set -- $(sysctl -n ${sysctl_key})
		for k in min default max ; do
			if [ "${1}" -lt "${MEM_SIZE}" ]; then
				ewarn "$sysctl_key:$k (${1}) is lower than recommended ${MEM_SIZE}"
			fi
			shift
		done
	done
}

do_modules() {
	msg="$1"
	shift
	modules="$1"
	shift
	opts="$@"
	for m in ${modules}; do
		ebegin "${msg} - ${m}"
		modprobe ${opts} $m
		ret=$?
		eend $ret
		[ $ret -ne 0 ] && return $ret
	done
	return 0
}

start() {
	checkconfig || return 1
	do_modules 'Loading iSCSI-Target modules' 'iscsi_trgt'
	ebegin "Starting ${NAME}"
	start-stop-daemon --start --exec $DAEMON --quiet -- ${ARGS}
	eend $?
}

stop() {
	ebegin "Removing ${NAME} devices"
	# ugly, but ietadm does not allways provides correct exit values
	RETURN="$(ietadm --op delete 2>&1)"
	RETVAL=$?

Погуглили нашел более шустрый таргет (по отчетам кто ставил), попытался поставить из сорцов scst по этому ману http://scst.sourceforge.net/SCST_Gentoo_HOWTO.txt
(только ядро ванильное оставил, и Set Processor type and features -> Preemption Model to 'No Forced Preemption (Server)' оставил десктоп т.к. пк десктоп )
но не ставится, в /etc/init.d/ нету скрипта (

Отсюда вопрос кто ставил на генту что-нибудь из перечисленного, подскажите советом или ссылочкой. Заранее спасибо
ПыСы как прятать тут под сполер код хз

sys-block/tgt Available

sys-block/tgt
Available versions: (~)1.0.19 (~)1.0.22 (~)1.0.24-r1 {fcoe fcp ibmvio infiniband}
Homepage: http://stgt.sourceforge.net
Description: Linux SCSI target framework (tgt)

И будет тебе хорошо

П.С Юзеры поделяи Поца должны страдать

Compute:
Bosch M2.8.1 -> custom Bosch M2.8.3 clone from Russia.
Speed about 260 km,Ram 2 pers.,HDD - 70 kg,210 FLOPS ;)

опа, как они его заныкали)

опа, как они его заныкали) как искать то?
спасибо за ответ сегодня попробую, еще вопрос скаолько примерно нагрузки будет на сеть от iscsi?
у меня там будет лежать лунов на 2 Тб, юзеров 200

у меня там будет лежать лунов

у меня там будет лежать лунов на 2 Тб, юзеров 200

Серьезно? 2 ТБ лунов ? :) гугл что ли ? :)

Вопрос неккоректен . Нагрузка на сеть есть величина комплексная и прогнозируется изходя из параметров хранилки(ок) и технологии передачи , а не кол-ва лунов и юзеров

Compute:
Bosch M2.8.1 -> custom Bosch M2.8.3 clone from Russia.
Speed about 260 km,Ram 2 pers.,HDD - 70 kg,210 FLOPS ;)

slepnoga написал(а):"2 ТБ

"2 ТБ лунов" != "лунов на 2 Тб"

ВопросПост неккоректен... :)

А в принципе

slepnoga написал(а):
...Нагрузка на сеть есть величина комплексная и прогнозируется изходя из параметров хранилки(ок) и технологии передачи , а не кол-ва лунов и юзеров

прав.

Например, на предыдущей работе по iSCSI около 7000 серверов юзали 13 петабайт, правда в пределах одного центра и с 40/10 Гбит/сек сетью.

комрады был не прав, в

комрады был не прав, в терминологии путаюсь т.к. до конца не владею теорией.
Коли тут есть гуру которые разбираются к ним и вопросы:
Планирую собрать вначале 1 (через пол года добавится второй ПК для ДРБД) комплектация: супермикро 745, intel 1155, xeon-e3, 8gb ecc ddr3, Винты сата т.к. на сас бабло не дают
Нужна хранилка заодно SAN ,
1. рейд поднимать через мдадм либо железячный?, я склоняюсь к софтовому т.к. цена за рейд отпугивает и цена на батарейку тоже, Если выйдет из строя то искать либо такой либо более свежий (а это простой)
1.1. Сильная разница по скорости?
1.2. Какие существенные плюсы в аппаратном, при условии что проц в SAN xeon-e3
2.при условии дрбд на какие сетевушки посмотреть? двухготовые от интел кусаются на 700$
2.1. какую нагрузку даст SAN при 5-10 LUN объемом 2-3ТБ
2.2. не упрусь ли я в свичи cisco sg200-50P (все порты по 1000)
3. Какую ФС выбрать? ZFS, btrfs, GlusterFS, ext4 (настроен на ext4 и по верху ЛВМ).

Если не лень то пожалйств по подробнее и конструктивно, я не сталкивался с САН да тем более на никсах, отюда и вопросы т.к. бабло на железо не малое и на грабли наступать времени соовсем не много )
Заранее спасибо за ответы.

У вас пока все равно сферический конь... :)

Вы хотите "...подробнее и конструктивно...", а главное - назначение и нагрузка неясны...
Поэтому только несколько общих рекомендаций:

1. Поскольку вы заботитесь о простое, то лучше ЕХТ4, если ФС не более 16Тб.
2. Зачем вам для сервера свитч с РоЕ?!
3. Если важен НА, то надо 2 свитча и парные сетевые интерфейсы (необязательно 2хпортовые)с бондингом. Я бы поставил 2х10Гб свитча для серверов и воткнул бы в 10Гб GBIC'и пользовательских свитчей. Иначе вы на всех 200 (!) пользователей будете делить 1Гб... :)

оскольку вы заботитесь о

оскольку вы заботитесь о простое, то лучше ЕХТ4, если ФС не более 16Тб.
Мм, FS в разрезе искази ? сферичьненько ;)

Compute:
Bosch M2.8.1 -> custom Bosch M2.8.3 clone from Russia.
Speed about 260 km,Ram 2 pers.,HDD - 70 kg,210 FLOPS ;)

Читайте ТС внимательнее -

Читайте ТС внимательнее - речь идет о локальной ФС до раздачи iSCSI LUN'ов. :)

1. ФС не более 8Тб у меня2.

1. ФС не более 8Тб у меня
2. У меня от него железячные сиптелефоны питаются. т.к. в комплекте нету адаптеров и по практике адаптеры подыхают очень быстро.
3. Да в итоге должен получится HA, у циски этой заявлено все порты по 1000 в том числе и порт СФП, не уверен что СФП+ заведется.

sharp написал(а): ... У меня

sharp написал(а):
... У меня от него железячные сиптелефоны питаются...

Я так и предполагал... так вот и говорю - зачем на сервер-то?! :)
А пихать серверы и юзеров в один свитч - вообще моветон.
Все-в-одном (я тут имею ввиду не только свитчи) - дурацкая попсовая идея, годится только для студентов-экспериментаторов и админов локалхостов, но никак для производственной инфраструктуры, когда один плохой кабель или скачка/закачка больших файлов одним юзером убивает/тормозит все подсистемы. Про безопасность тут я вообще не говорю, поскольку, похоже это не ваш случай... :)

SysA написал(а):sharp

SysA написал(а):
sharp написал(а):
... У меня от него железячные сиптелефоны питаются...

Я так и предполагал... так вот и говорю - зачем на сервер-то?! :)
А пихать серверы и юзеров в один свитч - вообще моветон.
Все-в-одном (я тут имею ввиду не только свитчи) - дурацкая попсовая идея, годится только для студентов-экспериментаторов и админов локалхостов, но никак для производственной инфраструктуры, когда один плохой кабель или скачка/закачка больших файлов одним юзером убивает/тормозит все подсистемы. Про безопасность тут я вообще не говорю, поскольку, похоже это не ваш случай... :)

ок, все стойку затолкаю, по оптике drbd в другое здание сниму (резрв предпологается в соседнем здании, чтобы общей фазы не было)

sharp написал(а): ...по

sharp написал(а):
...по оптике drbd в другое здание сниму...

:D
OK, большой привет оптимистам-теоретикам!.. :)
Удачи!

1. зависит от количества

1. зависит от количества шпинделей - овер8 штук имхо как минимум HBA; сас бабло не дают - можешь обосновать, зачем тебе сас ? правильно, в твоей конструкции ему делать нечего.
1.1 - скорости чего и в каких условиях ? В сферической в ваккуме - да, а может нет. Т.к ни паттерн нагрузки, ни требуемое бустродействие не заданы, то разговор ниочем.
1.2 В каком именно ? не все аппаратные аппаратны одинаково ;)

2.при условии дрбд
дрбд,дрбд, - оно не зарезервируе нагорячую всю хранилку в данном случае.

2.1. какую нагрузку даст SAN при 5-10 LUN объемом 2-3ТБ - Нулевую, это вытекает из формулировки вопроса.
2.2. не упрусь ли я в свичи cisco sg200-50P (все порты по 1000) - Может да, а может и нет, это вытекает из формулировки вопроса тоже ;)
3. Какую ФС выбрать? ZFS, btrfs, GlusterFS, ext4 (настроен на ext4 и по верху ЛВМ). - ФС в курсе искази в общем случае не рассматривается, тем более что ты смешал теплое с мягким, например GlusterFS и ехт4.

Вобщем, у тебя в голове стандартная каша.

Тебе нужно : 1 Объем хранилки ( с учетом деградации на 80%), 2. Требуемый Lantency ( закладывайся на 15ms) 3. количество йопсов на ro и rw. 4. Паттерн нагрузки .

Опосля уже можно чесать тыковку и собирать шелезяки.

Compute:
Bosch M2.8.1 -> custom Bosch M2.8.3 clone from Russia.
Speed about 260 km,Ram 2 pers.,HDD - 70 kg,210 FLOPS ;)

1. САС мне в принцепе и не

1. САС мне в принцепе и не нужен - согласен, зачем HBA? в корпусе есть бекплейн от него в мать. Сразу скажу что с HBA дел не имел может по этому смысла не вижу м нем, в двух сообщениях виду овер 8 - откуда эта цифра? что почитать?
1.1. Нагрузка хз как ее посчитать т.к. сейчас активно пользуют только 3 виртуалки win2008 юзеров 70-80 постоянно, нагрузки на каммень 6000MHz на винты средняя на сфере накрузка чтение и запись примерно по 200Кб/c, нагрузка на помойку в режиме работы тоже незначительная. Когда копирую поднимается, интерфейсы все гигабитные, Бд есть мускул использует его заббикс, вики, есть 1с - невижу тут чего-то вообще ничего что жрет, но пока всех пользователей не закину не померять.
1.2. Ну к примеру если брать интел за 500$
2. Упс, так дрбд это ж как рейд 1 по сети, при синхронной синхроницации от чего же не зарезервирует? что использовать? я много готовых работ видел на хабре - вроде работает, своего опыта нету по-этому и интерисуюсь.
2.1. Какую информацию предоставить чтобы стало ясно?
2.2. Какую информацию предоставить чтобы стало ясно?
3. теплое работает поверх мягкого?

Объем хранилки
1. сумарный 4 тб т.е. нужно 4*1.8=7,2Тб
2. по нагрузке не могу померять - 1,1

В идеале схема такая,
2 SAN внутри то железо которое я описал в первом посте винты в карзине, - карзина в мать и софтрейд, между САН ДРБД (10Гбит), на винтах ФС или btrfs, или zfs, или ext4 +LVM, Далее по iSCSI отдавать блочные устройства гипервизорам, (их тоже подумываю 2 для резерва, но пока 1 САН 1 гипервизор).

по софту
1 Lun - squid (200 users)
1 Lun - контроллер домена, SAMBA4
1 LUN - Файлопомойка самба 3.6 (2 Тб)
1 LUN - windows Server 2008 buh - 4 человека, используют местную софтинку, 1с, почта, банк клиенты
1 LUN - windows Server 2008 для манагеров - тут софта на 400Гб (софт отдаю по remoteapp)
1 LUN - windows Server 2008 для манагеров - тут софта на 200Гб (софт отдаю по remoteapp)
1 LUN - windows Server 2008 для манагеров - тут софта на 50Гб (софт отдаю по remoteapp)
1 LUN - windows Server 2008 для манагеров - тут софта на 20Гб wt, куда конктятся все юзеры с тонких клиентов (thinstation 5) вот отсюда и открывают remoteapp
1 LUN - почтовик, но это в дааалеких планах.
1 LUN - vhost (тут пошустрее надо будет в последствии), можно и SSD.
1 LUN - backup

как тут посчитать нагрузку я не понимаю,
Если есть алтернативы как это реализовать чтобы не падало прошу огласить, виртуалки с софтом меняются раз в пол года, т.е. одни убиваются другие заливаются. (специфика софта такая)

Справочно

sharp написал(а):
1 Lun - squid (200 users)

Количество пользователей не является достаточной характеристикой потока нагрузки.

:wq
--
Live free or die

iptraf на интерфейсе пишет

iptraf на интерфейсе пишет 23000kbps

1. сумарный 4 тб т.е. нужно

1. сумарный 4 тб т.е. нужно 4*1.8=7,2Тб - што эта ?

П.С с паттерним прояснили - Жиртуалки с непойми чем.
П.П.С я хз, как тс, но у мну все это крутилось на 2 серверах безо всякого скази
virsh list --name |wc -l
82
df -h|grep data
data/ 3.4T 1019G 2.4T 30% /data

Вариант дорогой, но для 1-4 серверов единственно вменяемый

Compute:
Bosch M2.8.1 -> custom Bosch M2.8.3 clone from Russia.
Speed about 260 km,Ram 2 pers.,HDD - 70 kg,210 FLOPS ;)

slepnoga написал(а):1.

slepnoga написал(а):
1. сумарный 4 тб т.е. нужно 4*1.8=7,2Тб - што эта ?

П.С с паттерним прояснили - Жиртуалки с непойми чем.
П.П.С я хз, как тс, но у мну все это крутилось на 2 серверах безо всякого скази
virsh list --name |wc -l
82
df -h|grep data
data/ 3.4T 1019G 2.4T 30% /data

Вариант дорогой, но для 1-4 серверов единственно вменяемый

как посоветовали 80% деградации
4*100/80 + 4 ) = 4*1.8

ты нифига не понял

ты нифига не понял :)
хранилку ( вида сохо обыкновенный , подвид писюкатые) ненадо забивать на больще чем на 80 процентов - терям производителность, причем в твоем случае это еще и к фс будет относится.

я бы взял 5 S1200 атомов и набил бы ceph ( ну по 4-ре шпинделя на систему плюс 1 ssd под кеш), раздача через lacp линки на kvm
и оно, сцуко, работает. Вопрос резервирования свичвй сейчас не рассматриваем( но подсказка в ответе есть).

Compute:
Bosch M2.8.1 -> custom Bosch M2.8.3 clone from Russia.
Speed about 260 km,Ram 2 pers.,HDD - 70 kg,210 FLOPS ;)

Нога прав - iSCSI вам и не

Нога прав - iSCSI вам и не нужен! Абсолютно лишний оверхед для ваших задач.
Вместо 1САН+1гипервизор поставьте 2 вирт.хоста (гипервизорa) на локальных дисках и разумненько раскидайте виртуалки, чтобы нагрузка была бы более менее равномерна.
И будет вам счастье!

Вот вы тут жметесь на

Вот вы тут жметесь на железячный РАЙД, опасаясь простоя, а не учитываете того, что он вылетает куда реже, чем у вас диски будут сыпаться. :)
Надо было бы о хот-свопе лучше подумать, если простой критичен...

Ну по вопросам ТС можно же

Ну по вопросам ТС можно же прорицать бывшую совковую контору, мож даже госконтору - а ты про какие то ИТ решения HA ;). Все же держится на энтузиазме начинающего админа, пришедшего набратся опыта на зверьках вида "МарьИванна_ис_бухгалтерии" и вынужденного по незнанию эконимить 100$ на контроллер, ибо в этом годе бюджет кончился.

П.С Понятно так же, что нормальная хранилка там нужна как зайцу стоп-сигнал, а нужно нечто волшебное, на чем можно держать файло, волшебным образом его раздавать все, место должно быть резиновое, и крайне желательни, что бы это по стоимости не было дороже Чупа-Чупса.

Compute:
Bosch M2.8.1 -> custom Bosch M2.8.3 clone from Russia.
Speed about 260 km,Ram 2 pers.,HDD - 70 kg,210 FLOPS ;)

нога от части ты прав, нужен

slepnoga от части прав, нужен скил и на железки бабло дали +контроллер - контроллер не имеет значения, но суть апаратного контролерра я все равно не улавливаю, на сфере стоит intel 2600, пару зеонов е5, рейд 10 с 4x3тб на интеловском контроллере, все это есть но именно смысл не понятен, нафиг он нужен? iSCSI решил покрутить чисто опыта набраться, то что он тут нафиг не сдался это конечно да, поставить еще одну сферу в зеркало ума много не надо - поэтому iSCSI и дистрибутив такой, хотел бы поставил фринас какой-нибудь - не спрашивал бы мнения на форуме.

ПС всем спасибо за ответы

на сфере стоит intel 2600 -

на сфере стоит intel 2600 - wtf сфера ? Шпеер от Вари ? если да, и если у тя меньше 100 машин ( примерно) - выкинь каку.

П.С это же как ексчейнч в HA на 10 ящиков ....

Compute:
Bosch M2.8.1 -> custom Bosch M2.8.3 clone from Russia.
Speed about 260 km,Ram 2 pers.,HDD - 70 kg,210 FLOPS ;)

slepnoga написал(а):на сфере

slepnoga написал(а):
на сфере стоит intel 2600 - wtf сфера ? Шпеер от Вари ? если да, и если у тя меньше 100 машин ( примерно) - выкинь каку.

П.С это же как ексчейнч в HA на 10 ящиков ....

vmware vsphere - она самая, дык вот и собираюсь ) после файлопомойки думаю или квм или ксен

ксен тоже выкинь. Ну и

ксен тоже выкинь.

Ну и вообще, из того что я вижу - вам нужно тупо накатить проксмокс и ниипать ни себе, ни людям.

Compute:
Bosch M2.8.1 -> custom Bosch M2.8.3 clone from Russia.
Speed about 260 km,Ram 2 pers.,HDD - 70 kg,210 FLOPS ;)

можно на ты, почему диски

можно на ты, почему диски сыпаться будут при софтовой реализации рейда? если есть опыт такого поведения, куплю.

SysA написал(а):Вот вы тут

SysA написал(а):
Вот вы тут жметесь на железячный РАЙД, опасаясь простоя, а не учитываете того, что он вылетает куда реже, чем у вас диски будут сыпаться. :)
Надо было бы о хот-свопе лучше подумать, если простой критичен...

можно на ты, почему диски сыпаться будут при софтовой реализации рейда? если есть опыт такого поведения, куплю.

Не потому, что софт,

а потому, что САТА и статистика! Просто выработает свой ресурс на такой серверной нагрузке. А нагрузка будет немаленькая, судя по вашим желаниям. Кстати, посмотрите наработку на отказ и ТУ на условия эксплуатации для ваших дисков или хотя бы среднестатистические для САТА и САС - найдете немало интересного!
Одним из отличий НОРМАЛЬНОГО дискового массива для производства - наличие возможности замены дисков на ходу. Например, в конторе, о которой я упоминал, мы меняли пару дисков почти что каждый день! :) Не потому что плохие, а потому что их ОЧЕНЬ много (тысячи!)! Мат.статистика, однако! :)
Но просто РАЙД контроллер на отдельной платке вас не спасет, потому как там нужна специальная конструкция разЪема/питания, т.е. другой корпус и пр. Поэтому идеально для вас было бы что-то вроде этого. Там уже и контроллер есть, и батарейки, и резервирование питания, и т.д.
P.S. В принципе в домашних условиях и на десктопе я отключал/подключал САС/САТА диски на ходу, так что это возможно, но на оперативных серверах - никогда! :)

SysA, a расскажи ка нам, чем

SysA, a расскажи ка нам, чем отличается тот же WD RE4 sata от ED RE4 sas, кроме интерфейса?
А сигейт ентерпрайс серии ?

Я надеюсь, ты не в обиде ;)

Compute:
Bosch M2.8.1 -> custom Bosch M2.8.3 clone from Russia.
Speed about 260 km,Ram 2 pers.,HDD - 70 kg,210 FLOPS ;)

Неужели ты всерЪез думаешь,

Неужели ты всерЪез думаешь, что я всю номенклатуру дисков наизусть помню? :)
Тем более, что хранилища - не моя специализация, это как бы сопутствующие знания...
Потому и рекомендовал ТС рыть инфу по его дискам.

P.S. Думал не отвечать троллю, но ради просвещения ТС приведу некоторые факты: общее отличие САТА от интерпрайз САС хотя бы в скорости (в 2 раза!): 7200 против 15К. Ну и MTBF несопоставим, обычно. И это при том, что САС рассчитан на более интенсивную работу. Ну а то, что шпиндели в разные стороны крутятся, надеюсь в общем контексте не так уж и важно... ;)
Ho вот интерфейс, кстати, практически не отличается. :) По-крайней мере, в реалиях ТС.

A по твоим дискам даже смотреть не буду - и времени жалко, и не интересно... ты уж прости, если сможешь. Хотя по твоему тону подозреваю, что там фейковый САС, типа как когда-то были планки памяти с фейковым контролем четности... :)

P.P.S. Офф-топик, конечно, но относительно

sharp написал(а):
...можно на ты...

Возможно в России уже живут по английской поговорке ("На Вы только с богом и с королевой"), но так как я человек старой школы, то придерживаюсь норм русского языкового этикета, когда к незнакомому человеку равного положения обращаются все-таки на Вы.

SysA написал(а):Неужели ты

SysA написал(а):
Неужели ты всерЪез думаешь, что я всю номенклатуру дисков наизусть помню? :)
Тем более, что хранилища - не моя специализация, это как бы сопутствующие знания...
Потому и рекомендовал ТС рыть инфу по его дискам.

P.S. Думал не отвечать троллю, но ради просвещения ТС приведу некоторые факты: общее отличие САТА от интерпрайз САС хотя бы в скорости (в 2 раза!): 7200 против 15К. Ну и MTBF несопоставим, обычно. И это при том, что САС рассчитан на более интенсивную работу. Ну а то, что шпиндели в разные стороны крутятся, надеюсь в общем контексте не так уж и важно... ;)
Ho вот интерфейс, кстати, практически не отличается. :) По-крайней мере, в реалиях ТС.

A по твоим дискам даже смотреть не буду - и времени жалко, и не интересно... ты уж прости, если сможешь. Хотя по твоему тону подозреваю, что там фейковый САС, типа как когда-то были планки памяти с фейковым контролем четности... :)

P.P.S. Офф-топик, конечно, но относительно

sharp написал(а):
...можно на ты...

Возможно в России уже живут по английской поговорке ("На Вы только с богом и с королевой"), но так как я человек старой школы, то придерживаюсь норм русского языкового этикета, когда к незнакомому человеку равного положения обращаются все-таки на Вы.

интерфейс что там что сям атапи использует, про вращение и время доступа в курсе, про надежность тоже, а еще $$$, не мой это вариант

SysA написал(а):
это было предложени ни чем не обязывающие

по итогам: смысла в железном

по итогам: смысла в железном рейде так и не разглядел - поверю на слово.
конфигурация итого, какие минусы? корпус с двумя бп, мать intel 1200, контроллер интел (без батарейки, думаю под мои нужды она не нужна) raid 10 (3тб*4 + 2*250 под систему все sata wd black enterprice), озу 8 юдим, сеть два интерфейса 10гбит первый в сторону резерва (дрбд), второй в гипервизор,
гипервизор мать 3600, 2 cpu e5, сеть 10гбит в файлопомойку 1Гбит в лан, загрузка ос пхе
ИБП
потом добавлю резерв.

какие минусы комрады тут видите?

Да вроде бы уже все вам

Да вроде бы уже все вам сказали... :)
Ну, если хотите минусов:
-1. нет хот-свопа
-2. DRBD "...при синхронной синхроницации..." (цитирую ваши декларации, орфография сохранена) по удаленной линии... да на ваших задачах... да еще когда обе стороны активны... - вы бы протестировали на "кошках" (С) сначала... :)
-3. Я и WD (как и МинЗдрав) предупреждаем: Critical: WD Black ... hard drives are not recommended use in RAID environments. Как я уже говорил (другими словами, правда): не верьте рекламе, читайте доки.
4.Пропускную способность системной шины, сетевого и SATA контроллеров просчитали, перед тем как железо заказывать? Самому неохота в ваше железо углубляться.

Резюме уже нога высказал и я присоединяюсь - вместо 2 серверов и 2 хранилищ делайте 4 сервера с локальными дисками и распределяйте нагрузку, реальная производительность будет существенно лучше. Но если цель есть просто "поиграться" за гос.счет - тогда вперед! Но будьте готовы, что юзера/начальники могут быть недовольны... :) Хотя возможно, что просто уровень вашей з/п соответствует представленному уровню технического решения. Тогда смело можете отвергать претензии... как когда-то мой главный инженер любил говорить: "я не так много получаю, чтобы решать эти вопросы". :)

SysA написал(а):Да вроде бы

SysA написал(а):
Да вроде бы уже все вам сказали... :)
Ну, если хотите минусов:
-1. нет хот-свопа
-2. DRBD "...при синхронной синхроницации..." (цитирую ваши декларации, орфография сохранена) по удаленной линии... да на ваших задачах... да еще когда обе стороны активны... - вы бы протестировали на "кошках" (С) сначала... :)
-3. Я и WD (как и МинЗдрав) предупреждаем: Critical: WD Black ... hard drives are not recommended use in RAID environments. Как я уже говорил (другими словами, правда): не верьте рекламе, читайте доки.
4.Пропускную способность системной шины, сетевого и SATA контроллеров просчитали, перед тем как железо заказывать? Самому неохота в ваше железо углубляться.

Резюме уже нога высказал и я присоединяюсь - вместо 2 серверов и 2 хранилищ делайте 4 сервера с локальными дисками и распределяйте нагрузку, реальная производительность будет существенно лучше. Но если цель есть просто "поиграться" за гос.счет - тогда вперед! Но будьте готовы, что юзера/начальники могут быть недовольны... :) Хотя возможно, что просто уровень вашей з/п соответствует представленному уровню технического решения. Тогда смело можете отвергать претензии... как когда-то мой главный инженер любил говорить: "я не так много получаю, чтобы решать эти вопросы". :)

отличные слова, да все это чтобы руку так сказать набить на кошках ) работу мсеню а вот опыт останется.
1. http://supermicro.ru/products_spec_561.html - есть хотсвап
2. Вырезка из вики - на которую я и опирался
DRBD поддерживает как синхронную, так и асинхронную синхронизацию (при синхронной синхронизации, протокол "С", операция записи считается завершённым, когда и локальный, и сетевой диски сообщают об успешном завершении записи; при асинхронной синхронизации (протокол "A") запись считается завершённой, как только запись завершилась на локальное устройство и данные были отправлены на удалённый узел). Также поддерживается промежуточный протокол (B), при котором запись считается успешной, если она завершилась на локальный диск и удалённый узел подтвердил получение (но не локальную запись) данных
3. вот за это спасибо буду брать рейд едишон - время межотказное больще 120 лет ) правнуки спасибо скажут
4. Посчитаю

вопрос по сетевухам, есть какие - нибудь модельки 10гбит за разумные финансы?, у меня валяется одна x520da2 но сфп по 8килорублей и как то напрягает связывать оптикой 2пк в стойке =( с рг45 посмотрел 520 не легче по 30к за карточку двухголовую

смотрел 82599 540 520 все от интела.

есть, я уже писал. Меланокс

есть, я уже писал. Меланокс IB :-D.
http://www.ebay.de/itm/HP-SMALL-2-Port-4X-Infiniband-Adapter-AB286-60101-Mellanox-MT50521D01-PCI-X-/111497688192?pt=DE_Computing_Server&hash=item19f5c7b480
Как то так.

Ой, мля, тауэры в чате.
/тихим голосом/ ахтунг ?

Короче не в тему, но за N денег соберу спеку под локальные гипервизоры.

Compute:
Bosch M2.8.1 -> custom Bosch M2.8.3 clone from Russia.
Speed about 260 km,Ram 2 pers.,HDD - 70 kg,210 FLOPS ;)

slepnoga написал(а): есть, я

вот это техника, спасибо за наводку

sharp написал(а): ...да все

sharp написал(а):
...да все это чтобы руку так сказать набить на кошках ) работу мсеню а вот опыт останется.
...
2. Вырезка из вики - на которую я и опирался...

FYI:

1. На "кошках" - это когда админ на своем компе или на тестовых проверяет свои концепции ДО принятия решений.

2. Когда я говорил доки - я и имел ввиду НОРМАЛЬНУЮ ДОКУМЕНТАЦИЮ: спецификации, мануалы, RFC, наконец. И желательно от производителя разумеется.

3. Извини, но с твоим подходом это не опыт, а натаскивание... :)

sharp написал(а):
DRBD поддерживает...

Как я уже намекал, - поддерживать-то он, конечно, поддерживает, но ты хотя бы вник в суть понятия "синхронный" в данном контексте (для задач, которые ТЫ САМ озвучил)?

Но дальнейшее общение с тобой видимо не имеет смысла, тем более, что ты тему закрыл.

SysA написал(а):sharp

SysA написал(а):
sharp написал(а):
...да все это чтобы руку так сказать набить на кошках ) работу мсеню а вот опыт останется.
...
2. Вырезка из вики - на которую я и опирался...

FYI:

1. На "кошках" - это когда админ на своем компе или на тестовых проверяет свои концепции ДО принятия решений.

2. Когда я говорил доки - я и имел ввиду НОРМАЛЬНУЮ ДОКУМЕНТАЦИЮ: спецификации, мануалы, RFC, наконец. И желательно от производителя разумеется.

3. Извини, но с твоим подходом это не опыт, а натаскивание... :)

sharp написал(а):
DRBD поддерживает...

Как я уже намекал, - поддерживать-то он, конечно, поддерживает, но ты хотя бы вник в суть понятия "синхронный" в данном контексте (для задач, которые ТЫ САМ озвучил)?
Но дальнейшее общение с тобой видимо не имеет смысла, тем более, что ты тему закрыл.

1. На кошках пока рейд 1 собрал софтовый, сейчас читаю про то что Вы советуете, дочитаю подниму tgt
2. Сейчас изучу

тему открыл, поторопился видимо с выводами, не пойму что с дрбд не так? на хабре заводят по гуглу полазил - заводят, почему работать не будет?
еще увидал на просторах интернеса hba iscsi, есть опыт с такими железками?
Каково Ваше мнение о aoe?

1. На кошках пока рейд 1

1. На кошках пока рейд 1 собрал софтовый,

Ну шта, конкретно отвечаю, чем мдадм отличается от даже дешманской платки с контроллером I/O

мдадм:

grep -E 'md|ahci' /proc/interrupts
71: 13235058 30357930 50458586 965916250 1138269089 1387962675 533523517 259719940 0 0 0 0 0 0 0 0 PCI-MSI-edge ahci

Самый дешманский hba

grep mpt /proc/interrupts
79: 7007 9366 11974 3714 8715 10731 0 0 0 0 0 431315 IR-PCI-MSI-edge mpt2sas0-msix0
80: 10700 1729 9423 3303 8578 8214 0 0 0 0 458234 0 IR-PCI-MSI-edge mpt2sas0-msix1
81: 7596 4008 10630 4363 10623 8394 0 0 0 468839 0 0 IR-PCI-MSI-edge mpt2sas0-msix2
82: 7172 4121 1765 6202 16623 9745 0 0 462763 0 0 0 IR-PCI-MSI-edge mpt2sas0-msix3
83: 10082 8873 6093 7820 12036 7891 0 410003 0 0 0 0 IR-PCI-MSI-edge mpt2sas0-msix4
84: 10607 8486 9234 7220 10408 18438 451663 0 0 0 0 0 IR-PCI-MSI-edge mpt2sas0-msix5
85: 5636 892 6792 3158 3478 414175 0 0 0 0 0 0 IR-PCI-MSI-edge mpt2sas0-msix6
86: 4917 1426 5080 2649 459133 7380 0 0 0 0 0 0 IR-PCI-MSI-edge mpt2sas0-msix7
87: 3856 2551 3288 420526 3998 4374 0 0 0 0 0 0 IR-PCI-MSI-edge mpt2sas0-msix8
88: 4614 1874 434573 2303 4466 516 0 0 0 0 0 0 IR-PCI-MSI-edge mpt2sas0-msix9
89: 3690 394926 3126 1069 2490 4925 0 0 0 0 0 0 IR-PCI-MSI-edge mpt2sas0-msix10
90: 426455 1505 3669 2499 2063 1790 0 0 0 0 0 0 IR-PCI-MSI-edge mpt2sas0-msix11

не, если читать 1 файл ( 1 виртуалка ), то achi очень даже ;)

Compute:
Bosch M2.8.1 -> custom Bosch M2.8.3 clone from Russia.
Speed about 260 km,Ram 2 pers.,HDD - 70 kg,210 FLOPS ;)

У вас в схеме всего 1

У вас в схеме всего 1 гипервизор ?
Что такое мать 3600 ? описка, 26хх ?

Compute:
Bosch M2.8.1 -> custom Bosch M2.8.3 clone from Russia.
Speed about 260 km,Ram 2 pers.,HDD - 70 kg,210 FLOPS ;)

slepnoga написал(а):У вас в

slepnoga написал(а):
У вас в схеме всего 1 гипервизор ?
Что такое мать 3600 ? описка, 26хх ?

пока 1, в планах после добаваить резерв помойки и еще 1 визор.

да опечатался s2600

Если хочется полизать яйца -

Если хочется полизать яйца - то мы с этим ничего сделать не можем ;(

Но на 1 гипервизор хранилка не нужна от слова совсем - только увеличивает вероятность отказа.

Compute:
Bosch M2.8.1 -> custom Bosch M2.8.3 clone from Russia.
Speed about 260 km,Ram 2 pers.,HDD - 70 kg,210 FLOPS ;)

ну так то если посмотреть на

ну так то если посмотреть на 2 гипервизора и 2 помойки iscsi тоже не нужен 2 hba в гипервизор и в 2 jbod ) и дешевле и быстрее.

Всем громадное спасибо за то

Всем громадное спасибо за то что поделились опытом. Тему закрываю.
Жалко что кнопок спасибо нету (

sharp

sharp написал(а):
...интерфейс что там что сям атапи использует...

Это уже даже не смешно... вам не кажется, что "совместимый" не значит "аналогичный"?!
На набор команд не было мысли взглянуть?..

Да ладно, тема закрыта.

SysA написал(а):sharp

SysA написал(а):
sharp написал(а):
...интерфейс что там что сям атапи использует...

Это уже даже не смешно... вам не кажется, что "совместимый" не значит "аналогичный"?!
На набор команд не было мысли взглянуть?..

Да ладно, тема закрыта.

я не спец в данной области но к сас интерфейсу подключал через подпиленный шнурок сата диск, работало. Разница то есть как минимум в контактах ). Но команды саты сас понимает и наоборот. От сюда и утверждение что сас что сата используют атапи.

Настройки просмотра комментариев

Выберите нужный метод показа комментариев и нажмите "Сохранить установки".