Como controlar el ancho de banda usando HTB-GEN

Imagen de damage

HOla distinguidos usuarios, amigos y conocidos del foro, a pedido de muchos, voy a comentarles mi experiencia en cuanto al uso del htb-gen versión 0.8.4, no usaremos la 0.9 porque aún esta en face beta. Bueno pues, el htb-gen es como su nombre lo indica un generador de script del famoso y glorioso HTB, pero bueno vamos al asunto en mención, los pasos son los siguientes:

1.- Descargar el htb-gen de la pagina oficial http://www.praga.org.ar/wacko/DevPraga/htbgen/, aqui escojemos dependiendo de nuestra distro de linux, el paquete mas apropiado, yo como uso Centos 4.4 i386, descargue htb-gen-0.8.4-1.noarch.rpm, también lo he usado en x86_64 ya que es un rpm "noarch".

2. Luego de la descarga respectiva, lo instalamos, ya sea con doble click o desde la consola como sea mejor para cada quien:


rpm -iUvh htb-gen-0.8.4-1.noarch.rpm

3. Ahora ya esta instalado el htb-gen, desde la consola editamos el .conf, no dirijimos hacia:


# vi /etc/htb-gen/htb-gen.conf
Aquí declaramos, las interfaces de red tanto la que esta conectada al internet como la que esta del lado LAN:
iface_down="eth1" # Server LAN iface
iface_up="eth0" # Server INET iface

3.1 Luego declaramos el ancho de banda que tenemos asignado por ejemplo si nuestra red tiene un ancho de banda de 512 Kbits tanto de bajada como de subida lo declaramos asi:

total_rate_down=512
total_rate_up=512

O si tenemos 512k down y 256 up:

total_rate_down=512
total_rate_up=256

3.2 El siguiente paso es declarar los puertos a segmentar, por default viene unos 10 puertos, pero si nuestro server hace de proxy/firewall, es basta con declarar el 80 y el 8080:

prio_ports=80,8080,25,110,443,1863

El resto de variables que estan en el archivo no lo tocamos para nada (mucho cuidado), no hace falta.

4. Ahora vamos a declarar el ancho de banda que tendra cada ip, subred o red, para esto editamos esto:

# vi /etc/htb-gen/htb-gen-rates.conf

Aquí podemos jugar con los valores el archivo muestra 5 columnas donde la primera es la ip, o subred, la segunda el "rate" de bajada, la tercera el "ceil" de bajada y la cuarta y quinta son el "rate" y el "ceil" de subida, todo esto esta debidamente documentado en el mismo archivo (pero en ingles), ejemplo de comfiguración:


192.168.100.2 0 128 0 64
192.168.100.3 64 128 0 64
192.168.100.4 0 64 0 32

Esto que significa por ejemplo la ip 192.168.100.2, tendra un ancho de banda compartido ( ya que esta en 0 el rate), podiendo llegar a un maximo de 128k siempre y cuando exista ancho de banda disponible.
la ip 192.168.100.3, tendra 64k de ancho de banda asegurado ya que esta en el rate y un maximo de 128k.
Dentro del mismo archivo tenemos más ejemplos didacticos. Guardamos los cambios y listo.

5. OJO esto solo en el caso de que no controle bien el ancho de banda le meten mano de lo contrario lo dejan tal como viene.
Luego de hacer todo esto debemos hacerle unos retoques al script principal el cual esta en:

# vi /usr/bin/htb-gen

y vamos hasta donde dice:

# Make extra tables, cleaner & target match faster
iptables -t mangle -N htb-gen.down
iptables -t mangle -A FORWARD -o ${iface_down} -j htb-gen.down
y Añadimos esta linea:
iptables -t mangle -A OUTPUT -o ${iface_down} -j htb-gen.down
Luego bajamos dos lineas y añadimos:
iptables -t mangle -A POSTROUTING -o ${iface_up} -j htb-gen.up

esta parte del script quedará asi:
iptables -t mangle -N htb-gen.down
iptables -t mangle -A FORWARD -o ${iface_down} -j htb-gen.down
iptables -t mangle -A OUTPUT -o ${iface_down} -j htb-gen.down
iptables -t mangle -N htb-gen.up
iptables -t mangle -A POSTROUTING -o ${iface_up} -j htb-gen.up
iptables -t mangle -A FORWARD -o ${iface_up} -j htb-gen.up

Bajamos un poco más y encontraremos esto:
#delete old htb-gen entries(chains)
iptables -t mangle -D FORWARD -o ${iface_down} -j htb-gen.down 2>/dev/null
iptables -t mangle -D FORWARD -o ${iface_up} -j htb-gen.up 2>/dev/null
Y lo remplazamos adicionando lineas correspondientes a las anterirmente declaradas, en fin debe quedar asi:

#delete old htb-gen entries(chains)
iptables -t mangle -D FORWARD -o ${iface_down} -j htb-gen.down 2>/dev/null
iptables -t mangle -D OUTPUT -o ${iface_down} -j htb-gen.down 2>/dev/null
iptables -t mangle -D POSTROUTING -o ${iface_up} -j htb-gen.up 2>/dev/null
iptables -t mangle -D FORWARD -o ${iface_up} -j htb-gen.up 2>/dev/null

6. Una vez guardados los cambios, desde consoloa tecleamos:

# htb-gen tc_all

Con esto htb-gen generara automaticamente, los script's correspondientes con las clases y la parte de iptables.

7. Verificamos que todo se halla generado con:

# iptables -nL -t mangle

8. Listo todo en orden a relajarce con unas chelas ya que tendran un problema menos que cargar, Salud.

NOTA: Deben tener instaldo iproute para que esto funcione de lo contrario, no generara mensajes de error, recuerden que el comando TC es parte de iproute y este comando es parte fundamental tanto en el uso de htb como de cbq.

Debido a la gran cantidad de preguntas respecto a el mensaje de "check rates conf, not enough download bandwidth", eso se da porque estan declarando más RATE del que tienen asignado en el "Total RATE" del htb-gen.conf. Pilas lean las palabritas que tiene cada archivito para que se enteren que no hacer.

Así mismo he visto que preguntan de manera insistente que se les indique porque no les funciona el htb-gen, muchos usuarios solo lo instalan y listo, pero aveces hay que ver que más pasa, yo nunca tuve inconvenientes con el htb-gen realizaba lo posteado y listo, pero con la versión 0.9b, el error se da que este no asigna la chain de mangle a la eth1 si no a la eth0, he ahi el error ya que personalmente la eth0 la declaro como interfaz externa.
Recomiendo tecleen iptables -nL -t mangle y se fijen en que eth se general el reporte, la solución la estoy analizando, la misma la posteare a futuro, por el momento si necesitan usar el htb-gen 0.9 usen la version 0.9-1 con la cual no se me ha presentado el inconveniente.

ACTUALIZACIÓN 11/07/2009
Viendo varios post similares sobre el problema de la segmentación de subida, lastimosamente muchos solo pensaron de que era cosa de instalar dar dos clic's, poner las ip's y listo, pero no este problema de subida se soluciona, y repito como dije hace meses atras (por eso nunca di respuesta antes ya que no lo creía necesario debido a "que lo habia dicho antes") se debe jugar con las reglas de iptables, en la versión del htb gen 0.9.1 que es la cual muchos usan,se debe adicionar una linea en la cual marque el FORWARD con la opción -i, con eso es suficiente para solucionar el dilema de la subida, espero que prueben y apliquen lo recomendado. No me pregunten el porque, se los dejo de tarea.
En cuanto a la versión 0.8.x no hay que hacerlos tal como se explica es suficiente, si tienes algun problema con el squid o alguna relacionado, me he topado con muchas personas que tienen script de iptables que hacen flush de reglas en la cadena mangle lo cual interfiere con las reglas de mangle del htb-gen, deben ver todas las opciones antes de decir NO FUNCIONA.

Actualización al 14 de Septiembre del 2010:

Se me presento en una institución que no es ISP que se necesitaba colo controlar el ancho de banda hacia Internet, pero resulta que como el htb-gen segmenta todo el tráfico en la tabla del FORWARD, pues eso tría complicaciones cuando el mismo gateway de Internet es también el router de varias subredes de una LAN, por ejemplo un servidor de aplicaciones esta dentro del segmento 192.168.0.1/24 y tengo hosts en el segmento 192.168.2.0/29, ambas redes son ruteadas por el Linux en este caso el Htb-gen me segmentara el trafico local entre ambas subredes, lo cual nos pondra en problemas, para solucionar esto se debe hacer los siguiente (gracias a Razametal por dar una luz ;) ):
iptables -t mangle -I FORWARD -p ALL -d 192.168.0.1/24 -s 192.168.2.0/29 -j RETURN
iptables -t mangle -I FORWARD -p ALL -s 192.168.0.1/24 -d 192.168.2.0/29 -j RETURN

Listo con esto adicionado al final del script principal de htb-gen (/usr/local/bin/htb-gen) tenemos todo resuelto.
Recuerden una vez ejecutado el script con las lineas de Return adicionadas, remplacen el -I con -A, ojo.

Saludos amigos.

Comentarios

Tengo un problema, si

Tengo un problema, si alguien me puede ayudar se lo agradecería....

Tengo una subred que es la 192.168.200.100/29 y en el momento de mandar a correr el htb-gen tc_all me da este error:


iptables-restore v1.2.11: chain name `htb-gen.eth0-192.168.200.100/29' too long (must be under 30 chars)
Error occurred at line: 62
Try `iptables-restore -h' or 'iptables-restore --help' for more information.

Que no puede utilizar màs de 30 caracteres... Y como hago para segmentar esa subred..???

Alguna sugerencia..

Saludos

Si mal no me equivoco eso se

Imagen de damage

Si mal no me equivoco eso se da por que esa sub red deberia se 192.168.200.96/29 y no 192.168.200.100/29, ojo como declaras tus subredes.
Usa ipcalc :)

Keep The Fire Burning.....
Stryper 1988

El punto no es si esta bien

El punto no es si esta bien segmentada la red, lo puse como ejemplo, el punto es que no se puede poner, esa subred que tenga esta caracteristica 192.168.200.104/29..??? porque sale:


iptables-restore v1.2.11: chain name `htb-gen.eth0-192.168.200.104/29' too long (must be under 30 chars)
Error occurred at line: 62
Try `iptables-restore -h' or 'iptables-restore --help' for more information.

Saludos

Te comento que yo si lo he

Imagen de damage

Te comento que yo si lo he realizado asì y no me da errores :?, como te decia calcula bien la subred, intenta poner 192.168.200.0/29, si te vuelve a dar error ahi si que serìa extraño :(, algo debe estar màl declarado en algun lado.

Keep The Fire Burning.....
Stryper 1988

tengo problemas con el htb-gen y proxy

hola a todos.
Tu post me parece excelente
tengo un problema con htb-gen que no me quiere controlar el upload , solo me controla las descargas. hice todo al pie de la letra pero no me funciona esta parte. Mi pregunta es si las reglas de iptables que colocaste en /usr/bin/htb-gen estan bien? Estas son las que permiten el control del htb al proxy?. Tengo squid en modo transparente. Agregue algunas iptables. La verdad es que entiendo bien que hacen las iptables cuando las veo pero no tengo practica escribiendolas. Me podrias ayudar con mi problema. Que tengo mal o que me falta? y yo lo busco

gracias

pdt: las iptables que coloque para hacer transparente el proxy. Segun lo que dicen que para mi squid 2.6.stable5 no las necesito por que solo es colocar httpor: x.x.x.x transparent es falso ya que me toco colocarlas si queria que funcionara.
Tengo un debian etch amd64

iptables -t nat -A PREROUTING -i eth1 -p tcp --dport80 -j REDIRECT --to-port 3128
iptables -t nat -A POSTROUTING -o eth0 -j MASQUERADE

A mi no ma a pasado nada de

Imagen de damage

A mi no ma a pasado nada de eso, en ningun momento tengo 4 server's con htb-gen tando centos 4.x como 5.x y nunca me ha pasado nada, asi mismo he usado htb-gen 0.8 y 0.9 sin esos inconveniente, en el archivo ejecutable llamado "htb-gen" (buscalo donde esta), generalmente esta en /usr/bin pero eso depende del paquete, coloca una linea de POSTROUTING en el.


iptables -t mangle -N htb-gen.up
iptables -t mangle -A POSTROUTING -o ${iface_up} -j htb-gen.up
iptables -t mangle -A FORWARD -o ${iface_up} -j htb-gen.up

Tambien debes adicionar otra en la linea que borra las cadenas.
iptables -t mangle -D POSTROUTING -o ${iface_up} -j htb-gen.up 2>/dev/null

Comentanos si funcò.

Keep The Fire Burning.....
Stryper 1988

Consulta sobre htb-gen-0.8.4-1.noarch.rpm

Hola Tengo unas dudas sobre htb-gen Damage.
Mi servidor lo quiero hacer de proxy HTB + squid

Instale el htb-gen-0.8.4-1.noarch.rpm , todo salio ok.
pero tengo 2 consultas.

1.Como hago para hacer una comparticiòn de 1 a 8 de 128 kbit/s con un minimo de 16 kbit/s ...esto es en /etc/htb-gen/htb-gen-rates.conf
Grupo A 128 (minimo 16 maximo 128)
192.168.1.2 16 128 16 128
192.168.1.3 16 128 16 128
192.168.1.4 16 128 16 128
192.168.1.5 16 128 16 128
192.168.1.6 16 128 16 128
192.168.1.7 16 128 16 128
192.168.1.8 16 128 16 128
192.168.1.9 16 128 16 128

Grupo B 128 (minimo 16 maximo 128)
192.168.1.10 16 128 16 128
192.168.1.11 16 128 16 128
192.168.1.12 16 128 16 128
192.168.1.13 16 128 16 128
192.168.1.14 16 128 16 128
192.168.1.15 16 128 16 128
192.168.1.16 16 128 16 128
192.168.1.17 16 128 16 128

es asi? si es asi como se a que grupo(clase) corresponde cada ip o se agrupan automaticamente dedepndiendo del minimo por que es 16 * 8 =128 y asi mismos el segundo 3 4 ....etc grupo.

2.Cuando puse andar el squid la bajada me la controla el htb pero la subida no, en la subida se consume toda la banda de subida..sera problema del squid??

en mi archivo rd.local hago esto

htb-gen tc_all

echo 1 > /proc/sys/net/ipv4/ip_forward

iptables -F
iptables -t nat -F
iptables -t nat -A POSTROUTING -s 192.168.1.0/24 -j SNAT --to 200.x.x.x
iptables -t nat -A PREROUTING -s 192.168.1.0/24 -p tcp --dport 80 -j REDIRECT --to-port 8080

200.x.x.x = ip publica de eth WAN

Cabe indicar que sin squid el htb segmenta bien la bajada y la subida

Gracias por tus comentarios.

Bueno eso de segmentar 8:1,

Imagen de damage

Bueno eso de segmentar 8:1, 6:1 es relativo, lo que debes hacer primero crear subredes por ejemplo /28 y a cada una de ellas le asignas 8 IP's luego en el htb-gen le das el acnho de banda de 128K a cada subred:

192.168.0.1/28 0 128 0 128
192.168.1.0/28 0 128 0 128

Esto no te asegura un ancho de banda minimo a cada ip dentro de cada subred, por lo uqe esos 128 se lo pelearian entre las 8 PC's :(
Ojo la suma de todos los "rate" no debe ser mayor al Rate total declarado, si no te da error.

Keep The Fire Burning.....
Stryper 1988

Páginas