Autor Tema: Esto se cae a pedazos  (Leído 39008 veces)

sertinell

  • Veteran@
  • *****
  • Mensajes: 382
Re: Esto se cae a pedazos
« Respuesta #15 on: 28 ene 2010, 19:30 pm »
Yo puedo poner algo de tiempo si hace falta dentro de un mesecillo o así, cuando acabe los examenes. Las donaciones tambien me parecen una buena idea.

Como sistema de blog tengo entendido que joomla es mas sencillo pero menos personalizable que drupal. Podría ser una opción ...

Manolo

  • Bimilenari@
  • **
  • Mensajes: 2876
  • No dejes que la realidad te arruine una buena foto
    • Mi galeria en Ipernity
Re: Esto se cae a pedazos
« Respuesta #16 on: 28 ene 2010, 20:34 pm »
Lo de poner dinero entre varios tiene sus inconvenientes con el tiempo y prefiero seguir con lo que hay.

En cualquier caso, si se hace colecta, contad conmigo  :-)

Y menos el cobrar por servicios o por cualquier concepto.

A ver... lo de "cobrar por servicios" es una forma de ver el asunto, es la "tapadera" que he elegido para plantear lo que estamos pensando todos. Pero se puede ver de otra manera más inocua: como una asociación en que los socios pagan una cuota y tienen a su disposición unos ciertos servicios. Si, como dice Tat, los problemas fiscales hacen que el asunto se vaya de las manos, entonces podríamos plantearnos hacer una asociación de verdad, con sus estatutos y todo eso. En cualquier caso, eso yo lo veo más a largo plazo. Hay que ver cómo solucionar el problema inmediato.

Ubuntu & Debian, Nikon D40X Nikon D5100
ufraw, photivo, imagemagick, gimp, pantools
Artículos y fotos bajo licencia CC-BY

Enhy

  • Papá del Mes
  • Veteran@
  • *
  • Mensajes: 963
Re: Esto se cae a pedazos
« Respuesta #17 on: 29 ene 2010, 12:45 pm »
Pues como los compañeros, económicamente no hay problemas en lo que se decida, pero aunque yo no he estado en los congresos y desconozco los motivos, deduzco que este no es el debate que necesita colegota, pero que sepas que también se puede contar conmigo.
En el debate técnico puedo aportar poco, ya que las tecnologías de la web no son mi fuerte, aunque voy a intentar aportar algo de mi mente cuadriculada de ingeniero a ver si puede ayudar, aunque tal vez diga alguna tontería:
Si el problema es el consumo de memoria, en teoría ampliando, debería quedar resuelto, ... hasta que se vuelva a rebasar dicha memoria y vuelta a aumentar y así sucesivamente. Obviamente, esto no tiene sentido, aunque lo desconozco por completo, estoy seguro que existe algún mecanismo para cargar y descargar dinamicamente las páginas, artículos o entradas (no sé cual es la nomenclatura correcta) según la demanda, por lo tanto, aunque se rebasara la memoria, el servidor no tendría porqué caer, tal vez tardar más en servir alguna de estas entradas de lo normal, o presentarla mal o incompleta, pero no tirar el servidor, en este caso, en mi opinión está en este posible mecanismo de carga/descarga de contenidos de la memoria que no está trabajando bien, ¿quien se encarga de esto, Wordpress, el sistema operativo de la máquina y por tanto el proveedor del servicio, ...?.
Me parece más probable que sea Wordpress el que realiza esta función, y puedo imaginar las dudas para migrar ¿los otros sistemas funcionarán mejor?, porque seguro que hay algo que hace a Wordpress petar y saturar la memoria cuando en teoría parece que puede haber suficiente, ¿se dispone de algún tipo de log en el que se pueda ver en el momento del cuelgue que había en memoria en ese momento?, supongo que no porque seguro que ya se habría comprobado, o que si lo hay no será significativo; ¿y de tráfico, existen logs de tráfico que permitan comprobar quien y a qué se estaba accediendo en el momento de la caída?, también me imagino que de haberlo no arrojará demasiada luz, ...
Si la prueba que estás haciendo ahora de desactivar las páginas personales, muestra alguna de ellas consumiendo demasiada memoria, ¿por qué ha tardado unos meses en petar?, porque creo que desde la última purga, la cosa había ido más o menos bien, por lo menos yo no he tenido problemas de acceso hasta hace alguna semanas, pero es cierto que no puedo participar tanto como desearía. Pero si efectivamente, ha estado funcionando más o menos bien, unos meses, ¿qué ha pasado en las últimas semanas?, ¿que ha cambiado?, si se puede analizar el tráfico, ¿hay algún cambio en el comportamiento de ese tráfico?; los contenidos que se hayan añadido en las últimas semanas, ¿pueden tener algo que ver?.

En fin, de momento no se me ocurre nada más, estoy seguro que he soltado más de una perogrullada, seguramente todo ello lo sea, pero a veces debatir perogrulladas, sacan a luz detalles más importantes que pueden llevar a la solución del problema o simplemente remueven cosas en la mente del que realmente sabe encendiendo alguna bombillita en su cabeza.

Salu2
Mi instrumental
  • Canon EOS 350D: Mi juguete
  • Canon PowerShot S45: Mi primera cámara digital
  • EPSON Perfection 1650: La puerta al baúl de los recuerdos.
  • EPSON Stylus Photo R2880

tat

  • Moderador
  • Palizas oficial
  • *****
  • Mensajes: 9622
  • Patch y buenas vibraciones
    • Libertat
Re: Esto se cae a pedazos
« Respuesta #18 on: 29 ene 2010, 15:35 pm »
Otro tema es saber si cambiar del wordpress a drupal o lo que sea va a poder llevarlo adelante Colegota en su escaso tiempo libre  :ejem:

jofial

  • Palizas oficial
  • *
  • Mensajes: 9513
  • Φ el · sobre la y
Re: Esto se cae a pedazos
« Respuesta #19 on: 29 ene 2010, 15:43 pm »
Otro tema es saber si cambiar del wordpress a drupal o lo que sea va a poder llevarlo adelante Colegota en su escaso tiempo libre  :ejem:

Yo creo que además de los problemas técnicos y su evidente dificultad para aislarlos y resolverlo, esta lo que apunta tat. NO debe ser fácil administrar esto. Y el tiempo de Antonio es finito (por desgracia). Por desgracia no se me ocurre nada para poder ayudarle/ayudarnos... Pero en fin aquí estoy/estaré hasta que se caiga en pedazos (ojalá -en el sentido de n shā' Illah-, no se caiga)

Saludos

Jose

Modificado para aclarar el "ojalá"
« Última Modificación: 30 ene 2010, 10:43 am por jofial »
No hay nada peor que una imagen brillante de un concepto borroso.
Ansel Adams


kallh

  • Bimilenari@
  • **
  • Mensajes: 2242
Re: Esto se cae a pedazos
« Respuesta #20 on: 30 ene 2010, 04:36 am »
Hola,
Simplemente puedo dar mi apoyo a los administradores por el curro que se meten entre pecho y espalda para mantener esto en pie. Yo no puedo opinar técnicamente porque no entiendo de esto. Y tal y como han dicho ya algunos, si hay que arrimar el hombro económicamente (o de cualquier otra forma) pues eso, que aquí estamos para ayudar.
Un saludo,
Andoni

Rulo

  • Milenari@
  • *
  • Mensajes: 1806
Re: Esto se cae a pedazos
« Respuesta #21 on: 30 ene 2010, 14:28 pm »
Pues yo técnicamente para esto soy un poco nulo, por no decir del todo :?. Si decidimos hacer donaciones, contad conmigo también (ya sé que no necesita este debate, pero que sepáis que aquí estoy ;)).

Colegota

  • Palizas oficial
  • *
  • Mensajes: 8188
  • ¡Me faltan carretes!
    • ¡Me faltan carretes!
Re: Esto se cae a pedazos
« Respuesta #22 on: 30 ene 2010, 16:09 pm »
Buenas,

gracias de nuevo por los ánimos/ofertas/ideas. Trataré de responder poco a poco a todo eso que decís del tal Colegota, pero necesito tiempo que es mucho.

Por lo menos, os explico lo que estoy haciendo. Este verano anduve analizando por dónde se iba presuntamente la memoria. El resumen es que el foro, que en realidad es lo que más tráfico lleva, apenas consume una pequeña cantidad y esta permanece estable con el paso del tiempo. Sin embargo Wordpress (las páginas personales y la principal) consume mucha y va creciendo conforme aumenta el número de visitas. Aunque cuesta un poco encontrar información en Internet sobre ello, sí que es un problema conocido aunque no solucionado. Como apaño se ofrecen unos plugins para gestionar caché que la verdad no han resuelto nada.

Lo de la caché se trata de que las páginas como estas son "dinámicas". Es decir se generan cada vez que alguien nos visita, para cada usuario. Y eso consume mucho tiempo, cpu y memoria. Lo de la caché consiste en guardar copias de las páginas ya generadas (puesto que son iguales para todos los usuarios) y mostrarle dichas copias a los siguientes visitantes. La idea es buena, pero aparentemente no funciona. Al menos con nosotros.

En la anterior tanda de pruebas e investigaciones creo recordar que probé por separado el tener activo solo el foro o solo las páginas. Ahora lo que estoy probando es, primero a tener solo la principal, y luego voy a ir activando el resto de las personales de una en una y ver lo que pasa.

Para ver la memoria que se consume en GNU/Linux, lo más práctico e inmediato es el comando top. Viene por defecto, creo que en todas las distros. Así que si tecleáis top en una consola lo veréis actuar. Y veréis la memoria disponible y ocupada entre otras cosas actualizándose en tiempo real. Yo lo que hago es que conecto por ssh con la máquina de nuestro servidor y ahí veo el top. Normalmente, antes de iniciar cada prueba, lo reinicio para asegurarme de que lo que está en ejecución es lo que acabo de activar y que no me queda nada anterior.

La prueba de esta vez consiste en averiguar si cada página suma una misma cantidad de memoria ocupada, si solo con una al cabo de equis visitas se acaba desbordando o si a lo mejor resulta que hay una página en concreto que nos está creando el problema y no es por una "acumulación" sino que es algo localizado.

De entrada, con el foro solamente, nos viene a quedar unos 300 mb libres de los 512. Con todas las páginas activas, enseguida se agotan esos 300. Y quedan un puñao (menos de 50) por lo que el sistema empieza a cargarse procesos para liberar memoria (no se si mejor o peor) y es cuando vienen los problemas. Bueno, en realidad, vendrían cuando no se carga procesos y no libera. Pero después de unos meses con esto sigo sin tenerlo claro. Lo cierto es que con poca memoria se acaba cayendo.

En la primera fase de la prueba actual, he comprobado que la página principal termina consumiendo entre 100 y 140 de esos 300 Mb. Es decir, que vienen a quedar libres más o menos estables unos 160. Desgraciadamente, la prueba hay que hacerla durante un periodo largo. Al menos uno o dos días, porque varía mucho. Ha habido veces que lo he visto bajar hasta 90 libres, pero al poco tiempo estaba en los 160 de nuevo y llegando a recuperar hasta los 180.

Hace un rato he activado la mía, que es de las que más tráfico tienen y la estaré observando. Según lo que encuentre la sustituiré por otra o añadiré más. Al menos espero tener más elementos de juicio antes de tomar decisiones.

En cuanto a porqué "de repente" que decía Enhy, la respuesta rápida es porque ahora estás entrando más y ves estos hilos. ;) Pero llevamos con problemas desde noviembre de 2008. Lo cierto es que el tráfico aumenta continuamente. Aunque tengo la sensación de que mucho más que las visitas, que también crecen. Para que os hagáis una idea, el foro, que como he dicho no debe consumir ni 100 Mb, tiene más de 15000 visitas al mes. Mientras que la página principal entre 3000 y 4000 y las personales que más unas 1600.

Os tendré informados.

Saludos,
Colegota
[Canon EOS 50 40D (sin diapos ni nada)] [Escáner Minolta DSE 5400] [Vuescan] [El GIMP] [Galería] [Página de Viajes]

invisible

  • Moderador
  • Palizas oficial
  • *****
  • Mensajes: 8097
    • INVItARTE
Re: Esto se cae a pedazos
« Respuesta #23 on: 30 ene 2010, 16:15 pm »
Gracias por mantenernos informados; yo me voy enterando de cosillas... aunque reconozco que aún me resulta "espeso".
 :sonroja2:
A ver si va a ser culpa del puñetero buscador de Hasercorp, que está todo el día sniffando... :-? :-? :-?
"Si quieres ver lo invisible, observa con atención lo visible."
                                                     Manuel Álvarez Bravo (1902-2002)

tat

  • Moderador
  • Palizas oficial
  • *****
  • Mensajes: 9622
  • Patch y buenas vibraciones
    • Libertat
Re: Esto se cae a pedazos
« Respuesta #24 on: 30 ene 2010, 16:50 pm »
Estoy empezando a pensar que al final hay alguien que nos lee  :shss: (aunque sean solo la tuya y la principal)

Colegota

  • Palizas oficial
  • *
  • Mensajes: 8188
  • ¡Me faltan carretes!
    • ¡Me faltan carretes!
Re: Esto se cae a pedazos
« Respuesta #25 on: 31 ene 2010, 10:12 am »
A ver si va a ser culpa del puñetero buscador de Hasercorp, que está todo el día sniffando... :-? :-? :-?

Una de las cosas que he visto es que los buscadores nos duplican el tráfico. En el foro por ejemplo, este mes llevábamos 13 Gb de tráfico "visto", es decir de páginas, y 12 Gb de "no visto", es decir de los robots de motores de búsqueda.

Voy a consultar el tema con Jose, porque no se qué es peor, si que no salgamos en los buscadores o esto. Entre otras cosas porque no se cómo afecta al consumo de memoria, pero nos acabamos de pasar del consumo mensual y lo que nos faltaba es que nos empezasen a cobrar el consumo extra.
[Canon EOS 50 40D (sin diapos ni nada)] [Escáner Minolta DSE 5400] [Vuescan] [El GIMP] [Galería] [Página de Viajes]

Colegota

  • Palizas oficial
  • *
  • Mensajes: 8188
  • ¡Me faltan carretes!
    • ¡Me faltan carretes!
Re: Esto se cae a pedazos
« Respuesta #26 on: 31 ene 2010, 10:51 am »
En la primera fase de la prueba actual, he comprobado que la página principal termina consumiendo entre 100 y 140 de esos 300 Mb. Es decir, que vienen a quedar libres más o menos estables unos 160. Desgraciadamente, la prueba hay que hacerla durante un periodo largo. Al menos uno o dos días, porque varía mucho. Ha habido veces que lo he visto bajar hasta 90 libres, pero al poco tiempo estaba en los 160 de nuevo y llegando a recuperar hasta los 180.

Hace un rato he activado la mía, que es de las que más tráfico tienen y la estaré observando. Según lo que encuentre la sustituiré por otra o añadiré más. Al menos espero tener más elementos de juicio antes de tomar decisiones.

Con estas dos funcionando ha llegado a bajar hasta los 20 Mb libres, pero recuperándose de nuevo y quedándose entre 80-100.

Acabo de quitar la mía y dejar funcionando la principal y la de Tat, que es la que más visitas tiene de las personales. Si el consumo fuera parecido, estaríamos ante que el problema es la suma de todas ellas. Si esta consume menos, podría ser un problema en la mía.
[Canon EOS 50 40D (sin diapos ni nada)] [Escáner Minolta DSE 5400] [Vuescan] [El GIMP] [Galería] [Página de Viajes]

Culdesac

  • Trimilenari@
  • ***
  • Mensajes: 3684
  • Quien busca, a veces encuentra respuestas.
    • Phototaxi
Re: Esto se cae a pedazos
« Respuesta #27 on: 31 ene 2010, 12:58 pm »
ya te dije que la mía la puedes eliminar totalmente.
Ama a tu enemigo como quieras que él te ame a tí.

Colegota

  • Palizas oficial
  • *
  • Mensajes: 8188
  • ¡Me faltan carretes!
    • ¡Me faltan carretes!
Re: Esto se cae a pedazos
« Respuesta #28 on: 31 ene 2010, 16:11 pm »
Bueno, hace cosa de una hora he sudado tinta para volver a levantarlo. :buf: Ahora está activa solo LiberTat.
[Canon EOS 50 40D (sin diapos ni nada)] [Escáner Minolta DSE 5400] [Vuescan] [El GIMP] [Galería] [Página de Viajes]

Enhy

  • Papá del Mes
  • Veteran@
  • *
  • Mensajes: 963
Re: Esto se cae a pedazos
« Respuesta #29 on: 31 ene 2010, 20:23 pm »
En cuanto a porqué "de repente" que decía Enhy, la respuesta rápida es porque ahora estás entrando más y ves estos hilos. ;) Pero llevamos con problemas desde noviembre de 2008. Lo cierto es que el tráfico aumenta continuamente. Aunque tengo la sensación de que mucho más que las visitas, que también crecen. Para que os hagáis una idea, el foro, que como he dicho no debe consumir ni 100 Mb, tiene más de 15000 visitas al mes. Mientras que la página principal entre 3000 y 4000 y las personales que más unas 1600.
::) ::) Ostras, es verdad, es culpa mía, además, estas últimas semanas he estado editando cosas en la principal, ...  :cabezazos: :cabezazos: ... pero, ... si aun no está publicado, no vale, no?, ...  ;-D ;-D ;-D
Bueno, ahora en serio, por lo que comentas es un sistema Linux normalito, y yo por lo menos desconozco que puedan haber Logs del estado de la memoria, pero creo que sí los hay de conexiones tipo /var/log/auth.log, o alguno especifico para las conexiones a la web (si lo hay), y a lo mejor, mirando las conexiones previas al cuelgue, se puede llegar a saber qué se estaba visitando, o incluso si son conexiones "extrañas".
Pero bueno, creo que en la detección del problema, es más que probable que ya vayas por el buen camino, ahora voy a hacer una sugerencia para ir más allá: si finalmente la mejor solución es cambiar de Wordpress, entiendo que parte de la problemática (a parte de la migración claro), es elegir un sistema que no genere los mismos problemas, así que se podría crear un clon temporal con otro dominio y otro hospedaje si fuera necesario, en el que realizar las pruebas, y del que no hubiera que preocuparse de si está en linea o no más que para realizar las pruebas.
Obviamente, el coste de esta duplicación, en mi opinión deberíamos cubrirlo los usuarios, ya sea con una donación con el sistema que queráis.

Salu2
Mi instrumental
  • Canon EOS 350D: Mi juguete
  • Canon PowerShot S45: Mi primera cámara digital
  • EPSON Perfection 1650: La puerta al baúl de los recuerdos.
  • EPSON Stylus Photo R2880