Temas a buscar Clonacion DBs 1. 2. 3. 4. 5. 6.
Dataguard Rac WebLogic Forms & Reports Replicacion Migracion
. !loud !ontrol ". D#M#RL $ro%er . 'articionar (ablas 1).Mas%*Data 11.Monitoreos + #ra,icacion de -eridores de $Ds
PostgreSQL
PostgreSQL
Desarrollador(es) 'ostgre-/L #lobal Deelopment #roup www.postgresql.org
Información general Última versión estable Género
.6.2 0in,o de ,ebrero de 2)1 06 das $ase de datos obeto*relacional 0RD$M-
Sistema operativo Licencia En espaol
Multiplata,orma 'ostgre-/L License1 o
PostgreSQL es un -istema de gestin de bases de datos relacional orientado a obetos y libre, publicado bajo la licencia 'ostgre-/L,1 similar a la $-D o la M7(. Como muchos otros proyectos de cdigo abierto, el desarrollo de PostgreSQL no es manejado por una empresa o persona, sino que es dirigido por una comunidad de desarrolladores que trabajan de forma desinteresada, altruista, libre o apoyados por organi8aciones comerciales. Dicha comunidad es denominada el '#D# (PostgreSQL Global Development Group. Índice !ocultar"
1ombre del producto
29istoria
3!aractersticas
3.1:lta concurrencia
3.2:mplia ariedad de tipos natios
3.3tras caractersticas
3.4Funciones
3.5;entaas
4'roductos alrededor de 'ostgre-/L
59istorial de liberaciones
5.1:lternatias !omerciales
5.2#7-
5.3Replicacin
5.49erramientas de administracin
5.5$
to
5.6?ML
6@suarios destacados
'remios
"Re,erencias
Anlaces e>ternos
#ombre del producto $l uso de caracteres en may%scula en el nombre PostgreSQL puede confundir a algunas personas a primera &ista. Las distintas pronunciaciones de ' -/L' pueden lle&ar a confusin. Los desarrolladores de PostgreSQL lo pronuncian )po*st +-s ju* -l)/. $s tambi0n com%n o1r abre&iadamente como simplemente 'Postgres', el que fue su nombre srcinal. Debido a su soporte del est2ndar SQL entre la mayor parte de bases de datos relacionales, la comunidad consider cambiar el nombre al anterior Postgres. Sin embargo, el PostgreSQL Core 3eam anunci en 4556 que el producto seguir1a llam2ndose PostgreSQL. $l nombre hace referencia a los or1genes del proyecto como la base de datos 'post77ngres', y los autores srcinales tambi0n desarrollaron la base de datos 8ngres.
Historia PostgreSQL ha tenido una larga e&olucin, la cual se inicia en 9:;4 con el proyecto 7ngres en la @niersidad de $er%ele+. $ste proyecto, liderado por MicBael -tonebra%er, fue uno de los primeros intentos en implementar un motor de base de datos relacional. Despu0s de haber trabajado un largo tiempo en Ingres y de haber tenido una eni&ersidad en 9:;? para trabajar en un nue&o proyecto sobre la e
la base de datos Ecomprend1aF las relaciones y pod1a obtener informacin de tablas relacionadas utiliando reglas. Postgres us muchas ideas de 8ngres pero no su cdigo. La siguiente lista muestra los hitos m2s importantes en la &ida del proyecto Postgres.
9:;GH se publicaron &arios papers que describ1an las bases del sistema.
9:;;H ya se contaba con una &ersin utiliable.
9:;:H el grupo publicaba la &ersin 9 para una pequeIa comunidad de usuarios.
9::5H se publicaba la &ersin 4 la cual ten1a pr2cticamente reescrito el sistema de reglas. 9::9H publicacin de la &ersin J, esta aIad1a la capacidad de m%ltiples motores de almacenamiento.
9::JH crecimiento importante de la comunidad de usuarios, la cual demandaba m2s caracter1sticas.
9::KH despu0s de la publicacin de la &ersin K, el proyecto termin y el grupo se disol&i. Despu0s de que el proyecto P@S3AB$S terminara, dos graduados de la uni&ersidad, :ndre Eu y oll+ !Ben, comenaron a trabajar sobre el cdigo de P@S3AB$S, esto fue
posible dado que P@S3AB$S estaba licenciado bajo la $-D, y lo primero que hicieron fue aIadir soporte para el lenguaje SQL a P@S3AB$S, dado que anteriormente contaba con un intGrprete del lenguaje de consultas Q>$L (basado en 8ngres, creando as1 el sistema al cual denominaron Postgres:?. Para el aIo 9::G se unieron al proyecto personas ajenas a la >ni&ersidad como Marc Fournier de ub.@rg #etMoring Ser&ices, $ruce Momian y ;adim $. Mi%Bee quienes
proporcionaron el primer ser&idor de desarrollo no uni&ersitario para el esfuero de desarrollo de cdigo abierto y comenaron a trabajar para estabiliar el cdigo de Postgres:?. $n el aIo 9::G decidieron cambiar el nombre de Postgres:? de tal modo que refleje la caracter1stica del lenguaje -/L y lo terminaron llamando PostgreSQL, cuya primera &ersin de cdigo abierto fue lanada el 9 de agosto de 9::G. La primera &ersin formal de PostgreSQL (G.5 fue liberada en enero de 9::6. Desde entonces, muchos desarrolladores entusiastas de los motores de base de datos se unieron al proyecto, coordinaron &1a 8nternet y entre todos comenaron a incorporar muchas caracter1sticas al motor.
unque la licencia permit1a la comercialiacin de PostgreSQL, el cdigo no se desarroll en principio con fines comerciales, algo sorprendente considerando las &entajas que PostgreSQL ofrec1a. La principal deri&acin se srcin cuando Paula aMthtorn (un miembro del equipo srcinal de 8ngres que se pas a Postgres y MicBael -tonebra%er conformaron 8llustra 8nformation 3echnologies para comercialiar Postgres. $n 4555, e< in&ersionistas de Red 9at crearon la empresa Areat Nridge para comercialiar PostgreSQL y competir contra pro&eedores comerciales de bases de datos. Areat Nridge auspici a &arios desarrolladores de PostgreSQL y don recursos de &uelta a la comunidad, pero a fines de 4559 cerr debido a la dura competencia de compaI1as como Bed at y pobres condiciones del mercado. $n 4559, Command Prompt, 8nc. lan =ammonth PostgreSQL, la m2s antigua distribucin comercial de PostgreSQL. Contin%a brindando soporte a la comunidad PostgreSQL a tra&0s del auspicio de desarrolladores y proyectos, incluyendo PL)Perl, PL)php y el alojamiento de proyectos de comunidades como PostgreSQL Nuild Oarm. $n enero de 455?, PostgreSQL recibi apoyo del pro&eedor de base de datos 'erasie -o,tare, conocido por su producto $triee que se utiliaba en la plataforma oell etare. Per&asi&e anunci soporte comercial y participacin comunitaria y logr algo de
0
a PostgreSQL ahora', aunque no se dieron especificaciones en ese momento. Para no&iembre de 455?, Sun Solaris 95 (lanamiento G)5G inclu1a PostgreSQL. $n agosto de 4556 $nterpriseDN anunci el Postgres Besource Center y $nterpriseDN Postgres, diseIados para ser una completamente configurada distribucin de PostgreSQL
incluyendo muchos mdulos contribuidos y agregados. $nterpriseDN Postgres fue renombrado Postgres Plus en maro de 455;. $l proyecto PostgreSQL contin%a haciendo lanamientos principales anualmente y lanamientos menores de reparacin de bugs, todos disponibles bajo la licencia PostgreSQL, y basados en contribuciones de pro&eedores comerciales, empresas aportantes y programadores de cdigo abierto mayormente.
Características lgunas de sus principales caracter1sticas son, entre otrasH
Alta concurrencia =ediante un sistema denominado =CC (cceso concurrente multi&ersin, por sus siglas en ingl0s PostgreSQL permite que mientras un proceso escribe en una tabla, otros accedan a la misma tabla sin necesidad de bloqueos. Cada usuario obtiene una &isin consistente de lo %ltimo a lo que se le hio commit. $sta estrategia es superior al uso de bloqueos por tabla o por ,ilas com%n en otras bases, eliminando la necesidad del uso de bloqueos e
Amplia variedad de tipos nativos PostgreSQL pro&ee nati&amente soporte paraH
#%meros de precisin arbitraria .
3e
Oiguras geom0tricas (con una &ariedad de funciones asociadas.
Direcciones 7' (8P&K e 8P&G.
Nloques de direcciones estilo !7DR.
Direcciones M:!.
:rra+s.
dicionalmente los usuarios pueden crear sus propios tipos de datos, los que pueden ser por completo inde
Otras características
!laes aenas tambi0n denominadas Lla&es ajenas o Cla&es Oor2neas ( foreign keys.
Disparadores (triggersH >n disparador o trigger se define como una accin espec1fica que
se realia de acuerdo a un e&ento, cuando 0ste ocurra dentro de la base de datos. $n PostgreSQL esto significa la ejecucin de un procedimiento almacenado basado en una determinada accin sobre una tabla espec1fica. hora todos los disparadores se definen por seis caracter1sticasH
$l nombre del disparador o trigger
$l momento en que el disparador debe arrancar
$l e&ento del disparador deber2 acti&arse sobre...
La tabla donde el disparador se acti&ar2
La frecuencia de la ejecucin
La funcin que podr1a ser llamada
La funcin no es correcta $ntonces combinando estas seis caracter1sticas, PostgreSQL le permitir2 crear una amplia funcionalidad a tra&0s de su sistema de acti&acin de disparadores ( triggers.
;istas.
8ntegridad transaccional.
erencia de tablas.
3ipos de datos y operaciones geom0tricas.
Soporte para transacciones distribuidas. Permite a PostgreSQL integrarse en un sistema distribuido formado por &arios recursos (p.ej, una base de datos PostgreSQL, otra @racle, una cola de mensajes 8N= =Q =S y un $BP SP gestionado por un ser&idor de aplicaciones donde el 0.sp .
Funciones Nloques de cdigo que se ejecutan en el ser&idor. Pueden ser escritos en &arios lenguajes, con la potencia que cada uno de ellos da, desde las operaciones b2sicas de
programacin, tales como bifurcaciones y bucles, hasta las complejidades de la programacin orientada a objetos o la programacin funcional. Los disparadores (triggers en ingl0s son funciones enlaadas a operaciones sobre los datos. lgunos de los lenguajes que se pueden usar son los siguientesH
>n lenguaje propio llamado 'LI'g-/L (similar al 'LI-/L de oracle. !.
!NN.
aa 'LIaa eb.
'LI'erl.
pl'9'.
'LI'+tBon.
'LIRub+.
'LIsB.
'LI(cl.
'LI-cBeme.
Lenguaje para aplicaciones estad1sticas R por medio de 'LIR. PostgreSQL soporta funciones que retornan 'filas', donde la salida puede tratarse como un conjunto de &alores que pueden ser tratados igual a una fila retornada por una consulta (query en ingl0s. Las funciones pueden ser definidas para ejecutarse con los derechos del usuario ejecutor o con los derechos de un usuario pre&iamente definido. $l concepto de funciones, en otros DN=S, son muchas &eces referidas como 'procedimientos almacenados' (stored procedures en ingl0s.
Ventajas 7Seguridad en t0rminos generales 78ntegridad en NDH restricciones en el dominio 78ntegridad referencial 7firmaciones (ssertions
7Disparadores (3riggers 7utoriaciones 7Cone
Productos alrededor de PostgreSQL $l '#D# solo desarrolla el =otor de Datos y un n%mero pequeIo de utilidades, para potenciar el trabajo con PostgreSQL suele ser necesario aIadir utilidades e
Historial de liberaciones Liberación "#"$ $#" &#" &#$ &#
Primera liberación
Última versión menor
Última liberación
15*)5*)1
).)3
15*)*21
15*)*)5
1.)
$%%&!$$!"'
1*)1*2
O
1*)6*)"
6.1.1
$%%!"!
1*1)*)2
6.2.1
$%%!$"!$
&#*
1"*)3*)1
6.3.2
$%%+!"'!"
&#'
1"*1)*3)
6.4.2
$%%+!$!"
&#,
1*)6*)
6.5.3
$%%%!$"!$*
#"
2)))*)5*)"
.).3
"""!$$!$$
#$
2))1*)4*13
.1.3
""$!"+!$,
#
2))2*)2*)4
.2."
"",!",!"%
#*
2))2*11*2
.3.21
""+!"$!"
#' +#"
2))3*11*1 2))5*)1*1
.4.3) ".).26
"$"!$"!"' "$"!$"!"'
+#$
2))5*11*)"
".1.23
"$"!$!$&
+#
2))6*12*)5
".2.23
"$$!"%!&
+#*
2))"*)2*)4
".3.23
"$*!"!"
+#'
2))*)*)1
".4.22
"$'!"!'
%#"
2)1)*)*2)
.).23
"$,!$"!"+
!!! !
2)11*)*12 %#$ %# 2)12*)*1) 2)13*)*) %#* 2)14*12*1" %#' %#, 2)16*)1*) 2)16*)*2 %#& Soportado por la com-nidad
.1.24 .2.1 .3.15 .4.1) .5.5 .6.1
"$&!$"! "$&!$"! "$&!$"! "$&!$"! "$&!$"! "$&!$"!
Sin soporte de la com-nidad2
Alternativas Comerciales Aracias a su licencia $-D, se permite la utiliacin del cdigo para ser comercialiado. >no de los casos ejemplo es la de $nterprise DN (Postgresql Plus, la cual incluye &arios agregados y una interfa de desarrollo basada en aa. $ntre otras empresas que utilian Postgresql para comercialiar se encuentra Cyber3ech (lemania, con su producto CyberCluster.
GIS PostGIS $
eplicaci!n Pg.l-ster Beplicacin multi maestro. Slon/!I Beplicacin maestro escla&o. P/0eplica Beplicacin maestro escla&o y multi maestro asincrnica.
"erramientas de administraci!n Pg1dmin* $ntorno de escritorio &isual. 8nstalable en plataformas Linu>, Free$-D, -olaris, Mac -? y Windos. Permite conectarse a bases de datos PostgreSQL que est0n ejecut2ndose en
cualquier plataforma. Oacilita la gestin y administracin de bases de datos ya sea mediante instrucciones SQL o con ayuda de un entorno gr2fico. Permite acceder a todas las funcionalidades de la base de datos/ consulta, manipulacin y gestin de datos, incluso opciones a&anadas como manipulacin del motor de replicacin Slony78 Pg1ccess $ntorno de escritorio &isual. P2pPg1dmin $ntorno Meb.
ps#l Cliente de consola. Database 3aster $ntorno de escritorio &isual.
$%s#ueda de te&to Full te&t searc' 8ncluido en el n%cleo a partir de la &ersin ;.J. ia (searcB2 y penF(- para &ersiones anteriores a la ;.J.
()L 43L*4SL5 soporte ia ?'atB e>tensiones en la seccin contrib .
Usuarios destacados
.org, .in,o, .mobi y .aero registros de dominios por :,ilias.3
La :merican !Bemical -ociet+.
$:-F.
7MDb.
-%+pe.
(i;o.
'enn+ :rcade.
-on+ nline.4
@.-. Departamento de (rabao.
@-'-.
;eri-ign.
'ictiger.com
Wisconsin !ircuit !ourt :ccess con G R 9;5AN DNs replicados en tiempo real.
pen:!- y .LR.
7A#7. 7FA.
!arto!iudad .5 del 8A# de $spaIa.
Premios PostgreSQL ha recibido los siguientes reconocimientosH6
9::: Linu<orld $ditorTs Choice Mard for Nest Database
4555 Linu< ournal $ditorsT Choice Mards for Nest Database
4554 Linu< #eM =edia $ditors Choice Mard for Nest Database
455J Linu< ournal $ditorsT Choice Mards for Nest Database 455K Linu< #eM =edia Mard Oor Nest Database
455K Linu< ournal $ditorsT Choice Mards for Nest Database
455K rs3echnica Nest Ser&er pplication Mard
455? Linu< ournal $ditorsT Choice Mards for Nest Database
455G Linu< ournal $ditorsT Choice Mards for Nest Database
455; De&eloper.com Product of the Uear, Database 3ool
PgAdmin III
pgAdmin III es una aplicación gráfica para gestionar PostgreSQL
pgAdmin III es una aplicación gráfica para gestionar el gestor de bases de datos 'ostgre-/L, siendo la más completa y popular con licencia Open Source. Está escrita en !! usando la librer"a gráfica multiplataforma #ue permite #ue se pueda usan en Linu>, Free$-D, -olaris, Mac - ?y Windos. Es capa$ de gestionar %ersiones a partir de la PostgreSQL &.' e(ecutándose en cual#uier plataforma, as" como %ersiones comerciales de 'ostgre-/Lcomo Per%asi%e Postgres, Enterprise)*, +ammot -eplicator y S-A Poer/res.
>Widgets, lo
pgAdmin III está dise0ado para responder a las necesidades de todos los usuarios, desde escribir consultas SQL simples asta desarrollar bases de datos comple(as. El interfa$ gráfico soporta todas las caracter"sticas de y facilita enormemente la administración. La aplicación tambi1n incluye un editor SQL con resaltado 'ostgre-/L de sinta2is, un editor de código de la parte del ser%idor, un agente para lan$ar scripts programados, soporte para el motor de replicación Slony3I y muco más. La cone2ión al ser%idor puede acerse mediante cone2ión 4P5IP o 6ni2 )omain Soc7ets 8en plataformas 9ni2:, y puede encriptarse mediante SSL para mayor seguridad.
.ontenido ;ocultar<
1 7nstalacin 2 :ctuali8ar a una ersin mPs moderna 2.1 MGtodo rPpido 2.2 MGtodo compilado 3 ;er tambiGn 4 Anlaces e>ternos
Instalación
La %ersión =.>.' trae importantes me(oras
)ado #ue esta aplicación se encuentra en los repositorios, tan sólo tendremos #ue instalar el pa#uete pgadmin3. En el men? de aplicaciones no %erás #ue se incluya una entrada para esta aplicación. Esto es debido a #ue ay un error en la elaboración del pa#uete. Esto pasa con los pa#uetes )ebian #ue no se an
adaptado a la pol"tica de men?s de 6buntu. Lee el art"culo :ctiar el men< Debianpara %er como se acti%a el men? )ebian y luego %erás como aparece la entrada en Aplicaciones 3@ Debian 3@ Apps 3@ Databases.
Actuali$ar a una %ersión más moderna La %ersión de pgAdmin III #ue %iene en los repositorios es algo antigua 8la =..: y la aplicación ya %a por la =.B., de modo #ue es buena idea ponerse un poco al d"a. 4ienes dos opciones, o usas los pa#uetes #ue e compilado yo o los compilas tu. Si as elegido el m1todo fácil, los pa#uetes están en BttpHII.guia* . ubuntu.orgIpa=uetesI En Egdy y Ceisty ya %iene la %ersión =.>.' en los repositorios, de modo #ue la puedes instalar fácilmente.
Método rápido La ?ltima %ersión de pgAdmin asta el momento es la =.B. la cual no compila en 6buntu pero si #ue puedes instalar una %ersión =.B.D compilada a0adiendo este repositorio a la lista deb http://ftp5.es.postgresql.org/mirror/postgresql/pgadmin3/release/ubuntu gutsy pgadmin
!ambia g-ts/ por feist/ o dapper seg
Método compilado Si as elegido el m1todo complicado, lo #ue aremos es compilar una 6buntu el pa#uete de )ebian de la ?ltima %ersión. =.3 Eliminamos la %ersión de pgAdmin III #ue tenemos instalada $ sudo aptitude purge pgadmin3
.3 A0ade el siguiente repositorio de fuentes 8la puedes eliminar al final: deb-src ftp://ftp.es.debian.org/debian unstable main
'.3 Actuali$amos la base de datos de los pa#uetes 8dará un error de %erificación de cla%e P/P #ue puedes ignorar: $ sudo aptitude update
>.3 Instalamos lo necesario para compilar $ sudo aptitude install build-essential
F.3 Instalamos las dependencias necesarias para compilar el pa#uete $ sudo apt-get build-dep pgadmin3 pgadmin3-data
G.3 /eneramos los pa#uetes compilados para instalar a partir de los fuentes 8tarda un rato: $ sudo apt-get -b source pgadmin3 pgadmin3-data
&.3 Instala los pa#uetes generados $ sudo dpkg -i pgadmin3_1.4.3-1_i386.deb pgadmin3-data_1.4.3-1_all.deb
B.3 Eliminamos los ficeros intermedios $ sudo rm -rf pgadmin3* pgagent*
Administración y manual de PostgreSQL en Linux
7nstalacin de 'ostgre-/L en !ent-H
!one>in a un seridor 'ostgre-/LH
'ermitir cone>iones remotas a 'ostgre-/LH
Modi,icar la contraseCa del usuario postgres de 'ostgre-/LH
!omprobar la ersin de 'ostgre-/L instaladaH
$ac%up + restore de bases de datos en 'ostgre-/LH
:ctiar el modo de compatibilidad con ersiones anteriores de 'ostgre-/LH
7nstalacin de 'ostgre-/L en un seridor con 'les%H
!one>in a 'ostgre-/L desde '9'H
:ctuali8ar el ,ormatoIes=uema de las bases de datos 'ostgre-/LH
Instalación de PostgreSQL en .ent6S Para utili$ar el ser%idor de bases de datos PostgreSQL en entOS es necesario instalar los pa#uetes postgresql y postgresqlser!er yum install postgresql-server postgresql
/rab
El pa#uete postgresqlser!er contiene los binarios del ser%idor )*+S, y postgresql las utilidades cliente para conectarnos a un ser%idor, as" como documentación en formato 4+L y las páginas JmanJ. El ser%icio no #ueda acti%ado en el arran#ue, as" #ue lo acti%aremos con la utilidad c"#con$ig # chkconfig postgresql on # /etc/init.d/postgresql start Iniciando la base de datos:
[
O
!
Iniciando servicios postgresql:
[
O
!
/rab
.one7ión a -n servidor PostgreSQL Para conectarnos al ser%idor PostgreSQL nos cambiamos al usuario postgres y utili$amos el LI psql, e(emplo # su - postgres " psql -d template -$ postgres
%elcome to psql &..' the (ostgre)*+ interactive terminal.
,ype:
copyright for distribution terms h for help ith )*+ commands for help ith psql commands
g or terminate ith semicolon to e0ecute query q to quit
template1#
/rab
Permitir cone7iones remotas a PostgreSQL Por seguridad, tras una instalación defecto de PostgreSQL en entOS, este aceptará ?nicamente cone2iones locales en elpor puerto %&3'(tcp # netstat -punta 2 grep +I),34 tcp 5 86/postmaster
5 67.5.5.:896
5.5.5.5:;
+I),34
/rab
Para modificar este comportamiento tenemos #ue editar el ficero (!ar(lib(pgsql(data(pg)"ba*con$, #ue contiene la configuración para la autenticación de clientes y a0adir el listado de las redes y5o IPs desde las #ue nos %amos a conectar # vim /var/lib/pgsql/data/pg&.5.5/69 trust host all all 5.5.5./6 trust
/rab
Además, tenemos #ue editar el ficero (!ar(lib(pgsql(data(postgresql*con$ y modificar el
parámetro listen)addresses para indicar #ue escuce en las interfaces necesarias, en este caso lo abilitaremos para todas # vim /var/lib/pgsql/data/postgresql.conf listen
/rab
El ?ltimo paso es reiniciar el ser%icio y comprobar #ue los cambios se an aplicado correctamente # /etc/init.d/postgresql restart (arando el servicio
postgresql:
Iniciando servicios postgresql:
[
O
!
[
O
!
# netstat -punta 2 grep +I),34 tcp 5 8>5&/postmaster
5 5.5.5.5:896
5.5.5.5:;
+I),34
/rab
En este e(emplo, permitimos el acceso a la red =K.=GB.D.D5> y a la IP =D.=D.D.=, #uedando el ser%icio postmaster escucando en todas las interfaces . Para mas información consultar el cap"tulo !lient :utBenticationQ de la gu"a de :dministracin de 'ostgre-/LQ.
3odificar la contrasea del -s-ario postgres de PostgreSQL Para cambiar la contrase0a de un usuario de PostgreSQL tenemos #ue utili$ar la sentencia SQL AL+,- .S,- usuario /0+1 PASS/2-D # su - postgres " psql -d template -$ postgres
template1# @+,3A $)3A postgres %I,B (@))%OAC ?Da*>ADAhEb?F @+,3A AO+3
/rab
.omprobar la versión de PostgreSQL instalada La forma mas cómoda es e(ecutando la sentencia SQL S,L,+ 4,-S02567, e(emplo template1# )3+3G, H3A)IO4JF
version
---------------------------------------------------------------------------------------------------------(ostgre)*+ &.. on 0&><>9-redhat-linu0-gnu' compiled by KGG gcc KGGJ 9..6 65575>6> Aed Bat 9..6-9J filaJ
/rab
8ac9-p / restore de bases de datos en PostgreSQL En PostgreSQL tenemos el comando pg)dump para reali$ar copias de seguridad de **)), su uso es muy similar al mysqldump de +ySQL. En este e(emplo obtenemos un listado de todas las **)) e2istentes y reali$amos el bac7up de una de ellas " +@4K1en<$) psql -l +ist of databases 4ame
2
Oner
2 3ncoding
--------------L----------L---------postgres
2 postgres 2 $,E&
template5
2 postgres 2 $,E&
template
2 postgres 2 $,E&
oop
" pg
/rab
El resultado es un ficero ASII con todas las sentencias SQL necesarias para restaurar la **)). Para restaurar una **)) desde un ficero utili$aremos el comando " psql -d oop
/rab
Para acer un bac7up de todas las **)) podemos utili$ar el comando pg)dumpall o reali$ar un pe#ue0o script en *AS, e(emplo #/bin/bash CIA1/var/lib/pgsql/backups +@4K1en<$) +I),1"psql -l 2 ak ?P print "Q? 2 grep -v3 ?R-2R+ist2R4ame2template[52!2R?J for db in "+I), do pg
/rab
"CIA/"db.gD
1ctivar el modo de compatibilidad con versiones anteriores de PostgreSQL Para abilitar la compatibilidad con %ersiones anteriores de PostgreSQL tenemos #ue editar el ficero (!ar(lib(pgsql(data(postgresql*con$ y a0adir las siguientes %ariables 8mas información en el cap"tulo ;ersion and 'lat,orm !ompatibilit+ Q: add
/rab
addmissingfrom Men on, tables tat are referenced by a #uery ill be automatically added to te C-O+ clause if not already present. 4is bea%ior does not comply it te SQL standard and many people disli7e it because it can mas7 mista7es 8suc as referencing a table ere you sould a%e referenced its alias:. 4e default is off. 4is %ariable can be enabled for compatibility it releases of PostgreSQL prior to B.=, ere tis bea%ior as alloed by default.
arraynulls 4is controls eter te array input parser recogni$es un#uoted N6LL as specifying a null array element. *y default, tis is on, alloing array %alues containing null %alues to be entered. oe%er, PostgreSQL %ersions before B. did not support null %alues in arrays, and terefore ould treat N6LL as specifying a normal array element it te string %alue JN6LLJ. Cor bac7ards compatibility it applications tat re#uire te old bea%ior, tis %ariable can be turned off.
bac7slas#uote 4is controls eter a #uote mar7 can be represented by in
adoubling string literal. 4ePostgreSQL preferred, SQL3standard represent.a oe%er, #uote mar7 it 8: but as istoricallyay alsotoaccepted useisofby creates security ris7s because in some client caracter set encodings, tere are multibyte caracters in ic te last byte is numerically e#ui%alent to ASII . If client3side code does escaping incorrectly ten a SQL3in(ection attac7 is possible. 4is ris7 can be pre%ented by ma7ing te ser%er re(ect #ueries in ic a #uote mar7 appears to be escaped by a bac7slas. 4e alloed %alues of bac7slas#uote are on 8allo alays:, off 8re(ect alays:, and safeencoding 8allo only if client encoding does not allo ASII itin a multibyte caracter:. safeencoding is te default setting.
defaultitoids 4is controls eter -EA4E 4A*LE and -EA4E 4A*LE AS include an OI) column in nely3created tables, if neiter MI4 OI)S nor MI4O64 OI)S is specified. It also determines eter OI)s ill be included in tables created by SELE4 IN4O. In PostgreSQL B.= defaultitoids is off by default in prior %ersions of PostgreSQL, it as on by default.
escapestringarning Men on, a arning is issued if a bac7slas 8: appears in an ordinary string literal 8... synta2: and standardconformingstrings is off. 4e
default is on. Applications tat is to usete bac7slas as escapeofsould be modified to use escape string synta2 8E...:, because default bea%ior ordinary strings ill cange in a future release for SQL compatibility. 4is %ariable can be enabled to elp detect applications tat ill brea7. standardconformingstrings 4is controls eter ordinary string literals 8...: treat bac7slases literally, as specified in te SQL standard. 4e default is currently off, causing PostgreSQL to a%e its istorical bea%ior of treating bac7slases as escape caracters. 4e default ill cange to on in a future release to impro%e compatibility it te standard. Applications can cec7 tis parameter to determine o string literals ill be processed. 4e presence of tis parameter can also be ta7en as an indication tat te escape string synta2 8E...: is supported. Escape string synta2 sould be used if an application desires bac7slases to be treated as escape caracters.
rege2fla%or 4e regular e2pression Jfla%orJ can be set to ad%anced, e2tended, or basic. 4e default is ad%anced. 4e e2tended setting migt be useful for e2act bac7ards compatibility it pre3&.> releases of PostgreSQL.
s#lineritance 4is controls te ineritance semantics. If turned off, subtables are not included by %arious commands by default basically an implied ONLR 7ey ord. 4is as added for compatibility it releases prior to &.=.
Podemos comprobar #ue el cambio de dicas %ariables de configuración se a reali$ado correctamente con la siguiente consulta # su - postgres -bash-.6" psql -d template -$ postgres template1# )3+3G, name' setting EAON pg
/rab
Si al a0adir y5o modificar cual#uier %ariable PostgreSQL no arranca tendremos #ue re%isar el ficero de log (!ar(lib(pgsql(pgstartup*log para encontrar cual#uier arning5error del tipo
E@,@+:
unrecogniDed configuration parameter Sarray
E@,@+:
parameter Sstandard
/rab
Instalación de PostgreSQL en -n servidor con Ples9 52+A8 Para poder gestionar bases de datos 'ostgre-/L desde Ples7 se necesita comprar el addon 'oer 'ac%Q
6na %e$ comprado el addon, el panel de control Ples7 permite la gestión de bases de datos 'ostgre-/L.
Podemos instalar 'ostgre-/L en Ples7 de dos formas =: desde el interfa$ eb 8ome 3@ 6pdates 3@ 'ostgre-/L: y : desde una sell con el JautoinstallerJ # autoinstaller --select-release-current --install-component postgresql
/rab
El siguiente paso es acti%arlo usuario administrador postgres Q
en el inicio del ser%idor, arrancar el ser%icio y asignar una contraseCa al
# chkconfig postgresql on # /etc/init.d/postgresql start # su - postgres " psql -d template -$ postgres template1# @+,3A $)3A postgres %I,B (@))%OAC ?passord?F @+,3A AO+3
/rab
)epu1s tenemos #ue entrar al interfa$ eb 8ome 3@ )atabase Ser%ers: y configurar el usuario administrador JpostgresJ con su contrase0a, a partir de a#u" podremos gestionar 'ostgre-/L desde el Ples7. Además, se instala la erramienta de adminstración eb ppPgAdmin para los clientes (unto con una utilidad muy básica pg)manage #ue permite parar, arrancar e reinciar el ser%icio 'ostgre-/L.
.one7ión a PostgreSQL desde P:P Para conectarnos a PostgreSQL desde P1P necesitamos instalar el pa#uete p"ppgsql, #ue propociona las e2tensiones pdo)pgsql*so y pgsql*so # yum install php-pgsql # /etc/init.d/httpd restart
/rab
En una instalación de 'ostgre-/L sobre entOS, el m1todo de autenticación configurado por defecto es JidentJ 8ser%icio #ue no está abilitado por defecto:, por lo #ue al conectarnos desde PP obtendremos el siguiente error +OK:
could not connect to Ident server at address S67.5.5.S' port : Gonnection refused
E@,@+:
Ident authentication failed for user SrecoverS
/rab
La solución pasa por editar el ficero (!ar(lib(pgsql(data(pg)"ba*con$ y cambiar el m1todo de autenticación # vim /var/lib/pgsql/data/pg
all
all
67.5.5./6
ident sameuser
host
all
all
67.5.5./6
md8
/rab
1ct-ali;ar el formato
# /etc/init.d/postgresql stop # su - postgres " pg
/rab
Si tras actuali$ar una instacia de PostgreSQL no actuali$amos el formato de las bases de datos al arrancar nos encontrar"amos con este error @n old version of the database format as found. Tou need to upgrade the data format before using (ostgre)*+. )ee /usr/share/doc/postgresql-&.9.7/[email protected] for more information.
1.
Introducción 2. Funcionamiento de la Arquitectura 3. Instalación 4. Configuración 5. Creación y Manejo de ase de !atos "ostgre#$% &. "#$% '. "(Admin III ). #eguridad *. #$% 1+. ,es-aldos y ,ecu-eración 11. Monitoreo y stad/sticas 12. ,utinas de Mantenimiento 13. "oint0in ime ,ecoery
7ntroduccin PostgreSQL es un sistema de gestión de bases de datos ob(eto3relacional, distribuido ba(o licencia *S) y con su código fuente disponible libremente. Es el sistema de gestión de bases de datos de código abierto más potente del mercado y en sus ?ltimas %ersiones no tiene nada #ue en%idiarle a otras bases de datos comerciales.
PostgreSQL utili$a un modelo cliente5ser%idor y usa multiprocesos en %e$ de multihilos para garanti$ar la estabilidad del sistema. 6n fallo en uno de los procesos no afectará el resto y el sistema continuará funcionando. A continuación teneis un gráfico #ue ilustra de manera general los componentes más importantes en un sistema PostgreSQL.
Aplicación cliente Esta es la aplicación cliente #ue utili$a PostgreSQL como administrador de bases de datos. La cone2ión puede ocurrir %ia 4P5IP ó soc7ets locales. )emonio postmaster Este es el proceso principal de PostgreSQL. Es el encargado de escucar por un puerto5soc7et por cone2iones entrantes de clientes. 4ambien es el encargado de crear los procesos i(os #ue se encargaran de autentificar estas peticiones, gestionar las consultas y mandar los resultados a las aplicaciones clientes Ciceros de configuracion Los ' ficeros principales de configuración utili$ados por PostgreSQL, postgres#l.conf, pgba.conf y pgident.conf
Procesos i(os postgres Procesos i(os #ue se encargan de autentificar a los clientes, de gestionar las consultas y mandar los resultados a las aplicaciones clientes PostgreSQL sare buffer cace +emoria compartida usada por POstgreSQL para almacenar datos en cac1. Mrite3Aead Log 8MAL: omponente del sistema encargado de asegurar la integridad de los datos 8recuperación de tipo -E)O: Uernel dis7 buffer cace ac1 de disco del sistema operati%o )isco )isco f"sico donde se almacenan los datos y toda la información necesaria para #ue PostgreSQL funcione
!aractersticas La ?ltima serie de producción es la K.'. Sus caracter"sticas t1cnicas la acen una de las bases de datos más potentes y robustas del mercado. Su desarrollo comen$o ace más de =G a0os, y durante este tiempo, estabilidad, potencia, robustez, facilidad de administración e implementación de estándares an sido las caracter"sticas #ue más se an tenido en cuenta durante su desarrollo. PostgreSQL funciona muy bien con grandes cantidades de datos y una alta concurrencia de usuarios accediendo a la %e$ a el sistema. A continuación teneis algunas de las caracter"sticas más importantes y soportadas por PostgreSQL
/enerales
Es una base de datos =DDV :!7D Integridad referencial 4ablespaces Nested transactions 8sa%epoints: -eplicación asincrónica5sincrónica 5 Streaming replication 3 ot Standby 4o3pase commit PI4- 3 point in time reco%ery opias de seguridad en caliente 8Online5ot bac7ups: 6nicode Wuegos de caracteres internacionales -egionali$ación por columna +ulti3Xersion oncurrency ontrol 8+X: +ultiples m1todos de autentificación Acceso encriptado %ia SSL Actuali$ación in3situ integrada 8pgupgrade: SE3postgres ompleta documentación Licencia *S) )isponible para Linu2 y 6NIY en todas sus %ariantes 8AIY, *S), P36Y, S/I I-IY, +ac OS Y, Solaris, 4ruG>: y Mindos '5G>bit.
Programación 5 )esarrollo
Cunciones5procedimientos almacenados 8stored procedures: en numerosos lengua(es de programacion, entre otros PL5pgSQL 8similar al PL5SQL de oracle:, PL5Perl, PL5Pyton y PL54cl *lo#ues anónimos de código de procedimientos 8sentencias )O:
Numerosos tipos de datos y posibilidad de definir nue%os tipos. Además de los tipos estándares en cual#uier base de datos, tenemos disponibles, entre otros, tipos geom1tricos, de direcciones de red, de cadenas binarias, 66I), Y+L, matrices, etc Soporta el almacenamiento de ob(etos binarios grandes 8gráficos, %ideos, sonido, ...: APIs para programar en 5!!, Wa%a, .Net, Perl, Pyton, -uby, 4cl, O)*, PP, Lisp, Sceme, Qt y mucos otros.
SQL
SQLK,SQLKK,SQLDD',SQLDDB Lla%es primarias 8primary 7eys: y foráneas 8foreign 7eys:
ec7, 6ni#uedey unicidad Not null constraints -estricciones postergables 8deferrable constraints: olumnas auto3incrementales Indices compuestos, ?nicos, parciales y funcionales en cual#uiera de los metodos de almacenamiento disponibles, *3tree, -3tree, as ó /iS4 Sub3selects onsultas recursi%as Cunciones Mindos Woins Xistas 8%ies: )isparadores 8triggers: comunes, por columna, condicionales. -eglas 8-ules: erencia de tablas 8Ineritance: E%entos LIS4EN5NO4ICR
Podeis consultar la lista completa en ingles de caracter"sticas disponibles en todas las %ersiones en la dirección BttpHII.postgres=l.orgIaboutI,eaturematri> Algunos de los limites de PostgreSQL son
L>mite
?alor
MP>imo tamaCo base de dato 7limitado 0Depende de tu sistema de almacenamiento MP>imotamaCodetabla 32($ MP>imotamaCode,ila 1.6($ MP>imotamaCodecampo 1#$ MP>imo numero de ,ilas por tabla 7limitado MP>imo num ero de columnas por tabla 25) * 16)) 0dependien do del tipo MP>imo numero de indices por tabla 7limitado
9istoria El proyecto PostgreSQL tal y como lo conocemos oy en dia empe$ó en =KKG, aun#ue las bases y el traba(o en la #ue se asienta tienen sus comien$os en la decada de los &D. A continuación teneis una corta descripción de la istoria de PostgreSQL.
Ingres =K&&3=KBF 3 "El comienzo" La d1cada de los &D fue una d1cada de desarrollos y pruebas de nue%os conceptos en el nue%o mundo de los gestores de bases de datos.
I*+ abia estado traba(ando desde =K&' con los primeros conceptos, ideas y teorias sobre bases de datos relacionales. Su proyecto JSystem -J fue entre otras cosas la primera implementación del lengua(e SQL 8Structured Query Language:. Este proyecto, sus decisiones de dise0o y mucos de los algoritmos usados, influenciaron mucos de los sistemas de bases de datos relacionales #ue aparecieron posteriormente. Por a#uel entonces un profesor de la 6ni%ersidad de *er7eley, +icael Stonebra7er, leyo unos art"culos publicados por I*+ sobre JSystem -J #ue le icieron interesarse en el tema. 6tili$ando el dinero de otro proyecto #ue ya tenia asignado, Ingres 8INteracti%e /rapics -Etrie%al System:, Stonebra7er empe$o a desarrollar sus ideas sobre bases de datos relacionales. )urante estos a0os Ingres mantu%o su código fuente abierto y permanecio en gran medida similar en conceptos a JSystem -J. A principio de los BD, Ingres estu%o compitiendo con Oracle por el lidera$go en el mundo de bases de datos relacionales y su código e implementación e%olucionaron y fueron el srcen de otras bases de datos relacionales, entre ellas podemos citar a Informi2, NonStop SQL y Sybase 8+icrosoft SQL Ser%er fue una %ersión licenciada de Sybase asta su %ersion G.D:. +icael Stonebra7er de(o la 6ni%ersidad de *er7eley en =KB para comerciali$ar Ingres pero %ol%io a la misma en =KBF con nue%as ideas.
Postgres =KBG3=KK> 3 Despues post! de ingres )espues de su %uelta a *er7eley en =KBF, +icael Stonebra7er lideró un nue%o proyecto llamado Postgres 8despues de Ingres: patrocinado por la Defense d#anced $esearch Pro%ects gency D$P! , la rmy $esearch &ffice $&!, la 'ational Science (oundation 'S(! , y ESL, )nc. on este proyecto y basandose en la e2periencia obtenida con Ingres, Stonebra7er tenia como meta me(orar lo #ue abian conseguido y aprendido en el desarrollo de Ingres. R aun#ue se baso en mucas ideas de Ingres, no se baso en el código fuente del mismo. Los ob(eti%os iniciales de este proyecto fueron
Proporcionar un me(or soporte para ob(etos comple(os Proporcionar a los usuarios la posibilidad de e2tender los tipos de datos, operadores y m1todos de acceso. Proporcionar los mecanismos necesarios para crear bases de datos acti%as 8triggers, etc: Simplificar el código encargado de la recuperación del sistema despues de una ca"da del mismo acer cambios m"nimos 8preferiblemente ninguno: en el modelo relacional. +e(orar el lengua(e de consulta Q6EL eredado de Ingres 8POS4Q6EL:.
Para los interesados en el tema, teneis disponibles una serie de art"culos srcinales y completos en ingles relacionados con el proyecto Postgres
"The design of POSTGRES"
"The POSTGRES data model"H Al mdelo de datos de 'ostgres
El dise0o de Postgres
"The design of the POSTGRES storage system" El dise0o del sistema de almacenamiento de Postgres Presentación de la %ersión = de Postgres en la conferencia A+3 "The implementation of POSTGRES"
omentarios "A commentary on the POSTGRES rules system"
Sobre "On Rules Procedures !aching and iews in #ata$ase Systems"
SI/+O) de =KBB sobre el sistema de reglas de Postgres reglas, procedimientos, cace y %istas
en sistemas de bases de datos La ?ltima %ersión de Postgres en este pro(ecto fue la %ersión >..
PostgresKF =KK>3=KKF 3 'ue#a #ida en el mundo opensource En =KK>, dos estudiantes de *er7eley, Andre Ru y Wolly en, empe$aron a traba(ar con el código de Postgres 8%ersión >.: y llamaron al proyecto PostgresKF. icieron una limpie$a general del código, arreglaron errores en el mismo, e implementaron otras me(oras, entre las #ue destacan
Sustitución de POS4Q6EL por un interprete del lengua(e SQL -eimplementación de las funciones agregadas ps#l fue creado para e(ecutar consultas SQL El interface de ob(etos grandes 8large3ob(ect: fue re%isado 6n pe#ue0o tutorial sobre Postgres fue creado
Postgres se pudo empe$ar a compilar con /N6 ma7e y / sin parcear La %ersión =.D de PostgreKF %io la lu$ en =KKF, el código era =DDV ANSI , un FV más corto en relación con la %ersión >. y un 'D3FDV más rápido. El código fue publicado en la eb y liberado ba(o una licencia *S), y más y más personas empe$aron a utili$ar y a colaborar en el proyecto.
PostgreSQL =KKG3actualidad 3 Proyecto PostgreSQL En =KKG, Andre Ru y Wolly en ya no tenian tanto tiempo para dirigir y desarrollar PostgresKF. Algunos de los usuarios abituales de las listas de correo del proyecto decidieron acerse cargo del mismo y crearon el llamado "PostgreSQL *lobal De#elopment +eam". En un principio este e#uipo de desarrolladores al cargo de la organi$ación del proyecto estu%o formado por +arc Cournier en Ontario, anada, 4omas Loc7art en Pasadena, alifornia, Xadim +i7ee% en Urasnoyars7, -usia y *ruce +om(ian in Piladelpia, Pennsyl%ania. El nombre fue cambiado de PostgresKF a PostgreSQL y lan$aron la %ersión G.D en enero de =KK&. oy en dia el grupo central 8core team: de desarrolladores está formado por G personas, e2isten 'B desarrolladores principales y más = desarrolladores abituales. En total alrededor de GF personas acti%as, contribuyendo con el desarrollo de PostgreSQL. Podeis encontrar más información sobre este e#uipo de desarrolladores en BttpHII.postgres=l.orgIcommunit+IcontributorsI E2iste tambien una gran comunidad de usuarios, programadores y administradores #ue colaboran act"%amente en numerosos aspectos y acti%idades relacionadas con el proyecto. Informes y soluciones de problemas, tests, comprobación del funcionamiento, aportaciones de nue%as ideas, discusiones sobre caracter"sticas y problemas, documentación y fomento de PostgreSQL son solo algunas de las acti%idades #ue la comunidad de usuarios reali$a. No tenemos #ue ol%idar tampoco #ue e2isten mucas empresas #ue tambien colaboran con dinero y5ó con tiempo5personas en me(orar PostgreSQL. +ucos desarrolladores y nue%as caracter"sticas están mucas %eces patrocinadas por empresas pri%adas. En los ?ltimos a0os los traba(os de desarrollo se an concentrado muco en la %elocidad de proceso y en caracter"sticas demandadas en el mundo empresarial. En este gráfico podeis %er cuando las diferentes %ersiones de PostgreSQL an %isto la lu$ y las principales caracteristicas en las #ue se a centrado el desarrollo.
)urante los a0os de e2istencia del Proyecto PostgreSQL, el tama0o del mismo, tanto en n?mero de desarrolladores, como en n?meros de linea de código, funciones y comple(idad del mismo a ido aumentando a0o a a0o. En el siguiente gráfico teneis una gráfica con la e%olución del n?mero de lineas de código en cada %ersión de PostgreSQL.
Los datos de este gráfico estan generados con L&- ontabilizamos como lineas de código a todas las lineas de código en diferentes lengua%e, más comentarios, menos lineas en blanco- Los ficheros .+/L y SS no se cuentan como código-
6sando el modelo de estimación de costes de softare "&&/&))" onstructi#e &st /&del! podemos obtener unos datos meramente orientati%os pero #ue nos pueden ayudar a entender la comple(idad del proyecto PostgreSQL y los recursos #ue se necesitarian para desarrollar un producto similar desde cero. Seg?n OO+OII, obtendriamos estos n?meros para PostgreSQL K.D.D
Descripción
?alor
6.562 )S6
!ompleidad del proecto 0alta 'recioIBora 0T1)).)))IaCo * 1."5BorasIaCo
1S24 T53S3
'rogramadores*aCo 61"S1 'recioporlineadecdigo T65S3) 'recio(otal T63.316.6 Lineas de cdigo por personaIdia (iempo de desarrollo del pro+ecto 0aCos 3.6
!iclo de ida 0AL + soporte El Proyecto PostgreSQL tiene como ob(eti%o mantener y soportar cada %ersión de PostgreSQL durante F a0os desde el momento de su lan$amiento. A continuación teneis un resumen del ciclo de %ida de las diferentes %ersiones de PostgreSQL
?ersión ?ersión menor Soportada Lan;amiento Soporte .2 .1 .) ".4
.2.) .1.5 .). ".4.13
-i -i -i -i
-ep2)12 -ep2)11 -ep2)1) u2l ))
-ep2)1 -ep2)16 -ep2)15 u2l )14
".3 ".2 ".1 ".) .4 .3 .2 .1 .)
".3.2) ".2.23 ".1.23 ".).26 .4.3) .3.21 .2." .1.3 .).3
-i o o o o o o o o
Feb2))" Dic2))6 o2))5 Ane2))5 o2))3 o2))2 Feb2))2 :br2))1 Ma+2)))
Feb2)13 Dic2)11 o2)1) ct2)1) ct2)1) o2)) Feb2)) :br2))6 Ma+2))5
6.5 6.4 6.3
6.5.3 6.4.2 6.3.2
o o o
un1 c1t " Mar1"
un2))4 c2t ))3 Mar2))3
4. Configuración
on$iguración básica de PostgreSQL )om, K5D'5DDK 3 =FG Z rafaelma PostgreSQL se puede empe$ar a utili$ar nada más terminar de instalarlo y despues de iniciali$ar nuestro JclusterJ, sin necesidad de configurar nada. Pero si %amos a utili$ar PostgreSQL para algo importante y con cierto %olumen de datos y usuarios es imprescindible #ue lo configuremos para dico traba(o. No es la primera %e$ #ue algun asuario protesta o esta super preocupado de lo mal y lo lento #ue funciona su cluster de base de datos PostgreSQL en un ser%idor ultimo modelo con mucisima memoria. Normalmente el problema es #ue PostgreSQL no a sido configurado para traba(ar con el %olumen de datos y usuarios con el #ue lo estamos usando. No es una gran ayuda tener un ser%idor con %arios /*ytes de memoria -A+ si le emos dico a PostgreSQL, por e(emplo, #ue no utilice más de '+*ytes. 4ambien tenemos #ue decir #ue cual#uier base de datos #ue se este usando acti%amente, no solo PostgreSQL, es un elemento dinamico y %i%o en el #ue estamos cambiando los datos constantemente y donde el tama0o de los datos almacenados suele ir creciendo con el tiempo. Esto significa #ue una configuracion #ue funcione bien con ciertos %alores oy, puede #ue no funcione tan bien despues de unos meses de uso y #ue necesite a(ustarse para #ue funcione optimalmente. El comportamiento de PostgreSQL en nuestro sistema se puede controlar con tres ficeros de configuración #ue se encuentran en el directorio de datos donde iniciali$amos nuestro cluster PostgreSQL 5%ar5pgs#l5data
8En nuestro caso
:. Estos tres ficeros son Este ficero se utili$a para definir los diferentes tipos de accesos #ue un usuario tiene en el cluster. pg)ident*con$ Este ficero se utili$a para definir la información necesaria en el caso #ue utilicemos un acceso del tipo ident en pgba.conf . postgresql*con$ En este ficero podemos cambiar todos los parametros de configuracion #ue afectan al funcionamiento y al comportamiento de PostgreSQL en nuestra ma#uina. pg)"ba*con$
Pasamos a continuación a e2plicar los cambios mas importantes #ue podemos acer en algunos de estos ficeros.
pgba.conf Este ficero se utili$a para definir como, donde y desde #ue sitio un usuario puede utili$ar nuestro cluster PostgreSQL. 4odas las lineas #ue empie$en con el caracter[ se interpretan como comentarios. El resto debe de tener el siguiente formato ;4ipo de cone2ion<;database<;usuario<;IP<;Netmas7<;4ipo de autentificacion<;opciones<
)ependiendo del tipo de cone2ion y del tipo de autentificacion, ;IP<,;Netmas7< y ;opciones
testDD= test =D.D.D.=DD FF.FF.FF.FF mdF
Esta misma entrada se podria escribir tambien con la mascara de red en notacion I)- ost
testDD= test =D.D.D.=DD5' mdF
E(emplo .3 Acceso por tcp5ip 8red: a la base de datostestDD=, como usuario test desde todos los ordenadores de la red =D.D.D.D, con mascara de red FF.FF.FF.D 8F> ordenadores en total: y metodo de autentificacion mdF ost
testDD= test =D.D.D.D FF.FF.FF.D mdF
Esta misma entrada se podria escribir tambien con la mascara de red en notacion I)- ost
testDD= test =D.D.D.D5> mdF
E(emplo ' .3 Acceso por tcp5ip 8red:, encriptado, a todas las bases de datos de nuestro cluster, como usuario test desde el ordenador con IP =D.D.D.=DD, y el ordenador =D.=.=.=DD y metodo de autentificacion mdF 8necesitamos dos entradas en nuestro ficero pgba.conf ostssl
all test =D.D.D.=DD FF.FF.FF.FF mdF
ostssl
all test =D.=.=.=DD FF.FF.FF.FF mdF
E(emplo >.3 )enegar el acceso a todos las bases de datos de nuestro cluster al usuario test, desde todos los ordenadores de la red =D.D.D.D5> y dar accesso al resto del mundo con el metodo mdF ost
all test =D.D.D.D5> re(ect
ost
all all D.D.D.D5D
mdF
Asi podriamos seguir (ugando con todas las posibilidades #ue nos brinda este ficero de configuracion. Por supuesto #ue las bases de datos y usuarios usados en este ficero tienen #ue e2istir en nuestro cluster para #ue todo funcione y algunos de los parametros solo se pueden usar si emos compilado con las opciones pertinentes en el proceso de instalacion 8por e(emplo, ostssl, pam, 7rbF: Para poder en produccion los cambios en este ficero tendremos #ue decirle a PostgreSQL #ue %uel%a a leerlo. *asta con un simple 0reload0 85usr5local5bin5pgctl 3) 5%ar5pgs#l5data reload: desde la linea de comandos o con la funcion pgreloadconf8: como usuario postgres desde ps#l, el cliente PostgreSQL. ;postgres\ser%idor<[ 5usr5local5bin5ps#l
Melcome to ps#l B..>, te PostgreSQL interacti%e terminal.
4ype copyrigt for distribution terms for elp it SQL commands ] for elp it ps#l commands g or terminate it semicolon to e2ecute #uery # to #uit
postgres^[ SELE4 pgreloadconf8:
pgreloadconf 3333333333333333 t 8= ro:
postgres^[
Para una documentacion detallada sobre el ficero pgba.con, pasaros por la seccion !Bapter 2). !lient la documentacion oficial de PostgreSQL.
:utBenticationde
postgres#l.conf Los cambios #ue realicemos en este ficero afectaran a todas las bases de datos #ue tengamos definidas en nuestro cluster PostgreSQL. La mayoria de los cambios se pueden poner en produccion con un simple 0reload0 85usr5local5bin5pgctl 3) 5%ar5pgs#l5data reload:, otros cambios necesitan #ue arran#uemos de nue%o nuestro cluster 85usr5local5bin5pgctl 3) 5%ar5pgs#l5data restart:. +as informacion sobre todos los parametros #ue podemos cambiar en este ficero, #ue afectan y como se pueden poner en produccion se puede encontrar en la seccion 1. -erer !on,iguration de la documentacion oficial de PostgreSQL. A continuacion %amos a %er los parametros mas importantes #ue deberiamos cambiar si empe$amos a usar PostgreSQL para un uso serio y si #ueremos sacarle el ma2imo partido a nuestra ma#uina. E2isten mucos mas parametros #ue se pueden y con el tiempo se deberan de a(ustar, a#ui nos %amos a centrar en los mas importantes y los cuales deberiamos cambiar antes de empe$ar a utili$ar PostgreSQL de una manera seria. ma2connections
Numero ma2imo de clientes conectados a la %e$ a nuestras bases de datos. )eberiamos
de incrementar este %alor en proporcion al numero de clientes concurrentes en nuestro cluster PostgreSQL. 6n buen %alor para empe$ar es el =DD ma2connections ^ =DD
saredbuffers
Este parametro es importantisimo y define el tama0o del buffer de memoria utili$ado por PostgreSQL. No por aumentar este %alor muco tendremos me(or respuesta. En un ser%idor dedicado podemos empe$ar con un FV del total de nuestra memoria. Nunca mas de =5' 8''V: del total. Por e(emplo, en un ser%idor con >/bytes de memoria, podemos usar =D>+* como %alor inicial. saredbuffers ^ =D>+*
or7mem
6sada en operaciones #ue contengan O-)E- *R, )IS4IN4, (oins, .... En un ser%idor dedicado podemos usar un 3>V del total de nuestra memoria si tenemos solamente unas pocas sesiones 8clientes: grandes. omo %alor inicial podemos usar B +bytes. or7mem ^ B+*
maintenanceor7mem
6sada en operaciones del tipo XA66+, ANALR_E, -EA4E IN)EY, AL4E- 4A*LE, A)) CO-EI/N UER. Su %alor dependera muco del tama0o de nuestras bases de datos. Por e(emplo, en un ser%idor con >/bytes de memoria, podemos usar FG+* como %alor inicial. maintenanceor7mem ^ FG+*
effecti%ecacesi$e
Parametro usado por el #uery planner de nuestro motor de bases de datos para optimi$ar la lectura de datos. En un ser%idor dedicado podemos empe$ar con un FDV del total de nuestra memoria. omo ma2imo unos 5' 8GGV: del total. Por e(emplo, en un ser%idor con >/bytes de memoria, podemos usar D>B+* como %alor inicial. effecti%ecacesi$e ^ D>B+*
cec7pointsegments
Este parametro es muy importante en bases de datos con numerosas operaciones de escritura 8insert,update,delete:. Para empe$ar podemos empe$ar con un %alor de G>. En grandes databases con mucos /bytes de datos escritos podemos aumentar este %alor asta =B3FG. cec7pointsegments ^ G>
Es muy importante tener en cuenta #ue al aumentar los %alores por defecto de mucos de estos parametros, tendremos #ue aumentar los %alores por defecto de algunos parametros del 7ernel de nuestro sistema. Informacion detallada de como acer esto se encuentra en la seccion 16.4. Managing Uernel Resourcesde la documentacion oficial de PostgreSQL. En fin, esto es solo un aperiti%o de lo #ue podemos acer. on la practica y la e2periencia podremos y tendremos #ue a(ustar otros mucos parametros. Pero esto sera materia de un pro2imo articulo.
Primeros pasos Lo necesario para comen$ar a utili$ar PostgreSQL dependerá muco de ciertos factores. Estos factores se podrian resumir de la siguiente manera
E2periencia `4enemos alguna e2periencia con otras bases de datos relacionales] `Estamos acostumbrados a la terminologia utili$ada ó conocemos algo de teoria de bases de datos relacionales] 4ipo de uso `ómo %amos a utili$arla, en sistemas de producción, para desarrollar otros sistemas, para (ugar y aprender SQL con ella] 4ama0o del sistema `ual es el tama0o de las bases de datos #ue #uereis administrar, las medis en +*, /*, 4*] arga del sistema `uantos usuarios %an a utili$ar el sistema y #ue concurrencia podemos esperar] )isponibilidad `uales son los re#uisitos de disponibilidad 8uptime: de nuestro sistema]
omo podeis %er, son %arios los factores a tener en cuenta para a%eriguar lo #ue necesitamos si #ueremos utili$ar PostgreSQL como nuestro sistema de gestion de bases de datos. )ependiendo de nuestra e2periencia, el tipo de uso, el tama0o de los datos a gestionar, el numero de usuarios y re#uisitos de disponibilidad, podremos tardar de solo unos cuantos minutos a %arios dias5semanas en instalar un sistema PostgreSQL #ue cubra nuestras necesidades. Si simplemente #uereis probar y "%ugar" un poco con PostgreSQL, e2isten distribuciones binarias en casi todas las distribuciones de Linu2 e2istentes y para sistemas Mindos. on cual#uiera de estos pa#uetes binarios podeis tener una instalación básica y lista para utili$ar en cuestión de pocos minutos. 4ambien teneis por supuesto el código fuente disponible y listo para ser compilado5instalado, si preferis este tipo de instalación. Pasaros por la seccin de descargaspara obtener más información sobre los productos disponibles. Si #uereis utili$ar PostgreSQL de una manera profesional y con sistemas en producción deberiais planificar %uestro sistema con más detalle y aprender como podeis configurar PostgreSQL para sacarle el má2imo pro%eco. Es importante decir #ue una de las caracteristicas principales de PostgreSQL es su facilidad de administración comparada con mucos otros sistemas de gestión de bases de datos. Probablemente tengais mucas preguntas, os aconse(o consultar -obre 'ostgre-/L , 1) ra8ones para utili8ar la sección de documentacindel ser%idor. Si teneis alguna pregunta podeis utili$ar los ,oros del seridor ó utili$ar cual#uiera de los ser%icios disponibles 8listas de correos 5 irc5 etc: en la sección !omunidad 'ostgre-/Ly I soporte
8nstalacin de ser&idor de PostgreSQL y configuracin
V
Truco Métodos El sitio de 'ostgre-/L lista el método de instalación disponible. Escoge la que mejor te provea.
$jemplo en >buntu Usa los siguientes comandos en tu terminal para instalar el paquete de postgresql: sudo apt-get install postgresql
Por ejemplo: openerpopenerp-desktop:/! sudo apt-get install postgresql
Para una interfaz gráfica de postgresql, usa el siguiente comando: sudo apt-get install pgadmin3
Por ejemplo: openerpopenerp-desktop:/! sudo apt-get install pgadmin3
Puedes encontrar el nuevo elemento de pgAdmin III del menú en tu sistema Ubuntu desde Aplicaciones ‣ Programación ‣ pgAdmin III .
Configura un usuario en PostgreSQL para @pen$BP Cuando la instalación del software requerido este terminado, deberás crear un usuario de PostgreSQL. Este usuario deberá ser el mismo que tu sistema de usuario. OpenERP usará este usuario para conectarse a PostgreSQL.
Ilustración demostrando como OpenERP hace uso del usuario de PostgreSQL e interactua con este
Truco Base de datos Como se explico antes, sin crear y configurar usuario de PostgreSQL para OpenERP, no podrá crear una base de datos usando el cliente OpenERP.
Primer m0todo El super usuario predeterminado de PostgreSQL se llama postgres. Deberá ingresar con este usuario la primera vez. openerpopenerp-desktop:/! sudo su postgres password: """"""""""
Ahora crea el usuario de PostgreSQL openerp usando el siguiente comando: postgresopenerp-desktop:/! createuser openerp #hall the new role be a superuser$ %y/n& y
Make this new user a superuser. Only then you can create a database using OpenERP Client. In short, openerp is the new user created in PostgreSQL for OpenERP. This user is the owner of all the tables created by OpenERP Client. Ahora checa la lista de tablas creadas en PostgreSQL usando los siguientes comandos: postgresopenerp-desktop:/! psql -l
Puede encontrar la tabla tempalte1, ejecuta el siguiente comando usando esta tabla: postgresopenerp-desktop:/! psql template'
Usa el siguiente comando para aplicar los permisos de acceso al rol openerp para que la base de datos la cual será creada desde el cliente de OpenERP:
template'() alter role openerp with password *postgres*+ ,0 01
Segundo método Otra opción para crear y configurar un usuario en PostgreSQL para el OpenERP es mostrado a continuación: postgresopenerp-desktop:/! createuser --createdb --username postgres --nocreaterole --pwprompt openerp nter password for new role: """""""""" nter it again: """""""""" #hall the new role be a superuser$ %y/n& y 20, 01
Nota Contraseña Nota que la contraseña espostgres. Explicación de opciones:
--createdb
: el nuevo usuario será capaz de crear una nueva base de
datos : createuser usará el usuario postgres (superuser) : el nuevo usuario no será capaz de crear nuevos
--username postgres
--no-createrole
--pwprompt
openerp
usuarios : createuser requerirá la nueva contraseña del usuario : el nuevo nombre del usuario
Deberá configurar las conexiones de la siguiente forma para poder tener acceso vía pgAdmin III:
MANUAL DE INSTALACIÓN DE PostgreSQL
PARA INSTALAR POSTGRESQL 9.2.3-1 EN WINDOWSSE DEER! CUMPLIR CON EL SIGUIENTE PROCEDIMIENTO" 1.- ACCEDER A UN E#PLORADOR DE INTERNET E INGRESAR LA SIGUIENTE DIRECCIÓN $$$.%ostgres&'.org()o$*'o+)($,*)o$s
2. PARA EL SIGUIENTE PASO ACER CLIC SORE DOWNLOAD. ESTO SER! PARA DESCARGAR EL INSTALADOR DEL PROGRAMA POSTGRESQL.
3.-SELECCIONAMOS EL MODO DE INSTALACIÓN.
.- UNA /E0 DESCARGADO EL INSTALADOR ACEMOS DOLE CLIC SORE EL ICONO EMPE0AMOS LAS INSTALACIÓN.
.- SALDR! UNA IMAGEN PARECIDA A ESTA"
4.- LUEGO APARECER! LA SIGUIENTE /ENTANA PRESIONAMOS SORE SIGUIENTE.
5.- NUE/AMENTE SE MOSTRARA UNA /ENTANA EN DONDE PONDREMOS LA DIRECCIÓN O EL DIRECTORIO DE INSTALACIÓN EN DONDE /AMOS A GUARDAR EL PROGRAMA.
6.- AORA APARECER! UNA NUE/A /ENTANA AQU7 PONDREMOS LA DIRECCIÓN DE DONDE /AMOS A GUARDAR LOS DATOS.
9.- PULSAMOS NUE/AMENTE SIGUIENTE A7 TE APARECER! UNA /ENTANA EN LA QUE NOS PEDIR! UNA CONTRASE8A DE USUARIO DE POSTGRESQL INGRESAREMOS NUESTRA CONTRASE8A.
1.- ENSEGUIDA APARECER! UNA /ENTANA EN LA QUE PEDIR! EL PUERTO POR DONDE SE COMUNICARA EL PROGRAMA ESTE APARECER! POR DE:AULT ES EL PUERTO 32 DE;AMOS EL MISMO N
11.- AORA TE PEDIR! SI DESEAS CAMIAR LA CON:IGURACIÓN REGIONAL DE;AREMOS LA QUE DA POR DE:AULT AREMOS CLIC EN SIGUIENTE"
12.- AORA APARECER! UNA /ENTANA EN LA CUAL INDICAR! QUE EL PROGRAMA EST! LISTO PARA INSTALARSE. POSTERIOR A ESTO AREMOS CLIC EN SIGUIENTE.
13.- NOS APARECER! UNA /ENTANA EN LA CUAL OSER/AREMOS QUE SE EST! INSTALANDO POSTRESQL.
1.- :INALMENTE :INIQUITAMOS LA INSTALACIÓN ACIENDO CLIC EN TERMINAR.
1.-PODEMOS IR AL PROGRAMA ACIENDO CLIC EN INICIO TODOS LOS PROGRAMAS USCAMOS POSTRESQL POR ULTIMO ACEMOS CLIC EN PGADMINIII.
14.- EL PROGRAMA EST! LISTO PARA USARSE.
15.- PARA PODER USAR Postgres&' =CONECTAR CON EL SER/IDOR> DEEMOS INTRODUCIR LA CONTRASE8A QUE NOSOTROS COMO USUARIOS ELEGIMOS DURANTE EL PROCESO DE LA INSTALACIÓN.
Ahora podrá iniciar el servidor de OpenERP. Quizas deberá modificar el archivo de configuración de ~/.openerprc OpenERP para sus necesidades las cuales estan normalmente ubicadas en el directorio
Instalación de PostgreSQL en Debian GNULinu! "#ee$% 4is entry as posted on D=5D'5D=', in $ase de datos, Distros #@ILinu>, #@LMAR, Linu>, Migracin, -o,tare libreand tagged aptitude, Debian, gnu linu>, #@LMAR, Linu>, Migracin, 'ostgre-/L, -o,tare libre, WBee8+. *oo7mar7 te permalin%. 46 comentarios Este articulo explica como instalar el servidor y un cliente de lineas de comandos de la base de datos PostgreSQL en Debian Wheezy.
Introducción
PostgreSQL
'ostgre-/L es un gestor de base de datos relacional la primera versi!n del c!digo "ue p#blico el $ de agosto de $%%& liberado ba'o la licencia (SD y desarrollado porPostgreSQL ) Global Development Group”.
Debian *+,-Linux
Debian #@ILinu> es un sistema operativo liberado ba'o la licencia *PL y desarrollado por )Proyecto Debian una comunidad de desarrolladores y usuarios.
Instalación Para este caso se instalara el servidor y un cliente de lineas de comandos PostgreSQL de la versi!n %.$ e'ecutando el siguiente comando/ ) aptitude install postgresql-.'
Con&iguración Lo primero 0ue se tiene 0ue hacer es cambiarle la contrase1a al usuariopostgres’ 2 0ue se crea luego de haber instalado el pa0uete/ ) passwd postgres 3cceda a la consola de administraci!n de PostgreSQL para cambiar la contrase1a del usuario 2postgres’ con los siguientes comandos/ ) su postgres
postgresnombre_maquina:/directorio! psql postgres postgres() ,0 01 postgres 4,##106 *2170,#7,_6_8#8,091*+ Donde 2postgres’ es el nombre del usuario al cual debe cambiar la contrase1a 2CONTRASENA_DEL_USUARIO’ por la 0ue estableci! previamente y luego salga de la sesi!n e'ecutando los siguientes comandos/ postgres() q
postgresnombre_maquina:/directorio! e;it
Con&iguración de acceso local Para dar acceso local es decir dar accesos a clientes PostgreSQL 0ue est4n en el mismo servidor donde esta instalando el servidor PostgreSQL puede aplicar las siguientes con"iguraciones b4sicas/ Debe 0ue cambiar el archivo de configuración del servidor PostgreSQL con el siguiente comando/
) vim /etc/postgresql/.'/main/postgres0l.con" (us0ue la linea listen_addresses y veri"i0ue 0ue su valor sea el siguiente/ listen_addresses ( *localhost* *uarde el archivo y salga del editor. 5ambi6n debe modi"icar elarchivo de configuración del cliente PostgreSQL con el siguiente comando/
) vim /etc/postgresql/.'/main/pg7hba.con" En este archivo puede con"igurar los modos de autenticaci!n del cliente PostgreSQL y con 0ue usuario puede acceder a los datos almacenados en el servidor PostgreSQL. Para este caso de con"iguraci!n usted esta conect4ndose localmente en el mismo servidor donde esta instalado PostgreSQL por lo cual la 8P local es127.0.0.1 entonces agregue deba'o de la linea ) I"#$ lo%al %onne%tions&' la siguiente instrucci!n/ host nombre_base_datos usuario_postgresql
'<=.>.>.'/3<
password
Donde 2no()re_)ase_datos’ y 2*s*ario_postgres+l’ es el nombre de la base de datos y el usuario de PostgreSQL a crear respectivamente mas adelante en este articulo. 9on estas con"iguraciones hechas debe reiniciar el servicio de PostgreSQL con el siguiente comando/ ) service postgresql restart
Con&iguración de acceso remoto Para dar acceso remoto a clientes PostgreSQL desde otro ma0uina o mascara de red distinta a la de donde esta instalado servidor PostgreSQL puede aplicar las siguientes con"iguraciones b4sicas/
Debe 0ue cambiar el archivo de configuración del servidor PostgreSQL con el siguiente comando/
) vim /etc/postgresql/.'/main/postgres0l.con" (us0ue la linea listen_addresses , -lo%alost’ y la cambia por el siguiente/ listen_addresses ( *?* :pcionalmente usted puede simplemente unir las direcciones 8P especi"icas a la cual da acceso de la siguiente "orma/ listen_addresses(*'<.'@A.3.<<> '<.'@A.3.<<'* *uarde el archivo y salga de la edici!n. 5ambi6n debe modi"icar elarchivo de configuración del cliente PostgreSQL con el siguiente comando/
) vim /etc/postgresql/.'/main/pg7hba.con" En este archivo puede con"igurar desde 0ue ma0uina o mascara de red puede acceder a los datos almacenados en el servidor PostgreSQL y con 0ue usuario se puede acceder. Para e'emplo practico 0ue se suponga 0ue esta en una red1/2.1.1.11 as; 0ue 0uiere darle acceso a la 8P 1/2.1.3.220 agregue deba'o de la linea ) I"#$ lo%al %onne%tions&' la siguiente instrucci!n/ host nombre_base_datos usuario_postgresql '<.'@A.<.3/3< md5 Donde 2no()re_)ase_datos’ y 2*s*ario_postgres+l’ es el nombre de la base de datos y el usuario de PostgreSQL a crear respectivamente mas adelante en este articulo. El 2(d4’ es el m6todo de envi! de la contrase1a del usuario PostgreSQL por la red a comparaci!n de la Configuración de acceso local 0ue se de"ine en 2pass5ord’ la cual env;a la contrase1a en texto plano
por la red en la Configuración de acceso remota se con"igura 2(d4’ ya 0ue env;a contrase1as ci"radas. 9on estas con"iguraciones hechas debe reiniciar el servicio del servidor PostgreSQL con el siguiente comando/ ) service postgresql restart
Creando usuarios Para crear usuarios vuelve a entrar como root de PostgreSQL para crear usuarios para conectarse a la base de datos en este caso usuario *s*ario_no(ina’ 2 con su contrase1a 2123$4’ con el siguiente comando/ ) su postgres
postgresnombre_maquina:/directorio! createuser -6 -# -0 -l usuario_nomina Este usuario 2*s*ario_no(ina’ tiene permiso para no %rear )ase de datos no ser s*per *s*ario no %rear roles de usuario se le per(ite ini%iar sesi6n respectivamente.
Para asignar la contrase1a debe conectarse al servidor PostgreSQL con el siguiente comando/ postgresnombre_maquina:/directorio! psql postgres Esta la sesi!n conectado altere el usuario asignando una contrase1a ci"rada con el siguiente comando/ postgres() ,0 8#0 usuario_nomina 9B 720C46 4,##106 *'<3D5@*+
,0 01 Para comprobar 0ue el usuario se creo con 6xito e'ecute los siguientes comandos/ postgres() #2 usenameE passwd F01G pg_shadow+
usename
H
passwd
----------------I------------------------------------postgres
H md53'=5bce'd3<>'d'@5Dcebfd=eb3fd
usuario_nomina H md5bad=D3>5>fa@bA''3>A55f@cbb35=ee %< filas& Luego salga de la sesi!n de base de datos e'ecutando el siguiente comando/ postgres() q
Creando base de datos Primero tiene 0ue iniciar sesi!n como usuario )root de PostgreSQL con el siguiente comando/ ) su postgres Luego de iniciar sesi!n en el servidor como )root ahora usted puede crear una base de datos con el siguiente comando/ postgresnombre_maquina:/directorio! createdb -template> -1 usuario_nomina
-8F-A sistema_nomina Esta base de datos 2siste(a_no(ina’ se basa en la plantilla de base de datos llamadate(plate0’ 2 con la cual es construida el usuario due1o de la base de datos es el usuario*s*ario_no(ina’ 2 previamente creado usando el es0uema de codi"icaci!n de caracteresUT8’ 2 soportado a ser usado en esta base de datos respectivamente. Para los privilegios del usuario *s*ario_no(ina’ 2 en la base de datos 2siste(a_no(ina’ debe conectarse al servidor PostgreSQL e'ecute el siguiente comando/ postgresnombre_maquina:/directorio! psql postgres 3l estar en la sesi!n conectado otorgue todos los privilegios al usuario 2 *s*ario_no(ina’ en la base de datos 2siste(a_no(ina’ con el siguiente comando/ postgres() J0,7 , 409K9J# 17 6,,L,# sistema_nomina 1 usuario_nomina+ Para comprobar 0ue la base datos esta creada e'ecute el siguiente comando/ postgres() #2 datname F01G pg_database+
datname ----------------template> postgres template' sistema_nomina %D filas& Luego salga deq la sesi!n de base de datos e'ecutando el siguiente comando/ postgres()
Cargar estructura de datos % registros 3 continuaci!n se crear4 una base de datos basado en un script 0ue importa toda las sintaxis en lenguaje de definición de datos (DDL) y lenguaje de manipulación de datos (DML) en SQL para construirla e'ecute el siguiente comando/
postgresnombre_maquina:/directorio! psql -8 postgres -f /home/macagua/ script.s0l
Luego salga de la sesi!n de usuariopostgres e'ecutando el siguiente comando/ postgresnombre_maquina:/directorio! e;it
'ccediendo a la base de datos ,na ves realizado los pasos anteriormente descritos ahora puede conectarse con el usuario 2*s*ario_no(ina2 a la base de datos s2 iste(a_no(ina’ y para estoy existe varias "ormas de acceso 0ue se describen a continuaci!n/
'cceso local a la base de datos Se utiliza este "orma de acceso a la base de datos cuando tiene hecha una %on9ig*ra%i6n de a%%eso lo%al y para esto se e'ecuta el siguiente comando/ postgresnombre_maquina:/directorio! psql -d sistema_nomina -8 usuario_nomina
2ontraseMa para usuario usuario_nomina: psql %.'.A& 6igite NhelpO para obtener ayuda.
sistema_nomina(P help stQ usando psqlE la interfaR de lSnea de Trdenes de 4ostgre#U. 6igite: copyright para ver los tVrminos de distribuciTn h para ayuda de Trdenes #U $ para ayuda de Trdenes psql g o punto y coma %N+O& para eWecutar la consulta q para salir sistema_nomina(P
'cceso remoto a la base de datos Se utiliza este "orma de acceso a la base de datos cuando tiene hecha una %on9ig*ra%i6n de a%%eso re(oto a di"erencia del a%%eso lo%al a la )ase de datos en este caso tiene 0ue indicar el ost’ 2 al cual
se desea conectar para hacer esto se e'ecuta el siguiente comando/ postgresnombre_maquina:/directorio! psql -h '>.'>.<.5> -8 usuario_nomina -d
sistema_nomina 2ontraseMa para usuario usuario_nomina: psql %.'.A& 6igite NhelpO para obtener ayuda.
sistema_nomina(P help stQ usando psqlE la interfaR de lSnea de Trdenes de 4ostgre#U. 6igite: copyright para ver los tVrminos de distribuciTn h para ayuda de Trdenes #U $ para ayuda de Trdenes psql g o punto y coma %N+O& para eWecutar la consulta q para salir sistema_nomina(P < as; de esta "orma =esta listo para traba'ar con la base de datos>
Seg-ridad La seguridad de la base de datos esta implementada en arios nielesH 'roteccin de los ,icBeros de la base de datos. (odos los ,icBeros almacenados en la base de datos estan protegidos contra escritura por cual=uier cuenta =ue •
no sea la del superusuario de 'ostgres. Las cone>iones de los clientes al seridor de la base de datos estan permitidasS por de,ectoS locales + no mendiante soc%ets (!'I7'. 9a de arrancarse el demonio con la opcion *i para permitir la cone>ion de clientes no locales. •
Las cone>iones de los clientes se pueden restringir por direccin 7' +Io por nombre de usuario mediante el ,icBero pgKBba.con, situado en '#KD:(:. •
Las cone>iones de los clientes pueden ser autenti,icadas mediante otros pa=uetes e>ternos. •
: cada usuario de 'ostgres se le asigna un nombre de usuario + 0opcionalmente una contraseCa. 'or de,ectoS los usarios no tienen permiso de escritura a bases de datos =ue no Ba+an creado. •
Los usuarios pueden ser incluidos engruposS + el acceso a las tablas puede restringirse en base a esos grupos. •
:utenti,icacion de @suarios Autentificacion es el proceso mediante el cual el seridor de la base de datos + el postmaster se aseguran de =ue el usario =ue estP solicitando acceso a la base de datos es en realidad =uien dice ser. (odos los usarios =ue =uieren utili8ar 'ostgres se comprueban en la tabla pgKuser para asegurarse =ue estPn autori8ados a Bacerlo. :ctualmenteS la eri,icacin de la identidad del usuario se reali8a de distintas ,ormasH
Desde la sBell del usuario @n demonio =ue se lan8a desde la sBell del usuario anota el id srcinal del postgres. Al id srcinal del usuario antes de reali8ar un setuid al idtipo del usuario usuario se emplea como base para todo de comprobaciones.
Desde la red -i 'ostgres se instala como distribuidoS el acceso al puerto (!' del postmaster estP disponible para todo el mundo. Al :$D con,igura el ,icBero pgKBba.con, situado en el directorio '#KD:(: especi,icando el sistema de autenti,icacion a utili8ar en base al e=uipo =ue reali8a la cone>in + la base de datos a la =ue se
conecta. ;er pg%h$a.conf&'( para obtener una descripcin de los sistemas de autenti,icacin disponibles. 'or supuesto la autenti,icacin basada en e=uipos no es per,ecta incluso en los sistemas @ni>. As posibleS para determinados intrusosS enmascarar el e=uipo de srcen. Astos temas de seguridad estPn ,uera del alcance de 'ostgres.
@ombres de -s-ario / gr-pos 'ara crear un nueo usuarioS eecute el programa createuser. 'ara aCadir un usario o un grupo de usarios a un nueo grupo uno de los usuarios debe crear el grupo + aCadir al resto a ese grupo. An 'ostgres estos pasos no pueden reali8arse actualmente mendiante el comando create gro-p. Los grupos se de,inen aCadiendo los alores a la tabla pgKgroupS + usando el comandogrant para asignar priilegios al grupo. !rear @suarios !rear #rupos :ctualmente no Ba+ una ,orma ,acil de crear grupos de usuarios. 9a+ =ue aCadirlosIactuali8arlos uno a uno en la tabla pgKgroup table. 'or eemploH oll+X insert into pgKgroup 0gronameS gros+sidS grolist oll+X alues 0YpostBac%ersYS Y1234YS YZ5443S "261[Y\ 7-AR( 54"224 oll+X grant insert on ,oo to group postBac%ers\ !9:#A oll+X Los campos de pgKgroup sonH ] gronameH Al nombre del grupo. Aste campo debe de ser unicamente al,anumGrico. o aCadas subra+ados u otros signos de puntuacin. ] gros+sidH Al id del grupo. Al tipo del campo es int4 + debe de ser
.ontrol de 1cceso 'ostgres proporciona mecanismos para permitir a los usuarios limitar el acceso =ue otros usuarios tendrPn a sus datos. -uper@suarios de la $ase de Datos Los -uper@suarios de la base de datos 0a=uellos =ue tienen el campo pgKuser.usesuper actiado ignoran todos los controles de acceso descritos anteriormente con dos e>cepcionesH las actuali8aciones del catPlogo del sistema no estPn permitidas si el usuario no tiene el campo pgKuser.usecatupd actiadoS + nunca se permite la destruccin del catPlogo del sistema 0o la modi,icacin de sus estructuras.
'riilegios de acceso Al uso de los priilegios de acceso para limitar la lecturaS escritura + la puesta de reglas a las clases se trata en grant)re*o+e&l(. $orrado de clases + modi,icacin de estructuras. Los comandos =ue borran o modi,ican la estructura de una claseS comoalterS drop tableS + drop inde7S solo ,uncionan con el propietario de la clase. !omo Bemos dicBo antesS estas operaciones no estPn permitidas nunca en los catPlogos del s+stema.
-iguiente
Funciones + Reglas Las ,unciones + las reglas permiten a los usuarios insertar cdigo en el seridor de la base de datos =ue otros usuarios pueden eecutar sin saberlo. :mbos mecanismos permiten a los usuarios aloar ca$allos de troya con relatia impunidad. La cepto -/L se eecutan por el seridor de la base de datos con el mismo permiso =ue el usuariopostgres 0el seridor de la base de datos ,unciona con el user*id de postgres. As posible cambiar las estructuras de datos internas del seridor por los usuariosS desde dentro de ,unciones de con,ian8a. As por ello =ue este tipo de ,unciones puedenS entre otras cosasS eitar cual=uier sistema de control de acceso. Aste es un problema inBerente a las ,unciones de,inidas por los usuarios en !. Reglas !omo en las ,unciones -/LS las reglas tamben se eecutan con la identidad + los permisos del usuario =ue llam al seridor de la base de datos. !aeats (Bere are no plans to e>plicitl+ support encr+pted data inside o, 'ostgres 0tBougB tBere is notBing to preent users ,rom encr+pting data itBin user*de,ined ,unctions. (Bere are no plans to e>plicitl+ support encr+pted netor% connectionsS eitBerS pending a total rerite o, tBe ,rontendIbac%end protocol.
@ser namesS group names and associated s+stem identi,iers 0e.g.S tBe contents o, pgKuser.uses+sid are assumed to be uni=ue tBrougBout a database. @npredictable results ma+ occur i, tBe+ are not.
-iguiente
:gregar + Aliminar @suarios createuser permite =ue usuarios espec,icos accedan a 'ostgres. dropuser elimina usuarios + preiene =ue Gstos accedan a 'ostgres. Astas rdenes slo a,ectan a los usuarios con respecto a 'ostgres\ no tienen e,ecto en otros priilegios del usuario o en su estado con respecto al sistema operatio sub+acente.
Gestión de Disco Locali8aciones :lternatias -e puede crear una base de datos en una locali8acin di,erente a la establecida por de,ecto durante la instalacin. Recuerde =ue todos los accesos a base de datos ocurren realmente a traes del proceso en segundo planoS as =ue Gste debe poder acceder a cual=uier especi,icacin. -e crean locali8acines alternatias + re,erencias mediante una ariable de entorno =ue da el patB absoluto Basta la situacin de al macenamiento deseada. Asta ariable de entorno debe estar de,inida antes de =ue el proceso en segundo plano sea arrancado + debe ser modi,icable mediante la cuenta del administrador de postgres. !ual=uier ariable de entorno puede ser utili8ada para re,erirse a una locali8acin alternatiaS si bien se recomienda la utili8acin de un nombre de ariable con pre,io '#D:(: para eitar con,usin + con,licto con otras ariables. An ersiones preias de 'ostgresS tambiGn estaba permitido utili8ar un nombre de patB absoluto para especi,icar una local i8acin de almacenamiento alternatia. -e pre,iere el mGtodo de es peci,icacin de ar iables de entornoS pues to =ue concede al administrador del sistema mPs ,le>ibilidad en la gestin del almacenamiento en disco. -i pre,iere utili8ar patBs absolutosS puede Bacerlo de,iniendo :LLWK:$-L@(AKD$':(9- + rec ompilando 'ostgres. 'ara Bacer esto S aCada cual=uiera de estas lneas )define ,1_,L#18_6L4,B# '
al arcBio src/include/config.hS o especi,i=ue 2F,J#I( -6,1_,L#18_6L4,B#
en su Gakefile.custom.
Recuerde =ue la creacin de una base de datos la eecuta realmente un proceso de la base de datos en segundo plano. 'or lo tantoS cual=uier ariable de entorno =ue especi,i=ue una locali8acin alternatia debe ser de,inida antes de =ue el proceso en segundo plano sea arrancado. 'ara de,inir una locali8acin alternatia apuntando a '#D:(:2 IBomeIpostgresIdataS primero escriba X setenv 4J6,,< /home/postgres/data
para de,inir la ariable de entorno =ue serP utili8ada con las rdenes siguientes. ormalmenteS =uerrP de,inir esta ariable en el ,icBero de iniciali8acin del super usuario de 'ostgresS .pro,ile o .csBrc para asegurar =ue estP de,inido al arrancar el sistema. -e puede utili8ar cual=uier ariable de entorno para re,erirse a una locali8acin alternatiaS aun=ue se pre,iere =ue las ariables estGn pre,iadas con '#D:(: para eliminar con,usiones + la posibilidad de con,lictos con otras ariablesS o su reescritura. 'ara crear un area de almacenamiento de datos en '#D:(:2S asegiste + puede ser escrito por el administrador de postgres. DespuGs desde la linea de rdenesS escriba X setenv 4J6,,< /home/postgres/data X initlocation !4J6,,< 2reating 4ostgres database system directory /home/postgres/data 2reating 4ostgres database system directory /home/postgres/data/base
'ara comprobar la nuea locali8acinS cree una base de datos test escribiendo X createdb -6 4J6,,< test X dropdb test
Gestión de -na base de datos -i el programa postmaster de 'ostgres estP cargado + en eecucinS podemos crear algunas bases de datos con las =ue e>perimentar. An este documento describiremos las rdenes bPsicos para gestionar una base de datos. !reacin de una base de datos -upongamos =ue =uiere crear una base de datos llamada mibase. 'uede Bacerlo con el siguiente ordenH X createdb nombredb
'ostgres le permite crear cual=uier n
-iguiente
:cceso a la base de datos @na e8 =ue Ba construido la base de datosS puede acceder a ella por los siguientes mediosH •
•
Aecutando el programa monitor de terminal de 'ostgres 0ps=l =ue le permite introducirS editar + eecutar rdenes -/L de un modo interactio. Ascribiendo un programa en ! =ue use la biblioteca de rutinas libp=. Asto le permite eniar rdenes -/L desde ! + obtener las respuestas + mensaes de estado en su programa. Asta inter,a8 se discute en el documento Gu,a de programaci-n en PostgreS/.
'uede =ue =uiera eecutar el programa ps=lS para probar los eemplos de este manual. 'uede actiarlo para la base de datos nom$red$ escribiendo la ordenH X psql nombredb
RecibirP como respuesta el siguiente mensaeH elcome to the 4ostgres interactive sql monitor: type $ for help on slash commands type q to quit type g or terminate with semicolon to e;ecute query Cou are currently connected to the database: nombredb nombredb (P
Aste indicatio le in,orma de =ue el monitor de terminal se encuentra dispuesto + =ue puede escribir consultas -/L en el espacio de trabao creado por el citado monitor de terminal. Al programa ps=lresponde a cdigos de escape =ue comien8an con la barra inertidaS ^. 'or eemploS puede obtener a+uda sobre la sinta>is de arias rdenes -/L de 'ostgres escribiendoH nombredb (P h
@na e8 =ue Ba terminado de introducir sus consultas en el espacio de trabaoS puede pasar el contenido de Gste al seridor de 'ostgres escribiendoH nombredb (P g
Asto le dice al seridor =ue procese la consulta. -i termina su consulta con punto + comaS no es necesario =ue introdu8ca la secuencia ^g. ps=l procesarP automPticamente consultas terminadas en punto + coma. 'ara leer las consultas de un ,icBeroS en lugar de introducirlas interactiamenteS escribaH nombredb (P i fichero
'ara salir de ps=l + oler a @ni>S escribaH nombredb (P q
+ ps=l terminarP + le deolerP el intGrprete de rdenes. 0'ara conocer mPs rdenes de escapeS escriba ^B en la entrada del monitor. Los espacios en blanco 0espaciosS tabuladores + saltos de lnea pueden usarse libremente en las consultas -/L. Los comentarios en una sola lnea se indican mediante dos guiones 0**. (odo lo =ue a+a desde los guiones Basta el ,in de la lnea serP ignorado. Los comentarios =ue abarcan m
'ostgres proporciona dos utilidades para reali8ar las copias de seguridad de su sistemaH pgKdump para copias de seguridad de bases de datos indiiduales + pgKdumpall para reali8ar copias de seguridad de toda la instalacin de una sola e8. La copia de seguridad de una sola base de datos puede reali8arse usando la siguiente ordenH X pg_dump nombredb P nombredb .pgdump
+ puede ser restaurada usando cat nombredb .pgdump H psql nombredb
Asta tGcnica puede usarse para moer bases de datos a una nuea locali8acin + para renombrar bases de datos e>istentes..
$ases de datos grandes 1-tor Ascrito por 9annu Urosing on 1*)6*1.
Dado =ue 'ostgres permite tablas de ma+or tamaCo =ue el permitido por el sistema de ,icBerosS puede resultar problemPtico el olcado de una tabla a un ,icBeroS +a =ue el ,icBero resultante seguramente superarP el tamaCo mP>imo permitido. !omo pgKdump escribe en stdoutS puede usar las Berramientas ]ni> para sortear estos posibles problemasH •
@so de olcados comprimidosH X pg_dump nombredb H gRip P nombrefichero .dump.gR
la recuperamos conH X createdb nombredb X gunRip -c nombrefichero .dump.gR H psql nombredb
o X cat nombrefichero .dump.gR H gunRip H psql nombredb
•
@se splitH X pg_dump nombredb H split -b 'm - nombrefichero .dump.
+ lo recuperamos conH X createdb nombredb X cat nombrefichero .dump.? H pgsql nombredb
'or supuestoS el nombre del ,icBero 0nom$refichero + el contenido de la salida de pgKdump no tiene por =uG coincidir con el nombre de la base de datos. :demPsS la base de datos restaurada puede tener un nombre distintoS por lo =ue este mecanismo tambiGn es e,ectio para renombrar bases de datos.
(ratamiento de problemas Fallos de inicio de 'ostmaster 9a+ arias posibles ra8ones para =ue postmaster no pueda iniciali8arse. !ompruebe el ,icBero de registro de postmasterS o incielo manualmente 0sin redirigir la salida estPndar o la de errores para er los mensaes =ue aparecen. :lguno de los posibles mensaes de error son autoe>plicatiosS pero los Ba+ =ue pueden no serlos tantoH
F,,: #tream#erver4ort: bind%& failed: ,ddress already in use 9s another postmaster already running on that port$
Asto normalmente signi,ica lo =ue sugiereH accidentalmente Ba iniciado una segunda instancia de postmaster en el mismo puerto en el =ue +a se estP eecutando uno. -in embargoS si el mensae de error del n
9pcGemory2reate: shmget failed %9nvalid argument& key(5DD>>>'E siRe(A3'A@'
@n mensae como Gste posiblemente indica =ue el limite impuesto al tamaCo de las 8onas de memoria compartidas es menor =ue Prea de _bu,,er` =ue 'ostgres estP intentando crear. 0 puede signi,icar =ue no dispone de soporte para la memoria compartida de tipo -+s; con,igurado en su ncede el lmite impuesto por el n><@E num('@E permissi
@n mensae como Gste no signi,ica =ue se Ba+a =uedado sin espacio en el disco\ signi,ica =ue la cantidad mP>ima de semP,oros permitidos por el n
'roblemas con la cone>in del !liente @na e8 =ue tiene el postmaster en eecucinS al tratar de conectar con Gl mediante una aplicacin cliente puede producirse un ,allo por arias ra8ones. Los eemplos de mensaes de error mostrados a=u son para clientes basados en las ersiones recientes de libp=\ los clientes basados en otras bibliotecas de inter,a8 pueden producir otros mensaesS con mPs o menos in,ormacin. connect6L%& -- connect%& failed: 2onnection refused 9s the postmaster running %with -i& at *server.Woe.com* and accepting connections on 24/
Aste el es ,allo genGrico de Yo puedo encontrar un postmaster con el =ue comunicarmeY. 'uede ocurrir algo as cuando se intenta una comunicacin (!'I7' o mediante soc%et @ni> con un postmaster localH connect6L%& -- connect%& failed: 7o such file or directory 9s the postmaster running at *localhost* and accepting connections on 8ni; socket *5D3<*$
La in reBusadaY o de Yo e>iste el ,icBero o directorioYS como los anteriores. 0As particularmente importante tener en cuenta =ue Y!one>in reBusadaY en este conte>to no no signi,ica =ue el postmaster Ba+a recibido la peticin de cone>in + la Ba+a recBa8ado\ en este caso se produce un mensae di,erenteS como se erP. tros mensaes de errorS como el de !onnection timed out s indican problemas mPs importantesS como la ,alta de conectiidad en la red. 7o pg_hba.conf entry for host '<3.'<3.'<3.'<3E user WoeblowE database testdb
Asto es lo mPs probable =ue obtenga si consigue contactar con un postmasterS pero Gste no =uiere Bablar con usted. !omo sugiere el mensaeS el postmaster reBin por=ue no encuentra un rengln de autori8acin en su ,icBero de con,iguracin pgKBba.con, 4assword authentication failed for user *Woeblow*
Los mensaes como Gste indican =ue Ba contactado con el postmasterS + Gste estP dispuesto a Bablar con ustedS pero no lo BarP Basta =ue supere el mGtodo de autori8acin especi,icado en el ,icBero pgKBba.con,. !ompruebe la clae =ue estP eniandoS o su programa 7DA( o UerberosS si el mensae de error menciona alguno de esos tipos de autenticacin. F,, ':
#et8ser9d: user *Woeblow* is not in *pg_shadow*
Asta es otra ariante de ,allo de autenticacinH no se Ba eecutado la orden de 'ostgres YcreateKuserY para el nombre de usuario indicado. F,, ':
6atabase testdb does not e;ist in pg_database
o Ba+ base de datos con ese nombre bao el control de ese postmaster. tese =ue si no especi,ica el nombre de la base de datosS se aplica por de,ecto su nombre de usuario en 'ostgresS lo =ue puede no ser lo correcto.
epuracin de mensaes
Al postmaster presenta ocasionalmente mensaes =ue pueden ser de a+uda en la solucin de problemas. -i desea er mensaes de depuracin de postmasterS puede iniciarlo con la opcin *d + redirigir la salida a un ,icBero de registroH X postmaster -d P pm.log
-i no desea er estos mensaesS puede escribir X postmaster -#
+ el postmaster entrarP en modo Y-Yilencioso. tese =ue no se inclu+e el simbolo Y&Y en el
Al ,icBero opcional dataIpgKoptions contiene opciones de eecucin usadas por el bac%end para controlar mensaes de eecucin + otros parPmetros austables. Lo =ue Bace interesante a este ,icBero es el BecBo de =ue es reledo por el bac%end cuando recibe una seCal -7#9@'S Baciendo as posible cambiar opciones de eecucin sin tener =ue reiniciar 'ostgres. Las opciones especi,icadas en este ,icBero pueden incluir puntos de depuracin usados por el pa=uete trace 0bac%endIutilsImiscItrace.c o parPmetro numGricos =ue puede usar el bac%end para controlar su comportamiento. -e pueden de,inir nueas opciones + parPmetros en bac%endIutilsImiscItrace.c + en bac%endIincludeIutilsItrace.B. Las opciones de pgKoption pueden especi,icarse con el parPmetro *( de 'ostgresH postgres opciones - Zverbose(
Las ,unciones usadas para imprimir errores + mensaes de depuracin pueden aBora usar la utilidad syslog&0(. Los mensaes impresos en stdout o stderr son precedidos por una eti=ueta in,ormatia =ue inclu+e la ,ecBa + Bora + el pid del bac%endH )timestamp A>'<=.'=:5<:'D.'=3 A>'<=.'=:5<:'D.'=D A>'<=.'=:5<:'D.'A@ A>'<=.'=:5<:'D.'A@ A>'<=.'=:5<:'D.'A@ A>'<=.':5<:'D.<< A>'<=.':5<:'D.D'3 A>'<=.':5<:'D.D@@
)pid )message [<<='\ #tartransaction2ommand [<<='\ 4rocess8tility: drop table t+ [<<='\ #99nc7umntries: table is =>X full [<
Aste ,ormato meora la legibilidad de los registrosS + permite comprender =uG _bac%end` concreto estP Baciendo =uG + en =uG momento. (ambiGn Bace mPs ,Pcil escribir guiones 0scripts en a% o perl =ue monitoricen el ,icBero de registro para
detectar errores o problemas en la base de datosS o para contabili8ar estadsticas temporales de las transacciones. Los mensaes impresos por s+slog usan la utilidad de registro L#KL!:L). Al uso de s+slog puede ser controlado por las opciones re,erentes a Gl en s+slog. DesgraciadamenteS mucBas ,unciones llaman directamente a print,0 para mostrar sus mensaes en stdout o stderr + esta salida no puede ser redirigida a s+slog o incluir in,ormacin sobre ,ecBa + Bora. -era aconseable =ue todas las llamadas a print, pudieran ser reempla8adas por la macro 'R7(F + la salida a stderr se cambiaran para =ue usaran A'R7(F en su lugarS de modo =ue se pudieran controlar todas las salidas de un modo uni,orme. Al ,ormato del ,icBero pgKoptions es como sigueH ) comentario opción (valor_entero ) set value for opción ) set opción ( opción I ) set opción ( opción ) set opción (
opción ' ' >
tese =ue pala$ra%cla*e puede ser tambiGn una abreiacin del nombre de opcin de,inido en bac%endIutilsImiscItrace.c. ;Gase 1sando pg%options para una lista completa de las opciones + sus posible alores.
'ruebas de regresin 7nstruciones + anPlisis del test de regresin Los tests de regresin de 'ostgre-/L son un conunto completo de pruebas para la implementacin de -/L embebidos en 'ostgre-/L. Reali8an pruebas tanto sobre operaciones -/L estPndarS como tambiGn sobre las capacidades aCadidas por 'ostgre-/L. Los tests de regresin ,ueron desarrollados srcinalmente por oll+ !Ben + :ndre EuS + ,ueron e>tensamente repasadosIreempa=uetados por Fournier + (Bomas Loc%Bart. 'ara 'ostgre-/L 6.1 en adelante los tests de regresin ,orman parte de cada release o,icial. :lgunas bases de datos 'ostgre-/L correctamente instaladas + totalmente ,uncionales pueden ,allar en alguno de estos test de regresin debido a problemas con la representacin del punto ,lotante + el soporte de 8ona Boraria. Los tests actuales son ealuados usando un sencillo algoritmo di,,S + son mu+ sensibles a pe=ueCas di,erencias en el sistema. 'ara tests aparentemente ,allidosS si se e>aminan estas di,erenciasS pueden reelar no ser signi,icatias. Las notas sobre tests de regresin de abao asumen lo siguiente 0e>cepto en casos indicadosH
•
Las instrucciones son compatibles con @ni>. ;ea la nota abao.
•
-e usan las opciones por de,ecto e>cepto donde se indica.
•
Al usuario postgres es el superusuario 'ostgres.
•
La ruta de las ,uentes es IusrIsrcIpgs=l 0son posibles otras rutas.
•
La ruta de los eecutables es IusrIlocalIpgs=l 0son posibles otras rutas.
Antorno de regresin 'ara preparar los tests de regresinS Bagama9e all en el directorio de los tests de regresin. Asto compila un programa ! con ,unciones e>tendidas 'ostgre-/L en un librera compartida. -e generan algunos guiones 0scripts -/L locali8ados + arcBios de salida comparatios para los tests =ue los necesiten. La locali8acin reempla8a macros en los arcBios de ,uentes con rutas absolutas + nombres de usuario. ormalmenteS los tests de regresin deben ser eecutados por el usuario postgres +a =ue el directorio YsrcItestIregressY + subdirectorios son de su propiedad. -i eecuta los test de regresin con otro usuario el directorio YsrcItestIregressY debe tener permisos de escritura para ese usuario. :ntes era estrictamente necesario eecutar el postmaster con la 8ona Boraria del sistema establecida en '-(S pero +a no es necesario. 'uede eecutar los tests de regresin sobre su con,iguracin Babitual del postmaster. Al guin 0script del test establecerP la ariable de entorno '#( para asegurar =ue los tests dependientes de la 8ona Boraria produ8can los resultados esperados. De todas ,ormasS su sistema debe proporcionar libreras de soporte para la 8ona Boraria '-("'D(S o los tests dependientes de la 8ona Boraria ,allarPn. 'ara comprobar =ue su e=uipo soporta estoS escriba lo siguienteH setenv ] 4#A46 date
La orden date de arriba tiene =ue deoler la Bora actual del sistema en la 8ona Boraria '-("'D(. -i la base de datos '-("'D( no estP disponibleS entonces el sistema tiene =ue deoler la Bora en #M(. -i la 8ona Boraria '-("'D( no estP disponibleS puede establecer las reglas para esa 8ona Boraria e>plicitamente. setenv 4J] 4#A46=EG>D.>'.>EG'>.>5.>3
Astructura de directorios Asto debera ser una tabla en la seccin anterior. input/ .... .,rchivos fuente que son convertidosE usando *make all*E en alguno de los archivos .sql en el subdirectorio *sql* output/ ... .,rchivos fuente que son convertidosE usando *make all*E en archivos .out en el subdirectorio *e;pected*
sql/ ...... .,rchivos sql usados para eWecutar los tests de regresiTn e;pected/ . .,rchivos .out que representan lo que ?esperamos? que pareRcan los resultados results/ .. .,rchivos .out que contienen lo que los resultados ?realmente? parecen. ,demQs es usado como almacVn temporal para el test de copia de tablas.
'rocedimiento para el test de regresin Las instrucciones estPn probadas en un Red9at Linu> ersin 4.2 usando el intGrprete de rdenes basB. A>cepto donde se indi=ueS seguramente ,uncione en la ma+ora de sistemas. 7nstrucciones como ps + tar cambian mucBo las opciones =ue debe usar en cada plata,orma. 1se el sentido com2n antes de escibir estas instrucciones. 'ara una instalacin nuea o si estP actuali8ando una ersin anterior de 'ostgresH
.onfig-ración de la 0egresión de Postgres 1. Al arcBio IusrIsrcIpgs=lIsrcItestIregressIRA:DMA tiene instrucciones detalladas para la eecucin e interpretacin de los tests de regresin. Lo =ue sigue es una ersin mPs cortaH -i el postmaster no se estP eecutando +aS inicie el postmaster en una entana =ue estG disponible escribiendo postmaster
o inicie el demonio postmaster en segundo plano escibiendo cd nohup postmaster P regress.log
Aecute postmaster desde la cuenta de superusuario de 'ostgres 0normalmente la cuenta postgres. o eecute postmaster desde la cuenta de root.
2. -i Ba eecutado anteriormente los tests de regresinS borre el directorio de trabao conH cd /usr/src/pgsql/src/test/regress gmake clean
o necesita escribir gma%e clean si es la primera e8 =ue estP eecuntado los tests. 3. Aecute los tests de regresin. Ascriba
cd /usr/src/pgsql/src/test/regress gmake all
4. Aecute los tests de regresin. Ascriba cd /usr/src/pgsql/src/test/regress gmake runtest
5. Debera obtener en la pantalla 0+ ademPs escrito en el arcBio .Iregress.out una serie de lneas indicando =uG tests Ban pasado + =uG tests Ban ,allado. (enga en cuenta =ue puede ser normal =ue alguno de los tests ,alle. 'ara los tests ,allidosS use di,, para comparar los arcBios de los directorios .Iresults + .Ie>pected. -i ,alla ,loat"S escriba algo como estoH cd /usr/src/pgsql/src/test/regress diff -w e;pected/floatA.out results
6. DespuGs de eecu tar los tes ts + e>aminar los resultadosS escriba dropdb regression cd /usr/src/pgsql/src/test/regress gmake clean
para recuperar el espacio en disco temporal usado por los tests.
:nPlisis de Regresin Los resultados se encuentran en los arcBios del directorio .Iresults. Astos resultados pueden ser comparados con los resultados del directorio .Ie>pected usando Ydi,,Y. 0Al guin 0script del test Bace esto por ustedS + dea las di,erencias en .Iregression.di,,s. Los arcBios pueden no corresponderse de ,orma e>acta. Al guin del test in,ormarP deuna di,erencia como ,ailure 0,alloS pero la di,erencia puede deberse a pe=ueCas ariaciones entre plata,ormas en los mensaes de errorS comportamiento de la librera matemPicaS etc. Fallos de e ste estilo no indican necesariamente un problema con 'ostgres. 'or tantoS es necesario e>aminar las di,erencias de cada test ,allido con el ,in de determinar si e>iste un problema realmente. Los siguientes puntos intentan proporcionar una gua para determinar si una di,erencia es signi,icatia o no. Di,erencias en los mensaes de error :lguno de los tests de regresin inclu+en intencionadamente alores de entrada no Plidos. Los mensaes de error pueden enir tanto del cdigo de 'ostgres como de las rutinas de sistema de la plata,orma en la =ue nos encontremos. An el
Astas di,erencias en los mensaes darPn como resultado un test ,allido =ue puede ser alidado mediante una inspeccin. Di,erencias en ,ecBas + Boras MucBos de los resultados de ,ecBa + Bora son dependientes del entorno de la 8ona Boraria. Los acBios de re,erencia estPn generados para la 8ona Boraria '-("'D( 0$er%ele+S !ali,ornia + aparentemente pueden parecer ,allos si los tests no se eecutan con esta 8ona Boraria establecida. Al programa =ue eecuta los tests de regresin establece la ariable de entorno '#( a '-("'D( para asegurar resultados parecidos. 'arece =ue algunos sistemas no aceptan la sinta>is recomendada para establecer e>plicitamente las reglas de la 8ona Boraria local\ puede ser =ue necesite usar una ,orma distinta para establecer '#( en estas mP=uinas. :lgunos sistemas =ue usan librerias antiguas de 8onas Borarias ,allan al aplicar las correciones de aBorro de lu8 solar en las ,ecBas anteriores a 1)S causando =ue las Boras de esas ,ecBas apare8can en '-( a pesar de todo. Asto darP pie a di,erencias locali8adas en los resultados de los tests. Di,erencias en punto ,lotante :lgunos de los tests implican calcular np0 di,ieren de los mecanismos =ue espera el actual cdigo de 'ostgres. Di,erencias en polgonos ;arios de los tests inclu+en operaciones con coordenadas sobre el calleero de a%landI$er%le+ !:. Los datos de este mapa ienen e>presados como polgonos cu+os Grtices estPn representados en pares de n
Di,erencias aleatorias 9a+ al menos un caso de test en random.out =ue esta diseCado para producir resultados aleatorios. Asto causa =ue random ,alle el test de regresin cada e8. Ascribir diff results/random.out e;pected/random.out
debe producir una o unas pocas lneas de di,erencias por esta ra8nS pero otras ariaciones en punto ,lotante o en ar=uitecturas distintas pueden causar mPs di,erencias. Los arcBios e>pected Los arcBios .Ie>pectedI].out ,ueron adaptados del monoltico arcBio srcinal e>pected.input proporcionado por oll+ !Ben. ;ersiones mPs modernas de estos arcBios generadas en arias mP=uinas de desarrollo Ban sido sustituidas despuGs de una cuidadosa 0J inspeccin. MucBas de estas mP=uinas de desarrollo estPn eecutando ariantes del @ni> - 0Free$-DS Linu>S etc en Bardare 7>"6. Al arcBio srcinal e>pected.input ,ue creado en un sistema -':R! -olaris 2.4 usando el cdigo de postgres5*1.)2a5.tar.g8. Fue comparado con un arcBio creado en un sistema 73"6 -olaris 2.4 + las di,erencias ,ueron solamente en los polgonos de punto ,lotante en el tercer dgito a la derecBa del punto decimal. 0ea mPs arriba Al arcBio srcinal sample.regress.out se obtuo de la entrega 1.)1 de postgres construida por oll+ !Ben + se inclu+e a=u para re,erencia. (endra =ue Baberse eecutado con una mP=uina DA! :L'9: +a =ue el Ma%e,ile.global en la ersion 1.)1 de postgres tiene 'R(:MAalpBa.
:rcBios de comparacin espec,icos de la plata,orma !omo alguno de los tests producen resultados inBerentes a la plata,orma usadaS Bemos proporcionamos una ,orma para suplir los arcBios de comparacin especi,icos para cada plata,orma. Frecuentemente se da la misma ariacin en miste un arcBio gua =ue de,ine =uG arcBio de comparacin usar. De ,orma =ueS para eliminar ,allos tontos de una plata,orma en particularS debe elegir o crear de resultados ariantesS + aCadir una lnea al arcBio guaS =ue es mapaunde,icBero resultados. !ada lnea del arcBio gua es de la siguiente ,orma testname/platformnamepattern(comparisonfilename
Al nombre del test 0testname es sencillamente el nombre del mdulo de regresin de ese test en particular. Al patrn del nombre de la plata,orma 0plat,ormnamepattern estP generado al estilo de e>pr01 0=ue es una e>presin regular con el smbolo
implcito al principio. Asta se comprueba con el nombre de la plata,orma tal como iene escrito en con,ig.guess. Al nombre del ,icBero de comparacin 0comparison,ilename es el nombre del sustituto del ,icBero de resultados de comparacin. 'or eemploH el test de regresin int2 inclu+e una entrada deliberada de un alor =ue es demasiado largo para caber en un int2. Al mensae de error espec,ico =ue es producido es dependiente de la plata,orma\ nuestra plata,orma de re,erencia saca 0010:
pg_atoi: error reading Z'>>>>>Z: 7umerical result out of range
pero en un buen n saca 0010:
pg_atoi: error reading Z'>>>>>Z: 0esult too large
An este casoS proporcionamos una ariante del arcBio de comparacinS int2*too* large.outS =ue inclu+e la sinta>is de este mensae de error. 'ara no mostrar estos ,allos tontos en las plata,ormas 9'':S el resultmap 0mapa de resultados inclu+e int
=ue se actiarP en cual=uier mP=uina en el =ue la salida de con,ig.guess comience por YBppaY. tras lneas en el resultmap seleccionan la ariante del arcBio de comparacin para otras plata,ormas donde sea apropiado.
;ersion 6.5.3
Asta es basicamente una limpie8a de la ersion 6.5.2. 9emos aCadido un nueo pgacces =ue se perdio en la 6.5.2S e instalado una correcion especi,ica para (. Migracion a 6.5.3 3o se re=uiere un dumpIrestores para a=uellos =ue esten eecutando una 6.5.].
Lista Detallada de !a mbios Kersion actualiRada de pgacces >.A 4arche especifico para 7 2orreccion para reglas de volcado en tablas heredadas
ersion 6.5.2 Asta es basicamente una limpie8a de la ersion 6.5.1. 9emos corregio una ariedad de problemas reportados por usuarios de 6.5.1. Migracion to 6.5.2 3o se re=uiere un dumpIrestores para a=uellos =ue esten eecutando una 6.5.].
Lista Detallada de !a mbios corregidas las subselectI2,# %om& ,Madida configuracion de #B9L_97^ para los portes de solaris_i3A@ y solaris_sparc%6aren 2orreciones para 2,# y B0 en clausulas ZWoinZ%om& 2orrecion para aborto en L#can%om& 0eparada la comprobacion para 879U8 redundante e indices 409G,0C ^C%homas& GeWorado para que se compruebe las restricciones en multi-columnas%homas& 2orrecion para in3< que tenia problemas con GL habilitado%Biroki ^ataoka& 4ermite a yacc de L#6 y a bison compilar codigo pl%Lruce& 2orregido el trabaWo con # 7,G# corregidos los intA %homas& 2orreccion del consumo de memoria de ZvacuumZ%BiroshiEatsuo& 0educcion total de memoria de ZvacuumZ%om& 2orrecion del paraconsumo timestamp%datetime& 2orrecciones de problemas en las reglas de paso al analiRador sintactico%om& 2orreccion del problema de cuotas en mkGakefile.tcldefs.sh.in y mkGakefile.tkdefs.sh.in% his is to re-use space on inde; pages freed by vacuum%Kadim& documentado -; para pg_dump%Lruce& 2orrecin para operadores unarios en la regla de paso al analiRador sintactico%om& 2omentado el File8nlink de e;ceso de segmentos durante mdtruncate%& %om& nlaRamiento en 9ri; corregido por Cu 2ao Pyucaofalcon.kla-tencor.com 0eparado el error logico en 9^: no debia devolver un 9^_,L10 cuando alcanRa el final de un patron antes del final del te;to%om& 0eparada limpieRa incorrecta de montones de memoria reservadas durante aborto de transacc Kersion actualiRada de pgaccess >.A
;ersion 6.5.1 Asta es basicamente una limpie8a de la ersion 6.5. 9emos corregio una ariedad de problemas reportados por usuarios de 6.5. Migracion to 6.5.1 3o se re=uiere un dumpIrestores para a=uellos =ue esten eecutando una 6.5.
Lista Detallada de !a mbios ,Madido un fichero 7 ,G 2orreciones de portabilidad para linu;_ppcE 9ri;E linu;_alphaE 1penL#6E alpha liminado U80C_9G9E utiliRar #2...9G9 2orrecion para "4,97 en herencia%om& 4arche para permitir ZvacuumZ en tablas con multi-segmentos%Birosi& 2orrecion para la selectividad del optimiRador 0-ree%om& 2orregida laguna el descriptor de ficheros ,2%,tsushi 1gawa& 7ueva e;presion del codigo de sub arboles%om& #e evitan escrituras en disco para transacciones de solo-lectura%Kadim& 2orreccion para eliminacion de tablas temporales si la ultima transaccion fue abortada %L 2orreccion para prevenir que sean creadas tuplas demasiado largas%Lruce& correciones en plpgsql #e permiten numeros de puerto de 3
2orregido fallos tecnicos que afectaban a J0184 LC en subselects%om& 2orreccion para algunas alarmas del compilador %omoaki 7ishiyama& ,Madido soporte para in'<5> %2heco& %4avel Lehal&
ersion 6.5 Asta ersion marca un aance grande en el conocimiento =ue el e=uipo de desarrollo tiene del codigo ,uente =ue Beredamos de $er%ele+. ;eras =ue podemos aCadir ma+ores ,eatures mas ,acilmenteS gracias al incremento en tamaCo + e>periencia de nuestro mundialmente e>tenso e=uipo de desarrollo. 9e a=ui un conciso sumario de los mas notables cambiosH !ontrol de concurrencia multi*ersion0M;!! en ingles Multi*ersion concurrenc+ control Asto elimina nuestro ieo blo=ueo a niel de tablaS + lo reempla8a con un blo=ueo del sistema =ue es superior a la ma+oria de los sistemas de bases de datos comerciales. An un sistema tradicionalS cada registro =ue es modi,icado se blo=uea Basta =ue se con,irma la transaccionS preiniendo lecturas por otros usuario. M;!! utili8a de modo natural el caracter multi*ersion de 'ostgre-/L para permitir =ue las lecturas continuen le+endo datos consistentes durante la actiidad de escritura. Las escrituras continuan utili8ando el sistemas de transacciones compacto pgKlog. se as reali8a sin tener reserar un blo=ueo para cada registro como (odo en losesto sistem tradicion ales de=ue base de datos. :si =ueS basicamenteS +a no estaremos restringidos por mas tiempo por el blo=ueo simple a niel de tabla\ tenemos algo meor =ue el blo=ueo a niel de registro. !opias de seguridad en caliente con pgKdump pgKdump se bene,icia de las nueas prestaciones de M;!! para dar consistencia a un dumpIbac%up mientras la base de dato pemanece en linea + disponible para ser consultada. (ipos de datos numericos :Bora tenemos tipos de datos erdaderamente numericosS con precision especi,icada por el usuario. (ablas temporales -e garanti8a =ue las tablas temporales tienen nombres unicos durante una sesion en la base de datosS + =ue son destruidas al salir de la sesion. ueas prestaciones -/L
:Bora tenemos soporte para declaraciones !:-AS 7(AR-A!(S and A?!A'(. (enemos nueos L7M7(IFF-A(S -A( (R:-:!(7 7-L:(7 LA;ALS -ALA!( ... FR @'D:(AS + un meorado comando L!U (:$LA. :celeramiento !ontinuamos acelerando 'ostgre-/LS gracias a la ariedad de talentos =ue Ba+ en nuetsro e=uipo. 9emos acelerdo la asignacion de memoriaS la optimi8acionS las uniones de tablas 0table oinS + las rutinas de trans,erencias de registros. 'ortes !ontinuamos ampliando nuestra lista de portesS esta e8 incluimos Win(Ii>"6 + et$-DIarm32. 7nter,aces La ma+oria de inter,aces tienen una nuea ersionS + la ,uncionalidad e>istentes Ba sido meorada. Documentacion ueo + actuali8ado material esta presente por toda la documentacion. -e Ban aportado nueas F:/s para las plata,ormas -#7 + :7?. AlTutorial tiene in,ormacion introductoria sobre -/L de -te,an -im%oics. 'ara laGuia del 1suarioS Ba+ paginas de re,erencia cubriendo la utilidad postmaster + mas programas de utilidadS un apendice nueo contiene detalles sobre el comportamiento de dateItime. La Guia del Administrador tiene un nueo capitulo sobre resolucion de problemas de (om Lane. E laGuia del Programador tiene una descripcion del proceso de interrogacionS tambien de -te,anS + detalles acerca de como obtener el arbol del codigo ,uente de 'ostgres por !;- anonimo + !;-up. Migracion to 6.5 @n dumpIrestore utili8ando pgKdump es necesario para a=uellos =ue deseen migrar datos de cual=uier ersion preia de 'ostgres. pgKupgradenot puede ser utili8ado para actuali8ar esta ersion por=ue la estructura en disco de las tablas Ba cambiado comparada con ersiones precedentes. La nuea caracteristica de !ontrol de !oncurrencia Multi*;ersion 0M;!!S en ingles puede dar comportamientos un poco di,erentes en entornos multiusuarios. /ea y comprenda la seccion siguiente para asegurar que sus aplicaciones e4istentes le proporcionaran el comportamiento que necesita.
!ontrol de !oncurrencia Multi*;ersion : causa de =ue las lecturas en 6.5 no blo=uean los datosS a pesar del niel de aislamiento de transaccionS los datos leidos por una transaccion pueden ser sobre escritos por otra. An otras palabrasS si un registro es deuelto porSELE.5 eso no signi,ica =ue este registro e>ista realmente en el momento en =ue es deuelto. 0i.e algunas eces despues de =ue la sentencia o la transaccion comience ni tampoco =ue el registro este protegido de ser borrado o actuali8ado por una transaccion en concurrente antes de =ue la transccion en curso Baga commit o rollbac%. 'ara asegurar la e>istencia actual de un registro + protegerlo contra actuli8aciones concurrentes se debe utili8ar SELE.5 A60 BPD15E o una sentencia L6.C 518LE apropiada. Asto deberia ser tenido en cuento cuando se porten aplicaciones desde ersiones precedentes de 'ostgres + otros entornos. (enga todo lo anterior en mente su utili8a triggers contribIre,int.] para integridad re,erencial. :Bora se re=uieren tecnicas adicionales. @n modo e s utili8ar el comando L6.C parenttable I@ S:10E 06 E4.LBSI?E 36DE si una transaccion a a actuali8arIborrar una clae primaria + utili8ar el comando L6.C parenttable I@ S:10E 36DE si una transaccion a a actuali8arIinsertar una clae ,oranea. otese =ue si eecuta una transaccion en modo -AR7:L7:$LA entonces debe eecutar el comando L6.C anterior antes de la eecucion de cual=uier sentencia DML 0SELE.5
Asto inconenientes desapareceran en el ,uturo cuando la Babilidad para leer datos sucios 0no con,irmados 0a pesar del niel de aislamiento + la erdadera integridad re,erencial sea implementada. Lista Detalla de !ambios 2orreciones de errores --------2orrecion de las funciones de conversion te;t-PfloatA y te;t-PfloatD%homas& 2orrecion para creacion de tablas con constraints con mi;ed-case%Lilly& 2ambiado comportamiento de e;p%&/pow%& para generar error en underflow/overflow%an& 2orrecion de error en pg_dump -R impieRas de invasiones de memoria%atsuo& 2orrecion para abortos de lo_import%atsuo& ,Wustes en el maneWo de nombres de tipo de datos para suprimir dobles comillas%homas& 8so de coersion de tipo para empareWar columnas y 6F,8%homas& 2orreccion de deadlock de este modo solo verifica una veR despues de un segundo de espera 2orreciones para agregaciones y 4/pgsql%Biroshi& 2orrecion para aborto de subquery%Kadim& 2orreccion de libpq para la funcion 4Ufnumber y nombres que no distinguen mayusculas-minu 2orrecion para obWetos grandes escritos-en-medioE no bloques e;traE consumo de memoria%a 2orrecion para pg_dump -d o -6 y entrecomillado de caracteres especiales en 97#0 0eparados serios problemas con dynahash%om& 2orreWidos problemas de portabilidad para 97/2960 2orrecion de problema con error de selectividad en ,0 ,L ,66 218G7%Lruce& 2orrecion del eWecutor de ese modo trabaWa merWeWoin de diferentes tipos de columnas%om& 2orrecion de error para selectividad de 10 en ,lpha 2orrecion para problema de selectividad de indice 10%Lruce& 2orrecion d para que muestre de ese modo la e;tension apropiada para char%&/varchar%&%0y
2orrecion en el codigo del tutorial%2lark& GeWoras en la comprobacion de destroyuser%1liver& 2orrecion para ^erberos%0odney Gc6uff& 2orrecion para borrado de la base de datos mientras los buffers no se han limpiado%Lruce& 2orrecion la secuencia ne;tval%& para que pueda asi distinguir mayusculas-minusculas 2orrecion para operador ( Lorrado de buffers antes de destruir los ficheros de las base de datos%Lruce& 2orrecion del caso en que el eWecutor evalua las funciones dos veces%atsuo& #e permite a las acciones de secuencia net;val distinguir mayusculas-minusculas%Lruce& 2orrecion de optimiRador de inde;acion para que no trabaWe para numeros negativos%Lruce& 2orrecion de perdidas de memoria en eWecuciones con fW9s7ull 2orrecion de perdidas de memoria para aggregate%rik 0iedel& #e permite que username contenga una almohadilla %)E dash en ingles& en los permisos J0,7 impieRa en los tipos inet impieRa de de 78 errores en tablas del sistema%om& 2orrecion de problemas de 4,J0 y del comando $%Gasaaki #akaida& 0educido el tamaMo de fichero de multi-segment por defecto a 'JL%4eter& 2orrecion del volcado de 20, 140,10%om& 2orreccion para escaneo hacia atras de cursores%Biroshi 9noue& 2orreccion para 214C F01G #697 cuando se utiliRa i%om& 2orrecion para una subselect cuando es comparada dentro de una e;presion%an& 2orrecion para maneWo de devolucion de error mientras se duelven registros%om& 2orrecion de problemas con referencia a tipos de array%omEan& #e previene oid de 846, # %an& 2orrecion de pg_dump asi Ma opcion -t puede maneWar nombres de tabla en mayusculas-minusc 2orreciones para J0184 LC es casos especiales%omE an& 2orrecion de perdidas de memoria en queries falladas%om& 6F,8 soporta ahora identificadores mi;ed-case%om& 2orrecion para que multi-sefment utilice 6014/07,G de tablaE de indice%1le JWerde& 6ehabilitacion de uso de pg_dump con las dos opciones -o y -d%Lruce& #e permite a pg_dump volver adecuadamente permisos de J0184%Lruce& 2orrecion para J01C4 LC en 97#0 971 table #2 ? F01G table<%an& 2orreccion en array vistas%an& 2orreciones para para computaciones agregaciones en con indices%om& 2orreccion para como maneWa 6F,8 entrecomillado simple en valores que requieren demasi 2orreccion de problema de seguridad con no super-usuarios que importan/e;portan obWectos Kuelta atras de transaccion que crea table la limpia adecuadamente%om& 2orreccion para permitir que tablas largas y nombres de columnas generen nombres en serie GeWoras -----------,Madida la utilidad ZvacuumdbZ #e acelera libpq por meWor asignacion de memoria%om& "4,97 utiliRa todos los indices%om& 9mplementadas las e;presiones 2,#E 21,#2E 789F%homas& 7uevo formato de salida de pg_dump%2onstantin& ,Madida la cadena min%&/ma;%& a las funciones%homas& ;tendidas nuevo tipo de coersiones para agregaciones%homas& 7ueva contribucion moddatetime %erry& ,ctualiRacion a pgaccess >.@%2onstantin& ,Madida rutina para byte unico en tipo de caracter ZcharZ%homas& GeWorada el la maneWo funciondesubstr%&%homas& GeWorado multi-byte %atsuo& 2ontrol de concurrencia Gulti-version /GK22%Kadim& 7uevo modo #erialiRed%Kadim& 2orrecion para tablas por encima de
GeWorado el maneWo de cone;iones con el motor de base de datos%backend&%Gagnus& 7uevas opciones 1J_9G#,G4# y la opcion 8#_#C#1J para ficheros de registro%Gassimo& 7ueva opcion 2_,00,C# %Gassimo& 7ueva 970#2 y "24%#tefan& 7uevo pg_inde;.indisprimary para restro de claves primarias%6*,rcy& 7uevas opcion pg_dump para permitir el borrado de tablas antes de su creacion%Lrook& ,celaracion de las rutinas de salida de registro%om& 7uevo nivel de aislamiento de 0,6 21GG96 %Kadim& 7uevas tablas/indices G4 %Lruce& #e evita el ordenamiento si el resultado ya esta ordenado%an& 7ueva optimiRacin para la asignacion de memoria%an& #e permite a psql eWecutar pg%Lruce& #e permiten multiples reglas de acciones%an& ,Madida funcionalidad 9G9/1FF# %an& GeWorado el optimiRador cuando se unen un numero grande de tablas%Lruce& 7ueva introduccion a #U de a esis de 6octorado de #. #imkovics%#tefanE homas& 7ueva introduccion a procesamiento del motor de base de datos %backend& de la esis de 6o GeWorado el soporte para intA%0yan LradetichE homasE om& 7uevas rutinas para convertir entre tipos intA y te;t/varchar%homas& 7uevos planes arboreosE donde se unen meta-tablas%Lruce& Babilitadas consultas por la mano derecha por defecto%Lruce& #e permite que el numero ma;imo de procesos en servidor %backends& se parametrice en el m %--with-ma;backends and postmaster switch %-7 backends&&%om& JU1 por defecto tenga ahora '> tablas porque el optimiRador se acelera%om& #e permite 78(Kar para G#-#U portabilidad%GichaelE Lruce& Godificados contrib check_primary_key%& y consecuentemente ZautomaticZ or ZdependentZ%,na #e permite que psql d en una vista muestre la consulta%0yan& #e acelera el 9^%Lruce& 2orreciones/prestaciones cpg E vease fichero src/interfaces/ecpg/2hangeog%Gichael& 2orreciones/prestacines 6L2 E vease src/interfaces/Wdbc/2B,7J1J%4eter& #e hace que el operador X tenga precedencia como /%Lruce& ,Madida la nueva opcion postgres -1 para permitir cambios en la estructura de tablas del ,ctualiRado el script contrib/pginterface/findoidWoins %om& GaWor aceleracion en vacuum de lineas borradas con indices%Kadim& #e permitte la eWecucion de diferentes versiones de funciones no-#U basadas en argumento ,Madida la opcion - que muestra las consultas actuales enviadas pro dt y sus amigos%Gas ,Madido numero de version en los banners de arranque de psql%Gasaaki #akaida& 7uevo contrib/vacuumlo que elimina obWetos grandes no referenciados%4eter& 7ueva inicialiRacion para tamaMos de tablasE asi las tablas no vacuumeadas se eWecutan me GeWorados los mensaWes de error cuando una cone;ion es rechaRada%om& #oporte para array de campos char%& y varchar%& %Gassimo& 0evision del codigo has para incrementar fiabilidad y prestaciones%om& ,ctualiRacion a 4yJre#U <.D%6*,rcy& 2ambiadas las opciones de depuracion asi -dD y -d5 producen diferentes displays de nodos% nuevas opciones: pretty_planE pretty_parseE pretty_rewritten%an& GeWor optimiRacion de estadisticas para los accesos a tablas del sistema%om& GeWor maneWo de tamaMo de bloque no por defecto%Gassimo& GeWorado el optmiRador de comsumo de memoria JU1%om& 87917 soporta ahora 1060 LC de columnas que no estan en la lista de target%an& GeWoras grandes en libpqII %Kince Kielhaber& pg_dump utiliRa ahora -R%,2*s& por omision%Lruce& cache de procesos en servidor %backend&E aceleracion de memoria%om& #e hace que pg_dump lo haga todo en una transaccion snapshot%Kadim& correcion de perdidas de memoria para obWetos grandesE correccion para pg_dumping%om& 97 escribe ahora respecto a la netmask para comparaciones #e hace que K,288G ,7,C] solo utilice un readlock%Kadim& #e permiten vistas %K9& en 87917#%an& pg_dump puede generar ahora snapshots consistentes en bases de datos activas%Kadim& 2ambios en el ,rbol Fuente ------------------GeWorado el empareWamiento en el porte%om& 2orrecciones de portabilidad para #un1#
,Madido porte para 7/in3< del proceso en el servidor %backend& y se habilita carga dina 7uevo porte a 2obalt Uube%Gips& eWecutando inu;%atsuo& 4orte a 7etL#6/m@Ak%Gr. Gutsuki 7akaWima& 4orte a 7etL#6/sun3%Gr. Gutsuki 7akaWima& 4orte a 7etL#6/macppc%oshimi ,oki& 2orreccion para configuracion de tcl/tk%Kince& liminada la clave 28007 para consultas por regla%an& carga dinamica en 7 ahora funciona%6aniel Borak& ,Madido soporte para ,0G3<%,ndrew GcGurry& GeWor soporte para B48" '' y 8ni;ware GeWorado el maneWo de ficheros para ser mas uniformeE previene lagunas en los descriptore 7uevos comandos de instalacion para plpgsql%an&
;ersion 6.4 9a+ muchas prestaciones nueas + meoras en esta ersion. #racias a unestros desarrolladores + mantenedoresS casi todos los aspectos del sistema Ban recibido alguna atencion desde la ersion anterior. 9e a=ui un resumenS sumario incompletoH •
•
•
•
•
•
•
Las istas + las reglas son aBora ,uncionales gracias al e>tensio nueo codigo en las reglas de re escritura de an Wiec%. (ambien escribio un capitulo sobre ello en la Guia del Programador. an tambien contribu+o al segundo lenguae proceduralS 'LIpg-/LS para ir con el srcinal lengae procedural 'LIpg(!L con el =ue el contribu+o la ultima ersion. (enemos soporte opcional de caracter multiple*b+te de (atsuo 7isBo para complementar nuestro soporte local. Las comunicaciones clienteIseridor Ban sido depuradasS con meor soporte para mensaes asincronos e interrupcionesS gracias a (om Lane. Al depurador de sintactico eecuta aBora coersiones de tipo automatico para emparear argumentos a los operadores + ,unciones disponiblesS + para emparear columnas + e>presiones con columnas destino. Asto utili8a un mecanismo generico =ue soporta las prestaciones de e>tensibilidad de tipo de 'ostgres. 9a+ un nueo capitulo en laGuia de 1suario =ue cubre este asunto. (res nueos tipos de datos Ban sido anadidos. Dos tiposS inet + cidrS soportan arias ,ormas de trabao en red 7'S subredS + direccionamiento por ma=uina. :Bora Ba+ un tipo entero de " b+te disponible para algunas plata,ormas. ;ease el capitulo de tipos de datos en la Guia del 1suario para mas detalles. @n cuarto tipoS serialS se soporta aBora por el depurador de sintactico como una amalgama de tipo int4S una secuenciaS + un indice unico. 9an sido aCadidas arias prestaciones mas sintacticas compatibles con -/L2S inclu+endo I@SE05 DEA1BL5 ?1LBES -eeral more -/L2*compatible s+nta> ,eatures Bae been addedS includingI@SE05 DEA1BL5 ?1LBES
•
La instalacion + con,iguracion automatica del sistema Ba recibido alguna atencioS + deberia ser mas robusta para mas plata,ormas de lo =ue nunca Ba sido.
Migracion a 6.4 -e re=uiere un dumpIrestore utili8ando pgKdump o pgKdumpall para a=uellas =ue desen migrar datos desde cual=uier ersion anterior de 'ostgres. Lista Detallada de !a mbios 2orreciones de errores --------2orrecion para una minuscula perdida en 4Usetdb/4Ufinish%Lryan& #e elimina char<-'@ de los tipos de datosE se utiliRa char/varchar%6arren& 4qfn no maneWa un mensaWe de 7192%,nders& 0educidas elevadas esperas por ocupacion a causa de bloqueos en transacciones con muchos 6eteccion de bloqueos de transacciones atascadas %dg& 2orrecion para masrcas de tiempo en estilo Z9#1Z en decodificacion y codificacion%homas& 2orreccion del problema con borrado de tabla %drop& despues de deshacer %rollback& una tr 2ambiado mensaWe de error y eliminado mensaWe actualiRado no funcional%Kadim& 2orreccion para verificacion de la matriR %array& de 214C 2orreccion para #2 ' 87917 #2 78 2orreccion para perdidas de buffer en llamadas a obWetos grandes%4ascal& 2ambio de propietario de tipo oid a intD%Lruce& 2orreccion de error en la compatibilidad con oracle de las funciones btrim%& ltrim%& y rt 2orreccion de invalidacion en rebasamientos de cache compartida%Gassimo& 4revencion de perdidas en descriptores de ficheros en 214C*s fallidos%Lruce& 2orreccion para perdidas en la pg_select de libpgtcl%2onstantin& 2orreccion de problemas con usuario/contrasena de mas de A caracteres%om& 2orreccion de problemas con maneWo de 719FC asincronos en el proceso en servidor%backend& 2orreccion de muchas entradas de sistema malas%om& GeWoras -----------,ctualiRacion de ecpg y ecpglibE vease src/interfaces/ecpg/2hangeog%Gichael& #e muestra en indice utiliRado en un "4,97%]eugswette& "4,97 invoca una regla de sistema y muestra plan%es& para la reescritura de consultas% 2onocimiento multi-byte de muchos tipos de datos y funcionesE via configure%atsuo& 7uevo configure con la opcion --with-mb%atsuo& 7ueva opcion initdb --pgencoding%atsuo& 7ueva opcion createdb - multibyte%atsuo& #elect version%&+ ahora devuelve la version de 4ostgre#U%eroen& ibpq permite ahora clientes asincronos%om& #e permite la cancelacion desde el cliente de una consulta en el proceso en servidor%back 4sql cancelas las consultas ahora con 2ontrol-2%om& 8suarios de ibpq no necesitan dar consultas dummy para obtener mensaWes 719FC%om& 719FC envia ahora al 496 del emisorE asi que puedes decir si eras tu mismo%om& a estructura de 4Jresult ahora incluye un mensaWe de error asociadoE si lo hay%om& #e definen los argumentos ZtR_hourZ y ZtR_minuteZ como date_part%&%homas& #e anaden rutinas para convertir entre varchar y bpchar%homas& #e anaden runtinas para permitir el dimensionamiento de varchar y bpchar dentro de las columnas de destino%homas& #e anade un bit a las etiquetas %flags& oara soportar Rona horaria y minutos en la devolucion de fecha%homas& #e permiten mas variaciones en numeros de coma flotante %por eW. Z.'ZE Z'e@Z&%homas& #e corrigen el analisis sintactico de menores unarios empeRando con espacios%homas& #e implementa 9G]17_B180E 9G]17_G978 por especificaciones #U<%homas& #e verifica i se ignora adecuadamente constraints de columna F109J7 ^C%homas& # defina 8#0 como sinonimo de 28007_8#0 por especificacines de #U<%homas&
#e habilita B,K97J en clausulas pero no se corriWe en ningun otro lugar aun. #e hace el tipo ZcharZ un sinonimo de Zchar%'&Z %actualmente implementado como bpchar&%h #e guarda el tipo de cadena si esta especificado por el maneWo de la clausula 6F,8%ho 1peraciones de coercion abarcan diferentes tipos de datos%homas& #e permite a algunos indices utiliRar columnas de diferentes tipos%homas& ,nadidas capcidades para coersiones de tipo automatico%homas& 6epuraciones para obWetos grandesE de este modo un fichero es truncado en su apertura%4et 6epuraciones de la lectura de lineas%om& #e permite que psql f tomen los espacios en blanco como delimitadores%Lruce& #e pasa el pg_attribute.atttypmod al frontal de la aplicacion para las longitudes de los ibreria de compatibilidad con Gsql en /contrib%,ldrin& #e elimina el requerimiento de que las clausulas identificadoras 1060/J0184 LC estuvieran incluidas en la lista de la busqueda%6avid& #e columnas para empareWarlas en las clausulas de 87917%homas& #e convierten elimina fork%&/ecec%& y solo se hace fork%&%Lruce& 6epuraciones en dbc%4eter& #e muestra el estado del proceso en el servidor %backend& en la linea de comandos de ps%solo funciona en algunas plataformas&%Lruce& 4g_hba.conf tiene ahora una opcion sameuser en el campo de la base de datos #e hace que lo_unlink tome el parametro oidE no el intD 7ueva 69#,L_21G4"_G,201 para compiladores que no pueden maneWar nuestras macros%Lruce& ibpgtcl maneWa los 719FC ahora como un evento clE no se necesitan enviar consultas ton 6epuraciones en libpgtcl%om& ,nadida una opcion -error al comando pg_result de libpgtcl%om& ,nadido parche localeE vease docs/0,6G/locale%1leg& 2orreccion para pg_dump con ella la sinta;is de 217#0,97 y 2B2^ es correcta%ccb& 7uevo codigo contrib/lo para eliminar grandes obWetos huerfanos%4eter& 7uevp comando psql Z# 297_721697J 1 *encoding*Z para prestaciones multi.byteE vease /doc/0,6G.mb%atsuo& codigo /contrib/noupdate para revocar permisos de actualiRacion en una columna ibpq puede ser compilada ahora en win3<%Gagnus& ,nadido 4Usetdbogin%& en libpq 7uevo entero por el de configure del soporte para 1#%homas& GeWor tipo soporte paraA-byteE nombrescomprobado entrecomillados tabla/columnas%homas& #e rodean los nombres de tabla y columnas con dobles comillas en pg_dump%homas& 4Ureset%& trabaWa ahora con contrasenas%om& Bandle case of J0184 LC target list column number out of range%6avid& #e permite 87917 en las subconsultas ,nadido auto-dimensionamiento a la pantalla a los comandos d$%Lruce& #e utiliRa 87917 para mostrar todos los resultados de d$ en una consulta%Lruce& #e anade la prestacion de busqueda de campo d$%Lruce& 4g_dump utiliRa menos peticiones connect%om& #e hace que la opcion -R de pg_dump trabaWe meWorE se documenta en la pagina de manual%o #e anade la clausula B,K97J con total soporte para subconsultas y uniones%#tephan& e;to completo de las rutinas de inde;ado en contrib/fullte;tinde;%Gaarten& os ids de transacciones se almacenan ahora en memoria compartida%Kadim& 7uevo 4J297721697J cuando eWecutan el comando 214C%atsuo& #oporte para la sinta;is #U< Z# 7,G#Z%atsuo& #oporte para ,97<-5%atsuo& ,nadido el caso 879216 los test de refresion%atsuo& 6epuracion de gestor de bloqueosE nuevos modos de bloqueos para %Kadim& #e permite uso de78 indice en LC clausulas 10%Lruce& #e permite el Z#2 1060 '+Z a e;plicacion K0L1# del plan lo imprimeE y ahora imprime en bonito el plan al fichero de log del postmaster%Lruce& #e anaden indices al display para el comando d%Lruce& #e permite el J0184 LC en funciones%6avid& 7uevo pg_class.relkind para obeWtos grandes%Lruce& 7uevo modo de enviar libpq mensaWes 7192 a diferentes localiRaciones%om& 7uevo comando de escritura w para psql%Lruce& 7uevo /contrib/findoidWoins escanea columnas oid para encontrar relaciones de union%Lruce& #e permite que sean considerados indices compatibles binarios cuando se verifican indices validos para una clausula de restriccion conteniendo una constante%homas&
7uevo codigo 9#L7/9##7 en /contrib/isbn_issn #e permite 71 9^E 97E 71 97E L7E y 71 L7 constraint%homas& 7uevo sistema de reescritura corrige muchos problemas con reglas y vistas%an& ? 0eglas en trabaWos relacionados ? 2ualificaciones de eventos en trabaWos de inserciones/actualiRaciones/borrados ? 7ueva variable 16 para referirse a 28007E 28007 se eliminara en un futuro ? as reglas de actualiRacion se pueden referir a 7 y 16 en la regla cualifica ? 9nserciones/actualiRaciones/borrados en vistas de trabaWo ? 0eglas multiples de accion se soportan ahoraE rodeadas entre parentesis ? 8suarios normales pueden crear vistas/reglas en las tablas en las que tengan pe ? as reglas y las vistas heredan los permisos del creador ? 7o hay reglas a nivel de columna ? 7o hay reglas de ,28,9],2917 78K,/K9, %846, 7/16& ? 7uevas vistas de sistema pg_tablesE pg_inde;esE pg_rules y pg_views ? #olo se puede eWecutar una accion en las reglas de #2 ? 0e escritura total revisadaE tal veR para la @.5 ? maneWo de subselects ? maneWo de agregaciones en vistas ? maneWo de inserciones dentro de una seleccion desde una vista ahora funciona os indices del sisteme ahora son multi-clave%Lruce& os tipos 1idint
#e anade soporte para la libreria compartida bsdi%Lruce& 7ueva soporte para opcion de configuracion --without-2"" support%Lrook& 7ueva F,U_2K# ,ctualiRado flowchart de proceso de servidor en tools/backend%backend& 2ambiado atttymod de int'@ a int3<%LruceE om& #e corrige Jetrusage%& para plataformas que no lo tienen%om& #e anade 4UconnectdbE 4J8#0E 4J4,##106 a la pagina de manual de libpq 7#3<^ platform fi;es%4hil 7elsonE ohn Luller& 2orrecciones para #co =/8ni;are <.; %LillyEothers& 2orreccines para #parc/#olaris <.5 %0yan& 4gbuiltin.3 esta obsoletoE movido a los ficheros de documentacion%homas& ,un mas documentacion%homas& #oporte para 7e;step%acek& #oporte para ,i; %6avid& 4agina de manual para pginterface%Lruce& odas las librerias compartidas tienen numero de version 8nidas todos los defines de las librerias compartidas de #1-especificos dentro de un unic 2omprobacion de configuracion 2/^ mas inteligente%Lilly& 2onfiguracion de perl mas inteligente%Lrook& confdigure utiliRa install-sh facilitado si no se encuentra script de instalacion%om& nueva Gakefile.shlib para configuracion de librerias compartidas%om&
DESCRIPCIÓN DEL VÍDEO Parámetros en postgresql.conf: track_activities track_counts track_io_timing track_functions update_process_title Otros: log_min_duration_statement / log_connections / log_statement
Algunas vistas y catálogos de interés: pg_stat_activity pg_stat_database pg_stat_all_tables pg_stat_user_functions pg_stat_all_indexes pg_locks Emergencia: pg_terminate_backend, pg_cancel_backend
Referencias: • •
http://www.postgresql.org/docs/current/interactive/monitoring-stats.html http://www.postgresql.org/docs/current/interactive/runtime-config-statistics.html
Ejemplos:
-- conexiones actuales SELECT datnameEusenameEcurrent_query FROM pg_stat_activity + -- consultas activas SELECT datnameEusenameEcurrent_query FROM pg_stat_activity WHERE current_query ( *96P* + -- consultas que llevan largo tiempo de ejecucion select
current_timestamp - query_start as runtimeE datnameE usenameE current_query from pg_stat_activity where current_query ( *96P* order by ' desc+ -- consultas en espera SELECT datnameEusenameEcurrent_query FROM pg_stat_activity WHERE waiting ( true+ -- detalle de bloqueos que mantienen consultas en espera SELECT w.current_query as waiting_queryE w.procpid as w_pidE w.usename as w_userE l.current_query as locking_queryE l.procpid as l_pidE l.usename as l_userE t.schemaname HH *.* HH t.relname as tablename from pg_stat_activity w oin pg_locks l' on w.procpid ( l'.pid and not l'.granted oin pg_locks l< on l'.relation ( l<.relation and l<.granted oin pg_stat_activity l on l<.pid ( l.procpid oin pg_stat_user_tables t on l'.relation ( t.relid where w.waiting+ -- Terminar transacciones que quedaron pendientes por mucho tiempo select pg_terminate_backend%procpid&
from pg_stat_activity where current_query ( *96P in transaction* and current_timestamp - query_start P *'> min*+ -- Se está usando una tabla? create temp table tmp_stat_user_tables as select ? from pg_stat_user_tables+ -- luego de un rato select ? from pg_stat_user_tables n oin tmp_stat_user_tables t on n.relid(t.relid and %n.seq_scanEn.id;_scanEn.n_tup_insEn.n_tup_updEn.n_tup_del& P %t.seq_scanEt.id;_scanEt.n_tup_insEt.n_tup_updEt.n_tup_del&+
Monitori9ación Xie, =B5D5D== 3 =FD& Z rafaelma 6na de las tareas más importantes de un administrador de bases de datos es monitori$ar los sistemas a su cargo para saber como están funcionando y planear futuras modificaciones y actuali$aciones de los mismos. Este art"culo es una introducción a la monitori$ación de sistemas de bases de datos en sistemas Linu256ni2 y está basado en un entrenamiento especiali$ado #ue se impartio en el P/)ay Latinoamericano D== en uba. +ás adelante escribiremos otros art"culos más espec"ficos #ue nos ayuden a usar e interpretar los datos obtenidos de monitori$ar nuestros sistemas.
En nuestro caso, monitori$ar significa %igilar el funcionamiento de un sistema, ser%icio o acti%idad. *a(o nuestro punto de %ista e2isten dos tipos de monitori$ación •
•
Ad oc +onitori$ación espec"fica en caso de problemas o pruebas. Se utili$a generalmente para in%estigar una situación puntual en la #ue intentamos encontrar una e2plicación a un suceso, cambio o problema. Pre%enti%a )etecta interrupciones de ser%icios, alerta sobre posibles problemas y crea gráficos con tendencias y datos istóricos sobre nuestros sistemas. Este tipo de monitori$ación está automati$ada y nos ayuda a descubrir cambios en nuestros sistemas #ue pro%ocan o pueden pro%ocar problemas en un futuro cercano.
E2isten numerosos programas #ue nos pueden ayudar a reali$ar la monitori$ación de nuestros sistemas PostgreSQL. A continuación teneis los mas usados en el mundo de programas de código abierto. •
•
Ad oc %mstat, iostat, sar, ps, top, iotop, top, etc en la linea de comandos de %uestro sistema operati%o, e información interna de %uestra instalacion postgreSQL %ia las %istas y tablas de sistema en la base de datos. Pre%enti%a JNagiosJ para detectar y alertar sobre posibles problemas y J+uninJ para crear gráficas istóricas con las tendencias y uso de nuestros sistemas.
Los elementos a monitori$ar son todos a#uellos #ue nos puedan dar información sobre como nuestro sistema está funcionando y comportandose. 4endremos #ue monitori$ar los componentes de la infraestructura necesaria para #ue nuestro sistema funcione, los ser%idores #ue estamos utili$ando, el uso de los recursos #ue se están utili$ando y la información interna en la base de datos #ue nos de datos sobre como se está usando PostgreSQL.
Algunos de los elementos más importantes #ue se suelen monitori$ar son los siguientes • • • • • •
Ser%idor )isponibilidad y posibles problemas del ardare P6 arga del sistema y uso de la P6 +emoria arga y uso de la memoria, uso de la memoria de intercambio 8sap: -ed )isponibilidad de los componentes de red, tráfico de entrada y salida. )iscos 5 almacenamiento Espacio utili$ado, I5O 8Input5Output: del sistema PostgreSQL N?mero de cone2iones, n?mero de transacciones, transacciones abiertas, blo#ueos, espacio usado, tipo de comandos usados, etc, etc
Ademas de estos elementos, suelen e2istir caracter"sticas espec"ficas a cada sistema #ue cada administrador deberá identificar y monitori$ar de la me(or manera posible.
+onitori$ación Ad oc omo ya emos comentado, este tipo de monitori$ación se utili$a generalmente para in%estigar una situacion puntual, en la #ue entramos en el sistema, recogemos los datos deseados por un periodo de tiempo y pasamos a su posterior análisis para intentar encontrar una e2plicación a la situación o problema #ue estamos intentado resol%er.
erramientas del sistema operati%o A continuación teneis una bre%e introducción a las erramientas del sistema operati%o usadas más a menudo en esta monitori$ación. 4odas estas erramientas se pueden usar con multitud de opciones y parámetros, para obtener información detallada sobre los mismos usar el comando Jman programaJ
%mstat Este comando se suele usar para obtener, entre otras cosas, información sobre el uso de memoria, sap, I5O total y cpu del sistema. La primera fila del resultado por defecto da los %alores medios desde la ?ltima %e$ #ue se arranco el sistema. Es un programa #ue te da información global e instantanea del sistema en un momento determinado. En sistemas debian5ubuntu este programa esta incluido en el pa#uete procps y si no esta instalado se puede instalar con el siguiente comando T sudo apt3get install procps
6n resultado t"pico de e(ecutar este comando podria ser el siguiente T %mstat 3n = =D procs 33333333333memory3333333333 333sap33 33333io3333 3system33 3333cpu3333 r b spd free buff cace si so
bi
bo in cs us sy id a
D D ='GB >D=&'G FK== >B>>='G
D
D
=F
D D ='GB 'K&BB> FK== >B>>=>D
D
D
D => F' ='KK = D KK D
G >
G F = K> =
D D ='GB >D=K&G FK== >B>>=>D
D
D
D
D D ='GB 'KB&F FK== >B>>=>D
D
D
D
D >BB =>>& = D KK D
D D ='GB >D'FBB FK== >B>>=>D
D
D
D
D FD =FFD D KB D
D D ='GB 'KB&D FK== >B>>=>D
D
D
D
D FGF =FF = D KK D
D D ='GB >DD' FK==G >B>>=>>
D
D
D => FF= =GDK = D KK D
D FGG =G>B = D KK D
D D ='GB 'KG=' FK==G >B>>=>>
D
D
D
D D ='GB >DD&D FK==G >B>>=>>
D
D
D >>D G&' =BK = D KB =
D F=K ='KF = D KK D
= D ='GB 'K&D&G FK==G >B>>=>>
D
D
D
D FDD =>>' = = KK D
El tama0o de blo#ue por defecto es =D> bytes 8=Ub: y el significado de las distintas columnas es el siguiente r Procesos esperando por tiempo de e(ecución 8run time: b Procesos en estado de espera sin interrupciones8uninterruptible sleep: spd antidad de memoria %irtual en uso free antidad de memoria ociosa buff antidad de memoria usada por buffers cace antidad de memoria usada caces si antidad de memoria grabada en disco 8sap3in: so antidad de memoria leida del disco 8sap3out: bi *lo#ues recibidos por los dispositi%os de blo#ues 8blo#ues5s: bo *lo#ues en%iados por los dispositi%os de blo#ues 8blo#ues5s: in N?mero de interrupciones por segundo cs N?mero de cambios de conte2to por segundo 8conte2t sitces: us 4iempo de cpu de procesos de usuario 8nice incluido: sy 4iempo de cpu de procesos del 7ernel id 4iempo de cpu ocioso a 4iempo de cpu esperando por I5O st 4iempo de cpu JrobadoJ a una ma#uina %irtual iostat Este comando se suele utili$ar para obtener información sobre la entrada5salida de datos de todos los dispositi%os, particiones y sistemas de ficeros NCS. Por defecto, el primer resultado da los %alores medios desde la ?ltima %e$ #ue se arranco el sistema. Es un programa #ue te da información sobre el I5O del sistema para todos los dispositi%os en un momento determinado.
En sistemas debian5ubuntu este programa está incluido en el pa#uete sysstat y si no esta instalado se puede instalar con el siguiente comando T sudo apt3get install sysstat
6n resultado t"pico de e(ecutar este comando podria ser el siguiente T iostat 37 3p = a%g3cpu Vuser Vnice Vsystem Vioait Vsteal Vidle >.&B
)e%ice
tps
D.=K
7*read5s FK.DD
D.GD
D.&K
D.DD K'.G>
7*rtn5s
7*read
7*rtn
sda
F.FD
=DG.BG =KK=GB= 'GDB=FB>
sda=
=.G
G.&F
=&.K'
sda
D.DB
'.DF
D.D
sda'
'.BD
>K.=K
BB.K= =GG=D=&G 'DDDD&G
&KGFD
GDF'=DB
=D'=DD'
&D'
sda>
D.DD
D.DD
D.DD
&>D
='GB
sdb
D.DD
D.D=
D.DD
'>GD
>>
sdb=
D.DD
D.D=
D.DD
''>D
>>
a%g3cpu Vuser Vnice Vsystem Vioait Vsteal Vidle D.KK
)e%ice
tps
sda
D.D
sda= sda sda'
D.=D
7*read5s
D.F>
D.DD
D.DD KB.'&
7*rtn5s
7*read
F.GD
D.DD
=B
D.DD
D.DD
D.DD
D
D
D.D D.DD
F.GD D.DD
D.DD D.DD
=B D
D
7*rtn D
D
sda>
D.DD
D.DD
D.DD
D
D
sdb
D.DD
D.DD
D.DD
D
D
sdb=
D.DD
D.DD
D.DD
D
D
El tama0o de blo#ue por defecto usado por este programa es F= bytes. El parámetro 37 nos cambia el %alor de blo#ue a =D> bytes 8=Ub:. El significado de las distintas columnas es el siguiente tps N?mero de peticiones I5O 8transferencias: a un dispositi%o 7*read5s 7* por segundo leidos del dispositi%o 7*rtn5s 7* por segundo escritos en el dispositi%o 7*read N?mero total de 7* leidos del dispositi%o 7*rtn N?mero total de 7* escritos en el dispositi%o sar Este programa se suele utili$ar para recolectar y grabar información sobre nuestro sistema durante un periodo de tiempo. En sistemas debian5ubuntu este programa está incluido en el pa#uete sysstat y si no esta instalado se puede instalar con el siguiente comando T sudo apt3get install sysstat
La recolección de datos se llama desde cron 8 5etc5cron.d5sysstat:, y por defecto no está acti%ado. Para acti%ar la recolección de datos una %e$ instalado deberemos cambiar un parámetro en el ficero 5etc5default5sysstat y arrancar el ser%icio ENA*LE^J4-6EJ en 5etc5default5sysstat
T sudo 5etc5init.d5sysstat restart
6n resultado t"pico de e(ecutar este comando despues de un tiempo desde #ue se acti%a la recolección de datos podria ser el siguiente T sar Linu2 .G.'F3>3generic 8core:
Vuser
D=5K5D==
2BGG>
Vnice Vsystem Vioait
8> P6:
=DDD= A+
P6
=DFD= A+
all
D.&
D.=>
D.KF
D.=K
D.DD
Vsteal K&.KK
==FD= A+
all
D.&>
D.=F
D.KF
D.DK
D.DD
KB.D&
=FD= A+ ='FD= A+
all all
D.&' D.&>
D.=F D.=>
D.KD D.K'
D.DF D.=F
D.DD D.DD
KB.=& KB.DF
=>FD= A+
all
=.DB
>.BD
'.&
D.D&
D.DD
KD.&B
=FFD= A+
all
D.KG
'.G&
.FK
D.=D
D.DD
K.GB
D=DFD= A+
all
D.&
D.=>
D.KD
D.=K
D.DD
KB.D>
D==FD= A+
all
D.&G
D.='
D.K&
D.D&
D.DD
KB.DG
D=FD= A+
all
D.&D
D.=F
D.KD
D.DG
D.DD
KB.D
D='FD= A+
all
D.&D
D.='
D.BK
D.==
D.DD
KB.=&
D=>FD= A+
all
D.GB
D.=>
D.KD
D.=D
D.DD
KB.=B
Vidle
ps Este programa nos da información sobre los procesos #ue se están e(ecutando en nuestro sistema. En el caso de procesos PostgreSQL nos puede dar información muy %aliosa sobre cuantos procesos PostgreSQL se están e(ecutando y #ue están aciendo. 6n resultado t"pico de e(ecutar este comando para obtener los procesos PostgreSQL del sistema, ordenados por el momento en #ue empe$aron a e(ecutarse, podria ser el siguiente T ps au2 grep Jpostgres J sort 37 K postgres 'D&FB .... D&=D DDD postgres auto%acuum launcer process postgres 'D&FK .... D&=D DDD postgres stats collector process postgres 'D&F& .... D&=D DDD postgres al riter process postgres 'D&FG .... D&=D DD= postgres riter process postgres BG .... D&FK DDD postgres postgres postgres ;local< idle in transaction postgres =K= .... DK DDD postgres postgres postgres =&.D.D.=8'K>&F: idle postgres =D&> .... =>=> DD> postgres postgres pgbenc ;local< O++I4 postgres =D&' .... =>=> DD> postgres postgres pgbenc ;local< 6P)A4E aiting
Los #ue nos suelen interesar en este caso son los procesos creados por cone2iones de clientes a nuestro ser%idor PostgreSQL. Estos procesos se muestran con el siguiente formato postgres usuario dbase ma#uina8puerto: acti%idad
omo podeis %er, podemos obtener información sobre #ue usuario está utili$ando el cliente para conectarse, a #ue base de datos se está conectando, desde #ue má#uina y puerto 8o soc7et ;local<: se a conectado y #ue está aciendo. Los %alores de la acti%idad #ue está reali$ando podrán ser idle in transaction El proceso a abierto una transacción pero no la a cerrado toda%ia. idle El proceso está conectado pero sin acer nada. O+AN)O El proceso está e(ecutando el comando O+AN)O O+AN)O aiting El proceso #uiere e(ecutar el comando O+AN)O, pero está blo#ueado y esperando a poder e(ecutarse
Xistas y tablas de sistema internas en PostgreSQL Además podemos obtener información sobre como esta funcionando PostgreSQL internamente a tra%1s de las %istas y tablas de sistema en la base de datos. En sucesi%os art"culos iremos %iendo #ue tipo de información contienen y como interpretar estas %ista5tablas de sistema. Para #ue mucas de estas %istas5tablas funcionen debemos tener acti%ados estos parámetros en nuestro sistema, trac7counts, trac7functions, trac7acti%ities, bien en el ficero postgres#l.conf o definidos con SE4 5 AL4E- )A4A*ASE en la sesión o base de datos de la #ue #ueremos obtener información. E2isten mucas %istas y tablas internas pero las #ue se usan mas comunmente para obtener información de PostgreSQL son las siguientes pgroles Información sobre todos los roles y usuarios definidos en la base de datos. postgres^[ SELE4 9 from pgroles
rolname rolsuper rolinerit rolcreaterole rolcreatedb rolcatupdate rolcanlogin rolconnlimit rolpassord rol%aliduntil rolconfig oid 3333333333!3333333333!333333333333!333333333333333!3333333333333!33333333333333!3333333333333!33333333333333!3333333333333!333333333333333 !33333333333!33333 postgres t
t
t
t
t
t
3= 99999999
=D
8= ro:
pgdatabase Información sobre todas las bases de datos definidas en nuestro sistema. postgres^[ SELE4 9 from pgdatabase
datname datdba encoding datcollate datctype datistemplate datalloconn datconnlimit datlastsysoid datfro$en2id dattablespace datacl 33333333333!33333333!3333333333!3333333333333!3333333333333!333333333333333!33333333333333!33333333333333!333333333333333!33333333333333 !333333333333333!3333333333333333333333333333333333333 template= =D G en6S.64C3B en6S.64C3B t ^c5postgres,postgres^4c5postgres
t
3=
==BGG
GF>
=GG'
templateD =D G en6S.64C3B en6S.64C3B t ^c5postgres,postgres^4c5postgres
f
3=
==BGG
GF>
=GG'
postgres
=D
G en6S.64C3B en6S.64C3B f
t
3=
==BGG
GF>
=GG'
pgbenc
=D
G en6S.64C3B en6S.64C3B f
t
3=
==BGG
GF>
=GG'
8> ros:
pgloc7s Información sobre los blo#ueos acti%os en nuestras bases de datos. Xista complicada de entender pero muy %aliosa en ciertas situaciones. postgres^[ SELE4 9 from pgloc7s
loc7type database relation page tuple %irtual2id transactionid classid ob(id ob(subid %irtualtransaction pid mode granted 333333333333333!3333333333!3333333333!333333!3333333!333333333333!333333333333333!333333333!3333333!3333333333!33333333333333333333!333333 !333333333333333333!333333333 relation
=G'BF
=G'K
'5GGG
relation
=G'BF
=G'K
'5GGG
%irtual2id
relation
==B&>
=DKBF
5=K
relation
=G'BF
=G'KK
'5GGG
>5GK
>5GK
&== AccessSareLoc7 t &== -oE2clusi%eLoc7 t &=D E2clusi%eLoc7
t
>D= AccessSareLoc7 t &== -oE2clusi%eLoc7 t
relation
=G'BF
=G'K
>5GK
relation
=G'BF
=G'K
>5GK
&=D -oE2clusi%eLoc7 t
relation
=G'BF
=G>D'
>5GK
&=D AccessSareLoc7 t
relation
=G'BF
=G>D'
>5GK
&=D -oE2clusi%eLoc7 t
relation
=G'BF
=G>D'
'5GGG
&== AccessSareLoc7 t
relation
=G'BF
=G>D'
'5GGG
&== -oE2clusi%eLoc7 t
%irtual2id
relation
=G'BF
=G>D=
relation
=G'BF
=G'BG
'5GGG
&== -oE2clusi%eLoc7 t
relation
=G'BF
=G>D=
>5GK
&=D -oE2clusi%eLoc7 t
tuple
=G'BF
=G'BK
relation
=G'BF
=G'BK
>5GK
&=D -oE2clusi%eLoc7 t
relation
=G'BF
=G'KF
'5GGG
&== -oE2clusi%eLoc7 t
relation
=G'BF
=G'BK
'5GGG
&== -oE2clusi%eLoc7 t
&K'G='
>5GK
transactionid %irtual2id
'5GGG
K&
5=K
&=D AccessSareLoc7 t
'5GGG
&== E2clusi%eLoc7
'5GGG
t
&== -oE2clusi%eLoc7 t
>5GK
&=D E2clusi%eLoc7
&=D E2clusi%eLoc7
5=K
>D= E2clusi%eLoc7
t
t
t
transactionid
&K'G=>
'5GGG
&== E2clusi%eLoc7
t
transactionid
&K'GDK
>5GK
&=D SareLoc7
t
8' ros:
pgstatacti%ity Información sobre todos los procesos clientes conectados a la base de datos. postgres^[ SELE4 9 from pgstatacti%ity
datid datname procpid usesysid usename applicationname clientaddr clientport 2actstart #uerystart a iting
bac7endstart
current#uery
3333333!3333333333!333333333!3333333333!3333333333!333333333333333333!3333333333333!3333333333333!3333333333333333333333333333333 !3333333333333333333333333333333!3333333333333333333333333333333!333333333!33333333333333333333333333333333333333333333333333333333333333333333333 ==B&> postgres >D= =D postgres ps#l F'=.K&D'&!D= D==3D3=& F'=.K&D'&!D= f
3= D==3D3=& >BDB.DKDGD'!D= D==3D3=& SELE4 9 from pgstatacti%ity
=G'BF pgbenc &== =D postgres F'=.KG'K>!D= D==3D3=& F'=.KGB&'!D= f EN) =G'BF pgbenc &=D =D postgres F'=.KF=K'!D= D==3D3=& F'=.KF>!D= t ^ =
3= D==3D3=& F==.DK&>!D= D==3D3=&
3= D==3D3=& F==.=KG'!D= D==3D3=& 6P)A4E pgbenctellers SE4 tbalance ^ tbalance ! 3>>>' ME-E tid
=G'BF pgbenc B== =D postgres D==3D3=& F&.F>K&BF!D= D==3D3=& F'=.>&>F'!D= D==3D3=& F'=.>&>F'!D= f auto%acuum ANALR_E public.pgbencistory 8> ros:
pgstatdatabase Información global de uso de todas las bases de datos. postgres^[ SELE4 9 from pgstatdatabase
datid datname numbac7ends 2actcommit 2actrollbac7 bl7sread bl7sit tupreturned tupfetced tupinserted tupupdated tupdeleted 3333333!33333333333!3333333333333!3333333333333!333333333333333!33333333333!3333333333!33333333333333!3333333333333!33333333333333!3333333333333 !3333333333333 = template= D
D
'G=
D
B>D =DD'>=
K'F'BG
''&GD
D
D
==BGG templateD
D
D
D
==B&> postgres
=
>BFK
=G'BF pgbenc BK'>=BK D
K&B>>G
D
D
D
D
='D> ='GG&
=
D
=>FK&
GFKF&B BBGBKKF
D
D
'BDK
D
>=G''G
==BG'BG
D D
D
'=&BD'
8> ros:
pgstatusertables Información de uso de todas las tablas de usuario en una base de datos pgbenc^[ SELE4 9 from pgstatusertables
relid scemaname
relname
se#scan se#tupread id2scan id2tupfetc ntupins ntupupd ntupdel
ntupotupd nli%etup ndeadtup lastautoanaly$e
last%acuum
lastauto%acuum
lastanaly$e
3333333!333333333333!333333333333333333!3333333333!33333333333333!3333333333!333333333333333!33333333333!33333333333!33333333333!333333333333333 !333333333333!333333333333!3333333333333333333333333333333!3333333333333333333333333333333!3333333333333333333333333333333 !3333333333333333333333333333333 =G'KF public pgbencistory D D==3D=3K ='=F>.DBB='!D=
D
D
'D&>= D D D B''DB D==3D=3K ='=F>.DKD!D= D==3D3=& F''>.=G>F!D=
=G'BG public pgbencbrances 'BB= G>F 'D>KKK 'D>KKK 'D&> D 'D&DF> &F >K' D==3D3=& F==.=&'=!D= D==3D3=& F'&.&=====!D= D==3D=3K ='=F'.K>FDBB!D= D==3D3=& F'&.&>B'K'!D= =G'BK public pgbenctellers '>&> G='DD 'D>'=FB 'D>'=FB D 'D&> D 'DFBGB FF B=D D==3D3=& F==.=&FG'F!D= D==3D3=& F'&.B&DF&>!D= D==3D=3K ='=F'.K>GB'B!D= D==3D3=& F'&.B&=&&!D= =G'K public pgbencaccounts = DDDDD G=>B>>> G=>B>>> DDDDD 'D&> D 'D'''BD =KKKKK =DDK= D==3D=3K ='=F>.D>KF&B!D= D==3D=3K =FKK.KB'K=!D= D==3D=3K ='=F>.D>='B!D= D==3D3=& F''=.>&GKGK!D= 8> ros:
pgstatuserinde2es Información de uso de todos los "ndices de usuarios en una base de datos pgbenc^[ SELE4 9 from pgstatuserinde2es
relid inde2relid scemaname
relname
inde2relname
id2scan id2tupread id2tupfetc
3333333!333333333333!333333333333!333333333333333333!33333333333333333333333!3333333333!33333333333333!333333333333333 =G'BG
=G'KK public
pgbencbrances pgbencbrancesp7ey 'DBBBG
=G'BK
=G>D= public
pgbenctellers pgbenctellersp7ey 'DBBKBF
=G'K
=G>D' public
pgbencaccounts pgbencaccountsp7ey G>DDKB
=D=>FBF
>GBDDD'
KD>D>
'&B&G
G'=KKGG
G>DDKB
pgstatuserfunctions Información sobre estad"sticas de uso de las funciones en uso. pgstatiousertables Información de acceso a disco y memoria cace de todas las tablas de usuario en una base de datos. pgbenc^[ SELE4 9 from pgstatiousertables relid scemaname relname tid2bl7sread tid2bl7sit
eapbl7sread eapbl7sit id2bl7sread id2bl7sit toastbl7sread toastbl7sit
3333333!333333333333!333333333333333333!3333333333333333!333333333333333!333333333333333!33333333333333!33333333333333333!3333333333333333 !3333333333333333!333333333333333 =G'K public
pgbencaccounts
=G'KF public
pgbencistory
=G'BG public
pgbencbrances
F>&B'G ='FD&> &FB&
KBK>D'
='G=
'DBD=D
=&D=FFD>
G
=K=F='&G '='B'&
=G'BK public
pgbenctellers
&=GD
BBDFDDF
F
GD==B&
8> ros:
pgstatiouserinde2es Información de acceso a disco y memoria cace de todos los "ndices de usuario en una base de datos. pgbenc^[ SELE4 9 from pgstatiouserinde2es
relid inde2relid scemaname
relname
inde2relname
id2bl7sread id2bl7sit
3333333!333333333333!333333333333!333333333333333333!33333333333333333333333!333333333333333!33333333333333 =G'BG
=G'KK public
pgbencbrances pgbencbrancesp7ey
=G'BK
=G>D= public
pgbenctellers pgbenctellersp7ey
=G'K
=G>D' public
pgbencaccounts pgbencaccountsp7ey
G F
'=G'=GK
GD&GGG
='G=
=K'D=D=D
8' ros:
pgstatbgriter Información global sobre el proceso Jbac7ground riterJ pgbenc^[ SELE4 9 from pgstatbgriter
cec7pointstimed cec7pointsre# bufferscec7point buffersclean ma2rittenclean buffersbac7end buffersalloc 3333333333333333333!33333333333333333!33333333333333333333!333333333333333!333333333333333333!33333333333333333!333333333333333 >&>
B=
'K>
FF>&>G
F&'
BF'GK
FFFB>B
8= ro:
+onitori$ación pre%enti%a omo emos comentado al principio, este tipo de monitori$ación se utili$a para detectar interrupciones de ser%icios, alertar sobre posibles problemas y crea gráficos con tendencias y datos istóricos sobre nuestros sistemas. Los dos programas de código abierto mas utili$ados para este tipo de monitori$ación son •
Nagios Se utili$a para detectar interrupciones de ser%icios y alertar sobre posibles problemas o situaciones #ue necesitan una atención especial por parte de los administradores del sistema. Su instalación y configuración se escapa al ob(eti%o de este documento. +ás adelante escribiremos un art"culo sobre como utili$ar Nagios. A#u" teneis un e(emplo de una de la pantallas de este programa
•
+unin Se utili$a para crear gráficas istóricas con las tendencias y uso de nuestros sistemas. Imprescindible para %er como nuestros sistemas se están utili$ando en el tiempo y si e2isten tendencias en el uso #ue %an a re#uerir nuestra inter%ención en el futuro. Su instalación y configuración se escapa al ob(eti%o de este documento. +ás adelante escribiremos un art"culo sobre como utili$ar +unin. A#u" teneis algunos e(emplos de lo #ue se puede acer con este programa
+ás información
.onsideraciones Preliminares :ntes de comen8ar debemos tener en cuenta a =ue plata,ormas estP destinado este WBite 'aperH
-istema peratioH Linu>S Windos. tros deriados de @ni> podran incluirse. $ase de DatosH 'ostgres=l ".1 a ".3
An este documentoS ud. encontrarP los caminos para monitorear un seridor 'ostgres=l utili8ando las Berramientas incorporadas en el sistema operatio mPsS algunas adicionales =ue pueden ser descargas gratu itamente desde el sitio p g,oundr+.org 0repositorio o,icial de 'ostgres= l. 'ara entender de manera cabal este WBite 'aper S le aconseamos tener conocimie ntos bPsicos de programaci n sobre basB 0#@ILinu> + deriados de @ni> + batcB en Windo s. (ambiGn deberP conocer mu+ pe=ueCos conceptos de e>presiones regulares en 'erl o '+tBonS pero no serPn obligatorios en un principio.
6betivos de la monitori;ación Los ,ines principales de monitorear un seridor de bases de datos sonH
;eri,icar el consumo de recursos. :ctiidad positia del mismo. (iempo de respuesta del seridor. Recabar la ma+or cantidad de in,ormacin a ,in de poder tener los su,icientes datos para ubicar donde esta el problema. Deteccin de problemas de Bard o red. btener in,ormacin de una determinada tarea o consulta 0especial para puesta a punto de sentencias o seridor.
'or lo =ue deducimos =ue tenemos tres gruposH actiidad del motorS comportamiento del seridor e inestigacin de consultas.
Información sobre procesos Los procesos son tareas =ue se eecutan con una cuota de tiempo en el procesador. !ada procesoS puede tener Bilos de eecucin internosS simulando tener arios procesos Bios. Los procesos pueden consumir rangos de memoria + tiempos de procesamiento determinados en la con,iguracin del sistema operatio + desde las aplicaciones o Berramientas =ue los lan8an. -in embargoS es el - =uien administra de manera transparente al usuario dicBas asignaciones 0aun=ue uno pueda asignar determinados reto=ues desde el -. 'ara tales austesS es re=uerido poseer priilegios d esde el sistema operatio para poder asignar las. Los proce sos tienen asigna dos una prioridad. As esta la =ue le indica al sistema operatio cuanto tiempo + cantidad de recursos de procesador le asignarP. An el caso espec,ico de plata,ormas @ni> o deriadasS este alor puede ir de *2) a 2)S siendo la menorS la mPs prioritaria. An WindosS desde el :dministrador de (ar easS ct,mon.e>e o tas%list desde la lnea de comandosS
podremos obserar 6 n ieles de prioridade s =ue an desde Y(iempo RealY a Y$aaY. :lgunos sistemas operatiosS tienen mecanismos aan8ados de asignacin de permisosS tal como -olaris. AsteS tiene la opcin de F' 0Fi>ed 'riorit+ el cual irP ariando la prioridad de acuerdo al uso de los procesos. :demPsS podemos considerar el niel de intrusiidad del monitoreo. : ma+or cantidad de in,ormacin recolectadaS mPs se erP a,ectado el sistema. -in embargo + por lo generalS los monitoreos no suelen ser consumidores abruptos de recursos. : di,er encia de la monitori8acin normal S e>isten los $enchmar+s. Astas tGcnicasS permiten medir el rendimiento de un determinado seridor S +a sea con datos ,icticios + aleatoriosS como con datos reales de una base. Aste tipo de ealuaciones suele consumir mucBos recursosS en especial cuando se Bacen pruebas de stress sobre los seridores para conocer los lmites de prestacin del mismo. A>isten Berramientas espec,icas en 'ostgres=l para la e,ectii8acin de este tipo de testsS entre ellos el mPs popular es 'g$encB. -in embargoS + gracias al auge de los lenguaes de scripting S es mu+ sencillo diseCar un bencB =ue inclu+a las particularidades de nuestro sistema. 'g$encB re=uiere primero una creacin de una relacin 0pgbencBKbrancBesS por lo =ue el primer comando a eecutar es 5pg$ench 617usuario8 6i 7$ase85 . LuegoS simplemente =uitamos la opcin *i. 'odemos indicar cantidad de cone>iones 0*c numS ,orma de comprometer una consulta 0* M fe>tendedsimplepreparedhS cantidad de transacciones por cliente 0*t numS duracin en segundos 0*( numKsegundosS entre otras. A>iste otra Berramienta 0bencBmar%.p+S la cual esta disponible de manera totalmente libre en nuestro trac% 0desarrollos.siu.edu.arItracIpostgres=l. Las Berramientas de bencBmar% permiten conocer las capacidades de transacciones por un lapso de tiempo en nuestros seridores. As mu+ util para cuando =ueremos modi,icar alores de con,iguracin del motor o el seridor en general + =ueremos comprobar su repercusin. 'ara Bacer mPs legible el presente documentoS diidirem os el monitoreo de los procesos desde el - + desde la baseS as como tambiGn las Berramientas espec,icas para cada plata,orma. As recomendableS =ue los monitoreos en sistemas en produccin sean constantesS pero no intrusios 0a menos =ue una situacin en especial lo re=uiera. !on respecto a los testsS utili8aremos unidades de testeo con Berramientas propias de 'ostgres=l.
3onitoreando en plataformas Lin-7 o Bni7 compatibles :erramientas Previas A>isten una serie de comandos de los =ue el usuario debe estar ,amiliari8ado con su salidaH
ps
lso, ,ree iostat mpstat sar 0si lo tiene Btop o top mstat IetcIinit.dIpostgres status o serice postgres status 0de acuerdo a la distribucin netstat pgrep a% + perl 0bPsico (uberas + redirecciones. 'ermisos de usuarios 0mucBas eces si el usuario no tiene permisosS no podrP er los procesos
.omandos 'odemos empe8ar por eri,icar =ue el seridor este corriendo actualmenteH
Asto indica =ue el seridor estP corriendo. -i obseramos en mPs detalle nos esta diciendoH
Al '7D 4526 nos estP in,ormando el proceso principal =ue se abri contra el cluster. (ambiGn nos esta in,ormando la ruta de la ubicacin ,sica del '#D:(:. Al '7D 4622 es el proceso de escritura sobre la base. Al '7D 4623 es el proceso =ue escribe sobre la W:L. Al '7D 4624 es el proceso de autoacuum + el 4625 es el recolector de estadsticas. Astos dos procesos puede ser desactiadosS pero no es recomendable Basta el momento. Al '7D 43 es un cliente abiert o. os estP indicando tambiGn sobre =ue base + =ue usuario se estPn utili8ando. 7ncluido a estoS tambiGn nos in,orma =ue se estP accediendo localmente.
;iendo mPs de cerca los procesosS podemos aCadir ma+ores opciones al comando YpsYS para =ue nos muestre in,ormacin mPs detallada. ps u ! postgres ! postmaster Asto nos darP in,ormacin mPs precisa + e>tensaS lo =ue inclu+e el tiempo de consumo en !'@. Los parPmetros ! permiten ,iltran por ocurrencias 0postmaster es un alias =ue =ued por compatibilidad con ersiones anteriores + se suele utili8ar para identi,icar la cone>in al '#D:(:. :demPs este comando nos permite Bacer cosas algo mPs aan8adas como por eemploH ps , *o pidSppidSargs *! postgres *! postmaster
Asto permitirP isuali8ar en ,orma de 9arte ascii:S los procesos padre 0''7D + sus Bios 0'7D. ;amos a ir un paso mPs allP de los procesos. @na de las cosas mPs importantes =ue debemos saber es a =ue arcBios estP accediendo un determinado proceso. An el eemplo siguienteS se decidi obtener el listado de todos los arcBios =ue estPn siendo accedidos por el proceso de escritura W:L. -e le aCadi un ,iltro YBeadY para ,ines de legibilidad.
An el caso de necesitar conocer la cantidad solamenteS debemos agregar ; wc 6l j . -aber cuantos arcBios consume el seridor de base de datos es importante para tener en cuenta el parPmetro del %ernel 0ma>,ilesS open,iles. Aste parPmetro establece el mP>imo de arcBios abiertos. Asto es de suma importancia en ambientes crticos. @na de las ,ormas con la =ue podemos saber cuantos arcBios estP accediendo el seridor postgresS es tecleand oH lso, perl *lane Yi, 0IpostgrespostmasterI Zprint TFf1h[Y c *l Asto es simplemente el total de ocurrencias =ue ,iltra la e>presin regular de 'erl. Asta lnea no es lo su,icientemente inteligente como para di,eren ciar entre distintos clusters 0recordar =ue podemos tener dos clu sters en una mP=uinaS lo =ue e l conteo debera Bace rse por separado. Meorando la lnea anterior podemos obtener la cantidad de procesos actios en un determinado momento a ,in de crear estadsticas de cone>iones. -implemente deberemos aCadir la siguente lnea de comando en el cron del sistema + este se encargarP de loguear las ocurrencias. ps *: egrep Y0postgrespostmaster Y c *l >args ecBo kdate NEmd9M k XX Istat An el cron simplemente podremos establecerlo para correr cada 2) o 1) minutos de acuerdo a nuestras necesidadesH ]I1) ] ] ] ] root comandoX 9aciendo el siguiente anPlisis conoceremos el alor mPs alto de procesos simultPneosH a% YZprint T2[Y Istat sort *u Bead *1 Debemos tener en cuenta =ue Ba+ procesos =ue son netamente del seridorS por lo =ue no son cone>iones clientes. @na de las cosas =ue mPs a,ecta el rendimiento de las bases de datosS son los procesos 7I. 'or lo tantoS cuanto mPs logremos disminuir la latencia en estos procesosS menores serPn los tiempos de respuesta. As por eso =ue siempre es recomendable con,igurar un R:7D para una base de datos. La Berramienta iostat no permitirP er las estadsticas de escritura + lectura en disco. 'uede =ue algunas ersi ones de Linu> no inclu+an las Berr amientas de statS por lo =ue debemo s instalarlas
eecutandoH apt*get install s+sstat 'ara Bacerlo mPs dinPmico se recomienda utili8ar el modo continuo de iostat 0*d la Berramienta YatcBYH iostat d 2 La salida de dicBo comando se puede apreciar en la siguiente imagenH
De este grP,ico podemos obserar =ueH el seridor tiene 3 discos 0de los cuales 1 es el =ue estP siendo escritoS el porcentae de ioait 0es la espera para poder escribir + leer + a ma+or porcentaeS indicarP necesidad de contar con mPs recursos en almacenamiento separados o R:7D. -i bien iostat + lso, son comandos mu+ iste una Berramienta en particular =ue es mu+ sencilla + =ue permite er los recursos consumidos en 7I por proceso. As iotopS una Berramienta desarrollada en '+tBon + pueden encontrarla en su sitio eb BttpHIIguicBa8.,ree.,rIiotop . Asta Berramienta re=uiere =ue tengamos '+tBonS %ernel superior a 2.6 e instalado el pa=uete p+tBon*p%g*resources 0en debian + deriados. Re=uiere ademPs algunos parPmetros en el %ernel actiados. !uando el seridor se =ueda sin memoria o el proceso de postgres re=uiere mPs memoria R:M de la =ue el - le puede otorgar a las aplicacionesS el - comien8a a YsapearY 0anglicismo =ue indica =ue se comen8 a utili8ar el arcBio de intercambio para trabaos =ue no pueden ser eecutados en R:M por ,alta de espacio o cuota asignada. Aste mecanismoS por lo generalS arroa mu+ malos tiempos de respuesta por lo =ue debemos eitar en todo momento =ue el seridor se ea obligado a YsapearY. Los comandos ,ree + mstat nos permitirPn er el espacio libre de memoria R:M + el uso de la particin irtual o -ap.
La imagen anterior ,ue eecutada con el comando Y,ree \ mstat 1 1Y. -e recomienda utili8ar atcB para =ue muestre los resultados de manera constante + dinPmica. Del prim er pPrra, o del resultado del comando anter iorS nos interesa la lnea Y-a pY. eri,icamos el alor YusedY estP en )S por lo =ue indica =ue Basta el momento todos los procesos estPn usando la R:M. (ambiGn emos =ue el total de la memoria R:M es de 6)5))) M$S teniendo libres 3)""").
-i
AL segundo pPrra,o corresponde al comando YmstatYS el cual nos indica =ue no Ba+ actiidad en la sap 0si )S so ). tra de las cosas =ue nos interesa saber es la actiidad del procesador. Al comando para esto es YmpstatY.
As recomendableS utili8ar YtopY o YBtopY para un resumen de lo mPs importante de todos estos comandos. :mbas Berramientas no estPn en todos los sistemas uni>*li%eS por lo =ue es recomendable conocer las Berramientas estPndar. (anto top como Btop son mu+ amigablesS por lo =ue no deberan tener ma+ores inconenientes en la lectura de sus resultados. An el caso de top es aconseable =ue cuando se despliegue la eecucinS utili8ar la a+uda 0presionando B para poder adaptarlo a lo =ue =ueremos obserar con mPs detalle. 'or eemploH -i =ueremos de splegar la in,or macin del tam aCo por proc eso en el arcBio de inte rcambio + en memoriaS debemos presionar , 0agrega columnas + luego ' + -.
erificando la apertura del ser*idor a la red
9emos con,igurado el seridor para =ue pueda escucBar sobre el puerto 5432S pero ademPs le establecimos =ue pueda escucBar desde otro Bost 0esto
An esta imagen apreciamos =ue el seridor tiene abierto el soc%et correspondiente. La ,orma manual de inestigar acerca de los procesos es buscando dentro de la carpeta Iproc. An dicBa carpeta encontraremosS por ''7DS la in,ormacin de cada proceso. 'or eemploH cd Iproc && pgrep Y0postgrespostmasterY a% YZprint TFIstat[Y >args cat Asta lnea de comando simplemente muestra los contenidos del arcBio stat dentro de cada
directorio de IprocIpidX. 'ara conocer el contenido de los arcBios de IprocS lea el lin% f1h =ue se adunta al ,inal de la documentacin. tra de las tareas importantes es monitorear el espacio libre =ue =ueda en el disco. -i el disco se llenaS los datos no se corromperPn pero el seridor entrarP en el estado ':7! + caerPS por lo =ue es mu+
3onitoreando en sistemas indoHs La monitori8acin en sistemas Windos se puede Bacer desde el :dministrador de (areas.
A>isten otras Berramientas priatias + libres para la medicin estadstica de los recursos. Desde la lnea de comando podemos utili8ar netstatS tas%list 0similar al compatibles.
=ps> de uni> *
Btili;ando 2erramientas propias de PgAo-ndr/ / nativas del pa=-ete oficial !omo suele ser recomendableS las Berramientas espec,icas de un determinado aplica tio suelen ser mPs e>plcitas =ue las estPndares. -in utili8ar Berramientas e>ternas a la empa=uetacin o,icial 0dentro de la cual incluiremos 'g:dmin 777S se puede monitorear la base a traGs de logs + consultas intensias al catalogo. De aBS =ue es necesario tener establecida la ariable de recoleccin de estadsticas actiada 0trac%Kactiities. !omo otra recomendacinS se encuentra elear el alor por de,ecto de la ariable del motor de,aultKstatisticsKtarget. @n alor recomendado para un seridor en produccin es superior a 1)). Luego de esoS se puede establecer un n
An cuanto a los logsS por lo generalS en un sistema en produccin ariarPn de acuerdo a una situacin en especial. Al t2*3S F:(. La Berramienta mPs popular para el anPlisis de logs en 'ostgres es 'gFouine. MPs detalle en la seccin Y:rcBiado de LogsY. 7oppj es una Berramienta desarrollada en postgres =ue sire para medir las estadsticas de iIo por proceso 0BttpHIIgit.postgres=l.orgIgitebJpiopp.git\ablobKplain\,iopp.c\Bb9A:D . Re=uiere ser compilada con gccS las indicaciones se Ballan en el mismo Prbol del git. :simism oS se re=uiere tener compilado el %ernel de linu> con el soporte para el arcBio IprocIpidXIio. ueas ersiones de %ernelS soportan esta opcin de manera automPtica.
tra Berramienta sencill a de instalar es pgstat. Desarrolla da en p+tBonS puede ser descargada del 'gFoundr+ + slo re=uiere descomp rimir + eecutarS indicando a traGs de parPmetros la base + el usuario. AstP en ersin beta a
La Berramienta grP,ica mPs estable para el monitoreo es 'g:dmin. 'ara acceder a esta opcin debemos ir al men< (ools*X-erer -tatusj. :B podremos er la actiidad de las cone>ionesS los blo=ueos + las transacciones. Desde all mismo podremos seleccionar bac%ends + cancelar sus consultas o terminarlos. -e puede establecer inclusie el interalo en segundos. A>iste una Berramienta =ue recientemente adBiri un plug*in para recoleccin de estadsticas 0collectd. An el momento =ue se escribi este documento la , collectd*4.".).tar Le recomiendo leer el lin% f2h para obtener detalles mPs aan8ados de cmo con,igurar este sericio. 'ara la compilacin se necesita el compilador gcc + las libreras libdbd*pg*perl + libperl* deS asi como las libreras por estPndar de gcc. !uando eecutemos 9.)configure: 0=ue por de,ecto tratarP de compilar con todos los pluginsS debemos eri,icar =ue la lnea 9postgresql yes: estG en la salida. !aso contra rio puede =ue apare8ca un 9dependency failed: o un error =ue no permita su compilacin. 'ara la isuali8acin del resultado de collectdS necesitamos la Berramienta rrdtool 0instalable con apt*get install. MPs allP de las Berramientas disponibles para la monitori8acin en calientej de la base de datosS otro mGtodo de monitoreo es utili8ando el catalogo. Las tablas*istas =ue nos proeen in,ormacin de escritura + lectura de blo=ues sonH
pgKstatK] pgKstatio]
Las consultas sobre el catPlogo se reali8an a traGs de -/LS + slo debemos considerar =ue e>isten tipos de datos espec,icos para la relacin entre las mismas 07D. :simismo poseemos ,unciones especiales para la administracin de los bac%endsS desde al base de datosS permitiendo asS una administracin mPs cabal simplemente desde cual=uier cliente. -eguidamente eremos algunas de las posibles consultas ionesH -ALA!( count0] FRM pgK-tatKactiit+\ ;eri,icar Bace cuanto se esta eecutando la
!ommits + rollbac%s por cada baseH -ALA!( datnameS >actKcommitS >actKrollbac% FRM pgK-tatKdatabase\ -umari8acin de consultas DMLH -ALA!( -@M0nKtupKinsS -@M0nKtupKupdS -@M0nKtupKdel FRM pgKstatKallKtables\ -umari8acin de los planesH -ALA!( -@M0se=KscanS -@M0se=KtupKreadS -@M0id>KscanS -@M0id>KtupK,etcB FRM pgK-tatKallKtables\ ;isuali8ar blo=ueosH -ALA!( modeS count0mode FRM pgKloc%s #R@' $E mode RDAR $E mode\ -umari8acin de 7I en blo=ues 0blo=ues son de "%S si desea saber en cantidad de UbS multipli=ue por "H -ALA!( -@M0BeapKbl%sKread ] " FRM pgKstatioKuserKtables\ -ALA!( -@M0id>Kbl%sKread FRM pgKstatioKuserKtables\ -ALA!( -@M0toastKbl%sKread FRM pgKstatioKuserKtables\ -ALA!( -@M0tid>Kbl%sKread FRM pgKstatioKuserKtables\ (amaCo de las basesH select pgKdatabaseKsi8e0name\ select pgKtablespaceKsi8e0name\ ;er consultas actuales corriendoH -ALA!( pgKstatKgetKbac%endKpid0s.bac%endid as procpidS pgKstatKgetKbac %endKactiit+0s.ba c%endid as currentK=uer+ FRM 0-ALA!( pgK-tatKgetKbac%endKidset0 as bac%endid :- s\ @so de disco 0cada pPgina es tpicamente de "%H
-ALA!( rel,ilenodeS relpages
FRM pgKclass W9ARA relname YtablaY\ @so del disco para (oastH -ALA!( relnameS relpages FRM pgKclass S 0-ALA!( reltoastrelid FRM pgKclass W9ARA relname YtablaY ss W9ARA oid ss.reltoastrelid R oid 0-ALA!( reltoastid>id FRM pgKclass W9ARA oid reltoastrelid RDAR $E relname\ 'ara indicesH -ALA!( c2.relnameS c2.relpages FRM pgKclass cS pgKclass c2S pgKinde> i W9ARA c.relname YcustomerY :D c.oid i.indrelid :D c2.oid i.inde>relid RDAR $E c2.relname\ Ancontrar las tablas e ndices mPs grandes 0tambiGn se puede multiplicar > "H -ALA!( relnameS relpages FRM pgKclass RDAR $E relpages DA-!\ Monitorear estado de las tuplas por es=uema 0pre,erentemente utilice la opcin ^> en ps=lH -ALA!( scBemaname S sum0se=Kscan as -e=K-canS sum0se=KtupKread as (uplasKse=KleidasS sum0id>Kscan as 7ndicesKscaneados S
sum0id>KtupK,etcB as tuplasK>KindicesK,etcBsS sum0nKtupKins as tuplasKinsertadasS sum0nKtupKupd as tuplasKactuali8adasS sum0nKtupKdel as tuplasKborradasS sum0nKtupKBotKupd as tuplasKactuali8adasKBotS sum0nKlieKtup as tuplasKiasS sum0nKdeadKtup as tuplasKmuertas FRM pgKstatKallKtables W9ARA scBemaname Ypg.]Y #R@' $E scBemaname\ La siguiente consulta obtiene los datos necesarios para calcular los accesos a discoS tambiGn podremos obtener un a sumari8acin de las tupl as ias + muertas de toda la baseH -ALA!( ma>0>actKcommit as commitsS ma>0>actKrollbac% as rollbac%sS ma>0bl%sKreadHHte>t YIY 0ma>0bl%sKread]" HHte>t Y%bsY as blo=uesKleidosS ma>0bl%sKBitS ma>0numbac%ends as numbac%endsS sum0se=Kscan as se=KscansS sum0se=KtupKread as se=KtupKreads S sum0id>Kscan as id>KscansS sum0id>KtupK,etcB as id>K,etcBsS sum0nKtupKins as tupKinsS sum0nKtupKupd as tupKupdsS sum0nKtupKdel as tupKdelsS ma>0c.loc%s as loc%sS ma>0d.sess as actieS sum0%.dead as deadKtupS sum0%.lie as lieKtup FRM pgKstatKdatabase aS pgKstatKuserKtables bS 0-ALA!( >p.nKdeadKtup as deadS >p.nKlieKtup as lie FRM 0-ALA!( c.relname as nombre FRM pgKcatalog.pgKclass c 7 pgKcatalog.pgKro les r r.oid c.reloner LAF( 7 pgKcatalog.pgKna mespace n n.oid c.relnamespace W9ARA c.rel%ind YrY :D n.nspname X YpgKcatalogY :D n.nspname YpgKtoastY :D pgKcatalog.pgKtab leKisKisible0c.oid >> 7 pgKstatKallKtables >p >>.nombre >p.relname %S 0-ALA!( count0] as loc%s ,rom pgKloc%s cS 0-ALA!( count0] as sess FRM pgKstatKactiit+
W9ARA currentK=uer+ Y.]7DLAX]Y d W9ARA datname YnuestraKbaseXY\
La ista pgKstatioKuserKtables contiene la in,ormacin por relacinS por lo =ue si =ueremos isuali8arla deberemos ,iltrar a traGs del campo relname o scBemaname. :nteriormente mostramos algunos eemplos con esta ista.
La ista pgKstatsS contiene las estadsticas por columnaS por lo =ue ,iltraremos por tabla.
@na consulta como la siguienteH -ALA!( tablenameS attnameS agKidtBS nKdistinctS mostKcommonKalsS mostKcommonK,re=sS BistogramKboundsS correlation FRM pgK-tats W9ARA tablename Y0pgs=lY\ :rroaH
Asta ista contiene los datos de cada columnaS + es importante +a =ue nos indicarP la ,recuencia de determinados alores en las columnasS pudiendo in,erir directament e en el plan de eecucin . Al
caso mPs com
Asta ista nos puede mostrar el estado de cada relacinS incluidos sus es. oS lo =ue es mPs
0pgKstatKuserKinde>esS
A>isten una serie de ariables =ue meoran la recoleccin de estadsticas 0ademPs obiamente de reali8ar usualmente ::LEA a la bas e. 9a+ una serie de ariables =ue in,lu+en en la recoleccin de estadsticas. trac%Kactiities 0recoleccin de estadsticas por sesin S trac%Kcounts 0recoleccin de estadsticas por base + updateKprocessKtitle 0mu+ isten otras ariables =ue pueden ser de utilidad tambiGnH logKparserKstatsS logKplannerKstatsS logKe>ecutorKstats + logKstatementKstats. 'or de,ecto estPn en o,,. Las ariables al ser actiadas acarrean ma+or necesidad de procesamiento del recolectorS por lo =ue a,ectan directamente al rendimiento del seridor. -i logKstatementKstats estP en onS las otras deben estar en o,,S debido a =ue esta contiene las otras. Al resto son con,iguraciones por mdulo. Asta opcin genera bastante oerBeadS as =ue es recomendable actiarla cuando estamos en proceso de a,inamien to de determinadas cons ultas o del seridor. tra de ellas es de,aultKstatisticsKtargetS por de,ecto estP en un alor de 1)S pero en produccin se recomienda un alor de 1)) en produccin.
1rc2ivado de Logs Los arcBios de logs suelen ser molestos por=ue consumen mPs 7I a medida =ue necesitam os mPs niel de in,ormacin. -in embargoS tenerlos bao control es indispensable +a =ue son los
logKtrunc ateKonKrota tionH esto borrarP el contenido de un log cuando sucede la rotacin. o es recomendable para ambientes de produccin. logKrotat ionKage + logKrotat ionKsi8eH indican cada cuanto se deberP reali8ar la rotacin de los logs. logKminKmessagesH esto indica el niel de logueo. logKlineKpre,i>H esta ariable indica como a a estar ,ormateada la salida del log. 'gFouine re=uiere =ue estable8camos esta ariable para anali8ar el log. logKstatementH esto indica =ue tipo de sentencias irPn al log 0ddlS modS all. (al como diimos antesS la Berramienta mPs popular de reisin de logs es 'gFouine. AstP escrito en '9'S por lo =ue re=uiere la instalacin del pa=uete pBp5*cli 0Debian + deriados. La desentaa =ue tiene 'gFouine es =ue re=uiere tocar la salida de los logsS por lo =ue al principio puede p arecer incomodo. 'gFouine tiene arias opcionesS las =ue podremos er eecutando Ypg,ouine. pBpY en la linea de comando. La eecuci n bPsica seria H 5pgfouine.php 6file 7archi*o%log8 6logtype stderr5 . La opcin logt+pe deberP corresponder a la =ue tenemos en el postgres=l.co n, 0logKdestinatio n. 'reio a esto debemos pre,ormatear la salida 0logKlineKpre,i> aH Y @t @pBC @l6DB 5 si utili8amos stderr.
+onitori$aciónG
ontenido focultarh •
•
•
•
•
•
•
•
•
•
•
•
1 7ntroducci n 2 -aber si la base de datos esta en marcBa 3 @sando Berramient as estandard de @ni> 4 Determina ndo el uso de disco 4.1 Aemplos 5 -aber los usuarios conectados 6 Astadstica s 6.1 !on,igurac in de la recoleccin de estadsticas 6.2 ;isuali8ar las estadsticas ;isuali8aci n de loc%s " ;er los ,icBeros de log (ablas de sistema
Introducción A continuación describimos las tareas básicas de monitori$ación del agente de base de datos PostgreSQL.
Saber si la base de datos esta en marca Para saber si la base de datos esta en marca debemos conectarnos al ser%idor de base de datos con un usuario reconocido y e(ecutar pg_ctl status pg_ctl: el servidor estQ en eWecuciTn %496: D5@=& 2:/,rchivos de programa/4ostgre#U/A.
omo %emos el mensa(e #ue nos muestra es #ue el sistema esta el ser%idor está en e(ecución. Si el sistema no estaria iniciali$ado nos daria el siguiente mensa(e pg_ctl: no hay servidor en eWecuciTn
6sando erramientas estandard de 6ni2 El comando estandard psde 6ni2 permite inspeccionar los procesos inciali$ados por el ser%idor postgres en la má#iuna -bash-3.3> >.> >.> D@AD '5>> $ process postgres process 3>3< >.> >.A A=> $ postgres 3>33 >.> >.> A@>3< '=@D $ writer process postgres 3>3D >.> >.' A53@ DADD $ autovacuum launcher process postgres 3>35 >.> >.> D>D> 'D@A $ process last was >>>>>>>'>>>>>>>D>>>>>>> postgres 3>3@ >.> >.' 5<'3@ D>@ $ collector process
#s
7ov<3
>:>> postgres: logger
#s
7ov<3
>:>' postgres: writer
#s
7ov<3
>:>> postgres: wal
#s
7ov<3
>:<> postgres:
#s
7ov<3
>:>> postgres: archiver
#s
7ov<3
':<' postgres: stats
En el e(emplo anterior se puede %er cómo postgres esta actualmente recogiendo estad"sticas,lan$ando el procedo %acuumm, etc...
)eterminando el uso de disco ada tabla tiene un arci%o primario en el disco dónde se guarda la mayoria de los datos. Si una tabla tiene alguna columna #ue puede ser potencialmente muy grande, e2iste tambi1n un arci%o +2AS+ asociado con la tabla, #ue es usado para guardar %alores grandes #ue no caben en la tabla principal. Se creará un "ndice para cada tabla 4OAS4. Se puede monitorear el espacio end disco mediante $unciones SQL, medinate la información de XA66+ o mediante las erramientas en contrib5tools de la carpeta de la instalación de postgres.
,:emplos Xisuali$ar el uso de disco de cual#uier tabla #2 relfilenodeE relpages F01G pg_class B0 relname ( *capuntes*+
relfilenode H relpages -------------I---------553>D H '=< %' row&
4"picamente cada página es de B 7ilobytes. Xisuali$ar el espacio ocupados por las tablas 4OAS4 #2 relnameE relpages F01G pg_classE %#2 reltoastrelid F01G pg_class B0 relname ( *gven_promocr*& ss B0 oid ( ss.reltoastrelid 10 oid ( %#2 reltoastid;id F01G pg_class B0 oid ( ss.reltoastrelid& 1060 LC relname+ relname H relpages ----------------------I---------pg_toast_=>A<= H > pg_toast_=>A<=_inde; H ' %< rows&
Xisuali$ar el tama0o de los "ndices de una tabla #2 c<.relnameE c<.relpages F01G pg_class cE pg_class c
Xisuali$ar las tablas y los "ndices más grandes #2 relnameE relpages F01G pg_class 1060 LC relpages 6#2+ relname H relpages ------------------------------------I---------table_test H 35<@ p_test H @'>=@ pg_toast_A'53A H 55 cmunicip H '>3A gtpv_logterm H 33 ....
Saber los usuarios conectados En postgres e2iste una %ista #ue nos muestra los usuarios conectados al sistema. Nos conectamos al ser%idor postgres e ingresamos al ps#l. psql -h localhost -p 5D3< postgres postgres postgres() #2 ? F01G pg_stat_activity+ datid H datname H procpid H usesysid H usename H current_query H waiting H query_start H backend_start H client_addr H client_port -------I----------I---------I----------I---------I---------------------------------I---------I---------------------------I----------------------------I-------------I------------'>A' H postgres H 'A>> H '> H postgres H 96P H f H <>>=->-'> '<:D':>>.=@5I>< H <>>=->-'> '<:3:3.@DI>< H '<=.>.>.' H '>5D '>A' H postgres H '=3@ H '> H postgres H select ? from pg_stat_activity+ H f H <>>=->-'> '<:D@:<>.A5I>< H <>>=->-'> '<:D5:@I>< H '<=.>.>.' H '>5@ %< filas&
En la tabla nos muestra los usuarios conectados, los select e(ecutados, la terminal, el puerto, etc.
Estad"sticas El statistics collector de Postgres 1s un subsistema #ue permite la recolección y presentación de informes sobre la acti%idad del ser%idor. Actualmente, el recolector de estad"sticas puede El collector puede reali$ar las siguientes tareas • •
• •
ontar accesos a tablas e "ndices em t1rminos de filas indi%iduales o en blo#ues de disco. tabla. Seguimiento del n?mero de filas en cada tabla, y las oras de los ?timos %acuum y analy$e para cada ontarel n?mero de llamdas a las user3defined functions y el tiempo total empleado en cada una. )eterminar el comando e2acto #ue está siendo e(ecutando por otro ser%idor.
on$iguración de la recolección de estad;sticas Puesto #ue la recopilación de las estad"sticas, a0ade algo de sobrecarga en la e(ecución de las consultas, el sistema puede ser configurado para #ue recoger o no recoger las estad"sticas. sta es controlada por los parámetros de configuración fi(ados en el ficero en postgres#l.conf • • •
trac#)counts controla si se recogen estad"sticas sobre los accesos a tablas e "ndices. trac#)$unctions acti%a el seguimiento de uso de las user3defined functions. trac#)acti!ities acti%a la monitori$ación del comando siendo e(ecutado actualmente por #ual#uier
srr%idor Normalmente, estos parámetros se establecen en postgres#l.conf para #ue se apli#uen a todos los procesos del ser%idor, pero es posible acti%ar o desacti%ar los parámetros en sesiones indi%iduales con el comando SE4.
4isuali9ar las estad;sticas E2isten %istas predefinas, como las de la tabla de a contiuación #ue muestran los resultados de la recogida de estad"stcas. Al usar las estad"sticas para super%isar la acti%idad actual, es importante darse cuenta de #ue la información no se actuali$a instantáneamente. ada proceso indi%idual transmite los datos estad"sticos (usto antes de finali$ar el proceso, de modo #ue una consulta o transacción en curso no afecta a la muestra de totales en las esta"dticas.
@ombre de Descrición la vista pgstatac @na lnea para cada procesoS =ue muestra la base de datos 7DS el nombre de base de tivit/ datosS la 7D del procesoS el usuario 7DS el nombre de usuarioS la consulta actualS el
estado de espera de consultaS la Bora en =ue la transaccin + la consulta actual se iniciaronS Bora en =ue se inici el procesoS la direccin del cliente + namina la ista es un super*usuarioel usuario propietario del proceso =ue presenta. @na ,ila
Hriter
inclu+e estadsticas sobre el poolnodepor bu,,ers compartidosS inclu+endo los bu,,ers escritos por bac%ends 0es decirS el bac%ground riter + los bu,,ers totales asignados. @na ,ila por base de datosS =ue muestra el 7D de la base de datos S el nombre de base de datosS el nistente el bu,,er de la cacBGS el nploraciones secuencialesS el nploraciones iniciadas 0sobre todos los ndices =ue pertenecen a la tabla S el n
tables
9( 0es decirS sin actuali8acin por separado del ndiceS el n
pgstats/ 7gual =ue pgstatalltablesS a e>cepcin =ue slo se muestran las tablas de sistema. stables pgstat-s 7gual =ue pgstatalltablesS a e>cepcin =ue slo se muestran las tablas del usuario. ertables 'or cada ndice en la base de datos actualS la tabla + el ndice 7DS es=uemaSla tabla +
pgstatall el nombre del ndiceS el n scan en ese ndiceS el n scansS + el n scnas usando dicBo ndice.
pgstats/ 7gual =ue pgstatallinde7esS a e>cepcin =ue slo se muestran las ndices de las sinde7es tablas de sistema pgKstatKuse 7gual =ue pgstatallinde7esS a e>cepcin =ue slo se muestran los ndices de las rKinde>es tablas del usuario. 'ara cada tabla de la base de datos actual 0inclu+endo tablas (:-(S el 7D de la tablaS es=uema + nombre de la tablaS el niliar 0si e>iste + el n
pgstatios /stables pgstatio -sertable s
7gual =ue pgstatioalltablesS a e>cepcin =ue slo se muestran las tablas de sistema. 7gual =ue pgstatioalltablesS a e>cepcin =ue slo se muestran las tablas del usuario. 'ara cada ndice de la base de datos actualS el 7D de la table + el ndiceS el es=uemaS
pgstatio el nombre del ndice de la tabla + el ndiceS el n
pgstatios /sinde7es pgstatio -serinde7 es pgstatio allse=-en ces pgstatios /sse=-enc es pgstatio -serse=-e nces
7gual =ue pgstatioallinde7esS a e>cepcin =ue slo se muestran ndices de las tablas de sistema. 7gual =ue pgstatioallinde7esS a e>cepcin =ue slo o se muestran ndices de las tablas del usuario. 'ara cada obeto secuencia en la base de datos actualS el 7D de la secuenciaS el es=uema + el nombre de la secuenciaS el ncepcin =ue slo se muestran secuencias del sistema. 0:ctualmente S no e>isten secuendias del sistemaS por lo =ue la ista estarP aca 7gual =ue pgstatioallse=-encesS a e>cepcin =ue slo se muestran secuencias del usuario. 'ara todas las ,unciones monitori8adasS el 7D de la ,uncinS el es=uemaS el nombreS
pgstat-s n
La %istas pg)statio) són básicamente ?tiles para determinar la efecti%idad del buffer cace. uando el n?mero de lecturas de disco es muco menor #ue el n?mero de %isitas a la cace, significa #ue la cace esta leyendo satisfactoriamente la mayor"a de las consultas sin in%ocar una llamada al 7ernel. E2iste otra forma de acceder a las estad"ticas mediante llamadas a funciones #ue reali$an consultas a las mismas %istas comentadas en el punto anterior. Se puede obtener más información sobre dicas funciones en la +abla '<'. de la documentación oficial de Postgres. Por e(emplo, para obtener todas las consultas reali$adas y su PI) por todos los procesos del ser%idor #2 pg_stat_get_backend_pid%s.backendid& ,# procpidE pg_stat_get_backend_activity%s.backendid& ,# current_query F01G %#2 pg_stat_get_backend_idset%& ,# backendid& ,# s+
sta consulta retorna procpid H current_query --------I------------------------------------------------------------------------------------------------'5=3 H 96P '5=D H 96P <'@5< H #2 pg_stat_get_backend_pid%s.backendid& ,# procpidE : pg_stat_get_backend_activity%s.backendid& ,# current_query : F01G %#2 pg_stat_get_backend_idset%& ,# backendid& ,# s+
<'=>D H 96P <'=55 H #2 r : garticul.nomartE gcomforh.delegaE gcomforh.departEr : gcomforl.ordenE gdeparta.reflecE gcomforl.codartEr : %#2 G,"%codean&r : F01G gartieanr : B0 gcomforl.codart ( gartiean.codartr : ,76 gcomforl.varlog ( gartiean.varlogr : ,76 gcomforl.udmcom ( gartiean.codunir : ,76 gartiean.estado ( *,*& ,# codeanr : : 971 G4 tmp_impeti_'_>>>'r : F01G gcomforhr : 9770 197 %r : gcomforl F 197 garticul 17 gcomforl.codart ( garticul.codigor : & 17 gcomforh.cabid ( gcomforl.cabidr : 9770 197 gdeparta 17 gcomforh.delega ( gdeparta.delega ,76 gcomforh.depart ( gdeparta.departr : B0 r : : gcomforh.docser ( *>D*r : : 1060 LC 'E
Xisuali$ación de loc7s Otra erramienta ?til parademonitori$ar acti%idad de#ue la base de datos es la tabla abiertas. de sistema pg)loc#s. Permite al administrador la bbdd %erlalos blo#ueos pro%ocan transacciones La tabla contiene una fila por loc7 acti%e, modo de loc7 solicitado i transacción. Para más información, %isitar la documentación
Xer los ficeros de log En el directorio TP/O+E5data5pglog el sistema de(a los ficeros de logs. ada %e$ #ue el sistema se reiniciali$a crea un nue%o ficero de log. <>>=->-'> >:<>:>3 1J: database system was shut down at <>>=->->@ '3:33:D3 Bora estQndar romance <>>=->-'> >:<>:>3 1J: checkpoint record is at >/6L5>>AA <>>=->-'> >:<>:>3 1J: redo record is at >/6L5>>AA+ undo record is at >/>+ shutdown 08 <>>=->-'> >:<>:>3 1J: ne;t transaction 96: >/<@<'5'+ ne;t 196: <<'<>A <>>=->-'> >:<>:>3 1J: ne;t Gulti"act9d: '+ ne;t Gulti"act1ffset: > <>>=->-'> >:<>:>3 1J: database system is ready <>>=->-'> >:<':< 0010: synta; error at or near ZnomtraZ at character 3A <>>=->-'> >:<':< #,G7: -??????????????????????????????????????????????????????????????????????????????????? ? -- 69#0 eb#tudio "#U-#2 Gon #ep '> >:<':3> 2# <>>= ngine: postgres -??????????????????????????????????????????????????????????????????????????????????? ? #2 capuntes.oid ,# rowidE capuntes.apteidE capuntes.fechaE
capuntes.asientE capuntes.ordenE
capuntes.WusserE capuntes.seccioE cseccion.nomsecE capuntes.cuentaE ccuentas.nombreE cctaau;l.desvalE capuntes.codconE capuntes.concepE capuntes.debeE capuntes.monedaE cmonedas.desmonE ccuentas<.nombre
capuntes.docserE capuntes.proyecE cproyect.nomproE capuntes.sistemE capuntes.diarioE cdiarios.nomdiaE capuntes.codau;E ccuentas.estadoE capuntes.ctaau;E cconcept.comentE cconcept.opedebE cconcept.opehabE capuntes.haberE
capuntes.divdebE capuntes.divhabE
capuntes.cambioE capuntes.fecvalE capuntes.contraE nomtraE capuntes.srcenE capuntes.punteoE
capuntes.loteidE capuntes.cosautE capuntes.empcodeE capuntes.dimcode'E capuntes.dimcode& 10 %ccuentas.tipact(*B* ,76 capuntes.haber ( >&& & 10 cconcept.obliga 9^ *X9X* B7 ' # > 76& activa_iE %2,# B7 %%%ccuentas.activa 9^ *XX* ,76 capuntes.codcon 9# 78& 10 %ccuentas.activa 9^ *XX* ,76 cconcept.activa 9^ *XX*& & ,76 %ccuentas.tipact ( *,* 10 %ccuentas.tipact(*6* ,76 capuntes.debe ( >& 10 %ccuentas.tipact(*B* ,76 capuntes.haber ( >&& & 10 cconcept.obliga 9^ *XX* B7 ' # > 76& activa_eE %2,# B7 %%%ccuentas.activa 9^ *X2X* ,76 capuntes.codcon 9# 78& 10 %ccuentas.activa 9^ *X2X* ,76 cconcept.activa 9^ *X2X*& & ,76 %ccuentas.tipact ( *,* 10 %ccuentas.tipact(*6* ,76 capuntes.debe ( >& 10 %ccuentas.tipact(*B* ,76 capuntes.haber ( >&& & 10 cconcept.obliga 9^ *X2X* B7 ' # > 76& activa_cE %2,# B7 %%%ccuentas.activa 9^ *XKX* ,76 capuntes.codcon 9# 78& 10 %ccuentas.activa 9^ *XKX* ,76 cconcept.activa 9^ *XKX*&
& ,76 %ccuentas.tipact ( *,* 10 %ccuentas.tipact(*6* ,76 capuntes.debe ( >& 10 %ccuentas.tipact(*B* ,76 capuntes.haber ( >&& & 10 cconcept.obliga 9^ *XKX* B7 ' # > 76& activa_v F01G capuntes F 197 cproyect 17 capuntes.proyec ( cproyect.codigo F 197 cseccion 17 capuntes.seccio ( cseccion.codigo F 197 ccuentas 17 capuntes.cuenta ( ccuentas.codigo F 197 cctaau;l 17 capuntes.codau; ( cctaau;l.codau; ,76 capuntes.ctaau; ( cctaau;l.ctaau; F 197 ccuentas ccuentas< 17 capuntes.contra ( ccuentas<.codigo F 197 cmonedas 17 capuntes.moneda ( cmonedas.codigo F 197 cdiarios 17 capuntes.diario ( cdiarios.codigo F 197 cconcept 17 capuntes.codcon ( cconcept.codigo F 197 cenllote 17 capuntes.loteid ( cenllote.loteid F 197 % cempresa F 197 cmonedas cmonedas_loc 17 cempresa.divemp ( cmonedas_loc.codigo & 17 capuntes.empcode ( cempresa.empcode -((((((((((((((((((((((((((((((((((((((((((((((((((((((((((((((((((((((((((((((((( -- Uuery condition %!>& I non ;ml security filters -((((((((((((((((((((((((((((((((((((((((((((((((((((((((((((((((((((((((((((((((( B0 %'('& ,76 %'(>& <>>=->-'> '<:>=->-'> '<:>=->-'> '<:>=->-'> '<:>=->-'> '<:
4ablas de sistema El es#uema in$ormation)sc"ema contiene información sobre todos los ob(etos definidos en una bbdd. A continuación se listarán las %istas presentes en el information es#uema. Para más detalles %isitar la Documentación • • • • • • • • •
• • • • • • • • • • • • •
informationscemacatalogname administrableroleautori$ations applicableroles attributes cec7constraintroutineusage cec7constraints columndomainusage columnpri%ileges columnudtusage columns constraintcolumnusage constrainttableusage datatypepri%ileges domainconstraints domainudtusage domains elementtypes enabledroles foreigndatarapperoptions foreigndatarappers foreignser%eroptions foreignser%ers
• • • • • • • • • • • • • • • • • • • • • • • • • • • • •
7eycolumnusage parameters referentialconstraints rolecolumngrants roleroutinegrants roletablegrants roleusagegrants routinepri%ileges routines scemata se#uences s#lfeatures s#limplementationinfo s#llanguages s#lpac7ages s#lparts s#lsi$ing s#lsi$ingprofiles tableconstraints tablepri%ileges tables triggers usagepri%ileges usermappingoptions usermappings %iecolumnusage %ieroutineusage %ietableusage %ies El es#uema in$ormation)sc"ema es el definido por el estandard SQL, y por tanto no contiene informacción relati%a a caracter"sticas propias de Postgres. Estas caracter"sticas se encuentran las tablas de catálogo del sistema
@ombre catJlogode
DescripciónK
pgKaggregate
Las ,unciones de agrega do
pgKam
MGtodos de acceso de nd ice
pgKamop
mGtodo de acceso de los o peradores
pgKamproc
mGtodode acceso de los p rocedimientos
pgKattrde,
alores por de,ecto d e columna
pgKattribute
columnas de la tabla 0los atributos
pgKautBid
identi,icadores de au tori8acin 0roles
pgKautBKmembers
7denti,icador de las r elaciones de autori8 acin de miembros
pgKcast
modelos 0datos de las con ersiones de tipos
pgKclass
tablasS ndicesS secuen ciasS puntos de ista 0las r elaciones
pgKconstraint
las restricciones de eri,icacinS limitaciones
pgKconersion
codi,icacin de la in, ormacin de conersin
pgKdatabase
bases de datos dentro de esta base de datos de cl< ster
pgKdepend
dependencias entre los obetos de base de d atos
pgKdescription
descripciones o coment arios sobre los ob etos de bases de datos
pgKenum
enum eti=ueta + el alor de las de,iniciones
pgK,oreignKdata Kr de,iniciones enoltura e>terna de datos apper pgK,oreignKser er
de,iniciones de ser idores e>ternos
pgKinde>
in,ormacin adiciona l de ndices
pgKinBerits
erar=ua de Berencia de mesa
pgKlanguage
Lenguaes para la escritur a de ,unciones
pgKlargeobect
obetos de gran tamaCo
pgKlistener
apo+o a la noti,icacin asncrona
pgKnamespace pgKopclass
es=uemas mGtodo de acceso de las clas es de operador
pgKoperator
operadores
pgKop,amil+
mGtodo de las ,amilias el acces o del operador
pgKpltemplate
templates a para las lengu as de procedimiento
pgKproc
,unciones + proced imientos
pgKrerite
Reglas de reescriturad e consultas
pgKsBdepend
Dependencias de obeto s compartidos
pgKsBdescriptio n
los comentarios sobre lo s obetos compartidos
pgKstatistic
estadsticas plani,ic ador
pgKtablespace
de tablas dentro de es ta base de datos de cl
pgKtrigger pgKtsKcon,ig
Disparadores con,iguraciones d e bto
pgKtsKcon,igK map
asignaciones de seC al con,iguraciones de bto Y
pgKtsKdict
diccionarios de bto
pgKtsKparser
anali8adores de bto
pgKtsKtemplate
bto
pgKt+pe
tipos de datos
pgKuserKmapping
asignaciones de los u suarios a los seridor es de e>traneros
utenticacin del Cliente Lang-agesK Englis2 AspaCol 日本語 Los usuarios permitidos para el establecimiento de la cone
Los permisos que ena instalacin t1pica recomendada para el acceso desde la red de la base de datos toma la direccin local L# y slo permite los clientes que se autentiquen usando una contraseIa encriptada a tra&0s de =D?. La siguiente entrada en en el pgVhba.conf ilustrar2 algo como estoH Y 38P@ NS$VD$VD3@S >S>B8@ C8DB7D8B$CC8Z# =[3@D@ host
all
all
9:4.9G;.9.5)4K md?
$sto slo permite conectarse a los clientes con las direcciones 8P de la red 9:4.9G;.9.5 77 9:4.9G;.9.4?? y slo si pro&een la contraseIa correcta para el usuario. @bser&e que un acceso de la red como 0ste puede establecerse slo si est2 permitido en el par2metro listenVaddresses de postgresql.conf. Las contraseIas de los usuarios de la base de datos son aplicadas cuando se crea el usuario con CB$3$ B@L$ y pueden ser modificadas con la orden L3$B B@L$. createuser puede ser una herramienta muy %til para ayudar en este sentido. ay una pequeIa trampa aqu1H puesto que para la creacin de un nue&o rol se requiere que la conen enfoque com%n es comenar con un pgVhba.conf que conf1a slo a los usuarios que se conectan localmenteH Y Slo coneni< local all all trust Y 8P&K local connectionsH host all all 946.5.5.9)J4 trust Si la base de datos est2 configurada de esta forma, cualquiera logueado en el sistema puede ahora conectarse al ser&idor a su &oluntad, as1 que no desea conser&ar esta configuracin por mucho tiempo. Lo que puede hacer ahora es usar la detener orden L3$B B@L$ para stop, asignar una contraseIa postgres. >nao &e quede lo haya hecho, a puede el ser&icio (pgVctl cambiar todos los fuerte 'trust' al porsuperusuario 'md?', agregar su rango bloque red completo pgVhba.conf, y cambiar el par2metro listenVaddress de postgresql.conf. Cuando lo inicie nue&amente, ya tendr2 una cuenta de superusuario de la cual conoce la contraseIa, con la cual puede crear las cuentas para sus usuarios regulares.
.ontents fBideh •
•
•
•
•
•
•
1 Aempl os 1.1 Aempl o1 1.2 Aempl o2 1.3 Aempl o3 1.4 Aempl o4 2 :utenti cacin LD:' 3 :rtculo s relacion ados
/jemplos /jemplo 0 cceso por tcp)ip (red a la base de datos test559, como usuario test desde el ordenador con 8P 95.5.5.955, y m0todo de autentificacin md?H host
test559 test 95.5.5.955 4??.4??.4??.4?? md?
$sta misma entrada se podr1a escribir tambi0n con la m2scara de red en notacin C8DBH host
test559 test 95.5.5.955)J4 md?
/jemplo 1 cceso por tcp)ip (red a la base de datos test559, como usuario test desde todos los ordenadores de la red 95.5.5.5, con mascara de red 4??.4??.4??.5 (4?K ordenadores en total y m0todo de autentificacin md?H host
test559 test 95.5.5.5 4??.4??.4??.5 md?
$sta misma entrada se podr1a escribir tambi0n con la mascara de red en notacin C8DBH host
test559 test 95.5.5.5)4K md?
/jemplo 2 cceso por tcp)ip (red, encr1ptado, a todas las bases de datos de nuestro cluster, como usuario test desde el ordenador con 8P 95.5.5.955, y el ordenador 95.9.9.955 y m0todo de autentificacin md? (necesitamos dos entradas en nuestro fichero pgVhba.confH hostssl all test 95.5.5.955 4??.4??.4??.4?? md? hostssl all test 95.9.9.955 4??.4??.4??.4?? md?
/jemplo 3 Denegar el acceso a todos las bases de datos de nuestro cluster al usuario test, desde todos los ordenadores de la red 95.5.5.5)4K y dar acceso al resto del mundo con el m0todo md?H host host
all test 95.5.5.5)4K reject all all 5.5.5.5)5 md?
Autenticaci!n L4AP Postgresql nos permite comprobar los usuarios contra un sistema LDP, aunque si bien esto es posible, hay que tener en cuenta que el usuario igualmente debe e
Programar 3areas
.ontents fBideh •
•
•
•
•
•
• •
•
1 #eneral idad 2 !rontab 2.1 -inta>is bPsica 2.2 Aditand o nuestro ,icBero crontab 2.3 !onteni do de un ,icBero crontab 2.4 IetcIcro ntab contien einstrucc iones para =ue cron eecute los scripts de los director ios 3 :t 3.1 Aspeci,i cacione s 3.2 pcion es
Aeneralidad eremos como podemos configurar nuestro sistema operati&o para realiar tareas peridicas de una manera muy cmoda. 3enemos dos mecanismos b2sicos para programar tareasH 7.crontabH nos permite programar tareas que queremos repetir de forma peridica.
7.atH nos permite realiar una tarea a una hora determinada pero slo una &e.
Crontab $l comando crontab (cron nos permite programar tareas y)o ejecutar comandos peridicamente a ciertas horas, ciertos d1as de la semana, del mes, del aIo, etc. Con este comando, cada administradorND puede definir sus propias tareas programadas.
Sinta&is ,5sica R crontab 7l =ostrar las tareas programadas por el usuario. R crontab 7e $ditar el fichero crontab. Con esto editaremos el fichero de configuracin de crontab de cada usuario para poder modificar las tareas programadas. R crontab 7r $liminar el fichero crontab corriente. R crontab 7u `usuario plicar una de las opciones anteriores para un usuario determinado. Slo root puede hacerlo. $l demonio cron ejecuta las instrucciones contenidas enH R el archi&o )etc)crontab (tables for cron. R los archi&os ubicados en el directorio )etc)cron.d R los archi&os )&ar)spool)cron)crontabs)`usuario
/ditando nuestro .ic'ero cronta, gilbertocgilbertocHX crontab 7e
Contenido de un .ic'ero cronta, $s similar aH Y m h dom mon doM user command 96 R R R R root cd ) run7parts 77report )etc)cron.hourly 4? G R R 6R root K6 root cd cd )) run7parts run7parts 77report 77report )etc)cron.daily )etc)cron.Meely ?4 G 9 R R root cd ) run7parts 77report )etc)cron.monthly Y acer una copia de seguridad del directorio documentos cada d1a a las 55H55 5 5RRR tar 7cf docs7date 78.tar.g )documentos) (el s1mbolo es equi&alente a X@=$, y a )home)usuario) Y acer una copia de seguridad de la Nase de datos cada d1a a las 56HJ5 y 49HJ5 J5 6 R R 97? )&ar)respaldos)scripts)mantenimientoVpostgresql.sh J5 49 R R 97? )&ar)respaldos)scripts)mantenimientoVpostgresql.sh R mH minuto !57?:". R hH hora !574J". R domH d1a del mes !97J9". R monH mes !9794". R doMH d1a de la semana !576" (5 6 es Domingo. R userH usuario. R commandH comando. la hora de e
*etc*cronta, contiene instrucciones para #ue cron ejecute los scripts de los directorios R )etc)cron.hourly R )etc)cron.daily R )etc)cron.Meely R )etc)cron.monthly
gregando una l1nea para cada tarea que queramos programar. Podemos hacernos nuestros scripts y hacer que crontab los ejecute para tener tareas programadas m2s complejas. $n caso de necesitar reiniciar el ser&icio puede realiarloH gilbertocgilbertocHX ser&ice crond restart @ gilbertocgilbertocHX )etc)init.d)crond restart
t $ste comando nos permite ejecutar tareas a una cierta hora solamente una &e. R `hora`dia Para especificar la fecha por completo. $lPodemos par2metroingresar `hora&alores es obligatorio. de la forma 9;55,9;H55,5G55pm, o bien uno de los J &alores especialesH noon (mediodia, teatime (9GH55 o midnight (55H55. $l par2metro `dia es opcional. Podemos especificarlo de las siguientes manerasH 94)4J)455? (notacin americana, 4J.94.455? (notacin europea. Podemos omitir el aIo, pero entonces slo podemos usar la notacin europea (por ejemploH 4J.94. 3ambi0n podemos especificar el mes abre&iado comoH Dec 4J o bien como 4J Dec.
/speci.icaciones R noM `inter&alo Donde inter&alo esH `n (minutoshorasd1assemanasmes.
Opciones R 7l Para mostrar la lista de tareas que tenemos programadas. R 7d `numVtarea Para eliminar la tarea que queramos. Cada tarea tiene asociado un n%mero que podemos &er con la opcin anterior. $jemplo 9H X at ?HJ5pm o bien X at 96HJ5 >na &e que hayamos ejecutado esto nos aparecer2 el prompt de at para que introducamos nuestros comandos o tareas que queramos que se ejecuten a esa horaH at gmessage 'Comiena la sal&a de datos' >na &e hayamos terminado de introducir los comandos, presionaremos Control D para salir de at. $jemplo 4H Programar tareas para dentro de J horasH X at noM J hours
!opia de seguridad automati8ada en Windos : continuacin se presentan dos instrucciones para automati8ar la copia de seguridad de 'ostgre-/L -erer en Windos Anironment. Al primer mGtodo utili8a pgKdump.e>e unto con el arcBio por lotes para llamarla. Aste arcBio por lotes crearP un nueo arcBio para cada da =ue se eecute. Las copias de seguridad del segundo mGtodo utili8an 'g'assS pgKdumpall.e>e + un arcBio por lotes para Bacer una copia de seguridad del seridor completo + escribir el arcBio cada e8 =ue se eecuta. @so de pgdumpS nueo arcBio para cada da
;a+a a -eridor crear un directorio llamado DrieH ^ 'ostgres=l$ac% + luego crear un subdirectorio llamado bin en DrieH ^ 'ostgres=l$ac% An lugar de compilar pgKdump .e>eS la instalacin de pg:dmin 777 tiene listo el pgKdump. Los arcBios siguientes son necesarios cuando se utili8a pgKdump.e>e desde la instalacin de pg:dmin 777S estos arcBios deben estar ubicados en la carpeta bin a lo largo de pgKdump.e>e !omerr32.dll #ssapi32.dll U5sprt32.dll UrbK32.dll Libea+32.dll Libicon2.dll Libp=.dll Microso,t.;!").!R(.mani,est Mscm").dll Mscp").dll Mscr").dll 'gKdump.dll -slea+32.dll lib1.dll !rear arcBio por lotes llamado algoS eemplo es postgres=l$ac%up.bat. Al arcBio debe estar ubicado en el directorio 'ostgres=l$ac% no en la carpeta bin. :bra el :rcBio + luego !opiar I 'egar lo siguiente :pagado 'ara I , to%ens 1*4 delims I i in 0 date do 0 Astablecer do i -et montB -et da+ % -et +ear l -et ,ecBastr mes K da K aCo AcBo datestr es datestr -et $:!U@'KF7LA ame,(BeFileX K datestr .bac%up Al nombre del arcBio de respaldo de eco es $:!U@'KF7LA -A( '#':--WRD 'assWordX Aco en $in ^ pgKdump *i *B 9ostameX *p 5432 *@ @serameX *F c *b * *, $:!U@'KF7LA D:(:$:-A:MAX !ambie ame,(BeFileX por algo. @na idea es usar el nombre de la base de datos. 0:segtensin .bac%up !ambie la con,iguracin 'assWordX anterior a la contraseCa correcta para los usuarios de copia de seguridad. 0:seg
de seguridad. #uarda el arcBio !rear tarea para el programador de tareas de M@na e8 =ue Ba+a elegido el conte>to de seguridad para eecutar la tareaS se recomienda cambiar la seguridad del directorio donde se eecuta la copia de seguridad + los arcBios se almacenanS +a =ue un nombre de usuario de alto niel + una contraseCa se almacenan en te>to sin ,ormato. @sando .pgpass + pgdumpallS mismo arcBio 'ara lograr una copia de seguridad automati8ada en un entorno de WindosS Bice lo siguiente. !rear un arcBio .pgpass 0LlamG a mi pgpass.con, + lo puso en algcepto para =ue el usuario pg se eecute como 0-i eecuta pg en la cuenta del sistemaS debe con,igurarlo para =ue utilice sus propias credenciales de usuario !rear un script para llamar a pgKdumpall Mina se e asH -A( '#':--F7LA !H ^ ,oo ^ bar ^ '#K$:!U@' ^ '#':--F7LA ^ pgpas s.con, !H ^ :rcBios de programa ^ 'ostgre-/L ^ ".2 ^ bin ^ pgKdumpall.e>e *@ sc,cuKpostgresX !H ^ ,oo ^ bar ^ '#K$:!U@' ^ db.out current As importante tener en cuenta la primera lneaS =ue establece dinPmicamente la ariable de entorno '#':--F7LA. Asto se libera una e8 ,inali8ado el scriptS de modo =ue slo este proceso slo para el momento en =ue se eecuta tiene inicio de sesin automPtico. La segunda lnea es un comando pgKdumpall mu+ bPsicoS con un nombre de usuario pasado 0* @ + el nombre de arcBio de salida 0db.outS as como la base de datos a la copia de seguridad 0en este caso YactualY !rear una tarea programada 9e creado una tarea programada en Windos para eecutar cada nocBe a las 11H)) 'M. Al comando es !H ^ Windos ^ -+stem32 ^ cmd.e>e I c !H ^ ,oo ^ bar ^ '#K$:!U@' ^ pgKbac%up.bat E comien8a en el directorio !H ^ ,oo ^ bar ^ '#K$:!U@' @na e8 =ue todo estG con,iguradoS pgKdumpall se eecutarP automPticamente cada nocBe + descargarP un arcBio en este directorio. An este puntoS lo meor es utili8ar cual=uier solucin de copia de seguridad =ue estG utili8ando actualmente para reali8ar copias de seguridad de todo el sistema 0incluido ese directorio + esperamos obtener una copia ,uera del sitio tambiGn. -i alguna e8 necesita restaurarS puede utili8ar el arcBio db.out =ue Ba copiado. Mientras usted permane8ca dentro del mismo n
Butinas de mantenimiento y monitoreo
$
3ota de Gil$erto !astilloC El art,culo lo encontr en Google y le hice algunas modificaciones. $PL8# H=uestra Plan de consulta e$BU PL#H plan Descripcin
$ste comando muestra el plan de ejecucin que el planificador Postgres genera para la consulta dada. $l plan de ejecucin muestra la manera en que ser2n escaneadas las tablas referenciadas/ ya sea escaneo secuencial plano, escaneo por 1ndice, etc. $n el caso que se referencian &arias tablas, los algoritmos de unin que ser2n utiliados para agrupar las tuplas requeridas de cada tabla de entrada. La opcin $BN@S$ emite la representacin interna completa del 2rbol del plan, en &e de un resumen (y lo en&1a al archi&o log del postmaster tambi0n. >sualmente esta opcin es %nicamente %til para la correccin de errores (debug de Postgres. $jemplo 9. Para mostrar un plan de consulta para una consulta simple sobre una tabla con una %nica columna de tipo intKH $PL8# S$L$C3 R OB@= foo/ #@38C$H Q>$BU PL#H Seq Scan on foo (costW5.55..4.4; roMsW94; MidthWK R.Costo inicio estimado (tiempo inicial que toma de&ol&erse la primer tupla R.Costo total estimado (tiempo total para de&ol&er todas las tuplasH por ejemplo, si se limita el n%mero de tuplas a de&ol&er con una cl2usula L8=83, el planificador realia una interpolacin apropiada entre los dos costos finales para estimar cu2l de los planes es realmente el menos costoso. R.#%mero estimado de filas escaniadas (Se cumple solamente si la ejecucin de la consulta es completa. R.Cantidad estimado de filas de salida. $l costo estimados es (dis pages read R seqVpageVcost (roMs scanned R cpuVtupleVcost. Por defecto, seqVpageVcost is 9.5 y cpuVtupleVcost is 5.59. alor costo estimado es (4,4K R 9.5 (K R 5.59 W 4.4; seqVpageVcost (floating point La suposicin del planificador sobre el costo medido en unidades de captura de p2ginas de disco. Por defecto es 9.5. cpuVtupleVcost (floating point La suposicin del planificador sobre el costo de procesamiento de cada fila durante la consulta. Por defecto es 5.59.
$jemplo 4. Para la misma tabla con un 1ndice para lograr una condicin equijoin en la consulta, $PL8# mostrar2 un plan distintoH $PL8# S$L$C3 R OB@= foo $B$ i W K/ #@38C$H Q>$BU PL#H 8nde< Scan using fi on foo (costW5.55..5.K4 roMsW9 MidthWK $jemplo J. Para terminar, la misma tabla con un 1ndice para lograr una condicin equijoin en la consulta, $PL8# mostrar2 lo siguiente para una consulta que utilice una funcin de agregacinH $PL8# S$L$C3 sum(i OB@= foo $B$ i W K/ #@38C$H Q>$BU PL#H ggregate (costW5.K4..5.K4 roMsW9 MidthWK 7 8nde< Scan using fi on foo (costW5.55..5.K4 roMsW9 MidthWK
Besumen
$
>so de acuum •
•
• • • • •
•
Al acuum es el proceso en el cual se eliminan de,initiamente tuplas marcadas para borrar + Ba+ una reorgani8acin de datos a niel ,sico. Puede realiar &acuum utiliando el comando eLL #LU$ S)Parametros de tipo $ste comando es muy %til para automatiar &aciamientos a tra&0s de cualquier sincroniador de tareas (ya sea el cron de Rni< u otro de indoMs. simismo, e
>sando =unin
.ontents fBideh •
•
•
•
•
•
•
•
•
•
•
1 q/uG es MuninJ 2 7nstalan do munin 3 FicBero s de con,igu racin 4 !on,igu rando el seridor 5 !on,igu rando un nodo 6 !on,igu rando el usuario de acceso para la inter,a8 eb :rranca ndo munin " :ccedie ndo a la in,orma cin 'lugins para 'ostgre -/L .1 7nstalac in de los plugins .2 Descrip cin de
6Qu7 es )unin8 =unin es un programa de monitoriacin de ser&idores que genera estad1sticas sobre su funcionamiento de los recursos de nuestros ser&idores, como memoria, disco duro y ser&icios. >tilia las herramientas BBD3ool para generar gr2ficas de rendimiento de los par2metros del sistema analiados. >tilia una interfa Meb para mostrar las gr2ficas generadas, permite trabajar de forma distribuida, mostrando la informacin de &arios ser&idores. Para ello se instala en una S$B$B la parte ser&idora de =unin y en el resto la parte cliente, que mandar2 los datos recopilados al ser&idor para que 0ste los muestre. $st2 hecho en perl y permite el uso de plugins, lo cual lo hace realmente &ers2til.
Instalando munin =unin est2 incluido en el depsito oficial de diferentes distribucionesH rootloloHY apt7get install munin @ rootloloHY yum install munin rootloloHY apt7get install munin7node @ rootloloHY yum install munin7node
Y si &amos a emplear el equipo como ser&idor
Y si &amos a leer datos de 0l
=unin puede usarse para monitoriar uno o &arios equipos, por lo que munin7node debe instalarse en los equipos de los cuales se recopilar2n los datos y munin en el equipo que actuar2 a modo de ser&idor y que pro&ee de ser&icio Meb.
Fic'eros de con.iguraci!n =unin cuenta con &arios ficheros y directorios que hay que conocer. •
•
•
•
•
•
•
•
•
*etc*munin*munin-con. $s el fichero de configuracin general y, m2s concretamente, donde se configura el lado ser&idor de munin. $n este fichero se especifican los directorios a emplear y la configuracin de las diferentes m2quinas. Debe estar configurado en el ser&idor. *etc*munin*munin9node-con. $l fichero de configuracin del nodo. =unin &e a cada equipo que monitoria como el nodo de una red y mediante este fichero se especifica la configuracin. Debe e
Con.igurando el servidor $ditamos el fichero )etc)munin)munin.confH Y $
RRsi no especifico la direccin local (localVaddress que tiene el equipo, munin no genera las gr2ficas, con lo que se incluye la direccin 8P por partida doble.
Con.igurando un nodo $ditamos el fichero )etc)munin)munin7node.confH Y Y $
Con.igurando el usuario de acceso para la inter.a; :e, htpassMd 7cm )etc)munin)munin7htpassMd muninadmin
Arrancando munin =unin se ejecuta cada cinco minutos como un trabajo del cron. Los scripts est2n en )etc)cron.d) y se pueden modificar para que ejecute lecturas cada minuto y as1 realiar pruebas. 8niciar el cliente en todas las m2quinasH rootloloHY )etc)init.d)munin7node start
Accediendo a la in.ormaci!n 8ntroducimos en el na&egador la direccin de htmldir, en este caso fileH)))&ar)MMM)munin) httpH))localhost)munin (si contamos con un ser&idor Meb.
Plugins para PostgreSQL
$l uso de plugins mejora la &ersatilidad de munin. partir de la &ersion 9.K =unin incluye los plugins necesarios para monitorear PostgreSQL.
Instalaci!n de los plugins continuacion &amos a describir como instalarlo y configurarlo. 3odo los plugins est2n programados en perl y necesitan el modulo DNDHHPg Perl. Para Debian rootloloHY apt7get install libdbd7pg7perl Para Centos
rootloloHY yum install perl7DND7Pg #ecesitamos acti&ar los par2metros de recoleccin de estadistica y monitoreo en Postgresql. Para ello editamos el postgresql.confH loggingVcollector W on •
•
7 Query)8nde< Statistics Collector 7 tracVacti&ities W on tracVcounts W on updateVprocessVtitle W on 7 Statistics =onitoring 7 logVparserVstats W on logVplannerVstats W on logVe
4escripci!n de los plugins pg++connections $ste plugin muestra el numero de cone
Para activar los plugins 3ener en cuenta que si el nombre del plugin es por ej. postgresV significa que cuando crees los enlaces simblicos en )etc)munin.d)plugins seg%n lo que pongas despu0s &a a monitoriar una cosa u otra. Lo mejor es &er el cdigo del plugin en cuestin para &er que par2metros soportaH Creamos los enlaces simblicos en )etc)munin)plugins. ln 7s T)usr)share)munin)plugins)postgresVauto&acuumT T)etc)munin)plugins)postgresVauto&acuumT ln 7s T)usr)share)munin)plugins)postgresVbgMriterT T)etc)munin)plugins)postgresVbgMriterT ln 7s T)usr)share)munin)plugins)postgresVcacheVT T)etc)munin)plugins)postgresVcacheVLLT ln 7s T)usr)share)munin)plugins)postgresVchecpointsT T)etc)munin)plugins)postgresVchecpointsT ln 7s T)usr)share)munin)plugins)postgresVconnectionsVT T)etc)munin)plugins)postgresVconnectionsVLLT ln 7s T)usr)share)munin)plugins)postgresVconnectionsVdbT T)etc)munin)plugins)postgresVconnectionsVdbT ln 7s T)usr)share)munin)plugins)postgresVlocsVT T)etc)munin)plugins)postgresVlocsVLLT ln 7s T)usr)share)munin)plugins)postgresVquerylengthVT T)etc)munin)plugins)postgresVquerylengthVLLT ln 7s T)usr)share)munin)plugins)postgresVsieVT T)etc)munin)plugins)postgresVsieVLLT
ln 7s T)usr)share)munin)plugins)postgresVtransactionsVT T)etc)munin)plugins)postgresVtransactionsVLLT ln 7s T)usr)share)munin)plugins)postgresVusersT T)etc)munin)plugins)postgresVusersT ln 7s T)usr)share)munin)plugins)postgresV
/jemplos de posi,les con.iguraciones Para adicionar el llamado a los plugins editamos el fichero )etc)munin)plugin7conf.d)munin7nodeH Las &aribles a configurar sonH en&.PA@S3 W cual ser&idor de base de datos usar. Defaults para TlocalhostT. en&.PAD3NS$ W cual base de datos usar. Defaults para template9. en&.PA>S$B W cual cuanta de usuario de Postgresql usar. Defaults para TpostgresT. Puede ser el mismo usuario,que ejecuta los plugins de =unin. en&.PAPSS@BD W cual es la cla&e del usario correspondiente. Default para . Auada relacin con el tipo de acceso en el pgVhba.conf. •
•
•
•
ejemplo9 !pgVR" user postgres ejemplo477>so base de datos foobase. !pgVfoobaseR" user foouser en&.PAD3NS$ foobase ejemploJ77>so ser&idor local, ident autentificacin con usuario TpostgresT. !postgresVR" user postgres ejemploK77>so ser&idor, 3CP autentificacin con usuario y contraseIa. !postgresVR" en&.PA@S3 localhost en&.PA>S$B someuser en&.PAPSS@BD somepassMord
Para pro,ar el .uncionamiento de los plugins Beiniciamos munin rootloloHY )etc)init.d)munin7node restart y esperamos a que empiece a recopilar informacin para leer los logs a &er si todo funciona en condiciones, @ bien de forma directa, rootloloHY )usr)share)munin)plugins)postgresVacti&ateVloc
>sando #agios
.ontents fBideh •
•
•
•
•
•
•
•
•
•
1 q'or =uG usar agiosJ 2 !on,igu rar el seridor de monitor eo 2.1 Re=uisit os 2.2 7nstalac in 0como usuario root 2.2.1 !rear un usuario nagios 2.2.2 7nstalar nagios 2.3 !on,igu racin 2.3.1 Aditar el arcBio IusrIloc alInagio sIetcIob ectsIco ntacts.c ,g 2.3.2 !on,igu rar la inter,as e eb 2.4 7nstalar los plugins de
\Por qu0 usar #agios] #agios es un sistema open source de monitoreo de redes ampliamente utiliado, que &igila los equipos (hardMare y ser&icios (softMare que se especifiquen, alertando cuando el comportamiento de los mismos no sea el deseado.
Configurar el ser&idor de monitoreo e#uisitos • • •
• • •
Ser&idor eb ($ste manual asume que se usar2 pache Php (Para la interface Meb Acc Libgd (es una librer1a gr2fica necesaria para mostrar el statusmap Perl Ser&idor de correo (@pcional. Para en&iar las alertas por correo
Instala =como usuario root> Crear unci!n usuario nagios useradd 7m nagios passMd nagios
Instalar nagios Mget httpH))prdoMnloads.sourceforge.net)sourceforge)nagios)nagios7J.5.G.tar.g gunip 7dc nagios7J.5.G.tar.g tar <&f 7 cd nagios7J.5.G .)configure 77Mith7command7groupWnagios mae all mae install mae install7init mae install7config mae install7commandmode
Con.iguraci!n /ditar el arc'ivo *usr*local*nagios*etc*o,jects*contacts-c.g $ste cambio es para indicar a que correo se notificar2n las alertas configuradas. reemplaar ^nagioslocalhost_ por el correo del administrador
Con.igurar la inter.ase :e, mae install7Mebconf htpassMd 7c )usr)local)nagios)etc)htpassMd.users nagiosadmin choMn nagios.nagios )usr)local)nagios)etc)htpassMd.users chmod GGK )usr)local)nagios)etc)htpassMd.users ser&ice httpd restart
Instalar los plugins de ?agios $l plugin para PostgreSQL lo instalaremos luego manualmente, estos es por dos moti&osH 9. Para instalar la %ltima &ersin y 4. Para no tener problemas de dependencias en caso de que en el ser&idor de monitoreo no tengamos instalado PostgreSQL cd .. Mget httpH))prdoMnloads.sourceforge.net)sourceforge)nagiosplug)nagios7plugins79.K.9J.tar.g gunip 7dc nagios7plugins79.K.9J.tar.g tar <&f 7 cd nagios7plugins79.K.9J .)configure 77Mith7nagios7userWnagios 77Mith7nagios7groupWnagios 77Mithout7pgsql mae mae install
Iniciar ?agios cd )etc)init.d chconfig 77add nagios chconfig nagios on Para comprobar que todo esta bien )usr)local)nagios)bin)nagios 7& )usr)local)nagios)etc)nagios.cfg
Oinalmente ser&ice nagios start $n este momento ya es posible ingresar a #agios, abriendo el na&egador de internet y poniendo como direccinH httpH))localhost)nagios 8ngrese como usuario nagiosadmin y como cla&e la que indico cuando configuraba la interfase Meb. Si instalo en la misma m2quina que &a a ser monitoreada pasar a la instalacin del plugin para PostgreSQL, de lo contrario contin%e con la siguiente seccin.
Configurar la m2quina que sera monitoreada • • • •
e# Postgruisitos eSQL (Las instrucciones en este manual se probaron usando la &ersin ;.J.6 inetd Acc Perl Crear un usuario ?agios useradd 7m nagios passMd nagios
Instalar los plugins de ?agios $l plugin para PostgreSQL lo instalaremos luego manualmente para asegurarnos de usar la %ltima &ersin. Mget httpH))prdoMnloads.sourceforge.net)sourceforge)nagiosplug)nagios7plugins79.K.9J.tar.g gunip 7dc nagios7plugins79.K.9J.tar.g tar <&f 7 cd nagios7plugins79.K.9J .)configure 77Mith7nagios7userWnagios 77Mith7nagios7groupWnagios 77Mithout7pgsql mae mae install choMn 7B nagios.nagios )usr)local)nagios
Instalar el modulo nrpe de ?agios Mget httpH))prdoMnloads.sourceforge.net)sourceforge)nagios)nrpe74.94.tar.g gunip 7dc nrpe74.94.tar.g tar <&f 7 cd nrpe74.94 .)configure mae all mae install7plugin mae install7daemon mae install7daemon7config mae install7
Con.igurar el modulo nrpe )odi.icar el arc'ivo *etc*&inet-d*nrpe modificar el &alor del campo ^onlyVfrom_ por la ip del ser&idor que se &a a monitorear
)odi.icar el arc'ivo *etc*services agregar la siguiente linea ^nrpe
?GGG)tcp
Y#BP$_
Configurar el ser&idor de monitoreo para que chequee los ser&icios en la m2quina remota Instalar el modulo nrpe de ?agios Mget httpH))prdoMnloads.sourceforge.net)sourceforge)nagios)nrpe74.94.tar.g gunip 7dc nrpe74.94.tar.g tar <&f 7 cd nrpe74.94 .)configure mae all mae install7plugin
Pro,ar el modulo nrpe )usr)local)nagios)libe
/ditar el arc'ivo *usr*local*nagios*etc*o,jects*commands-c.g gregar las siguientes lineas al final del archi&o define command commandVname checVnrpe commandVline X>S$B9X)checVnrpe 7 X@S3DDB$SSX 7c XBA9X Debemos indicarle a #agios que &amos a monitorear otra maquina editando el archi&o )usr)local)nagios)etc)nagios.cfg gregar la siguiente linea en la seccion ^@N$C3 C@#O8A>B38@# O8L$(S_H cfgVfile W )usr)local)nagios)etc)objects)dbhost.cfg Crear la definicion del host en un archi&o dbhost.cfg define host use hostVname alias address
linu<7ser&er dbser&er pgsql ;.J 8P.del.ser&idor.PostgreSQL
ser&ice nagios restart
Instalar plugin para monitorear PostgreSQL =en el servidor #ue se va a monitorear> Descargar el archi&o checVpostgres.tar.g desde httpH))bucardo.org)checVpostgres gunip 7dc checVpostgres.tar.g tar <&f 7 cd checVpostgres cp checVpostgres.pl )usr)local)nagios)libe Load checVcommand checVnrpechecVload define ser&ice use generic7ser&ice hostVname dbser&er ser&iceVdescription Current users
checVcommand
checVnrpechecVusers
define ser&ice use generic7ser&ice hostVname dbser&er ser&iceVdescription 3otal Processes checVcommand checVnrpechecVtotalVprocs define ser&ice use generic7ser&ice hostVname dbser&er ser&iceVdescription ombie Processes checVcommand checVnrpechecVombieVprocs
=onitoreo de bloqueos
•
Mirando el lin% pgKloc%s nos muestra =ue blo=ueos Ban sido otorgados + =ue procesos estPn esperando por estos. @na buena consulta para empe8ar a mirar los problemas inBerentes a los blo=ueosH SELECT relnameEpg_locks.? FROM pg_classEpg_locks WHERE relfilenode(relation !"# "OT $R!"TE#+
•
Be&isando cuales son los procesos que estan manteniendo o esperando los bloqueos, es f2cil si utilia la referencia en pgVstatVacti&ity
:rcBiado !ontinuo + Recuperacin de 'unto en (iempo 0'7(R An todo momentoS 'ostgre-/L mantiene un registro de escritura preia 0W:L en el subdirectorio pgK>log I del directorio de datos del cliste principalmente para pro psitos de segurid ad cont ra acciden tesH si el sistema ,allaS la base de datos s e puede restaurar a la consistencia repitiendo las entradas de registro reali8adas desde el istencia del registro permite utili8ar una tercera estrategi a para reali8ar copias de seguridad de bases de datosH podemos combinar una copia de seguridad a niel de sistema de arcBios con una copia de seguridad de los arcBios W:L. -i la recuperacin es necesariaS restauramos la copia de seguridad del sistema de arcBios + luego reproducir desde los arcBios W:L con copia de seguridad para llear el sistema a un estado actual. Aste en,o=ue es mPs compleo de administrar =ue cual=uiera de los en,o=ues anterioresS pero tiene algunos bene,icios signi,icatiosH o necesita mos una copia de seguridad del siste ma de ar cBios p er,ectamente c oBerente como punto d e partid a. !ual=uier incoBerencia interna en la copia de seg uridad se rP corregid a por la repeticin de registro 0esto no es signi,ica tiamente di,erente de lo =ue sucede durante la recuperacin del accidente. 'or lo tantoS no necesitamos una capacidad de instantPnea del sistema de arcBiosS simplemente tar o una Berramienta similar de arcBiado. 'uesto =ue podemos combinar una secuencia inde,inidamente larga de arcBios W:L para la reproducci nS la copia de seguridad continua se puede lograr simplement e continuando con el arcBio de los arcBios W:L. Asto es particularmente alioso para las bases de datos
grandesS donde puede no ser coneniente tomar una copia de seguridad completa con ,recuencia. o es necesario oler a reproducir las entradas W:L Basta el ,inal. 'odramos detener la repeticin en cual=uier momento + tener una instantPnea consistente de la base de datos como era en ese momento. 'or lo tantoS esta tGcnica admite la recuperacin de punto a tiempoH es posible restaur ar la base de datos a su estado en cual=uier momento desde =ue se reali8 la copia de seguridad de base. -i alimentamos continuamente la serie de arcBios W:L a otra mP=uina =ue se Ba cargado con el mismo arcBio de respaldo de baseS tenemos un sistema de espera en calienteH en cual=uier momento podemos abrir la segunda mP=uina + tendrP una copia casi actual de la base de datos. otaH pg Kdump + pg Kdumpall no p roducen copias de se guridad a niel de s istema de arcBios + no pueden utili8arse como parte de una solucin de arcBiado continuo. Astos olcados son lgicos + no contienen su,iciente in,ormacin para ser utili8ados por W:L repla+. :l igual =ue con la tGcnica de copia de seguridad simple del sistema de arcBiosS este mGtodo slo puede admitir la restauracin de un cltiende al menos Basta la Bora de inicio de la copia de seguridad. :s =ue para empe8arS debe con,igurar + probar su procedimiento para el arcBio de arcBios W :L ante s de tomar su primera base de copia de seguridad. An consecuenciaS primero debatiremos la mecPnica del arcBio de arcBios W:L. 24.3.1. !on,iguracin del arcBio W:L An un sentido abstractoS un sistema 'ostgre-/L en eecucin produce una secuencia inde,inidamente larga de registros W:L. Al sistema diide ,sicamente esta secuencia en arcBios de segmento W:LS =ue son normalmente 16M$ cada uno 0aun=ue el tamaCo del segmento puede ser alterado al construir 'ostgre-/L. Los arcBios de segmento reciben nombres numGricos =ue re,lean su posicin en la secuencia W:L abstracta. !uando no se utili8a el arcBiado W:LS el sistema normalmente crea slo unos pocos arcBios de segmento + luego los recicla al cambiar el nombre de los arcBios de segmento =ue +a no son necesarios a nibilidad al administrador de bases de datosS 'ostgre-/L intenta no Bacer ninguna suposicin sobre cmo se r eali8arP el
arcBiado. An lugar de elloS 'ostgre-/L permite al administrador especi,icar un comando de sBell =ue se eecutarP para copiar un arcBio de segmento completado a donde sea necesario. Al comando podra ser tan simple como un cpS o podra inocar un script de sBell compleo * todo depende de usted.
-eplicación y alta disponibilidad de PostgreSQL con pgpool00 Xie, =&5D&5DDK 3 =KFD Z rafaelma En este art"culo se muestra cómo instalar, configurar y mantener un cl?ster de ser%idores de bases de datos PostgreSQL gestionados mediante un middleare llamado pgpool3II sobre el sistema operati%o )ebian /N65Linu2. )ico cl?ster ofrece capacidades de replicación, balanceo de carga y un pool de cone2iones, y es capa$ de reali$ar failo%er o degeneración de un nodo #ue de(e de funcionar y de recuperar nodos ca"dos en l"nea 8sin de(ar de dar ser%icio:. Se trata de un cl?ster acti%o3 pasi%o, si bien se ace uso del nodo pasi%o para lectura con el propósito de me(orar la producti%idad del sistema.
ndice 1. Introducción 1. Cailo%er cluster 2. Sobre PostgreSQL 3. Sobre pgpool3II 4. Sobre )ebian /N65Linu2 2. Ar#uitectura del sistema 3. Instalación de pa#uetes y configuración de dependencias 4. onfiguración de PostgreSQL 5. onfiguración de pgpool3II 6. Pruebas de replicación . -ecuperación en l"nea ". El Mrite3Aead Log 1. Procedimiento completo 2. Primera fase 3. Segunda fase 4. 4ercera fase 5. Pasos finales 6. Scripts necesarios 1. 2. 3. 4. 5. 6.
alarci%ing pgpool3failo%er pgpool3failbac7 base3bac7up pgpool3reco%ery3pitr pgpoolremotestart . omandos de PP 1).Simulación de ca"da y recuperación de un nodo 11.Alta disponibilidad de pgpool3II
El proyecto Linu2 ig A%ailability Instalación de eartbeat onfiguración de eartbeat Simulación de la ca"da del ser%icio 12.erramientas de monitori$ación 1. pgosmem y pgbuffercace 2. pgtop 3. ps 4. pgd 5. iotop
1. 2. 3. 4.
13.Optimi$ación de PostgreSQL 1. Auto%acuum y cargas de datos 2. Procesos errantes 14.CAQ 8Cre#uently As7ed Question: 15.*ibliograf"a
Introducción Cailo%er cluster 6n failo%er cluster 8o cl?ster acti%o3pasi%o: es un grupo de ordenadores independientes #ue traba(an con(untamente para incrementar la disponibilidad de di%ersas aplicaciones y ser%icios. Los ser%idores en el cl?ster 8llamados nodos: están interconectados mediante cables f"sicos y por softare. Si uno de los nodos cae, otro empie$a a dar ser%icio 8proceso conocido como failo%er: sin necesidad de inter%ención umana. Esta gu"a describe los pasos para instalar y configurar un failo%er cl?ster con dos o más nodos.
Sobre PostgreSQL PostgreSQL es la base de datos relacional de código abierto más a%an$ada del mundo. )istribuida ba(o licencia *S) 8del ingl1s, *er7eley Softare )istribution:, lle%a más de =F a0os desarrollándose y su ar#uitectura go$a de una e2celente reputación por su fiabilidad, integridad de datos y correctitud. PostgreSQL dispone de %ersiones para prácticamente todos los sistemas operati%os y cumple totalmente con AI) 8del ingl1s, Atomicity, onsistency, Isolation, )urability:. 4iene soporte para cla%es e2tran(eras, (oins, %istas, disparadores y procedimientos almacenados 8en m?ltiples lengua(es de programación:. Incluye la mayor"a de los tipos de datos de SQLK y SQLKK y, asimismo, soporta el almacenamiento de grandes ob(etos binarios, como imágenes, sonidos y %"deos. 4iene interfaces de programación nati%as para 5!!, Wa%a, .Net, Perl, PP, Pyton, -uby, 4cl y O)*, entre otros, y una e2cepcional documentación. PostgreSQL ofrece sofisticadas caracter"sticas tales como control concurrente multi%ersión 8+X:, point in time reco%ery 8PI4-:, tablespaces, replicación as"ncrona, transacciones anidadas 8sa%epoints:, copias de seguridad en caliente5en l"nea, un sofisticado planificador5optimi$ador de consultas y rite aead logging para ser tolerante a fallos de ardare. Soporta (uegos de caracteres internacionales, codificaciones de caracteres multibyte, 6nicode y reali$a ordenaciones dependiendo de la configuración de idioma local, de la diferenciación de may?sculas y min?sculas y del formato. Es altamente escalable tanto en la cantidad bruta de datos #ue puede mane(ar como en el n?mero de usuarios concurrentes #ue puede atender. ay sistemas acti%os en producción con PostgreSQL #ue mane(an más de > terabytes de datos.
Sobre pgpool3II pgpool3II abla los protocolos de frontend y bac7end de PostgreSQL, y pasa las cone2iones entre ellos. )e ese modo, una aplicación de base de datos 8frontend: cree #ue pgpool3II es el %erdadero ser%idor de
PostgreSQL, y el ser%idor 8bac7end: %e a pgpool3II como uno de sus clientes. )ebido a #ue pgpool3II es transparente tanto para el ser%idor como para el cliente, una aplicación de base de datos e2istente puede empe$ar a usarse con pgpool3II casi sin ning?n cambio en su código fuente. pgpool3II funciona sobre Linu2, Solaris, Cree*S) y la mayor"a de las ar#uitecturas 6NIY. Mindos no está soportado. Las %ersiones de PostgreSQL soportadas son de la G.> para arriba. Para usar la paraleli$ación de consultas es necesaria la %ersión &.> o superior. pgpool3II proporciona las siguientes caracter"sticas •
•
•
•
•
Limita el e2cedente de cone2iones. PostgreSQL soporta un cierto n?mero de cone2iones concurrentes y reca$a las #ue superen dica cifra. Aumentar el l"mite má2imo de cone2iones incrementa el consumo de recursos y afecta al rendimiento del sistema. pgpool3II tiene tambi1n un l"mite má2imo de cone2iones, pero las cone2iones e2tras se mantienen en una cola en lugar de de%ol%er un error inmediatamente. Pool de cone2iones. pgpool3II mantiene abiertas las cone2iones a los ser%idores PostgreSQL y las reutili$a siempre #ue se solicita una nue%a cone2ión con las mismas propiedades 8nombre de usuario, base de datos y %ersión del protocolo:. Ello reduce la sobrecarga en las cone2iones y me(ora la producti%idad global del sistema. -eplicación. pgpool3II puede gestionar m?ltiples ser%idores PostgreSQL. El uso de la función de replicación permite crear una copia en dos o más discos f"sicos, de modo #ue el ser%icio puede continuar sin parar los ser%idores en caso de fallo en alg?n disco. *alanceo de carga. Si se replica una base de datos, la e(ecución de una consulta SELE4 en cual#uiera de los ser%idores de%ol%erá el mismo resultado. pgpool3II se apro%eca de la caracter"stica de replicación para reducir la carga en cada uno de los ser%idores PostgreSQL distribuyendo las consultas SELE4 entre los m?ltiples ser%idores, me(orando as" la producti%idad global del sistema. En el me(or caso, el rendimiento me(ora proporcionalmente al n?mero de ser%idores PostgreSQL. El balanceo de carga funciona me(or en la situación en la cuál ay mucos usuarios e(ecutando mucas consultas al mismo tiempo. Paraleli$ación de consultas. Al usar la función de paraleli$ación de consultas, los datos pueden di%idirse entre %arios ser%idores, de modo #ue la consulta puede e(ecutarse en todos los ser%idores de manera concurrente para reducir el tiempo total de e(ecución. La paraleli$ación de consultas es una solución adecuada para b?s#uedas de datos a gran escala.
Sobre )ebian /N65Linu2 )ebian /N65Linu2 es un sistema operati%o libre 8el con(unto de programas básicos y utilidades #ue acen #ue un ordenador funcione:. )ebian utili$a el n?cleo Linu2 y las erramientas básicas de /N6. Para esta instalación se utili$ará el sistema operati%o )ebian Lenny para la ar#uitectura 2BGG> 8A+)G>5E+G>4:, partiendo de una instalación básica, sin ninguna tarea seleccionada en el selector de tareas del instalador. El sistema de ficeros elegido será YCS. La misma instalación puede obtenerse con )ebian Etc y el repositorio de bac7ports.
Ar#uitectura del sistema El t1rmino cl?ster ace referencia a un con(unto de sistemas informáticos traba(ando con(untamente por un ob(eti%o com?n. omo puede apreciarse, esta definición es muy gen1rica. No es, sino, un refle(o de la gran %ariedad y di%ersidad de acercamientos posibles a la ora de configurar un cl?ster y, por lo tanto, prueba de #ue el lector no debe tomar la ar#uitectura utili$ada en el art"culo más #ue como referencia y base para sus futuros traba(os.
En el cl?ster de este art"culo se persiguen dos ob(eti%os uno, la alta disponibilidad, y dos, el rendimiento. La funcionalidad #ue persigue el cl?ster es ?nicamente la de ser%idor de base de datos, pero lo ace a tra%1s de tres aplicaciones •
•
•
PostgreSQL, el sistema gestor de bases de datos 8S./.*.).: pgpool3II, el middleare #ue gestiona la alta disponibilidad de los ser%idores de PostgreSQL. eartbeat, un softare #ue usaremos para dar alta disponibilidad a pgpool3II y a la dirección IP de ser%icio.
Esta configuración nos permite obtener alta disponibilidad de todos los ser%icios y recursos en las dos má#uinas destinadas a este cl?ster. El diagrama de la ar#uitectura resultante ser"a el siguiente
Instalación de pa#uetes y configuración de dependencias Se toma como punto de inicio un sistema 2BGG> con )ebian /N65Linu2 Etc o Lenny instalado. Se utili$arán las siguientes %ersiones de softare •
•
•
PostgreSQL B.'.2 pgpool3II ..2 eartbeat .2
Antes de empe$ar, instalaremos un con(unto de pa#uetes básico para cual#uier sistema, as" como una serie de utilidades #ue nos arán falta para la gestión y el mantenimiento del cl?ster apt3get install ntp openssl file psmisc sysstat b$ip un$ip nmap dstat rsync get cc$e tcpdump pciutils dnsutils ost
rsync lo usaremos para la recuperación en l"nea de nodos, ntp para mantener el relo( del sistema sincroni$ado. El prototipo inicial de este cl?ster se probó en una má#uina con dos instancias de Yen y una base de datos de prueba creada con pgbenc. +ás tarde se configuró una %ersión de preproducción sobre sendos Intel Quad ore con B /* de -A+ y la %ersión final del cl?ster se configuró sobre dos nodos con doble Intel Quad ore cada uno y =G /* de -A+. La base de datos final ocupa algo más de 'D /* y se encuentra sobre dos discos SAS de =F.DDD -P+ en -AI) =. A efectos de este art"culo, a continuación se presenta un resumen de los datos de configuración #ue se usarán
•
Nodo = •
•
•
ostname pgs#l=.dominio.com )irección IP de administración =K.=GB.D.'
Nodo ostname pgs#l.dominio.com )irección IP de administración =K.=GB.D.> +áscara de red de > bits. )irección IP del router =K.=GB.D.= pgpool3II )irección IP de ser%icio =K.=GB.D. •
•
•
•
•
•
•
•
Puerto de gestión KBKB Puerto de ser%icio KKKK
Los conceptos utili$ados en esta descripción se irán e2plicando a lo largo del art"culo. Es preciso #ue las entradas correspondientes a los datos anteriores e2istan en el ficero 5etc5osts =&.D.D.=
localost.localdomain
localost
=K.=GB.D.=
router.dominio.com
router
=K.=GB.D.
pgpool.dominio.com
pgpool
=K.=GB.D.'
pgs#l=.dominio.com
pgs#l=
=K.=GB.D.>
pgs#l.dominio.com
pgs#l
Empe$aremos configurando PostgreSQL en ambos nodos pero pgpool3II sólo en el nodo pgs#l=. Los comandos deberán e(ecutarse como root o mediante sudo, a menos #ue se indi#ue lo contrario 8normalmente comandos #ue se e(ecutarán con el usuario postgres:. Las dependencias de compilación de pgpool3II 8las cabeceras de la librer"a de PostgreSQL, el pa#uete de desarrollo de PostgreSQL para pogramación de ser%idores y las utilidades de compilación de /N6: las resol%eremos mediante la instalación de los siguientes pa#uetes apt3get install libp#3de% postgres#l3ser%er3de%3B.' bison build3essential
6na %e$ resueltas las dependencias, empe$aremos instalando PostgreSQL en ambos nodos apt3get install postgres#l3B.' postgres#l3contrib3B.' postgres#l3doc3B.' uuid libdbd3pg3perl
La instalación por defecto de PostgreSQL en )ebian ya nos de(a un sistema gestor de base de datos funcionando. Cinalmente, descargamos pgpool3II, lo descomprimimos e instalamos en 5opt5pgpool cd 5usr5local5src get ttp55pgfoundry.org5frs5donload.pp5=K=5pgpool3II3...tar.g$ tar 33e2tract 33g$ip 33file pgpool3II3...tar.g$ cd pgpool3II3.. .5configure 33prefi2^5opt5pgpool ma7e ma7e install cd 5usr5local5src5pgpool3II3..5s#l5pgpool3reco%ery ma7e ma7e install su 3 postgres 3c Jps#l 3f 5usr5local5src5pgpool3II3..5s#l5pgpool3reco%ery5pgpool3reco%ery.s#l template=J
A partir de a#u", todas las bases de datos #ue creemos eredarán las funciones e2istentes en template=.
onfiguración de PostgreSQL 4al y como se a dico anteriormente, los siguientes pasos aplican a ambas instancias de PostgreSQL en los nodos pgs#l= y pgs#l. Empe$aremos editando la configuración de PostgreSQL para permitir el acceso incondicional del usuario pgpool, #ue será nuestro usuario de base de datos del cl?ster. Por incondicional nos referimos al uso del modo trust, #ue permite la %alidación del usuario sin necesidad de contrase0a. Esto es un re#uerimiento de pgpool3II para el tipo de configuración del cl?ster #ue tendremos al final del art"culo, por lo cuál deberemos prestar especial atención a los filtros de acceso por IP #ue configuremos tanto en los ser%idores PostgreSQL como en el cortafuegos de los nodos. omen$aremos, como usuario postgres, a0adiendo el usuario de base de datos 8role: pgpool, sin contrase0a su 3 postgres createuser 33superuser pgpool
Para facilitar el traba(o en este art"culo lo emos dado de alta como superusuario. En realidad, si creamos la base de datos en todos los nodos como superadministrador postgres y le otorgamos propiedad al usuario pgpool, 1ste puede ser un usuario con el role más básico 8no superusuario, sin capacidad de crear bases de datos:. Editamos aora el ficero 5etc5postgres#l5B.'5main5pgba.conf y a0adimos el acceso para el usuario pgpool desde la dirección IP donde se e(ecutará pgpool3II 8en estos momentos =K.=GB.D.': [ 4RPE )A4A*ASE 6SE-
I)-3A))-ESS
local all
all
ost
all
all
ost ost
all all
pgpool =K.=GB.D.'5' trust all =5=B mdF
+E4O)
ident sameuser =&.D.D.=5'
mdF
Al igual #ue durante la creación del usuario pgpool, para facilitar este art"culo se permite el acceso a todas las bases de datos a dico usuario. En un entorno de producción ser"a preciso restringir dico acceso a la base de datos #ue se %aya a usar. Asimismo, si se #uiere acceder directamente a la base de datos sin pasar por pgpool3II, por e(emplo para reali$ar pruebas de rendimiento o para su monitori$ación, deberán a0adirse las direcciones IP de los clientes desde los #ue se conecten dicas aplicaciones. En este caso, si se desea, y siempre y cuando las direcciones IP de srcen sean diferentes, puede cambiarse el m1todo de autenticación a +)F y crearse el usuario pgpool con contrase0a. A continuación acti%amos el arci%ado del Mrite3Aead Log 8MAL: de PostgreSQL, pues nos ará falta para poder usar PI4- 8Point3In34ime -eco%ery: desde pgpool3II. Editamos el ficero de configuración 5etc5postgres#l5B.'5main5postgres#l.conf y cambiamos los dos siguientes parámetros arci%emode ^ on arci%ecommand ^ e2it D
Ra #ue sólo aremos uso de la caracter"stica de PI4- cuando %ayamos a recuperar un nodo ca"do o a0adir uno nue%o, por defecto emos configurado el parámetro arci%ecommand para #ue no aga nada 8e2it D:. Esto lo acemos debido a #ue la acti%ación o desacti%ación del arci%ado de ficeros MAL re#uiere de un reinicio del ser%idor, pero la alteración del comando o script #ue reali$a la tarea de arci%ar el ficero MAL rotado por PostgreSQL tan sólo re#uiere de una recarga de la configuración.
As", PostgreSQL se comportará como si no estu%iera arci%ando ficeros de log, generando dicos ficeros 8de =G +* cada uno: con normalidad en 5%ar5lib5postgres#l5B.'5main5pg2log y rotándolos a partir del octa%o #ue almacene. Acto seguido crearemos el directorio 5%ar5lib5postgres#l5pg2logarci%e, directorio donde arci%aremos 8copiaremos: los ficeros MAL cuando lo necesitemos, y le daremos permisos para el usuario postgres m7dir 33mode^&DD 5%ar5lib5postgres#l5pg2logarci%e con postgrespostgres 5%ar5lib5postgres#l5pg2logarci%e
Por ?ltimo, indicaremos a PostgreSQL #ue escuce en todas las interfaces pues, por defecto, sólo lo ace en el localost. Editamos el ficero 5etc5postgres#l5B.'5main5postgres#l.conf y cambiamos la siguiente directi%a listenaddresses ^ 9
4ambi1n podemos restringirlo a =&.D.D.= y la dirección IP administrati%a del nodo 8=K.=GB.D.' en el primer nodo, =K.=GB.D.> en el segundo: para asegurarnos de #ue no est1 escucando en la dirección IP de ser%icio del cl?ster 8la =K.=GB.D., #ue #ueremos utili$ar ?nicamente para pgpool3II:. R reiniciamos PostgreSQL para acti%ar los cambios 5etc5init.d5postgres#l3B.' restart
onfiguración de pgpool3II La configuración de pgpool3II la reali$aremos ?nicamente en el nodo pgs#l=, pues sólo en ese ost lo tenemos instalado. pgpool3II proporciona una interfa$ de gestión desde la cuál el administrador puede recoger el estado de pgpool3II y finali$ar los procesos de pgpool3II a tra%1s de la red. El ficero pcp.conf es un ficero de nombres de usuario y contrase0as usado para autenticarse con la interfa$. 4odos los comandos re#uieren #ue pcp.conf se aya configurado. 4ras la instalación de pgpool3II se crea un ficero 5opt5pgpool5etc5pcp.conf.sample de e(emplo. onfigurar ese ficero es tan sencillo como cambiarle el nombre al ficero y a0adir el usuario y contrase0a deseados. Por lo tanto, copiaremos el ficero de e(emplo a ficero deseado cp 33arci%e 5opt5pgpool5etc5pcp.conf.sample 5opt5pgpool5etc5pcp.conf
R lo editaremos para a0adir nuestro usuario y contrase0a en el formato usuario
En este art"culo se usará root como nombre de usuario. Para generar la suma +)F de nuestra contrase0a podemos usar la utilidad pgmdF 5opt5pgpool5bin5pgmdF 3p passord passord@ '>b''K&KKdF>Da&bf=c>DBcDeGBafdd
Luego creamos un ficero de configuración para pgpool3II a partir del #ue %iene como e(emplo cp 33arci%e 5opt5pgpool5etc5pgpool.conf.sample 5opt5pgpool5etc5pgpool.conf
)eberemos editar el ficero para configurarlo a nuestra medida. Para este art"culo se configurarán las siguientes funcionalidades •
•
•
Pool de cone2iones. -eplicación. *alanceo de carga.
Empe$aremos con una configuración básica para arrancar pgpool3II e iremos a0adiendo funcionalidades. Editamos el ficero 5opt5pgpool5etc5pgpool.conf para de(arlo tal y como sigue listenaddresses ^ 9 port ^ KKKK pcpport ^ KBKB soc7etdir ^ 5%ar5run5postgres#l pcpsoc7etdir ^ 5%ar5run5postgres#l bac7endsoc7etdir ^ 5%ar5run5postgres#l pcptimeout ^ =D numinitcildren ^ ' ma2pool ^ > cildlifetime ^ 'DD connectionlifetime ^ D cildma2connections ^ D clientidlelimit ^ D autenticationtimeout ^ GD logdir ^ 5%ar5run5postgres#l replicationmode ^ false loadbalancemode ^ false replicationstoponmismatc ^ false replicateselect ^ false reset#uerylist ^ A*O-4 -ESE4 ALL SE4 SESSION A64O-I_A4ION )ECA6L4 printtimestamp ^ true mastersla%emode ^ false connectioncace ^ true ealtcec7timeout ^ D ealtcec7period ^ GD ealtcec7user ^ pgpool failo%ercommand ^ failbac7command ^ insertloc7 ^ false ignoreleadingitespace ^ true logstatement ^ false logconnections ^ false logostname ^ false parallelmode ^ false enable#uerycace ^ false pgpoolostname ^ pgs#l= systemdbostname ^ localost systemdbport ^ F>' systemdbdbname ^ pgpool systemdbscema ^ pgpoolcatalog systemdbuser ^ pgpool systemdbpassord ^ bac7endostnameD ^ =K.=GB.D.' bac7endportD ^ F>' bac7endeigtD ^ = bac7endostname= ^ =K.=GB.D.> bac7endport= ^ F>' bac7endeigt= ^ =
enablepoolba ^ false reco%eryuser ^ pgpool reco%erypassord ^ reco%ery=ststagecommand ^ reco%eryndstagecommand ^ reco%erytimeout ^ KD
4odas las directi%as de configuración %ienen e2plicadas en la página eb de pgpool3II. omo aspectos a destacar de la anterior configuración tenemos los siguientes •
•
•
•
•
+ediante la directi%a listenaddresses acemos #ue, inicialmente, pgpool3II escuce en todas las interfaces. +ediante las directi%as logdir, soc7etdir, pcpsoc7etdir y bac7endsoc7etdir, configuramos, respecti%amente, #ue el pid y todos los soc7ets de los diferentes procesos #ue forman pgpool3II se guarden en el directorio por defecto de )ebian para PostgreSQL, 5%ar5run5postgres#l. Acti%amos el pool de cone2iones 8directi%a connectioncace: pero de(amos todas las demás funcionalidades desacti%adas 8replicationmode, loadbalancemode, replicateselect y mastersla%emode:. +ediante las directi%as ealtcec7timeout, ealtcec7period y ealtcec7user, configuramos la comprobación de estado de los ser%idores PostgreSQL para #ue se aga con el usuario de base de datos pgpool, cada GD segundos y con un tiempo má2imo de espera de D segundos. )e(amos todos los l"mites de cone2iones, n?mero de procesos, tiempos de espera y similares a sus %alores por defecto.
El siguiente paso será crear el script de arran#ue de pgpool3II, #ue situaremos en 5opt5pgpool5etc5init.d5pgpool. A continuación se muestra un t"pico script, basado en el srcinal del pa#uete pgpool de )ebian [ 5bin5s
PA4^5opt5pgpool5bin5sbin5bin5usr5sbin5usr5bin )AE+ON^5opt5pgpool5bin5pgpool PI)CILE^5%ar5run5postgres#l5pgpool.pid
test 32 T)AE+ON e2it D
[ Include pgpool defaults if a%ailable if ; 3f 5opt5pgpool5etc5default5pgpool < ten . 5opt5pgpool5etc5default5pgpool fi
OP4S^JJ if ; 2JTP/POOLLO/)E*6/J ^ 2JyesJ < ten OP4S^JTOP4S 3dJ fi
. 5lib5lsb5init3functions
isrunning8:
pidofproc 3p TPI)CILE T)AE+ON @5de%5null
dstart8: if isrunning ten else su 3c JT)AE+ON 3n TOP4S gt= lt5de%5null logger 3t pgpool 3p TP/POOLSRSLO/CAILI4R3 localD.info gt5de%5null gt= J 3 postgres fi
dstop8: 7illproc 3p TPI)CILE T)AE+ON 3IN4 status^T] ; Tstatus 3e# D < ; Tstatus 3e# ' < return T]
case JT=J in start: logdaemonmsg JStarting pgpool3IIJ pgpool dstart logendmsg T] stop: logdaemonmsg JStopping pgpool3IIJ pgpool dstop logendmsg T] status: isrunning status^T] if ; Tstatus 3e# D < ten logsuccessmsg Jpgpool3II is running.J else logfailuremsg Jpgpool3II is not running.J fi e2it Tstatus restartforce3reload: logdaemonmsg J-estarting pgpool3IIJ pgpool dstop sleep = dstart
logendmsg T] try3restart: if TD status gt5de%5null ten TD restart else e2it D fi reload: e2it ' 9: logfailuremsg J6sage TD startstopstatusrestarttry3restartreloadforce3reloadJ e2it esac
Siguiendo el estándar )ebian, crearemos el ficero 5opt5pgpool5etc5default5pgpool con los %alores de configuración de arran#ue del daemon. Opcionalmente, apro%ecamos para ponerlo en modo debug al arrancar [ )efaults for pgpool initscript [ sourced by 5opt5pgpool5etc5init.d5pgpool [ syslog facility for pgpool see logger8=: P/POOLSRSLO/CAILI4R^localD
[ set to JyesJ if you ant to enable debugging messages to te log P/POOLLO/)E*6/^no
Aora ya deber"amos de ser capaces de arrancar pgpool3II 5opt5pgpool5etc5init.d5pgpool start
Podremos obser%ar el correcto arran#ue del daemon 8o los errores en caso contrario: monitori$ando el syslog, por e(emplo mediante el uso del comando tail 5usr5bin5tail 3f 5%ar5log5syslog cc$e
A partir de este momento deber"amos de ser capaces de conectarnos al puerto KKKK de la dirección IP de administración del nodo pgs#l= 8la dirección IP de ser%icio no estará disponible asta #ue configuremos la alta disponibilidad con eartbeat: 5usr5bin5ps#l 3 pgs#l= 3p KKKK 36 pgpool 3d postgres
Si deseamos monitori$ar las cone2iones a los nodos de PostgreSQL, podemos acti%ar las directi%as logconnections y logdisconnections en los ficeros de configuración 5etc5postgres#l5B.'5main5postgres#l.conf de cada nodo, reiniciando PostgreSQL para #ue los cambios sur(an efecto.
)ebido a #ue no tenemos ni replicación ni balanceo de carga acti%ados , pgpool3II sólo se abrá conectado al ser%idor PostgreSQL del nodo maestro, eco #ue abremos podido comprobar monitori$ando el ficero de log de PostgreSQL en 5%ar5log5postgres#l5postgres#l3B.'3main.log. 4ras aber comprobado #ue ya podemos conectarnos, %amos a proceder a acti%ar la replicación y el balanceo de carga editando el ficero 5opt5pgpool5etc5pgpool.conf y cambiando las directi%as siguientes replicationmode ^ true loadbalancemode ^ true replicationstoponmismatc ^ true
Para acti%ar los cambios reiniciaremos pgpool3II 5opt5pgpool5etc5init.d5pgpool restart
Pruebas de replicación En el pa#uete postgres#l3contrib3B.' podemos encontrar una utilidad llamada pgbenc. Esta utilidad permite, en primer lugar, iniciali$ar una base de datos con una serie de tablas sencillas y, en segundo lugar, reali$ar pruebas de rendimiento sobre ser%idores PostgreSQL mediante la e(ecución de una cierta cantidad de consultas de %arios tipos y con una concurrencia parametri$able. A partir de este momento traba(aremos desde un tercer e#uipo, actuando ya como cliente del cl?ster. Por comodidad, daremos de alta las entradas del ficero 5etc5osts mencionadas anteriormente en el art"culo, igual #ue icimos en ambos nodos del cl?ster. El primer paso consistirá en crear la base de datos bencreplication createdb 3 pgs#l= 3p KKKK 36 pgpool bencreplication createlang 3 pgs#l= 3p KKKK 36 pgpool 3d bencreplication plpgs#l
on logstatement y logconnections acti%ados en 5opt5pgpool5etc5pgpool.conf, 1sto nos mostrará entradas en 5%ar5log5syslog similares a las siguientes LO/ pid >'GF connection recei%ed ost^=K.=GB.D.F port^'BD> LO/ pid >'GF statement -EA4E )A4A*ASE bencreplication LO/ pid >'GF statement -ESE4 ALL LO/ pid >'GF statement SE4 SESSION A64O-I_A4ION)ECA6L4
on logstatement ^ all en 5etc5postgres#l5B.'5main5postgres#l.conf, en el log de cual#uiera de los PostgreSQL nos aparecerán las siguientes l"neas LO/ connection recei%ed ost^=K.=GB.D.'port^''GKD LO/ connection autori$ed user^pgpool database^postgres LO/ statement -EA4E)A4A*ASE bencreplication LO/ statement -ESE4 ALL LO/ statement SE4 SESSION A64O-I_A4ION )ECA6L4
omo usuario postgres, en ambos nodos podremos usar ps#l para %er las bases de datos y %erificar #ue se an creado T su 3 postgres T ps#l 3l List of databases Name
Oner Encoding
3333333333333333333!3333333333!33333333333 bencreplication pgpool SQLASII postgres
postgres SQLASII
templateD
postgres SQLASII
template=
postgres SQLASII
8> ros:
Xamos a proceder aora a rellenar las bases de datos con tablas e información de pruebas mediante el uso de pgbenc 5usr5lib5postgres#l5B.'5bin5pgbenc 3i 3 pgs#l= 3p KKKK 36 pgpool 3d bencreplication
En el syslog podremos %er la siguiente información LO/ pid >'G' connection recei%ed ost^=K.=GB.D.F port^'B=> LO/ pid >'G' statement SE4 searcpat ^ public LO/ pid >'G' statement drop table if e2ists brances LO/ pid >'G' statement create table brances8bid int not null,bbalance int,filler car8BB:: it 8fillfactor^=DD: LO/ pid >'G' statement drop table if e2ists tellers LO/ pid >'G' statement create table tellers8tid int not null,bid int,tbalance int,filler car8B>:: it 8fillfactor^=DD: LO/ pid >'G' statement drop table if e2ists accounts LO/ pid >'G' statement create table accounts8aid int not null,bid int,abalance int,filler car8B>:: it 8fillfactor^=DD: LO/ pid >'G' statement drop table if e2ists istory LO/ pid >'G' statement create table istory8tid int,bid int,aid int,delta int,mtime timestamp,filler car8:: LO/ pid >'G' statement begin LO/ pid >'G' statement insert into brances8bid,bbalance: %alues8=,D: LO/ pid >'G' statement insert into tellers8tid,bid,tbalance: %alues 8=,=,D: LO/ pid >'G' statement insert into tellers8tid,bid,tbalance: %alues 8,=,D: LO/ pid >'G' statement insert into tellers8tid,bid,tbalance: %alues 8',=,D: LO/ pid >'G' statement insert into tellers8tid,bid,tbalance: %alues 8>,=,D: LO/ pid >'G' statement insert into tellers8tid,bid,tbalance: %alues 8F,=,D: LO/ pid >'G' statement insert into tellers8tid,bid,tbalance: %alues 8G,=,D: LO/ pid >'G' statement insert into tellers8tid,bid,tbalance: %alues 8&,=,D: LO/ pid >'G' statement insert into tellers8tid,bid,tbalance: %alues 8B,=,D: LO/ pid >'G' statement insert into tellers8tid,bid,tbalance: %alues 8K,=,D: LO/ pid >'G' statement insert into tellers8tid,bid,tbalance: %alues 8=D,=,D: LO/ pid >'G' statement commit LO/ pid >'G' statement begin LO/ pid >'G' statement truncate accounts LO/ pid >'G' statement copy accounts from stdin LO/ pid >'G' statement commit LO/ pid >'G' statement alter table brances add primary 7ey 8bid: LO/ pid >'G' statement alter table tellers add primary 7ey 8tid: LO/ pid >'G' statement alter table accounts add primary 7ey 8aid: LO/ pid >'G' statement %acuum analy$e LO/ pid >'G' statement -ESE4 ALL LO/ pid >'G' statement SE4 SESSION A64O-I_A4ION)ECA6L4
on un sencillo script %amos a contar el n?mero de registros insertados en cada instancia de PostgreSQL sin pasar por pgpool3II, de modo #ue podamos %erificar #ue la replicación se a reali$ado correctamente [5bin5s
P/SQL^5usr5bin5ps#l EA)^5usr5bin5ead 4AIL^5usr5bin5tail
64^5usr5bin5cut IPLIS4^J=K.=GB.D.' =K.=GB.D.>J PO-4^F>'
for ip in TIPLIS4 do eco Jip address TipJ for t in brances tellers accounts istory do eco 3n Jtable Tt J O6N4^hTP/SQL 3 Tip 3p TPO-4 36 pgpool 3d bencreplication 3c JSELE4 count89: C-O+ TtJ TEA) 3n ' T4AIL 3n =h eco TO6N4 done done
e2it D
Para poder %er cómo se balancean las consultas, teniendo acti%ada la directi%a logstatement ^ all en 5etc5postgres#l5B.'5main5postgres#l.conf de ambos PostgreSQL, podemos utili$ar el siguiente script para %er #u1 consultas aparecen en el log de cada nodo [5bin5s
P/SQL^5usr5bin5ps#l EA)^5usr5bin5ead 4AIL^5usr5bin5tail 64^5usr5bin5cut IPLIS4^J=K.=GB.D.'J PO-4^KKKK
for ip in TIPLIS4 do eco Jip address TipJ for t in brances tellers accounts istory do eco 3n Jtable Tt J O6N4^hTP/SQL 3 Tip 3p TPO-4 36 pgpool 3d bencreplication 3c JSELE4 count89: C-O+ TtJ TEA) 3n ' T4AIL 3n =h eco TO6N4 done done
e2it D
En media, deber"an aberse e(ecutado dos 8de las cuatro: consultas SELE4 en cada una de las bases de datos, si bien esto no tiene por#u1 ser siempre as".
A continuación pasaremos a e(ecutar el bencmar7 básico de pgbenc, de modo #ue podamos apreciar el comportamiento del cl?ster ba(o continuas inserciones, actuali$aciones y consultas. )esde la consola e(ecutaremos 5usr5lib5postgres#l5B.'5bin5pgbenc 3 pgs#l= 3p KKKK 36 pgpool 3d bencreplication 3c =D 3t =DDD
El resultado obtenido será similar al siguiente ;..< transaction type 4P3* 8sort of : scaling factor = number of clients = number of transactions per client =D number of transactions actually processed =D5=D tps ^ ==K.=DF&F> 8including connections establising: tps ^ =G.=&K&B= 8e2cluding connections establising:
Si monitori$amos el log de pgpool3II en 5%ar5log5syslog y los logs de ambas instancias de PostgreSQL, %eremos como en el primer nodo se e(ecutan todas las consultas 8update, select, update, update, insert: mientras #ue en el segundo sólo las insert y las update. Esto se debe a #ue cada transacción está e2pl"citamente declarada 8*E/IN...EN): y, en ese caso, pgpool3II no ace uso más #ue del nodo principal.
-ecuperación en l"nea El procedimiento de recuperación en l"nea de un nodo 8del ingl1s, online reco%ery: permite %ol%er a conectar nodos ca"dos al cl?ster. Es re#uisito, por lo tanto, #ue el nodo est1 desconectado o ca"do 8del ingl1s, dettaced: antes de e(ecutar este procedimiento 8%er comandos pcp más adelante:. En t1rminos generales, el proceso de recuperación sigue los siguientes pasos Acti%ar el comando de arci%ado de ficeros MAL. +odificar el ficero 5etc5postgres#l5B.'5main5postgres#l.conf. -ecargar la configuración de PostgreSQL. E(ecución de 5opt5pgpool5bin5pcpreco%erynode. Primera fase copia del directorio base. Segunda fase sincroni$ación de cambios. 4ercera fase arran#ue del nue%o ser%idor. •
•
•
•
•
•
•
El Mrite3Aead Log A partir de su %ersión B, PostgreSQL almacena todas las operaciones #ue alteran los datos y los metadatos de la base de datos en forma de logs binarios en el directorio 5%ar5lib5postgres#l5B.'5pg2log. Estos logs se escriben y sincroni$an en disco antes de #ue se alteren los ficeros de las tablas 8de a" su nombre, Mrite3Aead Log o MAL: y su función principal es la recuperación a un estado consistente de forma automática 8de a" su nombre, Point3In34ime -eco%ery o PI4-: en caso de fallo del sistema por rotura de un disco, muerte de un proceso, etc. Su funcionamiento es análogo al del (ournaling de un sistema de ficeros. ada uno de estos ficeros tiene un tama0o de =G +* y PostgreSQL los rota y reutili$a automáticamente 8almacena un má2imo de B ficeros por defecto:. El uso de estos logs binarios %iene acti%ado por defecto en PostgreSQL, pero no su arci%ado 8copia a otra ubicación:. )ebido a la forma en #ue se reali$a la recuperación en l"nea de un nodo con pgpool3II, en realidad no es necesario tener una copia de todos los ficeros del MAL #ue se %ayan generando, de a" #ue se use un comando nulo durante la operación rutinaria del ser%idor. Además, el arci%ado de ficeros del MAL abitualmente supone un importante impacto en el rendimiento del ser%idor.
Para este art"culo suponemos suficiente el uso de pgdump una %e$ al d"a como mecanismo de copias de seguridad de los datos, luego no se estará aciendo uso de MAL y PI4- como mecanismo de bac7up, sino #ue se utili$ará ?nicamente para la recuperación online de un nodo. Por lo tanto, durante la operación normal del cl?ster, 1ste debe estar acti%o pero con un comando de arci%ado nulo #ue no aga copia alguna de los ficeros de log rotados, tal #ue arci%emode ^ on arci%ecommand ^ e2it D [ arci%ecommand ^ 5bin5cp Vp 5%ar5lib5postgres#l5pg2logarci%e5Vf
sto es as" debido a #ue no puede acti%arse o desacti%arse el uso de ficeros MAL por parte de PostgreSQL sin reiniciar 8acción #ue #ueremos e%itar en lare#uiere medida tan de losólo posible:, mientras cambiar el comando #ueelseser%icio usa para el arci%ado de dicos ficeros una solicitud de#ue recarga de la configuración al daemon de PostgreSQL. Seg?n se especifica en la documentación en l"nea de PostgreSQL, es necesario #ue todo comando de arci%ado de%uel%a el %alor D en caso de e(ecución correcta y cual#uier otro %alor en caso contrario, de a" #ue se aya optado por un simple Je2it DJ. Procedimiento completo 6na %e$ introducidos los conceptos a utili$ar, acto seguido se detalla el procedimiento completo de restauración de un nodo ca"do. omo paso pre%io acti%aremos el comando de arci%ado de ficeros MAL en el nodo maestro. Para ello, editaremos el ficero de configuración 5etc5postgres#l5B.'5main5postgres#l.conf y cambiaremos el %alor de la directi%a arci%ecommand, seg?n sigue arci%emode ^ on [ arci%ecommand ^ e2it D arci%ecommand ^ 5bin5cp Vp 5%ar5lib5postgres#l5pg2logarci%e5Vf
Luego solicitaremos al daemon de PostgreSQL #ue recargue la configuración mediante el siguiente comando 5etc5init.d5postgres#l3B.' reload
En el nodo a recuperar, donde PostgreSQL debe estar parado, de(aremos la configuración srcinal 8comando de arci%ado nulo:, pues no es necesario para una PI4-. El siguiente paso es acer una llamada al comando pcpreco%erynode, tal #ue 5opt5pgpool5bin5pcpreco%erynode F pgs#l= KBKB root =
En este e(emplo, la llamada se efect?a con los siguientes parámetros •
•
•
•
6n timeout de F segundos. Sobre el puerto KBKB. Al primer nodo del cl?ster, Jpgs#l=J, actuando en estos momentos como maestro. Solicitando la recuperación del segundo nodo 8el conteo empie$a por el D:.
)ebido a #ue parten de una llamada a un procedimiento almacenado de base de datos, todas las acciones #ue se reali$an a ra"$ de esta llamada se e(ecutan como usuario de sistema postgres. )i%ididas en tres fases, se detallan a continuación. Primera fase pgpool3II e(ecuta SELE4 pgpoolreco%ery8reco%ery=ststagecommand, target, P/)A4A: en un nodo maestro. Esto produce una llamada al script 5%ar5lib5postgres#l5B.'5main5base3bac7up. )urante la e(ecución de este script se siguen atendiendo peticiones de los clientes 8#ue PostgreSQL irá almacenando en su bitácora:.
Los %alores de los tres parámetros de la llamada se obtienen del ficero 5opt5pgpool5etc5pgpool.conf. El primero de la directi%a reco%ery=ststagecommand el segundo de la directi%a bac7endostname correspondiente al nodo a recuperar y el tercero de la directi%a bac7enddatadirectory correspondiente al nodo a recuperar. En primer lugar, este script genera un ficero llamado reco%ery.conf, #ue sit?a dentro del directorio P/)A4A 85%ar5lib5postgres#l5B.'5main en )ebian:. Este ficero se crea en esa ubicación para #ue sea transferido al nodo a recuperar más adelante en este mismo script. uando el ser%idor PostgreSQL del nodo a recuperar arran#ue y realice una recuperación PI4-, leerá ese ficero y e(ecutará el %alor de la %ariable restorecommandtantas %eces como sea necesario para obtener los ficeros MAL #ue le permitirán llegar desde el punto en la bitácora donde finali$ó la copia de seguridad online asta el momento en el cual se de(aron de atender peticiones 8segunda fase de la recuperación online de un nodo:. El srcen de esos ficeros MAL será el directorio 5%ar5lib5postgres#l5pg2logarci%e del nodo maestro, #ue es donde el comando de la directi%a arci%ecommand copia los ficeros MAL #ue se %an rotando. )urante la e(ecución de este script, pgpool3II sigue antendiendo peticiones de los clientes, de a" #ue se inicie un bac7up online de PostgreSQL antes de empe$ar la copia. )e este modo, las diferencias entre ambos nodos cuando el script aya terminado su e(ecución serán tan sólo los ficeros MAL generados durante su e(ecución, #ue abrán sido arci%ados en un directorio aparte 85%ar5lib5postgres#l5pg2logarci%e: para e%itar #ue más de B rotaciones de logs durante la e(ecución del script sobreescriban ficeros MAL 8en el caso de muca acti%idad en el ser%idor o de tener un %olumen de datos a copiar muy grande, o de ambas:. En segundo lugar, este script indica a PostgreSQL #ue se %a a iniciar una copia de seguridad online mediante la e(ecución de la consulta SELE4 pgstartbac7up8eti#ueta: en un nodo maestro. Esto, a su %e$, fuer$a un EUPOIN4. 6n cec7point es un punto en la secuencia del log de transacciones a partir del cual todos los ficeros de datos an sido actuali$ados para refle(ar la información en el log o bitácora. 4odos los ficeros de datos serán escritos en disco. 6n cec7point act?a como punto de inicio para una recuperación PI4-. Es decir, un cec7point más un con(unto de ficeros MAL es todo lo #ue se necesita para recuperar una base de datos PostgreSQL a un estado consistente, mediante el mecanismo de PI4-. En tercer lugar, el script reali$a una copia del directorio 5%ar5lib5postgres#l5B.'5main desde el nodo maestro al nodo a recuperar mediante el uso de %arias sentencias rsync. Por ?ltimo, el script indica a PostgreSQL #ue ya a terminado el bac7up online mediante la e(ecución de la sentencia SELE4 pgstopbac7up8:. 4ras la anotación del punto donde finali$a el bac7up, el puntero de inserción del ficero de log actual se despla$a al siguiente ficero de log, de modo #ue el ficero actual puede rotarse y arci%arse, completándose as" la copia de seguridad. Segunda fase 6na %e$ finali$ada la copia del directorio base, pgpool3II de(a de atender las peticiones de los clientes, #uedando 1stas acumuladas en una cola de peticiones pendientes de atender, y finali$a las #ue estu%ieran en e(ecución 8durante un tiempo má2imo definido en la directi%a clientidlelimitinreco%ery:. Luego pgpool3II e(ecuta SELE4 pgpoolreco%ery8reco%eryndstagecommand, target, P/)A4A:en un nodo maestro. Esto produce una llamada al script 5%ar5lib5postgres#l5B.'5main5pgpool3reco%ery3pitr. Los %alores de los tres parámetros de la llamada se obtienen del ficero 5opt5pgpool5etc5pgpool.conf. El primero de la directi%a reco%eryndstagecommand el segundo de la directi%a bac7endostname correspondiente al nodo a recuperar y el tercero de la directi%a bac7enddatadirectory correspondiente al nodo a recuperar.
Este script fuer$a una rotación de ficeros MAL mediante la e(ecución de la sentencia SQL SELE4 pgsitc2log8:. Esta rotación de ficeros MAL se reali$a en este instante 8tras aber de(ado de atender peticiones de clientes: a fin de generar un estado inalterado de la base de datos #ue pueda ser recuperado por el nue%o nodo a partir del bac7up del directorio base más los ficeros MAL generados por sucesi%as rotaciones desde el inicio del bac7up asta esta ?ltima rotación e2pl"cita:. 4ercera fase pgpool3II e(ecuta SELE4 pgpoolremotestart8target, P/)A4A: en el nodo maestro. Esto produce una llamada al script 5%ar5lib5postgres#l5B.'5main5pgpoolremotestart. Los %alores de los dos parámetros de la llamada se obtienen del ficero 5opt5pgpool5etc5pgpool.conf. El primero de la directi%a bac7endostname correspondiente al nodo a recuperar y el segundo de la directi%a bac7enddatadirectory correspondiente al nodo a recuperar. El nombre del script a recuperar está incluido en el código fuente del ficero 5usr5local5src5pgpool3II3..5s#l5pgpool3reco%ery y, si se desea cambiar, debe alterarse antes de compilar e instalar. Este script arranca PostgreSQL en el nodo #ue se está recuperando mediante una llamada al binario 5usr5bin5pgctlcluster, y PostgreSQL ace una recuperación PI4- al arrancar. El tiempo de espera para el arran#ue no será superior a lo #ue indi#ue la directi%a reco%erytimeout 8en segundos: del ficero 5opt5pgpool5etc5pgpool.conf. 6na %e$ finali$ado el proceso de PI4-, el nodo de PostgreSQL recuperado acepta cone2iones de nue%o. pgpool3II se conecta al nue%o nodo y, a partir de este momento, el nodo forma parte del cl?ster de nue%o. El cl?ster opera de nue%o con normalidad, todas las bases de datos son accesibles de nue%o y se procesan las peticiones acumuladas durante la segunda y tercera fases de la recuperación en l"nea. Pasos finales 6na %e$ finali$ada la recuperación, y abiendo comprobado el correcto funcionamiento del cl?ster con su nue%o nodo, procederemos a desacti%ar el comando de arci%ado de ficeros MAL del nodo maestro, alterando el ficero de configuración 5etc5postgres#l5B.'5main5postgres#l.conf y de(ando el %alor nulo e2it D del parámetro, tal y como estaba antes de iniciar el procedimiento y solicitaremos una recarga de la configuración. En este momento, nuestro cl?ster acaba de finali$ar la operación llamada failbac7, es decir, se a recuperado de una operación de failo%er #ue se inició al detectar #ue uno de los nodos no estaba disponible. pgpool3II permite configurar sendos scripts para #ue sean e(ecutados al iniciarse y finali$ar, respecti%amente, los e%entos de failo%er y failbac7. Estas directi%as se encuentran en el ficero de configuración 5opt5pgpool5etc5pgpool.conf y son las siguientes failo%ercommand ^ failbac7command ^
En el apartado siguiente se ofrecen e(emplos de scripts #ue reali$an todas las tareas descritas anteriormente. Scripts necesarios En este apartado se muestran %arios scripts #ue son necesarios para reali$ar la recuperación en l"nea de un nodo. La documentación de pgpool3II describe los pasos espec"ficos a seguir, #ue %ar"an dependiendo de la %ersión de PostgreSQL #ue estemos usando y de las erramientas de sistema de #ue dispongamos, pero de(a a discreción del administrador de sistemas su implementación. omo en mucos casos, no ay una ?nica solución #ue se a(uste a todos los casos. Listados en orden de e(ecución, los scripts necesarios son los siguientes •
pgpool3failo%er
•
•
•
•
•
allarci%ing base3bac7up pgpool3reco%ery3pitr pgpoolremotestart pgpool3failbac7
4odos ellos deben residir en el directorio de datos de PostgreSQL 85%ar5lib5postgres#l5B.'5main: de todos los nodos. El script allarci%ing lo e(ecutaremos manualmente antes de empe$ar la recuperación del nodo y tras finali$ar la misma, bien como usuario root, bien como usuario postgres. Los scripts base3bac7up y pgpool3reco%ery3pitr reciben tres parámetros, en este orden =. )irectorio de datos de srcen 8TP/)A4A:. . Nombre del ost a recuperar 8TP/OS4:. '. )irectorio de datos de destino 8TP/)A4A:. El script pgpoolremotestart recibe sólo los dos ?ltimos. Los tres scripts se e(ecutan en alg?n nodo maestro del cual pgpool3II tenga constancia y est1 acti%o 8conste como attaced:, y corren como usuario postgres. Por ?ltimo, los scripts pgpool3failo%er y pgpool3failbac7, tambi1n e(ecutados como usuario postgres, reciben un con(unto de parámetros, en el orden elegido por el usuario, de entre los siguientes •
•
•
•
•
•
Vd identificador de nodo. V nombre del ost. Vp puerto. V) ruta al directorio de datos del cl?ster Vm identificador del nue%o nodo maestro. V+ identificador del nodo maestro antiguo.
Para escapar el carácter de porcenta(e 8V: se usa otro porcenta(e 8VV:. Estos parámetros se configuran en la propia llamada al script deseado en la configuración de pgpool3II 8ficero 5opt5pgpool5etc5pgpool.conf:. Por e(emplo, para este art"culo se configuraron de la siguiente manera failo%ercommand ^ 5%ar5lib5postgres#l5B.'5main5pgpool3failo%er Vd V Vp V) Vm V+ failbac7command ^ 5%ar5lib5postgres#l5B.'5main5pgpool3failbac7 Vd V Vp V) Vm V+
Los %alores Vm 8identificador del nue%o nodo maestro: y V+ 8identificador del nodo maestro antiguo: tienen muco %alor cuando el nodo #ue cae 8durante un failo%er: es el nodo maestro y pgpool3II decide, a partir de a#uel momento, considerar otro nodo 8antes escla%o: como nue%o nodo maestro. En todos los casos, los parámetros pasados por pgpool3II al script #ue se est1 llamando se reciben como parámetros de la manera abitual, tratándose como en cual#uier otro caso y de la forma pertinente dependiendo del lenguage de scripting utili$ado. alarci%ing El proceso de acti%ación y desacti%ación del comando de arci%ado puede automati$arse mediante scripts de *as, Perl o similar, e incluso integrarse dentro de la primera y ?ltima fases de la recuperación. En realidad, es una cuestión de gustos más #ue otra cosa. Personalmente, prefiero tenerlos por separado y e(ecutarlos manualmente. A continuación se muestra un script de *as #ue reali$a dica función
[5bin5s
SE)^5bin5sed PSQL^5usr5bin5ps#l P/)I-^J5etc5postgres#l5B.'5mainJ P/ONC^Jpostgres#l.confJ 6NA+E^5bin5uname OS4^hT6NA+E 3nh
test 32 TPSQL e2it D test 3f TP/)I-5TP/ONC e2it D case JT=J in start: eco 3n JActi%ating MAL arci%ing J TSE) 3r 3e Js5s9arci%ecommands9^.95arci%ecommand ^ 5bin5cp Vp 5%ar5lib5postgres#l5pg2logarci%e5 Vf5J TP/)I-5TP/ONC @ 5tmp5TP/ONC cmod G>> 5tmp5TP/ONC m% 33force 5tmp5TP/ONC TP/)I-5 5etc5init.d5postgres#l3B.' reload @= @ 5de%5null eco Jdone.J
stop: eco 3n J)eacti%ating MAL arci%ing J TSE) 3r 3e Js5s9arci%ecommands9^.95arci%ecommand ^ e2it D5J TP/)I-5TP/ONC @ 5tmp5TP/ONC cmod G>> 5tmp5TP/ONC m% 33force 5tmp5TP/ONC TP/)I-5 5etc5init.d5postgres#l3B.' reload @= @ 5de%5null eco Jdone.J
status: [ Alternate ay SELE4 setting C-O+ pgsettings ME-E name ^ arci%ecommand am^hTPSQL 3t 36 pgpool 3 TOS4 3d postgres 3c SOM arci%emode TSE) 3r 3e s5s955s5s9T55h ac^hTPSQL 3t 36 pgpool 3 TOS4 3d postgres 3c SOM arci%ecommand TSE) 3r 3e s5s955s5s9T55h eco Jarci%emode ^ TamJ eco Jarci%ecommand ^ TacJ
9: eco J6sage TD startstopstatusJ e2it =
esac
e2it D
Este script podr"a crearse en 5%ar5lib5postgres#l5B.'5main5allarci%ing 8propiedad del usuario y grupo postgres y permisos &FF: ser"a llamado como usuario root o postgres pasándole por parámetro start, stop o status. Por e(emplo T 5%ar5lib5postgres#l5B.'5main5allarci%ing 6sage 5%ar5lib5postgres#l5B.'5main5allarci%ing startstopstatus T 5%ar5lib5postgres#l5B.'5main5alarci%ing status arci%emode ^ on arci%ecommand ^ e2it D T 5%ar5lib5postgres#l5B.'5main5alarci%ing start Acti%ating MAL arci%ing done. T 5%ar5lib5postgres#l5B.'5main5alarci%ing stop )eacti%ating MAL arci%ing done. T tail 3n 5%ar5log5postgres#l5postgres#l3B.'3main.log cc$e 3A LO/ incomplete startup pac7et LO/ recei%ed SI/6P, reloading configuration files
pgpool3failo%er En t1rminos generales, el mecanismo de failo%er permite asegurar la alta disponibilidad de di%ersos recursos cr"ticos 8como un sistema informático o un ser%icio de un sistema: incluyendo un sistema de respaldo paralelo #ue se mantiene en e(ecución en todo momento, de modo #ue, en caso de detectarse un fallo en el sistema primario, las tareas a procesar puedan ser automáticamente des%iadas acia el sistema de respaldo, #ue seguirá dando ser%icio a los clientes. En este art"culo se configura un cl?ster acti%o3pasi%o 8primario3secundario:, con la sal%edad de #ue se ace uso tambi1n del nodo secundario de forma parcial para acelerar las consultas de tipo SELE4 8balanceo de carga:. El procedimiento de failo%er en pgpool3II puede suponer tanto un failo%er acia el nodo secundario 8si a fallado el primario: como una degeneración del nodo secundario 8desacti%ación del nodo de respaldo:. En el caso de aber más de un nodo secundario, lo arriba e2puesto no %ar"a pues sólo ay un nodo maestro. El siguiente script en%"a dos entradas al syslog, #ue luego pueden ser capturadas por una erramienta de monitori$ación como _abbi2 o Nagios, las cuales en%iar"an las alertas pertinentes. Este es un acercamiento #ue utili$o normalmente, alternati%o al tradicional en%"o de una notificación por correo electrónico. [ 5bin5s
LO//E-^J5usr5bin5logger 3i 3p localD.info 3t pgpoolJ *ASENA+E^h5usr5bin5basename TDh I)^h5usr5bin5id 3unh
[ T= ^ node id [ T ^ ost name [ T' ^ port number [ T> ^ database cluster pat
[ TF ^ ne master node id [ TG ^ old master node id
TLO//E- JE2ecuting T*ASENA+E as user TI)J TLO//E- JCailo%er of node T= at ostname T. Ne master node is TF. Old master node as TG.J
e2it D
pgpool3II e(ecuta este script como usuario postgres al final del proceso, una %e$ se a completado la degeneración del nodo. pgpool3failbac7 Análogamente, failbac7 es el proceso mediante el cual se de%uel%e un sistema, componente o ser%icio en un estado de failo%er a su estado srcinal 8antes del fallo:. pgpool3II e(ecuta el script configurado como usuario postgres una %e$ concluido el procedimiento de failbac7, es decir, la recuperación en l"nea de un nodo en tres pasos. )el mismo modo #ue el caso del failo%er, a continuación se muestra un sencillo script de *as #ue a0ade una entrada al syslog, de modo #ue pueda ser capturada por una erramienta de monitori$ación de logs #ue en%"e las alertas pertinentes. [ 5bin5s
LO//E-^J5usr5bin5logger 3i 3p localD.info 3t pgpoolJ *ASENA+E^h5usr5bin5basename TDh I)^h5usr5bin5id 3unh
[ T= ^ node id [ T ^ ost name [ T' ^ port number [ T> ^ database cluster pat [ TF ^ ne master node id [ TG ^ old master node id
TLO//E- JE2ecuting T*ASENA+E as user TI)J TLO//E- JCailbac7 of node T= at ostname T. Ne master node is TF. Old master node as TG.J
e2it D
base3bac7up )e entre todas las tareas a reali$ar por parte del script base3bac7up, la ?nica #ue está su(eta a %ariación en su implementación es la copia inicial de todo el directorio de datos de PostgreSQL 8TP/)A4A, #ue en )ebian es 5%ar5lib5postgres#l5B.'5main: desde el nodo maestro al nodo a recuperar. En el caso del script #ue se presenta a continuación, la erramienta elegida es rsync sobre un t?nel SS con un par de cla%es p?blica5pri%ada )SA de =D> bits sin contrase0a. Esta elección se basa en dos puntos •
La eficiencia de rsync 8impacto sobre los discos frente al tiempo necesario:, si bien el uso de un canal cifrado ralenti$a el proceso.
•
La mayor parte de los datos a copiar ya e2istirán en el nodo a recuperar. Podemos considerar #ue esta premisa será falsa ?nicamente en el caso de #ue el moti%o de la ca"da del nodo ubiera sido la rotura de los discos.
A continuación se presenta un script de e(emplo [5bin5s
PSQL^5usr5bin5ps#l SP^5usr5bin5scp SS^5usr5bin5ss LO//E-^J5usr5bin5logger 3i 3p localD.info 3t pgpoolJ -SRN^J5usr5bin5rsync 33arci%e 33#uiet 33compress 33rs^TSS 33deleteJ *ASENA+E^h5usr5bin5basename TDh OS4NA+E^h5bin5ostnameh I)^h5usr5bin5id 3unh
[ T= ^ )atabase cluster pat of a master node. [ T ^ ostname of a reco%ery target node. [ T' ^ )atabase cluster pat of a reco%ery target node.
P/O+E^5%ar5lib5postgres#l S-)A4A^T= )S4OS4^T )S4)A4A^T'
TLO//E- JE2ecuting T*ASENA+E as user TI)J
TLO//E- JE2ecuting pgstartbac7upJ TPSQL 3d postgres 3c Jselect pgstartbac7up8pgpool3reco%ery:J
TLO//E- Jreating file reco%ery.confJ eco Jrestorecommand ^ TSP TOS4NA+ETP/O+E5pg2logarci%e5Vf VpJ @ TS-)A4A5reco%ery.conf
TLO//E- J-syncing directory baseJ T-SRN TS-)A4A5base5 T)S4OS4T)S4)A4A5base5 TLO//E- J-syncing directory globalJ T-SRN TS-)A4A5global5 T)S4OS4T)S4)A4A5global5 TLO//E- J-syncing directory pgclogJ T-SRN TS-)A4A5pgclog5 T)S4OS4T)S4)A4A5pgclog5 TLO//E- J-syncing directory pgmulti2actJ T-SRN TS-)A4A5pgmulti2act5 T)S4OS4T)S4)A4A5pgmulti2act5 TLO//E- J-syncing directory pgsubtransJ T-SRN TS-)A4A5pgsubtrans5 T)S4OS4T)S4)A4A5pgsubtrans5 TLO//E- J-syncing directory pgtblspcJ T-SRN TS-)A4A5pgtblspc5 T)S4OS4T)S4)A4A5pgtblspc5 TLO//E- J-syncing directory pgtopaseJ T-SRN TS-)A4A5pgtopase5 T)S4OS4T)S4)A4A5pgtopase5 TLO//E- J-syncing directory pg2logJ T-SRN TS-)A4A5pg2log5 T)S4OS4T)S4)A4A5pg2log5
TLO//E- J-syncing file reco%ery.conf 8it source deletion:J T-SRN 33remo%e3source3files TS-)A4A5reco%ery.conf T)S4OS4T)S4)A4A5
TLO//E- JE2ecuting pgstopbac7upJ TPSQL 3d postgres 3c select pgstopbac7up8:
e2it D
pgpool3reco%ery3pitr El ?nico propósito de este script es for$ar la rotación de un ficero MAL 8y su consecuente arci%ado al directorio 5%ar5lib5postgres#l5pg2logarci%e:. El script pgpool3reco%ery3pitr se e(ecuta una %e$ se an de(ado de atender nue%as peticiones de clientes 8#ue #uedan en una cola de peticiones pendientes de atender: y se an atendido las #ue estaban en curso 8o se a llegado al timeout y se an desecado:. A continuación se presenta un script de e(emplo [ 5bin5s
PSQL^5usr5bin5ps#l LO//E-^J5usr5bin5logger 3i 3p localD.info 3t pgpoolJ *ASENA+E^h5usr5bin5basename TDh I)^h5usr5bin5id 3unh
TLO//E- JE2ecuting T*ASENA+E as user TI)J TLO//E- JE2ecuting pgsitc2logJ TPSQL 3d postgres 3c select pgsitc2log8: e2it D
pgpoolremotestart La función del script pgpoolremotestart es la de arrancar remotamente la instancia de PostgreSQL en el nodo a recuperar. Para poder utili$ar el mismo usuario postgres y su par de cla%es p?blica5pri%ada, e optado por acer una llamada a tra%1s de SS directamente al binario 5usr5bin5pgctlcluster. Nótese #ue el script de arran#ue sito en 5etc5init.d5postgres#l3B.' reali$a la misma llamada, pero precedida de una serie de %erificaciones #ue, en este caso, asumimos como correctas 8básicamente #ue se dispone de todos los binarios y librer"as necesarios y #ue no ay una instancia ya e(ecutándose: [ 5bin5s
SS^5usr5bin5ss LO//E-^J5usr5bin5logger 3i 3p localD.info 3t pgpoolJ *ASENA+E^h5usr5bin5basename TDh I)^h5usr5bin5id 3unh
)S4OS4^T= )S4)I-^T
TLO//E- JE2ecuting T*ASENA+E as user TI)J TLO//E- JStarting remote PostgreSQL ser%erJ
TSS 34 T)S4OS4 5usr5bin5pgctlcluster B.' main start @5de%5null =@5de%5null
e2it D
omandos de PP pgpool3II proporciona una interfa$ de control desde la consola mediante la cual el administrador puede recoger el estado de pgpool3II y gestionar sus procesos a tra%1s de la red. 4odos los comandos PP siguen el mismo patrón comandopcp@ timeout@ ostname@ puerto@ username@ passord@ ;n?mnodo@<
El n?mero de nodo es necesario sólo en algunos comandos. 4odos los comandos se encuentran en 5opt5pgpool5bin, por lo #ue se eliminará esta ruta en todos los e(emplos 8#ueda a discreción del usuario a0adir dico directorio al PA4 o preceder los comandos con la misma:. El ostname será siempre el de la má#uina donde se est1 e(ecutando pgpool3II y el puerto el KBKB. El usuario y la contrase0a serán los definidos en el ficero 5opt5pgpool5etc5pcp.conf. A continuación se muestra el funcionamiento de algunos de estos comandos, utili$ados para la gestión del cl?ster e2plicado en el art"culo. Para saber el n?mero de nodos controlados por pgpool3II 8acti%os o no:, podemos e(ecutar el siguiente comando pcpnodecount F pgs#l= KBKB root passord@
Nos de%ol%erá un n?mero entero mayor o igual #ue cero. Es ?til a la ora de crear scripts. Para saber el estado de un nodo podemos usar el siguiente comando pcpnodeinfo F pgs#l= KBKB root passord@ n?mnodo@
El ?ltimo parámetro será el n?mero de nodo del cuál se desea información. 41ngase en cuenta #ue se empie$a a contar por el cero. La salida del comando ofrece cuatro campos, en este orden =. . '. >.
Nombre del ost N?mero de puerto Estado Peso en el balanceo de carga
El estado %iene representado por un d"gito de D a ' D. =. . '.
Este estado se usa ?nicamente durante la iniciali$ación y PP no lo mostrará nunca. El nodo está acti%o pero no a recibido cone2iones toda%"a. El nodo está acti%o y ay cone2iones acti%as 8en el pool o fondo com?n:. El nodo está ca"do.
eo,err nomemerr readerr riteerr timeouterr inalerr connerr noconnerr soc%err
2 3 4 5 6 " 1)
Bosterr 11 bac%enderr 12 autBerr 13
error de ,in de ,icBero 0end o, ,ile memoria insu,iciente error durante la lectura de datos del seridor error durante la escritura de datos al seridor timeout parPmetros del comando pcp incorrectos error de cone>in con el seridor no e>iste ninguna cone>in error desoc%et error de resolucin del nombre de Bost error de proceso de p cp en el seridor 0se esp eci,ic un id inPlido S etc. error de autori8acin
Simulación de ca"da y recuperación de un nodo Para simular la ca"da de un nodo, %amos a apagar el ser%idor PostgreSQL del nodo secundario 5etc5init.d5postgres#l3B.' stop
En estos instantes, lo más probable es #ue pgpool3II a?n no se aya dado cuenta de #ue ese nodo está ca"do. *ien podemos esperar a #ue se e(ecute un ealt cec7 8cada GD segundos o seg?n se aya configurado la directi%a ealtcec7period: o podemos for$arlo manualmente lan$ando una consulta SQL de tipo INSE-4, 6P)A4E o )ELE4E. En cual#uier caso, %eremos aparecer las siguientes l"neas en el 5%ar5log5syslog E--O- pid &KB connectinetdomainsoc7et connect8: failed onnection refused E--O- pid &KB ealt cec7 failed. = t ost =K.=GB.D.> at port F>' is don LO/ pid &KB set = t bac7end don status LO/ pid &KB starting degeneration.sutdon ost =K.=GB.D.>8F>': LO/ pid &KB failo%erandler do not restart pgpool. same master node D as selected LO/ pid &KB failo%er done. sutdon ost =K.=GB.D.>8F>':
on la consulta SQL siguiente obtendremos el mismo resultado ps#l 3 =K.=GB.D.> 3p KKKK 36 pgpool 3d bencreplication 3c J6P)A4E AO6N4S SE4 abalance ^ =DDK ME-E aid ^ =DJ
omo puede obser%arse en el log, para lle%ar a cabo el proceso de failo%er, pgpool3II tan sólo tiene #ue degenerar el nodo ca"do y, tal y como informa, no es necesario reinicio alguno. A efectos prácticos, lo ?nico #ue se a perdido es la capacidad de balancear la carga. ste es el caso más sencillo posible al #ue podemos enfrentarnos. Aora, para iniciar la recuperación del nodo pgs#l, reali$aremos los siguientes pasos 8seg?n lo e2plicado anteriormente en este art"culo: =. Acti%ar el arci%ado de ficeros MAL.
2. E(ecutar el comando pcpreco%erynode en el nodo D 8pgs#l=: o en alg?n cliente con autori$ación en el ficero pgba.conf.
3. )esacti%ar el arci%ado de ficeros MAL y borrar a#uellos #ue se ayan copiado al directorio 5%ar5lib5postgres#l5pg2logarci%e del nodo maestro durante el proceso. El siguiente comando instruye a pgpool3II #ue inicie el proceso de recuperación del nodo = 8pgs#l: 5opt5pgpool5bin5pcpreco%erynode F pgs#l= KBKB root passord@ =
ste es el log de pgpool3II 85%ar5log5syslog: producido por la e(ecución del anterior comando 8los comandos de failo%er y failbac7 no estaban configurados en el ficero de configuración durante la e(ecución: LO/ pid &KG> starting reco%ering node = LO/ pid &KG> EUPOIN4 in te =st stage done LO/ pid &KG> starting reco%ery command JSELE4 pgpoolreco%ery8base3bac7up, =K.=GB.D.>, 5%ar5lib 5postgres#l5B.'5main:J pgpool;BDK>< E2ecuting base3bac7up as user postgres pgpool;BDKF< E2ecuting pgstartbac7up pgpool;BDKB< reating file reco%ery.conf pgpool;BDKK< -syncing directory base pgpool;B=D'< -syncing directory global pgpool;B=DG< -syncing directory pgclog pgpool;B=DK< -syncing directory pgmulti2act pgpool;B==< -syncing directory pgsubtrans pgpool;B==F< -syncing directory pgtblspc pgpool;B==B< -syncing directory pgtopase pgpool;B==< -syncing directory pg2log pgpool;B=>< -syncing file reco%ery.conf 8it source deletion: pgpool;B=&< E2ecuting pgstopbac7up LO/ pid &KG> =st stage is done LO/ pid &KG> starting nd stage LO/ pid &KG> all connections from clients a%e been closed LO/ pid &KG> EUPOIN4 in te nd stage done LO/ pid &KG> starting reco%ery command JSELE4 pgpoolreco%ery8pgpool3reco%ery3pitr, =K.=GB.D.>, 5%ar5lib5postgres#l5B.'5main:J pgpool;B='B< E2ecuting pgpool3reco%ery3pitr as user postgres pgpool;B=>&< E2ecuting pgpoolremotestart as user postgres pgpool;B=>B< Starting remote PostgreSQL ser%er LO/ pid &KG> = node restarted LO/ pid &KG> sendfailbac7re#uest fail bac7 = t node re#uest from pid &KG> LO/ pid &KG> reco%ery done LO/ pid &KB starting fail bac7. reconnect ost =K.=GB.D.>8F>': LO/ pid &KB failo%erandler do not restart pgpool. same master node D as selected LO/ pid &KB failbac7 done. reconnect ost =K.=GB.D.>8F>':
4al y como podemos %er en el log, pgpool3II reali$a las siguientes acciones •
•
•
•
•
•
•
•
ace un cec7point de la base de datos. Este cec7point en realidad no es necesario, pues ya lo lan$a el propio pgstartbac7up #ue se e(ecuta al principio del script base3bac7up, pero está a#u" por compatibilidad con PostgreSQL &.>. E(ecuta el script base3bac7up 8primera fase de la recuperación en l"nea: mediante la e(ecución de la función pgpoolreco%ery a0adida durante la configuración de pgpool3II. )urante la e(ecución de este ficero, sigue aceptando y atendiendo peticiones de los clientes. orta las nue%as cone2iones de clientes, #ue #uedan encoladas, a la espera de poder ser atendidas. Espera a #ue se ayan atendido las peticiones #ue ya estaban en marca. -eali$a un cec7point en la base de datos 8pone fin al bac7up online:. E(ecuta el script pgpool3reco%ery3pitr 8segunda fase de la recuperación en l"nea:, tambi1n mediante la función pgpoolreco%ery. Esto fuer$a la rotación del ficero MAL actual. E(ecuta el script pgpoolremotestart. -econoce el nue%o nodo y lo a0ade al cl?ster.
•
•
•
Xuel%e a operar con normalidad, atendiendo a las peticiones #ue se ab"an ido encolando durante la segunda fase y el inicio remoto del nue%o nodo. En el caso de #ue se ayan producido %ariaciones de los datos durante la primera fase de la recuperación 8se ayan atendido consultas INSE-4, 6P)A4E o )ELE4E:, será necesario e(ecutar -EIN)EY sobre todos los "ndices de la base de datos afectados una %e$ recuperado el nodo, puesto #ue las operaciones sobre "ndices de tipo tablas de dispersión 8as: no se guardan en el MAL. Si reali$amos la misma operación con el nodo principal, el proceso de failo%er consistirá en la degeneración del nodo principal y en cambiar el papel de maestro al nodo pasi%o del cl?ster 8a partir de aora el nodo maestro será el =:. 4ras reali$ar la recuperación online, pgpool3II mantendrá al nodo secundario como maestro.
Alta disponibilidad de pgpool3II /racias a pgpool3II tenemos la posibilidad de seguir dando ser%ico tras el fallo de N3= ser%idores de PostgreSQL en nuestro cl?ster. Aora bien, si la alta disponibilidad completa es uno de los re#uerimientos 8u ob(eti%os: de nuestro sistema, debemos garanti$ar la continuidad del ser%icio en caso de ca"da del middleare. Para ello, instalaremos otra copia de pgpool3II en el nodo pgs#l, con una configuración casi id1ntica a la del ya instalado, y utili$aremos eartbeat para detectar la ca"da completa de un nodo 8no sólo del ser%idor de PostgreSQL en dico nodo: y la gestión de dico e%ento. A partir de este momento, entra en (uego una nue%a dirección IP, la =K.=GB.D., #ue es la dirección IP #ue ambos nodos compartirán y #ue eartbeat se encargará de gestionar, de modo #ue sólo uno de los nodos 8a#uel actuando como maestro: tenga configurada dica dirección IP en un momento dado. Esta dirección IP es conocida como dirección IP de ser%icio. Los pasos a seguir para instalar pgpool3II en pgs#l son los mismos #ue en pgs#l= •
•
•
•
•
*a(ar los fuentes al directorio 5usr5local5src. Instalar las dependencias de compilación. )escomprimir, compilar e instalar. ompilar e instalar la función y la librer"a pgpool3reco%ery .
•
rear los ficeros de configuración y el script de arran#ue.
Los ficeros de configuración y el script de arran#ue pueden copiarse desde pgs#l= a pgs#l. El ?nico ficero #ue precisará algunas modificaciones será 5opt5pgpool5etc5pgpool.conf. A continuación se presentan los %alores #ue abrá #ue cambiar en pgs#l listenaddresses ^ =K.=GB.D. pgpoolostname ^ pgs#l bac7endostnameD ^ =K.=GB.D.> bac7endostname= ^ =K.=GB.D.'
R en el nodo pgs#l= tan sólo abrá #ue cambiar la dirección IP de ser%icio ;código FB< ay #ue tener en cuenta #ue, si en alg?n momento el nodo pgs#l pasase a ser el nodo maestro, entonces los "ndices de los nodos se in%ertir"an, ya #ue en el pgpool3II de pgs#l los nodos están configurados al re%1s 8pgs#l= pasar"a a ser el nodo = y pgs#l ser"a el nodo D:.
El proyecto Linu2 ig A%ailability El ob(eti%o fundamental del proyecto Linu23A es desarrollar una solución de alta disponibilidad 8clustering: para Linu2 #ue proporcione y promocione la fiabilidad, la disponibilidad y la calidad de ser%icio o usabilidad 8-AS, en sus siglas en ingl1s: a tra%1s del esfuer$o de una comunidad de desarrolladores. El programa eartbeat es uno de los componentes principales del proyecto. Cácilmente portable, corre en todos los Linu2 conocidos, as" como en Cree*S) y Solaris. eartbeat es una de las implementaciones principales del estándar Open luster Crameor7 8OC:. eartbeat fue la primera pie$a de softare #ue se escribió para el proyecto Linu23A. Puede lle%ar a cabo la detección de la ca"da de nodos, las comunicaciones y la gestión del cl?ster en un solo proceso. Actualmente soporta un modelo de dependencias muy sofisticado para cl?steres de N nodos, y es muy ?til y estable. La unidad de gestión de eartbeat es el recurso. Los recursos pueden ser, por e(emplo, direcciones IP o ser%icios 8aplicaciones:. Los siguientes tipos de aplicaciones son t"picos e(emplos •
•
•
•
•
•
•
•
•
Ser%idores de bases de datos. Ser%idores eb. Aplicaciones E-P. Ser%idores de correo electrónico. ortafuegos. Ser%idores de ficeros. Ser%idores de )NS. Ser%idores de )P. Ser%idores de pro2y3cac1.
6n recurso es la unidad básica de la alta disponibilidad. 6n recurso es un ser%icio o facility el cuál pasa a tener alta disponibilidad mediante el gestor de recursos del cl?ster de alta disponibilidad. 6n recurso es una abstracción #ue puede ser de diferentes tipos. Puede ser algo muy concreto, como un %olumen de disco o un lector de tar(etas, o puede ser más abstracto, como una dirección IP, un con(unto de reglas de fireall o un ser%icio de softare 8como un ser%idor eb o un ser%idor de base de datos:. Las operaciones básicas #ue los recursos deben soportar son las siguientes • • • •
start iniciar o ad#uirir el control del recurso. stop finali$ar o ceder el control del recurso. status consultar si el recurso está iniciado o parado. monitor consultar de manera más detallada si el recurso está operando correctamente.
Nótese #ue los recursos del tipo -= 8%ersión = de Linu23A: deben soportar status, mientras #ue los del tipo - 8%ersión : deben soportar la operación monitor. El gestor de recursos del cl?ster de alta disponibilidad intenta conseguir #ue todos los recursos est1n disponibles para los usuarios asegurándose de #ue est1n e(ecutándose en alguno de los nodos del cl?ster. El gestor de recursos de eartbeat -= 8y mucos otros gestores de recursos en cl?ster: a?na di%ersos recursos en grupos, llamados -esource/roups. En ese caso, cada grupo es iniciado, detenido o mo%ido en su con(unto por el gestor de recursos del cl?ster.
Instalación de eartbeat Pasamos aora a la instalación y configuración de la alta disponibilidad con eartbeat. El primer paso será instalarlo en ambos nodos apt3get install eartbeat
Los ficeros de configuración de eartbeat están en 5etc5a.d. Necesitamos crear tres ficeros a.cf ficero de configuración principal. aresources ficero de configuración de recursos. aut7eys información de autenticación.
• • •
Llegados a este punto, es preciso introducir dos nue%os conceptos de uso frecuente con eartbeat, dirección IP de ser%icio y dirección IP de administración. 6na dirección de ser%icio es una dirección #ue es gestionada por el sistema de A, y #ue es mo%ida por el cl?ster all" donde los ser%icios correspondientes se est1n e(ecutando. Estas direcciones de ser%icio son direcciones a tra%1s de las cuales los clientes y usuarios de los ser%icios en A acceden a dicos ser%icios. 4"picamente se almacenan en )NS con nombres conocidos. Es importante #ue la dirección de ser%icio no sea gestionada por el sistema operati%o, sino #ue sea el softare de A el ?nico #ue la mane(e. Si se le da una dirección administrati%a al sistema de A para #ue la gestione, 1sto causará problemas pues se confundirá al sistema de A y el sistema operati%o y el sistema de A se pelearán por el control de esta dirección. El agente de recursos IPaddr es capa$ de le%antar una interfa$ desde cero, incluso si no se a establecido ninguna dirección base 8la %ersión anterior necesitaba de una dirección base en cual#uier interfa$, pues tan sólo era capa$ de a0adir o eliminar direcciones a interfaces ya le%antados:. Además, no e2iste l"mite en el n?mero de direcciones IP por interfa$ #ue IPaddr puede gestionar. En cambio, una dirección administrati%a es una dirección #ue está permanentemente asociada a un nodo espec"fico del cl?ster. 4ales direcciones son muy ?tiles, y se recomienda encarecidamente #ue una dirección de este tipo sea reser%ada para cada nodo del cl?ster, de manera #ue el administrador de sistemas pueda acceder al nodo del cl?ster incluso si no ay ser%icios e(ecutándose. Para la mayor"a de sistemas, una dirección de este tipo es obligatoria. Asimismo, se recomienda #ue se reser%e una de estas direcciones para cada interfa$, de modo #ue se puedan testear las interfaces incluso cuando no est1n acti%as. 4al y como se a especificado al inicio de este art"culo, la configuración de direcciones administrati%as y de ser%icio es la siguiente )irección de ser%icio 8inicialmente en pgs#l=: =K.=GB.D. )irección administrati%a de pgs#l= =K.=GB.D.' )irección administrati%a de pgs#l =K.=GB.D.>
•
•
•
Si lo deseamos, para facilitar las pruebas o en %istas al futuro, podemos configurar la dirección de ser%icio en el ficero 5etc5netor75interfaces siempre y cuando no incluyamos su autoconfiguración 8en forma de directi%a auto o allo3otplug:. El ficero 5etc5netor75interfaces del nodo pgs#l= podr"a #uedar tal y como sigue auto lo iface lo inet loopbac7
[ )irección administrati%a allo3otplug etD iface etD inet static address =K.=GB.D.' netmas7 FF.FF.FF.D
netor7 =K.=GB.D.D broadcast =K.=GB.D.FF gateay =K.=GB.D.=
[ )irección de ser%icio iface etDD inet static address =K.=GB.D. netmas7 FF.FF.FF.D netor7 =K.=GB.D.D broadcast =K.=GB.D.FF
)e nue%o, nótese #ue la declaración de la dirección de ser%icio en el ficero 5etc5netor75interfaces es completamente prescindible al usar el agente de recursos IPaddr. El ?nico propósito es de(ar constancia de ella en el sistema fuera de la configuración de eartbeat.
onfiguración de eartbeat Xamos aora a editar los tres ficeros de configuración de eartbeat. 4omaremos los ficeros de e(emplo de 5usr5sare5doc5eartbeat y los modificaremos a nuestro gusto. Empe$aremos con el ficero a.cf cd 5etc5a.d5 cp 5usr5sare5doc5eartbeat5a.cf.g$ 5etc5a.d5 gun$ip a.cf.g$
Editamos el ficero 5etc5a.d5a.cf y lo configuramos a nuestro gusto, por e(emplo tal y como sigue logfacility localD 7eepali%e deadtime 'D arntime =D initdead =D udpport GK> bcast etD autofailbac7 off node pgs#l= [ uname 3n node pgs#l [ uname 3n ping =K.=GB.D.= [ router respan acluster 5usr5lib5eartbeat5ipfail
Nos aseguramos, una %e$ más, de #ue los nodos pgs#l= y pgs#l e2isten en el ficero 5etc5osts de ambos osts pgs#l= y pgs#l =&.D.D.=
localost.localdomain localost
=K.=GB.D.=
router.dominio.com
=K.=GB.D.
pgpool.dominio.com
router pgpool
=K.=GB.D.'
pgs#l=.dominio.com
pgs#l=
=K.=GB.D.>
pgs#l.dominio.com
pgs#l
Editamos el ficero 5etc5a.d5aresources y a0adimos la siguiente l"nea pgs#l= =K.=GB.D. pgpool
Esto indica a eartbeat #ue el nodo maestro es pgs#l= y #ue debe gestionar dos recursos •
La dirección IP de ser%icio =K.=GB.D..
•
El ser%icio pgpool.
El orden es muy importante. Primero se especifica el ostname del nodo #ue consideramos maestro. Segundo, los recursos. El orden de los recursos tambi1n es cr"tico, pues eartbeat los iniciará en orden de i$#uierda a dereca, y los detendrá en orden de dereca a i$#uierda 8y no #ueremos #ue intente arrancar el ser%icio pgpoolantes de disponer de la dirección IP en la cual pgpool3II debe escucar:. eartbeat buscará el script de arran#ue del ser%icio #ue debe gestionar en 5etc5init.d y en 5etc5a.d5resource.d. Siempre y cuando no creemos los enlaces en los directorios 5etc5rcY.d, tanto da #ue lo colo#uemos en uno u otro, pues el sistema operati%o no lo arrancará automáticamente. Entonces, creamos un enlace d1bil al script de arran#ue pgpool para #ue eartbeat pueda encontrarlo cd 5etc5a.d5resource.d ln 33symbolic 5opt5pgpool5etc5init.d5pgpool
)e este modo pgpool no se arrancará al iniciarse el nodo, sino #ue será eartbeat #uien lo arran#ue si detecta #ue as" tiene #ue acerlo, es decir, si decide #ue 1ste nodo debe asumir el papel de maestro. A continuación editamos el ficero 5etc5a.d5aut7eys aut = = sa= F&ef&acDcfGaef&e='='=GFKBfK>&&BfbD&dG
Para obtener la cla%e SA= de la contrase0a en te2to plano #ue #uerramos usar, utili$aremos el comando sa=sum T eco 3n Jpassord@J sa=sum F&ef&acDcfGaef&e='='=GFKBfK>&&BfbD&dG 3
Aut7eys es obligatorio #ue sea accesible sólo por el usuario root y #ue tenga permisos GDD. Los demás, GG>. Les damos los permisos adecuados a los ficeros con rootroot 5etc5a.d5aut7eys 5etc5a.d5aresources 5etc5a.d5a.cf cmod GDD 5etc5a.d5aut7eys cmod GG> 5etc5a.d5aresources 5etc5a.d5a.cf
Cinalmente, configuraremos el logger daemon, espec"fico de eartbeat. 4omamos el ficero de e(emplo en 5usr5sare5doc5eartbeat cp 33arci%e 5usr5sare5doc5eartbeat5logd.cf 5etc5
Editamos el ficero 5etc5logd.cf debugfile 5%ar5log5a3debug logfile 5%ar5log5a3log logfacility daemon entity logd useappbd no send#len FG rec%#len FG
-epetiremos los anteriores pasos para el nodo pgs#l. Los ficeros de configuración serán id1nticos en ambos nodos, sin diferencia alguna, por lo #ue podemos copiar los ficeros de configuración desde pgs#l= a pgs#l sin problemas. Aora ya estamos listos para iniciar la alta disponibilidad. )ebido a #ue el logd puede estar iniciado con una configuración por defecto, %amos a asegurarnos primero de #ue eartbeat está completamente parado en ambos nodos
5etc5init.d5eartbeat stop
Es posible #ue debamos esperar a alg?n timeout. Aora, con una diferencia má2ima de =D segundos 8directi%a initdead en 5etc5a.d5a.cf:, e(ecutaremos el script de inicio, primero en pgs#l= y despu1s en pgs#l 5etc5init.d5eartbeat start
Podemos monitori$ar el arran#ue de ambos eartbeats a tra%1s del ficero de log 5%ar5log5a3log. En el nodo pgs#l= deber"a aparecernos la siguiente 8o parecida: información en dico log logd;>=K&< info logd started it 5etc5logd.cf. logd;>=K&< MA-N ore dumps could be lost if multiple dumps occur. logd;>=K&< MA-N onsider setting non3default %alue in 5proc5sys57ernel5corepattern 8or e#ui%alent: for ma2imum supportability logd;>=K&< MA-N onsider setting 5proc5sys57ernel5coreusespid 8or e#ui%alent: to = for ma2imum supportability logd;>=K&< info /mainaddSignalandler Added signal andler for signal =F logd;>=K&< info /mainaddSignalandler Added signal andler for signal =F eartbeat;>&< info Enabling logging daemon eartbeat;>&< info logfile and debug file are tose specified in logd config file 8default 5etc5logd.cf: eartbeat;>&< MA-N ore dumps could be lost if multiple dumps occur. eartbeat;>&< MA-N onsider setting non3default %alue in 5proc5sys57ernel5corepattern 8or e#ui%alent: for ma2imum supportability eartbeat;>&< MA-N onsider setting 5proc5sys57ernel5coreusespid 8or e#ui%alent: to = for ma2imum supportability eartbeat;>&< info Xersion support false eartbeat;>&< MA-N logd is enabled but logfile5debugfile5logfacility is still configured in a.cf eartbeat;>&< info 99999999999999999999999999 eartbeat;>&< info onfiguration %alidated. Starting eartbeat .=.' eartbeat;>&'< info eartbeat %ersion .=.' eartbeat;>&'< info eartbeat generation =FBKKG'B eartbeat;>&'< info glib 6)P *roadcast eartbeat started on port GK> 8GK>: interface etD eartbeat;>&'< info glib 6)P *roadcast eartbeat closed on port GK> interface etD 3 Status = eartbeat;>&'< info glib ping eartbeat started. eartbeat;>&'< info /mainadd4riggerandler Added signal manual andler eartbeat;>&'< info /mainadd4riggerandler Added signal manual andler eartbeat;>&'< info /mainaddSignalandler Added signal andler for signal =& eartbeat;>&'< info Local status no set to up eartbeat;>&'< info Lin7 =K.=GB.D.==K.=GB.D.= up. eartbeat;>&'< info Status update for node =K.=GB.D.= status ping eartbeat;>&'< info Lin7 pgs#l=etD up. eartbeat;>&'< info Lin7 pgs#letD up. eartbeat;>&'< info Status update for node pgs#l status up arc;>B'<;>BK< info -unning 5etc5a.d5rc.d5status status eartbeat;>&'< info ommnoup8: updating status to acti%e eartbeat;>&'< info Local status no set to acti%e eartbeat;>&'< info Starting cild client J5usr5lib5eartbeat5ipfailJ 8=D&,===: eartbeat;>&'< info Starting J5usr5lib5eartbeat5ipfailJ as uid =D& gid === 8pid >K>: eartbeat;>&'< info Status update for node pgs#l status acti%e arc;>KB<;>'D'< info -unning 5etc5a.d5rc.d5status status ipfail;>K>< info Status update Node pgs#l no as status acti%e ipfail;>K>< info As7ing oter side for ping node count. eartbeat;>&'< info remote resource transition completed. eartbeat;>&'< info remote resource transition completed. eartbeat;>&'< info Initial resource ac#uisition complete 84-ESO6-ES8us:: IPaddr;>'>G<;>'&>< INCO -esource is stopped
eartbeat;>'==< info Local -esource ac#uisition completed. arc;>'&B<;>'B'< info -unning 5etc5a.d5rc.d5ip3re#uest3resp ip3re#uest3resp ip3re#uest3resp;>'&B<;>'BB< recei%ed ip3re#uest3resp =K.=GB.D. OU yes -esource+anager;>'BK<;>'KK< info Ac#uiring resource group pgs#l= =K.=GB.D. pgpool IPaddr;>>==<;>>'K< INCO -esource is stopped -esource+anager;>'BK<;>>FF< info -unning 5etc5a.d5resource.d5IPaddr =K.=GB.D. start IPaddr;>>&<;>FD< INCO 6sing calculated nic for =K.=GB.D. etD IPaddr;>>&<;>FD&< INCO 6sing calculated netmas7 for =K.=GB.D. FF.FF.FF.D IPaddr;>>&<;>FK< INCO e%al ifconfig etDD =K.=GB.D. netmas7 FF.FF.FF.D broadcast =K.=GB.D.FF IPaddr;>>F&<;>F>B< INCO Success -esource+anager;>'BK<;>F&>< info -unning 5etc5a.d5resource.d5pgpool start ipfail;>K>< info No gi%eup timer to abort.
En el nodo pgs#l %eremos información similar a la #ue sigue en el ficero de log logd;'&K'< info logd started it 5etc5logd.cf. logd;'&K'< MA-N ore dumps could be lost if multiple dumps occur. logd;'&K'< MA-N onsider setting non3default %alue in 5proc5sys57ernel5corepattern 8or e#ui%alent: for ma2imum supportability logd;'&K'< MA-N onsider setting 5proc5sys57ernel5coreusespid 8or e#ui%alent: to = for ma2imum supportability logd;'&K>< info /mainaddSignalandler Added signal andler for signal =F logd;'&K'< info /mainaddSignalandler Added signal andler for signal =F eartbeat;'BGB< info Enabling logging daemon eartbeat;'BGB< info logfile and debug file are tose specified in logd config file 8default 5etc5logd.cf: eartbeat;'BGB< MA-N ore dumps could be lost if multiple dumps occur. eartbeat;'BGB< MA-N onsider setting non3default %alue in 5proc5sys57ernel5corepattern 8or e#ui%alent: for ma2imum supportability eartbeat;'BGB< MA-N onsider setting 5proc5sys57ernel5coreusespid 8or e#ui%alent: to = for ma2imum supportability eartbeat;'BGB< info Xersion support false eartbeat;'BGB< MA-N logd is enabled but logfile5debugfile5logfacility is still configured in a.cf eartbeat;'BGB< info 99999999999999999999999999 eartbeat;'BGB< info onfiguration %alidated. Starting eartbeat .=.' eartbeat;'BGK< info eartbeat %ersion .=.' eartbeat;'BGK< info eartbeat generation =FBKKGKK eartbeat;'BGK< info glib 6)P *roadcast eartbeat started on port GK> 8GK>: interface etD eartbeat;'BGK< info glib 6)P *roadcast eartbeat closed on port GK> interface etD 3 Status = eartbeat;'BGK< info glib ping eartbeat started. eartbeat;'BGK< info /mainadd4riggerandler Added signal manual andler eartbeat;'BGK< info /mainadd4riggerandler Added signal manual andler eartbeat;'BGK< info /mainaddSignalandler Added signal andler for signal =& eartbeat;'BGK< info Local status no set to up eartbeat;'BGK< info Lin7 =K.=GB.D.==K.=GB.D.= up. eartbeat;'BGK< info Status update for node =K.=GB.D.= status ping eartbeat;'BGK< info Lin7 pgs#letD up. eartbeat;'BGK< info Lin7 pgs#l=etD up. eartbeat;'BGK< info Status update for node pgs#l= status up eartbeat;'BGK< info Status update for node pgs#l= status acti%e eartbeat;'BGK< info ommnoup8: updating status to acti%e eartbeat;'BGK< info Local status no set to acti%e eartbeat;'BGK< info Starting cild client J5usr5lib5eartbeat5ipfailJ 8=D&,===: eartbeat;'BB=< info Starting J5usr5lib5eartbeat5ipfailJ as uid =D& gid === 8pid 'BB=: arc;'BBD<;'BBK< info -unning 5etc5a.d5rc.d5status status arc;'BK><;'BKK< info -unning 5etc5a.d5rc.d5status status eartbeat;'BGK< info local resource transition completed.
eartbeat;'BGK< info Initial resource ac#uisition complete 84-ESO6-ES8us:: eartbeat;'KD>< info No local resources ;5usr5sare5eartbeat5-esource+anager list7eys pgs#l< to ac#uire. eartbeat;'BGK< info remote resource transition completed. ipfail;'BB=< info Ping node count is balanced.
Podemos obser%ar como eartbeat se a encargado de asociar la dirección IP =K.=GB.D. al primer alias disponible de la interfa$ etD, es decir, etDD. 4ambi1n podremos obser%ar como pgpool3II está le%antado y es capa$ de ser%ir cone2iones. En el syslog podremos obser%ar #ue a establecido la cone2ión con ambos ser%idores de PostgreSQL y está esperando peticiones T tail 3n FDD 5%ar5log5syslog grep pgpool cc$e 3A pgs#l= pgpool LO/ pid >FK> pgpool successfully started
Simulación de la ca"da del ser%icio A continuación %amos a simular la ca"da del nodo maestro, pgs#l=. Si estamos traba(ando con dos má#uinas, esto es tan sencillo como desconectar dico nodo de la red. En el caso de este art"culo, se usó Yen yper%isor para crear las dos má#uinas %irtuales dentro de la misma má#uina f"sica, por lo #ue se e(ecutó el siguiente comando 8las má#uinas %irtuales se ab"an creado con las 2en3tools de Ste%e Uemp: 2m destroy pgs#l=
Al cabo de un má2imo de 'D segundos, deber"amos %er información parecida a la siguiente en el ficero de log de eartbeat del nodo pgs#l eartbeat;'BGK< MA-N node pgs#l= is dead ipfail;'BB=< DDB5==5DF=&DB=D info Status update Node pgs#l= no as status dead eartbeat;'BGK< MA-N No S4ONI4 de%ice configured. eartbeat;'BGK< MA-N Sared dis7s are not protected. eartbeat;'BGK< info -esources being ac#uired from pgs#l=. eartbeat;'BGK< info Lin7 pgs#l=etD dead. arc;'K><;'KF>< info -unning 5etc5a.d5rc.d5status status eartbeat;'K>'< info No local resources ;5usr5sare5eartbeat5-esource+anager list7eys pgs#l< to ac#uire. macdon;'KG><;'KB>< info 4a7ing o%er resource group =K.=GB.D. -esource+anager;'KBF<;'KKF< info Ac#uiring resource group pgs#l= =K.=GB.D. pgpool IPaddr;>DD&<;>D'F< INCO -esource is stopped -esource+anager;'KBF<;>DF=< info -unning 5etc5a.d5resource.d5IPaddr =K.=GB.D. start IPaddr;>DGB<;>DKB< INCO 6sing calculated nic for =K.=GB.D. etD IPaddr;>DGB<;>=D'< INCO 6sing calculated netmas7 for =K.=GB.D. FF.FF.FF.D IPaddr;>DGB<;>=F< INCO e%al ifconfig etDD =K.=GB.D. netmas7 FF.FF.FF.D broadcast =K.=GB.D.FF IPaddr;>DF'<;>=>>< INCO Success -esource+anager;'KBF<;>=&< info -unning 5etc5a.d5resource.d5pgpool start macdon;'KG><;>=KK< info 5usr5sare5eartbeat5macdon nicefailbac7 foreign resources ac#uired macdon;'KG><;>D'< info macdon ta7eo%er complete for node pgs#l=. eartbeat;'BGK< info macdon ta7eo%er complete. ipfail;'BB=< info NS Me are still ali%e ipfail;'BB=< info Lin7 Status update Lin7 pgs#l=5etD no as status dead ipfail;'BB=< info As7ing oter side for ping node count. ipfail;'BB=< info ec7ing remote count of ping nodes.
Xemos como aora el nodo pgs#l tiene la dirección IP =K.=GB.D. 8podemos %erificarlo con el comando ifconfig: y como pgpool3II está arrancado 8podemos %erificarlo con el comando ps 2ua grep postgres:. Asimismo, podemos obser%ar como pgpool3II a reali$ado un ealt cec7 nada más iniciarse y, al %er
#ue el ser%idor de PostgreSQL del nodo =K.=GB.D.' no estaba disponible, a reali$ado la pertinente degeneración de ese nodo 8#ue, recordemos, a efectos del nue%o pgpool3II, es un nodo secundario: T tail 3n FDD 5%ar5log5syslog grep pgpool cc$e 3A pgs#l pgpool LO/ pid >=KF pgpool successfully started pgs#l pgpool E--O- pid >=KF connectinetdomainsoc7et connect8: failed No route to ost pgs#l pgpool E--O- pid >=KF ealt cec7 failed. = t ost =K.=GB.D.' at port F>' is don pgs#l pgpool LO/ pid >=KF set = t bac7end don status pgs#l pgpool LO/ pid >=KF starting degeneration. sutdonost =K.=GB.D.'8F>': pgs#l pgpool LO/ pid >=KF failo%erandler do not restart pgpool. same master node D as selected pgs#l pgpool LO/ pid >=KF failo%er done. sutdon ost =K.=GB.D.'8F>': pgs#l pgpool LO/ pid >=KF e2ecute command 5%ar5lib5postgres#l5B.'5main5pgpool3failo%er = =K.=GB.D.' F>' 5%ar5lib5postgres#l5B.'5main D D pgs#l pgpool;>>'< E2ecuting pgpool3failo%er as user postgres pgs#l pgpool 5%ar5lib5postgres#l5B.'5main5pgpool3failo%er =F Cailo%er of node = at ostname =K.=GB.D.'. Ne master node is D. Old master node as D. not found
Nótese #ue, a ra"$ de la instalación de eartbeat, pgpool3II está aora escucando en la IP =K.=GB.D., por lo cual ay #ue mandar al puerto KBKB de esa IP los comandos de PP. La %enta(a es #ue siempre lan$aremos nuestros comandos PP contra esa dirección IP, pues eartbeat se encargará de lle%arla de un nodo a otro seg?n sea necesario. Además, las peticiones de pgpool3II a PostgreSQL %ienen aora desde esa dirección IP, por lo #ue es con%eniente re%isar #ue nuestros ficeros 5etc5postgres#l5B.'5main5pgba.conf permiten las cone2iones desde ambas con el usuario pgpool. Por otra parte, los comandos #ue nuestros clientes #uieran mandar contra el cl?ster usarán, a partir de aora, la dirección IP =K.=GB.D. y el puerto KKKK. Al igual #ue antes, dado #ue eartbeat se encargará de mo%er esta dirección IP y el ser%icio pgpool de nodo a nodo, nuestros clientes siempre funcionarán de la misma manera. Este es uno de los propósitos principales de la alta disponibilidad #ue acabamos de configurar 8además de la alta disponibilidad de la #ue go$amos, por supuesto:. Podemos probar nuestro cl?ster con un simple comando como el #ue sigue ps#l 3 =K.=GB.D. 3p KKKK 36 pgpool 3d bencreplication 3c J6P)A4E AO6N4S SE4 abalance ^ =DDK ME-E aid ^ =DJ
erramientas de monitori$ación En Internet pueden encontrarse un gran n?mero de erramientas de gestión y monitori$ación de PostgreSQL, tanto de código abierto como propietarias. A continuación se presenta una lista de algunas de ellas #ue, personalmente, me resultan de gran utilidad.
pgosmem y pgbuffercace pgosmem es un script eco en Pyton por Uenny /orman #ue permite obtener información sobre la memoria cac1 #ue un sistema Linu2 está dedicando al ser%idor PostgreSQL. 6tili$a un script en Perl llamado fincore 8pronunciado en ingl1s eff in core:, creado por )a%id Plon7a, Arcit /upta y )ale arder de la uni%ersidad de Misconsin3+adison y #ue fue presentado en la LISA D&. Su instalación y uso son muy sencillos • • •
• • •
rear el directorio 5root5bin y cambiarse a 1l. )escargar fincore desde ttp55net.doit.isc.edu5jplon7a5fincore5fincore rear el ficero 5root5pgosmem5pgosmem a partir del script #ue ay en la página eb de Uenny /orman. rear el directorio 5root5pgosmem5data. Instalar la dependencia psycopg 8pa#uete pyton3psycopg en )ebian:. Instalar la dependiencia inline 8pa#uete libinline3perl en )ebian:.
+odificar el script 5root5pgosmem5pgosmem para adecuarlo a nuestro sistema ambiar 5ome5postgres5pyton5bin5pyton por 5usr5bin5pyton. ambiar la %ariable fincore por 5root5bin5fincore. ambiar la %ariable mydir por 5%ar5lib5postgres#l5B.'5main5base. E(ecutar con la siguiente sentencia 8suponemos #ue 5root5bin está en el PA4 del usuario root: pgosmem 33username^pgpool 33passord^ 33macine^pgs#l= 33dbname^bencreplication
•
• • •
•
El ficero de configuración 5etc5postgres#l5B.'5main5pgba.conf deberá estar configurado adecuadamente. pgbuffercace es un módulo de PostgreSQL, abitualmente allado en el pa#uete postgres#l3contrib3 B.', #ue proporciona maneras de e2aminar lo #ue está ocurriendo en la cace de memoria compartida de PostgreSQL en tiempo real 8no a ni%el de sistema operati%o, pues para eso necesitamos pgosmem:. Su instalación es muy sencilla T ps#l 3d bencreplication 5usr5sare5postgres#l5B.'5contrib5pgbuffercace.s#l SE4 -EA4E C6N4ION -EA4E XIEM -EXOUE -EXOUE
Entonces, mediante el script pgosmem podemos obtener una salida similar a la siguiente T pgosmem 33username^pgpool 33passord^ 33macine^pgs#l= 33dbname^bencreplication OS ace 6sage bencreplicationaccountsp7eyFGG& bencreplicationpgproc=D>DD bencreplicationpgprocpronameargsnspinde2&KB& bencreplicationpgdepend&KB& bencreplicationpgdependreferenceinde2GFF'G ;..<
Luego, gracias al módulo pgbuffercace, podemos lan$ar la siguiente consulta SQL ps#l 3d bencreplication [ SELE4 currentdatabase8:,c.relname, count89:9B=K as bytes C-O+ pgbuffercace b INNE- WOIN pgclass c ON b.relfilenode ^ c.relfilenode AN) b.reldatabase IN 8D, 8 SELE4 oid C-O+ pgdatabase ME-E datname ^ currentdatabase8::: /-O6P *R c.relname O-)E- *R ' )ES LI+I4 F currentdatabase relname
bytes
3333333333333333333!333333333333333!3333333333 bencreplication accounts
='>'>BBD
bencreplication accountsp7ey G=>> bencreplication pgattribute =FFG>B bencreplication pgstatistic =BBD bencreplication pgoperator =DG>KG
;..< 8F ros:
/racias a estos dos códigos, podemos %er el con(unto de buffers más utili$ado en la cac1 del sistema operati%o y compararlo con la cac1 de PostgreSQL. La salida de ambos comandos es en bytes.
pgtop pgtop es un top para PostgreSQL, deri%ado del top de 6NIY. Similar a top, pgtop permite monitori$ar los procesos de PostgreSQL y, además, ofrece estas otras funcionalidades •
•
•
•
•
Xer las consultas SQL #ue está e(ecutando un proceso. Xer el #uery plan de una consulta SQL #ue se está e(ecutando. Xer los blo#ueos reali$ados por un proceso. Xer la estad"stica de las tablas. Xer la estad"stica de los "ndices.
Los fuentes de pgtop pueden descargarse de su página eb en PgCoundry. 4ambi1n podemos ba(arnos la ?ltima %ersión de desarrollo del repositorio /it de pgCoundry mediante el siguiente comando cd 5usr5local5src git clone git55git.postgres#l.org5git5pgtop.git cd pgtop .5autogen.s
Podemos instalar /it mediante el siguiente comando apt3get install git3c%s
Instalaremos las dependencias de compilación con el siguiente comando apt3get install libncursesF3de%
Los pa#uetes build3essential, linu23eaders3ser%er, libp#3de%, libp#F y postgres#l3ser%er3de%3B.' ya los ab"amos instalado durante la instalación de pgpool3II y de PostgreSQL. pgtop se instala por defecto en 5usr5local5bin, pero podemos cambiar la ruta mediante el parámetro 33prefi2 del script configure cd 5usr5local5src get ttp55pgfoundry.org5frs5donload.pp5=&BD5pgtop3'.G..tar.b$ tar 32(f pgtop3'.G..tar.b$ cd pgtop3'.G. .5configure 33prefi2^5opt5pgtop ma7e ma7e install
El uso de pgtop es análogo al de top. 4an sólo ay #ue in%ocar el e(ecutable y usar las teclas para obtener diferentes %istas e información de los procesos deseados. El e(ecutable re#uiere tres parámetros La base de datos 8parámetro 3d:. El usuario 8parámetro 36:. La contrase0a, si es necesaria 8parámetro 3M:. •
•
•
Entonces, la e(ecución de pgtop ser"a tal y como sigue 5opt5pgtop5bin5pgtop 36 pgpool 3d bencreplication
pgtop asume localost como ostname y F>' como puerto por defecto. 6sa el usuario de sistema como medio de autenticación por defecto, por lo cual deberemos pasarle datos de usuario y contrase0a o
e(ecutarlo como usuario postgres, dependiendo de la configuración #ue tengamos en 5etc5postgres#l5B.'5main5pgba.conf. Podemos crearnos un script 5opt5pgtop5pgtop donde acer la llamada completa con todos los datos y acernos el traba(o más sencillo, por e(emplo [5bin5bas 5usr5bin5sudo 5bin5su 3 postgres 3c 5opt5pgtop5bin5pgtop
R luego a0adir la ruta al PA4 del sistema en 5etc5profile.
ps ps, o process status, la famosa utilidad presente en todos los 6NIY, es una ?til erramienta para tener una primera impresión de #u1 está aciendo PostgreSQL. 6n sencillo comando tal #ue el #ue sigue será suficiente T ps au2 grep postgres postgres KGD D.D =.= G=D> =>BD pts5=
SN ='=& DDD postgres 3i
postgres KG' D.D =.= &DB> =>& pts5=
SN ='=& DDD postgres riter process
postgres KGF D.D =.= G=F =F= pts5=
SN ='=& DDD postgres stats collector process
postgres KKB D.D .' GF' KK pts5=
SN ='=B DDD postgres tgl runbug =&.D.D.= idle
postgres =DD' D.D .> GF' '=B pts5=
SN ='=K DDD postgres tgl regression ;local< SELE4 aiting
postgres =D=G D.= .> GF' 'DBD pts5=
SN ='=K DDD postgres tgl regression ;local< idle in transaction
pgd pgstat, otra utilidad desarrollada por Uenny /orman, es muy similar a iostat pero orientada a bases de datos. Es una utilidad muy ?til para reali$ar diagnósticos rápidos, tests de rendimiento, etc. La salida es adecuada para ser importada en o(as de cálculo o en programas #ue puedan generar gráficas. En la página eb de Uenny /orman se e2plica cómo obtener gráficas de la salida de pgd usando gnuplot. Xer la bibliograf"a para el enlace. La instalación de pgd es muy sencilla •
•
•
)escargar pgstat desde pgCoundry. )escomprimirlo en 5root5bin o donde consideremos oportuno. Editar el ficero y cambiar los %alores por defecto de los parámetros en la l"nea =G. )e esta forma podremos llegar a no tener #ue especificar ning?n parámetro o, como má2imo, la base de datos.
La utilidad la llamaremos con un sencillo pgstat 3d bencreplication.
iotop Iotop es un script de Pyton con una interfa$ de usuario similar a la de top #ue sir%e para mostrar #u1 proceso está srcinando #u1 carga de lecturas y escrituras de disco 8E5S:. -e#uiere Pyton .F o superior y un 7ernel de Linu2 %ersión .G.D o superior. Este script muestra la misma información #ue el comando %mstat, pero asociando la carga al proceso #ue la genera y mostrando la información de una forma muco más ?til para el administrador de sistemas. Su instalación es muy sencilla pues, a partir de Lenny, %iene como pa#uete )ebian apt3get install iotop pyton3p7g3resources
Optimi$ación de PostgreSQL Para un sistema inicial de pruebas, tanto pgs#l= como pgs#l tienen = /* de memoria -A+. 4eniendo en cuenta esta situación, se configurarán los siguientes parámetros en el ficero de configuración de PostgreSQL 5etc5postgres#l5B.'5main5postgres#l.conf
ma2connections ^ =DD saredbuffers ^ FG+* or7mem ^ +* effecti%ecacesi$e ^ F=+*
Mor7 +emory es por cone2ión, por lo #ue ay #ue calcular un má2imo de 9 =DD ^ DD +* para el total de cone2iones. Effecti%e ace Si$e deber"a ser entre el FD y el &FV de la memoria -A+ f"sica, dependiendo de si ay otros ser%icios e(ecutándose en la má#uina o no. -especto del 7ernel, para poder reser%ar F= +* de sared buffers necesitaremos un tama0o má2imo de un segmento compartido igual al %alor #ue nos de%uel%a el error de PostgreSQL al arrancar, &K.='>.DB bytes, unos GG +*. La %ariable S++AY del 7ernel indica el tama0o má2imo de los segmentos de memoria compartida, y debe ser de, al menos, %arios megabytes. La %ariable de 7ernel S+ALL indica el n?mero total de páginas de memoria compartida disponibles. S+ALL es igual a S++AY di%idido por PA/ESI_E, redondeado acia arriba. PA/ESI_E es, por defecto, de > 7ilobytes. E(ecutaremos los siguientes comandos en la consola para alterar los %alores sysctl 3 7ernel.smma2^&K='>DB sysctl 3 7ernel.small^DK&=F
El primero son bytes, el segundo páginas. Para asegurarnos #ue los %alores permane$can tras un reinicio, a0adiremos las siguientes dos l"neas al ficero 5etc5sysctl.conf 7ernel.smma2^FFG=> 7ernel.small^DK&=F
El %alor actual de estos parámetros se puede obtener con cat 5proc5sys57ernel5smma2 cat 5proc5sys57ernel5small
El %alor por defecto de S++AY suele ser ''.FF>.>' bytes. El %alor por defecto del n?mero de páginas #ue un segmento compartido puede tener ya es mayor #ue lo #ue necesitamos 8FF'.GD&.=GB 5 >DKG ^ ='F.=FB .DK&.=F:, as" es #ue no ará falta modificarlo ni a0adir la l"nea correspondiente a 5etc5sysctl.conf.
Auto%acuum y cargas de datos PostgreSQL B.' reali$a un %acuum automático de manera periódica, por lo #ue no deber"a de ser necesario e(ecutar un C6LL XA66+ a menos #ue grandes porciones 8más de un tercio o, incluso, más de la mitad: de las tablas de borren e inserten con frecuencia 8por e(emplo durante cargas de datos nocturnas mediante procesos por lotes:. En este caso, e(ecutar XA66+ ANALI_E para #ue la información estad"stica del planificador de consultas est1 actuali$ada es tambi1n muy con%eniente. En la documentación oficial de PostgreSQL 8%er bibliograf"a: podemos encontrar %arios conse(os muy ?tiles en el caso de reali$ar grandes cargas de datos 8iniciales o periódicas:.
Procesos errantes En el caso de detectar un proceso en segundo plano #ue lle%e ocupado JdemasiadoJ tiempo, podemos determinar #u1 está intentando lle%ar a cabo dico tread, a partir de su PI), mediane la siguiente consulta SELE4 9 C-O+ pgstatacti%ity ME-E procpid ^ pid@
