Consultar MS SQL Server no Linux
No passado, usei FreeTDS no Linux ou pyodbc de scripts Python. Um driver lançado este ano pela Microsoft tem suporte mais completo para o SQL Server 2012 e um procedimento …
Continuar lendohybriddba
Mais um script para dividir os dumps do PostgreSQL em arquivos de objeto
https://gist.github.com/2572360 #! /usr/bin/pythonimport os, re, sys# Split pg_dump files to schema/type file hierarchy# Use with files produced by pg_dump -s#TODO: Identify dropped objects and delete from tree# Detect object header …
Continuar lendoVer processos bloqueados / bloqueados
SELECT DISTINCT bl.procpid AS blocked_pid, bl.usename AS USER, bl.current_query AS blocked_query, bl.query_start, relname AS blocked_on, lq.procpid AS blocking_pid, lq.usename AS USER, lq.current_query AS blocking_query, lq.query_start, pgl2.mode AS lock_typeFROM pg_stat_activity bl, …
Continuar lendoAutomação simples de importação em massa usando psql COPY
#!/usr/bin/env pythonimport osfilepath = ‘/Users/mattk/exports/Export_20100831’srcpath = “‘/home/postgres/imports”#srcpath = ‘:srcpath’files = os.listdir(filepath)for file in files: table,ext = os.path.splitext(file) pfx,table = table.split(‘_’) if pfx == ‘export’ and ext == ‘.csv’: src = …
Continuar lendoO visualizador de tubos visualiza tubos – e restaurações de longa duração
Exemplo: pv dump.sql.gz | zcat | psql db_name Exibe o progresso na forma de: 359MB 0:35:14 [28.4MB/s] [==> ] 12% ETA 2:28:41 Monitorar um despejo PostgreSQL, incluindo estimativa de tempo …
Continuar lendoMonitore o envio e recebimento de zfs (com compactação paralela)
Use o visualizador de tubos para monitorar o progresso de uma operação de envio zfs. A paralelização da compressão via pigz pode reduzir significativamente o tempo de execução: zfs send …
Continuar lendoDados PostgreSQL e tamanho do índice por tabela
SELECT N.nspname || ‘.’ || C.relname AS “relation”, CASE WHEN reltype = 0 THEN pg_size_pretty(pg_total_relation_size(C.oid)) || ‘ (index)’ ELSE pg_size_pretty(pg_total_relation_size(C.oid)) || ‘ (‘ || pg_size_pretty(pg_relation_size(C.oid)) || ‘ data)’ END AS …
Continuar lendoFragmentação de grandes arquivos de texto com vários processos Python (e Redis)
https://gist.github.com/2914601 import multiprocessing, os, sys, timefrom itertools import izipimport redisrr = Nonedef process_chunk(chunk): global rr if rr is None: rr = redis.Redis() # Create one connection per process print ‘PID …
Continuar lendo