jueves, 15 de septiembre de 2016

Big Data y Data WareHouse, Diferencias.




Muchas empresas hoy en día hablan de BigData, generan proyectos e invierten dinero en BigData y se leen o escuchan conversaciones en las cuales se dice ¿O sea que ya no necesito Data WareHousing?

La verdad es que son dos cosas distintas, ¡Muy Distintas! Big data es una tecnologia y DataWare House es una arquitectura. Si vamos a los principios de un Data WareHouse que expresa Kimball:


  • Un Data Warehouse proporciona una visión global, común e integrada de los datos de la organización, independiente de cómo se vayan a utilizar posteriormente por los consumidores o usuarios. Normalmente en el almacén de datos habrá que guardar información histórica que cubra un amplio período de tiempo. Pero hay ocasiones en las que no se necesita la historia de los datos, sino sólo sus últimos valores, siendo además admisible generalmente un pequeño desfase o retraso sobre los datos operacionales. En estos casos el almacén se llama almacén operacional (ODS, Operational Data Store).



Si con tu Data WareHouse no estas en capacidad de relacionar los datos por ejemplo de: atención de clientes con los datos de consumo y la respuesta financiera a la variación de estas dos variables, te informo que en realidad tienes una agrupación de varios datamart en un solo servidor no un Data WareHouse. Y si aun peor los datos que tienes en tu "DataWarehouse" están en tercera forma normal ni la mas remota idea de que es lo que tienes, tal vez un "data warhouse", seria un híbrido entre una copia de tu aplicación de negocio mezclado con un datamart.

Ahora que tenemos definido lo que es un Data Warehouse y sabemos que es una arquitectura que nos sirve para agregar valor al negocio ya podremos definir lo que es Big Data.Hay muchas formas de definirlo pero una de las mas generalizadas es la que encontró hadoop:
  • Tecnología capaz de almacenar grandes cantidades de datos.
  • Tecnología que puede contener los datos en dispositivos de almacenamiento de bajo costo.
  • Tecnología, donde el procesamiento se realiza por el método de "censo romano".
  • Tecnología donde los datos son almacenados en formato no estructurado
Pueden haber mas características de una implementación de big data pero estas son las que se consideraran mínimas para Hadoop. 

Como podemos ver las diferencias son gigantescas, Big Data en una tecnología que nos permite almacenar y manejar grandes volúmenes de datos y data ware housing es una forma o arquitectura para organizar datos que proporcionan credibilidad e integridad en un único entorno.

Las tecnologías de BigData están en capacidad de analizar fuentes de diferentes tipos de información estructurada y no estructurada, almacenada en diferentes medios, provenientes de diferentes plataformas que no tienen ningún tipo de relación entre si, todo esto sin necesidad de darle estructura a los datos ni almacenarlos dentro de un único contenedor.


jueves, 1 de septiembre de 2016

PINEAPPLE MARK IV


Tal vez esta información le sirva a alguien que tenga una Mark IV, hace algunos meses deje de usarla y cuando la encendí me di cuenta que había perdido la contraseña, lo primero que se ocurre hacer es un factory reset que consiste en sostener el botón reset oprimido por 5 segs. intente esto mucho tiempo y nunca funciono. Buscando por alli encontre este procedimiento que me funciono a la perfeccion.


  1. Descarga el ultimo firmware de la mark 4 https://www.wifipineapple.com/downloads
  2. Iniciar en modo recovery manteniendo el boton reset oprimido, el boton WPS encendera intermitentemente.
  3. Luego se conecta por medio de un cable de red al PC, dejando la ip del computador fija con el segmento de red 192.168.1.x y mascara de subred 255.255.255.0
  4. telnet a 192.168.1.x
  5. Pasarse al directorio tmp cd /tmp
  6. transferir el archivo de firmware a la mark 4 wget http://192.168.1.2/upgrade-2.8.1.bin
  7. Ejecutar sysupgrade -n -v /tmp/upgrade-2.8.1.bin
  8. Esperar a que inicie de nuevo la mark 4 y ya tendra usuario y password de fabrica

Para tener en cuenta: la direccion de administracion cambia en esta version del firmware:

http://172.16.42.1:1471






martes, 30 de agosto de 2016

La Rata Gorda (FatRat)

Video del funcionamiento de TheFatRat una aplicación que nos permite modificar la firma de un BackDoor para superar los detectores de malware



martes, 3 de mayo de 2016

Agregar columna con totales en GridView

Agregar la sumatoria de filas es una labor sencilla desde SQL solo realizando un agrupado, pero algunas veces es necesario sumar las columnas con un valor total al final, con esta simple rutina se calcula el total para un datatable en C#.



public DataTable TotalColumn(DataTable dt)
        {
            //Suma de la columna dos hasta la ultima y agrega una columna de totales
            DataColumn Total = new DataColumn();
            Total.ColumnName = "Total";
            dt.Columns.Add(Total);
            Double total = 0;
           
            for (int i=0; i
            {
                for (int j = 1; j < dt.Columns.Count-1; j++)
                {
                    try
                    {
                        total = Convert.ToDouble(dt.Rows[i][j].ToString()) + total;
                    }
                    catch
                    {
                        Console.WriteLine("Error al sumar, en fila " + i.ToString() + "Column" + j.ToString());  
                    }
                   
                }
                dt.Rows[i]["Total"] = total;
                total = 0;
            }

            return dt;

        }


Saludos.

viernes, 6 de junio de 2014

Generación automática de procedimientos almacenados.

Hola, después de mucho tiempo una nueva entrada, hoy se presento la necesidad de hacer muchos procedimientos almacenados exactamente iguales de diferentes tablas, a lo cual se me ocurrió la siguiente solución, mediante un procedimiento almacenado generar automáticamente los DDL del CRUD.

En un solo procedimiento almacenado reuniré todas las transacciones. Me cuentan si tienen preguntas, funciona con sql server

--primero una variable con el nombre de la tabla a la cual le generaremos el procedimiento almacenado

SET @TABLA='aqui va el nombre de la tabla'


--Luego las variables que vamos a usar durante el proceso son:

Declare @NombreCampo as Varchar(512)
Declare @Tipo as Varchar(512)
Declare @Tamanho as Varchar(512)
DECLARE @Cadena_Insercion as NVARCHAR(2048)
DECLARE @Cadena_Variables as NVARCHAR(2048)
DECLARE @Cadena_Actualizacion AS NVARCHAR(2048)
DECLARE @Cadena_and AS NVARCHAR(2048)

--Aqui comienza el cursor que utilizaremos

Declare AutomaticTable cursor For
SELECT COLUMN_NAME, DATA_TYPE, CHARACTER_MAXIMUM_LENGTH FROM information_schema.columns WHERE table_name = @TABLA

OPEN AutomaticTable

SET @Cadena_Insercion=''
SET @Cadena_Variables=''
SET @Cadena_Actualizacion=''
SET @Cadena_and=''


Fetch Next From AutomaticTable
Into @NombreCampo, @Tipo, @Tamanho

PRINT 'CREATE PROCEDURE Proc_'+@TABLA+' as'
PRINT ' '

PRINT ' '
PRINT 'BEGIN'

PRINT ' '
PRINT ' DECLARE @ITRAN AS INT'

WHILE @@FETCH_STATUS=0

BEGIN

IF @Tamanho IS NOT NULL
BEGIN
PRINT ' DECLARE @'+ @NombreCampo+' AS '+@Tipo + '('+@Tamanho+')'
END
ELSE
BEGIN
PRINT ' DECLARE @'+ @NombreCampo+' AS '+@Tipo
END

set @Cadena_Insercion = @Cadena_Insercion + ',' + @NombreCampo
set @Cadena_Variables = @Cadena_Variables + ',@' + @NombreCampo
SET @Cadena_Actualizacion = + @Cadena_Actualizacion + @NombreCampo + '=@' + @NombreCampo + ','
SET @Cadena_and = @Cadena_and + @NombreCampo + '=@' + @NombreCampo + ' AND '

Fetch Next From AutomaticTable Into @NombreCampo, @Tipo, @Tamanho

END

set  @Cadena_Insercion=SUBSTRING(@Cadena_Insercion,2,LEN(@Cadena_Insercion))
set  @Cadena_Variables=SUBSTRING(@Cadena_Variables,2,LEN(@Cadena_Variables))
set  @Cadena_Actualizacion=SUBSTRING(@Cadena_Actualizacion,1,LEN(@Cadena_Actualizacion)-1)
set  @Cadena_and=SUBSTRING(@Cadena_and,1,LEN(@Cadena_and)-4)

PRINT ' '
PRINT 'IF @ITRAN=1'
PRINT ' BEGIN'
PRINT '  SELECT '+@Cadena_Insercion+' FROM '+@TABLA+''
PRINT ' END'
PRINT ' '

PRINT 'IF @ITRAN=2'
PRINT ' BEGIN'
PRINT '  INSERT INTO '+@TABLA+'('+@Cadena_Insercion+') VALUES (' + @Cadena_Variables + ')'
PRINT ' END'
PRINT ' '

PRINT ' '
PRINT 'IF @ITRAN=3'
PRINT ' BEGIN'
PRINT '  UPDATE '+@TABLA+' SET ' +  @Cadena_Actualizacion + ' WHERE ' + @Cadena_and
PRINT ' END'
PRINT ' '

PRINT ' '
PRINT 'IF @ITRAN=4'
PRINT ' BEGIN'
PRINT '  DELETE '+@TABLA+' ' + ' WHERE ' + @Cadena_and
PRINT ' END'
PRINT ' '
PRINT 'END'

CLOSE AutomaticTable
DEALLOCATE AutomaticTable

martes, 12 de junio de 2012

Exchange + Android = FAIL!!

Tal vez la herramienta mas importante en entornos corporativos hoy en día es el correo electrónico, mediante este servicio se transportan datos cruciales para cualquier compañía, mediante el correo se transportan datos tan importantes como estrategias, productos, usuarios y un largo etc.

Uno de los servidores de correo mas usado en este momento por las corporaciones es Microsoft exchange, bien sea en sus versiones 2007 o 2010 y bueno otras tantas en sus versiones mas antiguas, regularmente las compañías tienen el servicio de correo electrónico unido con el directorio activo por lo tanto el mismo usuario y contraseña nos servirá para ingresar a la red de una compañía (Esto incluye todo y todo es todo lo que el usuario pueda hacer dentro de dicha red). 

Ahora bien si unimos todo lo anterior a que el sistema operativo mas usado en nuestros días para móviles es Android (para las pruebas se utilizo uno con ICS v4.0.3), obtendremos el siguiente pequeño riesgo.

Tipo de ataque

ARP poisoning: consiste en enviar mensajes ARP (Address Resolution Protocol) falsificados, ARP primero que todo es un protocolo que se encarga de resolver la dirección MAC que se corresponde con una dirección IP, por lo tanto ya se imaginaran que hace el ARP poisoning: pues si suplanta la dirección Física para realizar un ataque MITM, existen dos tipos de ataques ARP, activo y pasivo el pasivo únicamente recibe la información la lee y la envía tal cual al otro punto de red mientras que en el activo se modifica la información enviada.

Como se que ya se están impacientando, entremos en materia. este tipo de ataque funciona muchísimo mejor cuando las aplicaciones transmiten la información en texto plano y si logramos hacer el ARP poisoning en una red tendremos toda la información necesaria.

Pues este es el caso de la aplicación exchange para android, si! esta aplicación envía usuario y password en texto plano a través de la red , esto te da la posibilidad de obtener datos de ingreso a muchas redes corporativas.


La dirección 192.168.1.105 corresponde al dispositivo android.

Se realiza el ARP poisoning con Cain & Abel v4.9.43

Solo debemos esperar para obtener URL del servicio, usuario y password.


Como de costumbre les comento que esta información es compartida para uso académico y lo que realicen con ello no es responsabilidad del escritor de esta entrada.

Saludos!!

skyg4mb







miércoles, 16 de mayo de 2012

La pesadilla de los servidores vinculados (Linked Servers)


Buenos Dias Lectores, este sera la primer entrada relacionada con el tema central de este blog que se concentra en como su titulo lo indica; seguridad, les escribe D4G4 y espero les agrade lo que viene.
Al igual que en otras bases de datos los servidores vinculados hacen parte de las posibilidades de configuración de nuestros motores MS SQL SERVER, ¿que es un servidor vinculado?
Quien lo puede decir mejor que microsoft "Un servidor vinculado permite obtener acceso a consultas heterogéneas distribuidas en orígenes de datos OLE DB. Después de crear un servidor vinculado, las consultas distribuidas se pueden ejecutar en este servidor. Las consultas pueden unir tablas de varios orígenes de datos. Si el servidor vinculado se define como instancia de SQL Server, se pueden ejecutar procedimientos almacenados remotos."
La opciones de seguridad que me permiten un servidor vinculado son:
- Inicio de sesion local
- Representar
- Usuario remoto
Y otras cuatro que no van con el tema de esta publicacion, regularmente los DBA (en donde hay DBA) de las empresas utilizan como opcion de seguridad; Usuario remoto y alli colocan un usuario y un pass de login en el servidor remoto
Como vemos en este tutorial:

Que esta sucediendo cuando el usuario selecciona la opción de esta forma?
Que bien todo funciona de maravillas, puedo hacer lo que quiera en las tablas del servidor remoto. Pero en realidad esto es lo que quería?, la accion que esta realizando el DBA es que TODOS si TODOS los usuarios con acceso a la instancia de la maquina local estan heredando TODOS los permisos DML y DDL del usuario admin, ademas si activa la opcion ejecutar RPC, permite ejecutar todos los procedimientos almacenados del servidor remoto y si Admin es administrador del servidor remoto estamos incluyendo los procedimientos de sistema, es decir todos los usuarios con acceso a la instancia local heredan los privilegios del usuario admin en el servidor remoto. Entonces: ¿para que coños coloca el usuario sa en el listado superior?
Este grave error suele suceder en sistemas de baja importancia que hacen Linked Server a sistemas núcleo de negocio poniendo en riesgo los datos de las compañías.
Solución:
Si es necesario enlazar el servidor en la opción "For a login not defined in the list above, connections will"
Escojan la opción "NOT BE MADE" y definan en la lista superior los accesos a los usuarios locales con los privilegios limitados de los usuarios remotos.
Espero les haya gustado la primer entrega de este blog dedicado a seguridad, toda la informacion aqui expuesta es para fines educativos.
Un abrazo,
skyg4mb.

miércoles, 28 de julio de 2010

Copiar desde Excel a DataGridView

Les comparto el codigo fuente que diseñe para pegar desde excel a un datagridview en windows forms.


Dim data As IDataObject = Clipboard.GetDataObject


Dim i As
Integer = 0


Dim j As
Integer = 0



If
Not data.GetDataPresent("CSV", False) Then
Return



Try


'Obtenemos el texto almacenado en el portapapales


Dim s As
String = Clipboard.GetText



'hacemos un split para organizar la informacion por lineas


Dim lines As
String() = s.Split(New
Char(1) {ControlChars.Cr, ControlChars.Lf}, StringSplitOptions.RemoveEmptyEntries)



'Ciclo para cada linea del copy


For
Each line As
String
In lines


'Creamos una fila referenciando a la tabla datasource del DataGridView


Dim dr As DataRow = tablagrid.NewRow()



'Obtenemos las celdas que el usuario copia


Dim cells As
String() = line.Split(ControlChars.Tab)



'Burbuja para asignar cada uno de los datos de cada columna copia


For
Each cell As
String
In cells


If j = 0 Then

dr.Item(j) = 0


Else

dr.Item(j) = cell


End
If

j = j + 1


Next

i = i + 1

j = 0


'Agregamos la fila a la tabla

tablagrid.Rows.Add(dr)


Next


Catch ex As Exception

MessageBox.Show(ex.Message)


End
Try

Microsoft teams - Linux - Background

I'm sorry for my bad english, I'm learning. One problem of use Microsoft teams on linux is the background on webcam and share only o...