¿Cuál es la especificación del formato de fecha hexadecimal en el servidor SQL?

El DATE type se almacena internamente como un número entero de 3 bytes, que representa el número de días desde el 1 de enero de 0001.

El valor hexadecimal que tiene está en formato little-endian, por lo que deberá cambiarlo a big-endian antes de poder usarlo en C# DateTime cálculos:

string hexString = "38320B00";

// convert the first 6 characters to bytes and combine them into an int
// we can ignore the final two characters because the DATE type is a
// 3-byte integer - the most-significant-byte should always be zero
int days = byte.Parse(hexString.Substring(0, 2), NumberStyles.HexNumber)
    | byte.Parse(hexString.Substring(2, 2), NumberStyles.HexNumber) << 8
    | byte.Parse(hexString.Substring(4, 2), NumberStyles.HexNumber) << 16;

DateTime dt = new DateTime(1, 1, 1).AddDays(days);

Console.WriteLine(dt);    // 12/12/2009 00:00:00