Historia de la estadística
El término "estadística matemática" designa las teorías matemáticas de la probabilidad e inferencia estadística, las cuales son usadas en la estadística aplicada. La relación entre estadística y probabilidades se fue desarrollando con el tiempo. En el siglo XIX, las estadísticas usaron de forma gradual la teoría de probabilidades, cuyos resultados iniciales fueron encontrados en los siglos XVII y XXI, particularmente en el análisis de los juegos de azar (apuestas). Para 1600, la astronomía usaba modelos probabilísticos y teorías estadísticas, particularmente el método de los mínimos cuadrados, el cual fue inventado por Legendre y Gauss. La incipiente teoría de las probabilidades y estadísticas fue sistematizada y extendida por Laplace; después de este, las probabilidades y estadísticas han experimentado un continuo desarrollo. En el siglo XIX, el razonamiento estadístico y los modelos probabilísticos fueron usados por las ciencias sociales para el avance las nuevas ciencias de psicología experimental y sociología, y por las ciencias físicas en termodinámica y mecánica estadística. El desarrollo del razonamiento estadístico estuvo fuertemente relacionado con el desarrollo de la lógica inductiva y el método científico.
Ehud Kalai
"La teoría de juegos ha sido descrita por algunos como la física de las ciencias sociales. Creo que otra analogía útil implica a la probabilidad y la estadística. La teoría de la probabilidad ofrece un lenguaje y reglas para manejar la incertidumbre, y las estadísticas ofrecen herramientas para aplicaciones del mundo real. Estas teorías están diseñadas para lidiar con la incertidumbre, sin importar dónde se presente. De manera similar, la teoría de juegos ofrece un lenguaje y reglas para lidiar con la interacción estratégica, donde sea que surja. Las aplicaciones de Arthur Andersen y Baxter sugieren un paralelo interesante con las estadísticas. Cuando se trata de una aplicación de la vida real, un estadístico debe elegir el mejor entre un conjunto de modelos disponibles: un enfoque clásico, un enfoque no paramétrico, un enfoque bayesiano, etc. Un teórico de juegos debe elegir entre un modelo de coalición, un modelo estratégico o un híbrido de varios modelos."