Citar Originalmente publicado por stardust
¿ Con que paquete estadistico y con que función calculas el tamaño necesario para concluir que hay diferencias significativas ? ¿ Como son capaces de calcularlo ?
Yo trabajo normalmente con minitab, el tamaño de la muestra lo puedo calcular directamente porque tiene una funcion para calcularlo dependiendo del test que deseas hacer, de las diferencias que pretendes encontrar y de la potencia del test (beta).

Citar Originalmente publicado por stardust
Por otra parte, como sabes, no existe ninguna base cientifica para tomarse como nivel de significación o P-value, el valor de 0.05%, asi que podria ser cualquier otro.
El nivel de significacion del 5%, o de 0.05 lo elige la persona que hace el test. Normalmente se toma este y si se desea ser más estricto se puede tomar 0.01. Todo tiene sus pros y contras, como sabras, si eres muy permisivo puedes encontrar diferencias cuando no las hay y si eres muy estricto puedes no encontrar nada cuando si que hay algo.

Citar Originalmente publicado por stardust
Por lo que he leido, los estadisticos no suelen tener mucha fe en los tests de significación como el chi cuadrado, entre otras razones por que no dan un grado de la fuerza con la que dos distribuciones son significativamente diferentes y se inclinan mas por alternativas como los intervalos de confianza.
El chi2 es un test muy utilizado porque es bastante robusto y no necesita restricciones sobre los datos, el problema que tiene es que es muy sensible al tamaño de la muestra, por eso se suelen utilizar otro tipo de test, como pueden ser los intervalos de confianza.