Betrouwbaarheid en valditeit wordt bekeken door te kijken naar de onderlinge samenhang tussen items. Als een meetinstrument maar 1 item heeft dan is dit dus ook niet mogelijk.
Bij het bepalen van de betrouwbaarheid van de schaal die je samenstelt beslis je hoe die schaal eruit gaat zien aan de hand van verschillende criteria. Een daarvan is de hoogte van de Cronbach's Alpha, maar een andere is de onderlinge correlaties. De eerste zegt iets over de algehele samenhang de andere over de samenhang tussen 1 item en de andere items (of de gehele schaal). Beide zijn belangrijk. Hiernaast is het ook goed om inhoudelijk te kijken naar de items. Is er iets opvallends aan het item dat slecht correleert met de rest? Bijv. anders geformuleerd of een iets andere inhoud. Dat zou een reden zijn om i.c.m. de slechte correlatie te kiezen een item te verwijderen.