Aller au contenu

Recherche

Comment nous écrivons nos questions, et comment nous lisons les réponses

Près de quatre questions sur cinq de la banque de Polzy sont éclairées par la recherche publiée, et chacune d’elles nomme la recherche sur laquelle elle repose. La plupart sont écrites avec nos propres mots ; les quelques-unes que nous adaptons d’enquêtes publiques disent d’où elles viennent. Chaque résultat est calculé à découvert : sur combien de personnes il repose, de combien il pourrait encore bouger, et ce qu’il retient pour les protéger.

  • 487 questions en six langues
  • 380 éclairées par la recherche publiée
  • Environ 110 sources, citées question par question

La banque

Des questions qui gardent leurs mots

Un résultat n’a de sens qu’à côté d’un autre obtenu de la même façon. Chaque question de la banque a donc une identité permanente et une formulation fixe, et ses réponses se comparent d’une enquête à l’autre et dans le temps.

Une formulation fixe

Une question de la banque garde ses mots. Ses réponses comptent comme celles de cette question dans chaque enquête qui la pose, pour qu’une tendance compare ce qui est comparable.

Six langues

Chaque question est écrite en anglais, néerlandais, français, allemand, espagnol et arabe. Changer la langue d’une enquête change les mots qu’on lit, pas la question à laquelle la réponse est rattachée.

Classées selon ce qu’elles mesurent

Chaque question notée relève d’un seul thème : le soutien du manager, la charge de travail, la facilité d’utilisation, le rapport qualité-prix. Le score d’un thème est la moyenne des questions qui le mesurent.

Et selon le moment où elles sont posées

Chaque question est écrite pour un moment : un pulse régulier, une enquête annuelle, les premières semaines d’un nouvel arrivant, un départ, une demande d’assistance clôturée, une formation terminée, un événement.

D’où elles viennent

Éclairées par la recherche publiée

438 des 487 questions de la banque sont écrites avec nos propres mots. 48 adaptent une question d’une enquête publiée, dont 46 d’enquêtes menées par les gouvernements américain et britannique, et une est posée telle qu’elle a été publiée. Pour 380 d’entre elles, ce que la question mesure et la façon dont elle est formulée sont éclairés par la recherche publiée et par les enquêtes du secteur public qui publient leurs questions et leurs résultats. Voici cette recherche, par domaine.

Travail et bien-être

La recherche sur les exigences et les ressources du travail, la théorie de l’autodétermination (autonomie, compétence et appartenance), la sécurité psychologique dans les équipes et la justice organisationnelle : l’équité des décisions et des traitements.

Enquêtes publiques auprès des agents

Les enquêtes que des États mènent auprès de leurs propres agents et publient librement : la Federal Employee Viewpoint Survey américaine et la Civil Service People Survey britannique, avec l’Employee Census de la fonction publique australienne pour un thème.

Clients et service

La recherche sur la qualité de service (être fiable, réactif et attentionné), sur l’effort qu’il faut à un client pour obtenir ce qu’il veut, et sur la satisfaction et la fidélité.

Produits

La recherche sur l’utilisabilité (la facilité à apprendre et à utiliser un produit) et sur son utilité pour la tâche à laquelle on le destine.

Formations et événements

Les quatre niveaux d’évaluation des formations (réaction, apprentissage, comportement et résultats) et la recherche sur la façon dont ce qu’on apprend se retrouve dans le travail.

Comment demander

La méthodologie d’enquête : comment la formulation, les échelles de réponse, la traduction et l’ordre des questions changent les réponses données.

Les questions par public, et ce sur quoi elles reposent

Collaborateurs170
Clients114
Produit55
Événements70
Formation53
Toute enquête10
Formulaires15
20015010050
CollaborateursClientsProduitÉvénementsFormationToute enquêteFormulaires
Les formulaires sont écrits à partir de la pratique : un nom, un e-mail et une case de consentement n’ont besoin d’aucune théorie.

« Éclairées par » signifie que cette recherche a déterminé ce qu’une question mesure et comment elle est formulée, et non que ses mots en ont été repris. Les 49 questions qui reprennent leurs mots d’une enquête publiée sont enregistrées avec cette source et sa licence. Aucune des organisations citées n’a examiné ni approuvé Polzy. Nous n’utilisons pas de questions issues d’enquêtes commerciales vendues sous licence, ni d’autres sociétés d’enquêtes.

Par sujet

La recherche derrière chaque sujet

Chaque sujet que mesure la banque, avec la recherche sur laquelle ses questions sont écrites. Le plus souvent, elle a façonné ce que demande une question, pas ses mots ; une question qui reprend les mots d’une enquête publiée le dit sur sa ligne dans le créateur d’enquêtes.

Comment une question est écrite

Les règles que suit chaque question

Chaque question est rédigée à partir d’une définition écrite de ce qu’elle mesure (ce que le thème couvre, et ce qu’il ne couvre pas) puis vérifiée selon ces règles.

  • Une idée par question

    Pas de « et » entre deux choses qui pourraient recevoir des réponses différentes. « Mon manager est juste et facile à joindre » contient deux questions, donc elle est écrite en deux.

  • Des mots simples

    Des phrases courtes (quatorze mots au plus en anglais) d’un niveau de lecture courant, sans jargon ni expressions idiomatiques, qui ne se traduisent pas.

  • À la première personne

    Une affirmation avec laquelle on est d’accord ou non porte sur sa propre expérience : « Mon manager dit clairement sur quoi notre équipe doit se concentrer. » La satisfaction se demande sous forme de question : « Dans quelle mesure êtes-vous satisfait de… ? »

  • Une échelle adaptée

    Les affirmations se notent sur cinq points, de Pas du tout d’accord à Tout à fait d’accord, chaque point étant libellé. La satisfaction, l’effort et la fréquence ont chacun leur propre échelle libellée.

  • Neutre, pas orientée

    Aucune question ne présuppose une réponse ou une expérience : jamais « À quel point était-ce génial… », jamais « Comme la formation vous a aidé… ».

  • Questions inversées : peu nombreuses, et prévues

    Quelques questions disent le contraire (« Ma charge de travail dépasse ce que je peux gérer ») pour qu’une personne d’accord avec tout se remarque. Une au plus par thème, seulement dans les enquêtes complètes, jamais dans un pulse court, et inversée avant d’être notée. Sinon, les questions évitent la négation, que l’on lit mal.

Comment une question est vérifiée

Du brouillon à la banque

Chaque question de la banque a été étudiée et rédigée ainsi. Les vérifications avec des experts, avec des lecteurs et avec des traducteurs professionnels viennent ensuite, et la dernière s’appuie sur de vraies réponses, au fur et à mesure qu’elles arrivent.

  1. 1

    Recherche et définitions

    Fait

    Chaque thème reçoit une définition écrite et la recherche qui la fonde, avant qu’aucune question ne soit rédigée.

  2. 2

    Rédaction

    Fait

    Plusieurs formulations par thème, écrites selon les règles ci-dessus, pour pouvoir écarter les plus faibles.

  3. 3

    Revue par des experts

    À venir

    Un psychologue du travail pour les questions sur le travail, des chercheurs en expérience client et utilisateur pour les questions sur les clients et les produits, et un spécialiste de la formation pour les formations et les événements évaluent l’adéquation de chaque question à son thème.

  4. 4

    Tests à voix haute

    À venir

    Des personnes répondent aux questions à voix haute en les lisant, dans chaque langue, pour qu’un mot mal compris ou une question difficile apparaisse avant que quiconque s’y fie.

  5. 5

    Traduction professionnelle

    À venir

    Les traducteurs travaillent avec un glossaire commun pour des mots comme manager, équipe et charge de travail ; une rétrotraduction indépendante vérifie que le sens est préservé ; l’arabe est vérifié de droite à gauche sur la page de l’enquête. Tant que cette étape n’est pas faite, les traductions de la banque sont rédigées par une machine.

  6. 6

    Vérification avec de vraies réponses

    Au fil des réponses

    Une fois que suffisamment de personnes auront répondu, des chiffres portant sur de nombreuses réponses (jamais celles d’une seule personne) montreront les questions souvent sautées, auxquelles presque tout le monde répond de la même façon, ou qui ne suivent pas le reste de leur thème. Elles seront reformulées ou retirées, et une traduction qui obtient des réponses différentes des autres sera revérifiée.

Ce que nous pouvons utiliser

Nos propres mots, et les quelques questions que nous adaptons

438 de nos 487 questions sont entièrement écrites avec nos propres mots. 46 adaptent des questions que les gouvernements américain et britannique publient pour qu’on les réutilise, et 3 viennent d’une enquête publiée sur l’adéquation produit-marché. Chacune dit d’où elle vient.

  • Nos propres mots

    438
  • Adaptées d’enquêtes américaines du domaine public

    La Federal Employee Viewpoint Survey 2024, et la norme fédérale d’expérience client de la circulaire OMB A-11 §280.

    42
  • Adaptées de la Civil Service People Survey britannique

    Sous l’Open Government Licence v3.0, avec des modifications.

    4
  • Questions d’adéquation produit-marché, avec attribution

    Ellis (2010) et Vohra (2018).

    3

Nous n’utilisons aucune question d’une enquête vendue sous licence ni d’une autre société d’enquêtes, et un contrôle automatique arrête notre build quand une question s’en approche trop.

Dans le créateur

Ce sur quoi repose chaque question

Dans le créateur d’enquêtes, chaque question de la banque porte l’une de ces étiquettes, et celles qui s’appuient sur la recherche nomment leurs sources.

  • Éclairée par la recherche

    380

    Écrite d’après une définition tirée de la recherche publiée, que la question nomme : 336 avec nos propres mots, 44 adaptées d’enquêtes publiques.

  • Issue de la pratique

    107

    Écrite à partir de l’expérience des programmes d’écoute : les premières questions livrées par Polzy, les questions ouvertes et les champs de formulaire. 5 d’entre elles adaptent ou citent une source créditée : 2 questions de la norme fédérale américaine d’expérience client, et les 3 questions d’adéquation produit-marché.

  • Utilisée telle que publiée

    La question même d’une enquête publiée, posée mot pour mot. Aucune de nos questions ne porte cette étiquette aujourd’hui.

Une question que nous écrivons n’est pas dite validée parce qu’elle a été rédigée avec soin. Il faut pour cela des preuves tirées de vraies réponses, dans chaque langue, et ces vérifications commencent à mesure que les réponses arrivent.

Scores

D’une réponse à un score

Chaque réponse devient un chiffre de 0 à 100 : le point d’une note divisé par son point le plus haut, donc 4 sur 5 donne 80. Une question formulée à l’envers est d’abord retournée. Le score d’une enquête est la moyenne de ses réponses, sauf si son auteur donne plus de poids à certaines questions, et les écrans l’affichent sur 10.

  • Mon responsable prend mes idées au sérieux.4 sur 580
  • Ma charge de travail dépasse ce que je peux assumer.2 sur 540retournée60
  • J’ai confiance en mon responsable pour me traiter équitablement.5 sur 5100
  • Moyenne80À l’écran8,0

La question de recommandation (eNPS) est la part de personnes qui répondent 9 ou 10, moins la part de celles qui répondent de 0 à 6.

Thèmes

Des scores de thème que l’on peut retracer

Un thème n’est noté qu’à partir des questions qui lui sont associées et auxquelles une personne a répondu, et chaque réponse compte une fois. Un thème sur lequel personne n’a répondu n’a pas de score, et non un zéro.

  • Là où la lecture par l’IA est activée, une réponse écrite peut compter pour son thème, et un thème qu’aucune question n’aborde n’est noté que si la lecture renvoie à ce qui a été écrit.
  • Une question de la banque posée dans ses propres mots garde son score sous un identifiant permanent, et se compare donc avec chaque enquête qui la pose. Reformulez-la, ou changez son type ou son échelle, et elle devient la vôtre ; remettez ses mots et elle compte de nouveau.
Les questions de la banque de questions

Lire les résultats

La fiabilité de chaque chiffre

Le point à côté d’un score vient d’une marge à 95 % : de combien le score pourrait bouger si tout le monde avait répondu, calculée à partir du nombre de personnes qui ont répondu et de l’écart entre leurs réponses.

  • Chaque personne compte une fois, quel que soit le nombre de ses réponses.
  • La marge se resserre quand la plupart des personnes interrogées ont répondu.
  • En dessous de dix personnes, ou du double de votre seuil de confidentialité, aucune marge n’est indiquée, et le point dit quelle confiance accorder au chiffre d’après le seul nombre de réponses.
Ce chiffre est-il sûr ?

Commentaires

Les sujets de ce que les gens écrivent

Un commentaire est rangé sous le thème de la question à laquelle il répond. Là où la lecture par l’IA est activée, chaque réponse reçoit aussi jusqu’à six sujets tirés de ce qui a été écrit.

  • Un sujet est récurrent quand il revient dans au moins deux campagnes, et nouveau ou en hausse par rapport au même nombre de jours précédents.
  • Un sujet soulevé par moins de personnes que votre seuil de confidentialité n’est pas listé.
  • Un résumé des commentaires ne nomme personne et ne donne aucun chiffre qu’on ne lui a pas fourni, et une citation doit reprendre les propres mots de la personne.

Enseignements

Des enseignements qui montrent leur calcul

Les enseignements de Polzy sont trouvés par du code, pas par l’IA. Sept contrôles comparent les 30 derniers jours aux 30 précédents, et chaque constat porte les chiffres qui l’ont produit et son degré de confiance.

Les sept contrôles

  • Un groupe qui s’écarte de 8 points ou plus du reste de l’espace de travail
  • Un groupe dont le propre score a monté de 8 points ou plus
  • Un sujet nouveau ou en hausse dans deux campagnes ou plus
  • Des réponses négatives concentrées, à 40 % ou plus, dans un groupe
  • Un groupe devenu silencieux
  • Un sujet dont la mention va de pair avec un score inférieur de 8 points ou plus
  • Davantage de personnes montrant un signe de risque

L’IA écrit ensuite la phrase et une prochaine étape à partir de ces chiffres. D’un sujet qui va de pair avec un score plus bas, on dit qu’il va de pair avec lui, jamais qu’il en est la cause.

Analyse IA et Enseignements

Confidentialité

Un seuil de confidentialité sur chaque résultat

Le résultat d’un groupe n’apparaît que si suffisamment de personnes ont répondu : trois par défaut, ou un nombre plus élevé, jusqu’à 50, que fixe votre espace de travail. Il compte des personnes, pas des réponses.

  • Quand un groupe est masqué, Polzy masque aussi le plus petit des groupes affichés, pour protéger l’anonymat.
À propos de la taille minimale des groupes

Ce que nous n’affirmons pas, pour l’instant

  • Nous ne disons pas qu’une question mesure ce qu’elle doit mesurer tant que de vraies réponses ne l’ont pas montré.
  • Nous ne vous comparons pas à d’autres organisations : Polzy n’a pas de benchmarks.
  • Nous ne disons pas ce qui cause un score, seulement ce qui va de pair avec lui.

Pour aller plus loin

Comblez l’écart entre retours et actions.

Gratuit pour vos 1 000 premières réponses par mois. Les offres Team et Business commencent par un essai gratuit.

Données hébergées dans l’UERGPDRésiliable à tout moment