<div dir="auto">Creating a survey that works takes a lot of effort and it is quite specialised.<div dir="auto"><br></div><div dir="auto">Next time it might be worth asking some of the people who like to survey the OSM community to build the survey incorporating a couple of questions of their own and do a test run first.</div><div dir="auto"><br></div><div dir="auto">Cheerio John</div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Wed, Aug 7, 2019, 5:27 PM Christoph Hormann, <<a href="mailto:osm@imagico.de">osm@imagico.de</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">On Wednesday 07 August 2019, Simon Poole wrote:<br>
><br>
> @the designers of the survey. The question wrt remote mapping would<br>
> seem to be designed to achieve a specific result.<br>
<br>
I can also see some expectations and assumptions being visible 'between <br>
the lines' in some questions but this looks more like projecting own <br>
preconceptions and state of mind and less like active manipulation.<br>
<br>
There seem to be overall a lot of questions where there is a high <br>
likelihood that many participants will answer a different question than <br>
what those designing the survey wanted to ask - due to unclear and <br>
vague terminology for example and due to ambiguous references.<br>
<br>
The question you referred to for example says<br>
<br>
"Do you remotely map other countries?"<br>
<br>
and it is unclear if the "other" refers to the country where you live or  <br>
to "where do you map mostly".  Pure armchair mappers only mapping in a <br>
single country might answer "No" to this question.<br>
<br>
My main concern is rather that there are a lot of free form questions <br>
yet there is no option for the participants to allow publication of the <br>
individual free form answers in anonymized form.  This means we will - <br>
just like in the previous survey - only learn about any of these <br>
answers through the lens of the subjective interpretation of those <br>
making the aggregation.  This provides a lot of room for distortion <br>
through either cultural bias or deliberate selectivity of those doing <br>
the aggregation which kind of defeats the whole idea of doing a survey <br>
to reach parts of the community that are otherwise not visible.<br>
<br>
In other words: What the survey says is you are welcome to provide your <br>
ideas through the survey but we, the creators of the survey, reserve <br>
the right to interpret your answers as we see fit and neither you nor <br>
anyone else may correct us if we do not correctly interpret what you <br>
wrote.<br>
<br>
-- <br>
Christoph Hormann<br>
<a href="http://www.imagico.de/" rel="noreferrer noreferrer" target="_blank">http://www.imagico.de/</a><br>
<br>
_______________________________________________<br>
talk mailing list<br>
<a href="mailto:talk@openstreetmap.org" target="_blank" rel="noreferrer">talk@openstreetmap.org</a><br>
<a href="https://lists.openstreetmap.org/listinfo/talk" rel="noreferrer noreferrer" target="_blank">https://lists.openstreetmap.org/listinfo/talk</a><br>
</blockquote></div>