<p dir="ltr">Hi all, </p>
<p dir="ltr">Data quality is a major issue I think. And I think especially validation. Firstly, that validators are barely recognised in the current tasking manager and secondly that anyone can validate. </p>
<p dir="ltr">In MSF, people who are unfamiliar with OSM are much reassured that there is a validation process. However, a short browse of the tasking manager tells you that many projects are not totally validated (despite the incredible efforts of the validators in the community). For me there is a significant risk here of losing the trust of the people who use the data.</p>
<p dir="ltr">Having said that, I'd like to punt this back to Phil and Sev as I speak to people in the field, who use the data, on a regular basis. Data quality, so far, has almost never come up as an issue. Do you guys have different experience or feedback from field teams? It would be useful to know specifics if you have.</p>
<p dir="ltr">Cheers, </p>
<p dir="ltr">Pete</p>
<div class="gmail_extra"><br><div class="gmail_quote">On 13 Oct 2016 07:31, "Robert Banick" <<a href="mailto:rbanick@gmail.com">rbanick@gmail.com</a>> wrote:<br type="attribution"><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr">Hi all,<div><br></div><div>HOT is clearly one of, if not the, most successful crowdsourcing projects for humanitarian response in the world. Success means not just contributors but also use of the data by actual humanitarians. It’s unsurprising we’re encountering some limits to the approach and need to evolve it.</div><div><br></div><div>I like Phil and John’s automated approach to these things. I think the Tasking Manager has proven that the best way to manage these interactions is through an automated platform. My only concern is making what’s currently straightforward overly complex and intimidating for new users. But that’s a call for good design and introductory materials, not dumbing down our approach.</div><div><br></div><div>However, it’s the middle of a disaster and clearly not the time for wholesale changes. I suggest we flag these thoughts for the forthcoming Tasking Manager redesign and embrace makeshift systems in the meantime.</div><div><br></div><div>Cheers,</div><div>Robert</div></div><br><div class="gmail_quote"><div dir="ltr">On Thu, Oct 13, 2016 at 8:31 AM Phil (The Geek) Wyatt <<a href="mailto:phil@wyatt-family.com" target="_blank">phil@wyatt-family.com</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div lang="EN-AU" link="blue" vlink="purple" class="m_2217148503166872622gmail_msg"><div class="m_2217148503166872622m_9110142302415692998WordSection1 m_2217148503166872622gmail_msg"><p class="MsoNormal m_2217148503166872622gmail_msg"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d" class="m_2217148503166872622gmail_msg">Hi Folks,<u class="m_2217148503166872622gmail_msg"></u><u class="m_2217148503166872622gmail_msg"></u></span></p><p class="MsoNormal m_2217148503166872622gmail_msg"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d" class="m_2217148503166872622gmail_msg"><u class="m_2217148503166872622gmail_msg"></u> <u class="m_2217148503166872622gmail_msg"></u></span></p><p class="MsoNormal m_2217148503166872622gmail_msg"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d" class="m_2217148503166872622gmail_msg">I am a retired long time map user, occasional mapper (in QGIS, Mapinfo) and supporter of the OSM mapping project. It seems to me that the issue of poor mapping, especially for HOT projects, is coming up on such a regular basis that it's time to consider some mandatory training for users before they get to map under the HOT task manager. I don't think this would be too difficult for most volunteers and it could ensure that at least a certain level of competency is attained before being exposed to complex tasks. If people know that in the first place then they can make a choice as to whether they commence or continue to map.<u class="m_2217148503166872622gmail_msg"></u><u class="m_2217148503166872622gmail_msg"></u></span></p><p class="MsoNormal m_2217148503166872622gmail_msg"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d" class="m_2217148503166872622gmail_msg"><u class="m_2217148503166872622gmail_msg"></u> <u class="m_2217148503166872622gmail_msg"></u></span></p><p class="MsoNormal m_2217148503166872622gmail_msg"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d" class="m_2217148503166872622gmail_msg">I have no idea how this could be accomplished as I know little of the linkages between OSM and the HOT Task Manager, but restricting HOT tasks to those with some defined training could improve the results.<u class="m_2217148503166872622gmail_msg"></u><u class="m_2217148503166872622gmail_msg"></u></span></p><p class="MsoNormal m_2217148503166872622gmail_msg"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d" class="m_2217148503166872622gmail_msg"><u class="m_2217148503166872622gmail_msg"></u> <u class="m_2217148503166872622gmail_msg"></u></span></p><p class="MsoNormal m_2217148503166872622gmail_msg"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d" class="m_2217148503166872622gmail_msg">Let's say as a minimum you train folks on roads and residential area polygons - that might be level 1 (ID Editor)<u class="m_2217148503166872622gmail_msg"></u><u class="m_2217148503166872622gmail_msg"></u></span></p><p class="MsoNormal m_2217148503166872622gmail_msg"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d" class="m_2217148503166872622gmail_msg">Level 2 could be after training for buildings, tracks, paths (ID or JOSM)<u class="m_2217148503166872622gmail_msg"></u><u class="m_2217148503166872622gmail_msg"></u></span></p><p class="MsoNormal m_2217148503166872622gmail_msg"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d" class="m_2217148503166872622gmail_msg">Level 3 for validation (JOSM)<u class="m_2217148503166872622gmail_msg"></u><u class="m_2217148503166872622gmail_msg"></u></span></p><p class="MsoNormal m_2217148503166872622gmail_msg"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d" class="m_2217148503166872622gmail_msg"><u class="m_2217148503166872622gmail_msg"></u> <u class="m_2217148503166872622gmail_msg"></u></span></p><p class="MsoNormal m_2217148503166872622gmail_msg"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d" class="m_2217148503166872622gmail_msg">In this way HOT tasks simply get assigned at each level and you know you have the right people doing the tasks at hand. The task manager could also only highlight jobs at their assigned level until they do the next level training.<u class="m_2217148503166872622gmail_msg"></u><u class="m_2217148503166872622gmail_msg"></u></span></p><p class="MsoNormal m_2217148503166872622gmail_msg"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d" class="m_2217148503166872622gmail_msg"><u class="m_2217148503166872622gmail_msg"></u> <u class="m_2217148503166872622gmail_msg"></u></span></p><p class="MsoNormal m_2217148503166872622gmail_msg"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d" class="m_2217148503166872622gmail_msg">You might even consider, as part of validation, dropping people from a higher level to a lower level if they continually fail to produce results at the desired consistency.<u class="m_2217148503166872622gmail_msg"></u><u class="m_2217148503166872622gmail_msg"></u></span></p><p class="MsoNormal m_2217148503166872622gmail_msg"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d" class="m_2217148503166872622gmail_msg"><u class="m_2217148503166872622gmail_msg"></u> <u class="m_2217148503166872622gmail_msg"></u></span></p><p class="MsoNormal m_2217148503166872622gmail_msg"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d" class="m_2217148503166872622gmail_msg">Just my thoughts as a casual mapper.<u class="m_2217148503166872622gmail_msg"></u><u class="m_2217148503166872622gmail_msg"></u></span></p><p class="MsoNormal m_2217148503166872622gmail_msg"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d" class="m_2217148503166872622gmail_msg"><u class="m_2217148503166872622gmail_msg"></u> <u class="m_2217148503166872622gmail_msg"></u></span></p><p class="MsoNormal m_2217148503166872622gmail_msg"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d" class="m_2217148503166872622gmail_msg"><u class="m_2217148503166872622gmail_msg"></u> <u class="m_2217148503166872622gmail_msg"></u></span></p><p class="MsoNormal m_2217148503166872622gmail_msg"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d" class="m_2217148503166872622gmail_msg">Cheers - Phil<u class="m_2217148503166872622gmail_msg"></u><u class="m_2217148503166872622gmail_msg"></u></span></p><p class="MsoNormal m_2217148503166872622gmail_msg"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d" class="m_2217148503166872622gmail_msg"><u class="m_2217148503166872622gmail_msg"></u> <u class="m_2217148503166872622gmail_msg"></u></span></p><p class="MsoNormal m_2217148503166872622gmail_msg"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d" class="m_2217148503166872622gmail_msg"><a href="http://www.thingreenline.org.au/" class="m_2217148503166872622gmail_msg" target="_blank"><span style="color:#1f497d;text-decoration:none" class="m_2217148503166872622gmail_msg">Thin Green Line Supporter</span></a>, Volunteer Mapper (GISMO) - <a href="http://www.redcross.org.au/volunteering.aspx" class="m_2217148503166872622gmail_msg" target="_blank"><span style="color:#1f497d;text-decoration:none" class="m_2217148503166872622gmail_msg">Red Cross</span></a> <u class="m_2217148503166872622gmail_msg"></u><u class="m_2217148503166872622gmail_msg"></u></span></p><p class="MsoNormal m_2217148503166872622gmail_msg"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d" class="m_2217148503166872622gmail_msg"><u class="m_2217148503166872622gmail_msg"></u> <u class="m_2217148503166872622gmail_msg"></u></span></p><p class="MsoNormal m_2217148503166872622gmail_msg"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d" class="m_2217148503166872622gmail_msg"><u class="m_2217148503166872622gmail_msg"></u> <u class="m_2217148503166872622gmail_msg"></u></span></p><p class="MsoNormal m_2217148503166872622gmail_msg"><b class="m_2217148503166872622gmail_msg"><span lang="EN-US" style="font-size:10.0pt;font-family:"Tahoma","sans-serif"" class="m_2217148503166872622gmail_msg">From:</span></b><span lang="EN-US" style="font-size:10.0pt;font-family:"Tahoma","sans-serif"" class="m_2217148503166872622gmail_msg"> Severin Menard [mailto:<a href="mailto:severin.menard@gmail.com" class="m_2217148503166872622gmail_msg" target="_blank">severin.menard@gmail.<wbr>com</a>] <br class="m_2217148503166872622gmail_msg"><b class="m_2217148503166872622gmail_msg">Sent:</b> Thursday, October 13, 2016 4:34 AM<br class="m_2217148503166872622gmail_msg"><b class="m_2217148503166872622gmail_msg">To:</b> <a href="mailto:hot@openstreetmap.org" class="m_2217148503166872622gmail_msg" target="_blank">hot@openstreetmap.org</a><br class="m_2217148503166872622gmail_msg"><b class="m_2217148503166872622gmail_msg">Subject:</b> [HOT] OSM humanitarian mapping and its learning curve<u class="m_2217148503166872622gmail_msg"></u><u class="m_2217148503166872622gmail_msg"></u></span></p></div></div><div lang="EN-AU" link="blue" vlink="purple" class="m_2217148503166872622gmail_msg"><div class="m_2217148503166872622m_9110142302415692998WordSection1 m_2217148503166872622gmail_msg"><p class="MsoNormal m_2217148503166872622gmail_msg"><u class="m_2217148503166872622gmail_msg"></u> <u class="m_2217148503166872622gmail_msg"></u></p><div class="m_2217148503166872622gmail_msg"><div class="m_2217148503166872622gmail_msg"><div class="m_2217148503166872622gmail_msg"><p class="MsoNormal m_2217148503166872622gmail_msg" style="margin-bottom:12.0pt">The <a href="http://tasks.hotosm.org/project/2228" class="m_2217148503166872622gmail_msg" target="_blank">edits on hotosm.org job #2228</a> have started and now happens what I feared. There is no mention of what are the necessary skills and newbies are coming with a lot of enthusiasm but with almost no OSM experience. A quick analysis of the first 29 contributors shows that 20 of them have created their OSM account less than one month ago. Some did it yesterday or today. Wow. <u class="m_2217148503166872622gmail_msg"></u><u class="m_2217148503166872622gmail_msg"></u></p></div><div class="m_2217148503166872622gmail_msg"><p class="MsoNormal m_2217148503166872622gmail_msg" style="margin-bottom:12.0pt">The result of that : obviously, crappy edits are coming, spoiling what we have been doing over the last few days : now we have building as nodes where shapes are totally visible, un-squared bad shaped buildings and the main landuse area is self-cutting in various places (see <a href="https://leslibresgeographes.org/jirafeau/f.php?h=26gWjHki&p=1" class="m_2217148503166872622gmail_msg" target="_blank">there</a>). <u class="m_2217148503166872622gmail_msg"></u><u class="m_2217148503166872622gmail_msg"></u></p></div><div class="m_2217148503166872622gmail_msg"><p class="MsoNormal m_2217148503166872622gmail_msg">Nothing new under the sun : it was already the case for Haiti EarthQuake 2010. Quite a pity that six years after, despite the OSM tools have improved a lot, it remains the same. It is though quite simple to fix the most part of it: do-not-invite-newcomers-to-<wbr>map-over-complex-crisis-<wbr>contexts.<br class="m_2217148503166872622gmail_msg"><br class="m_2217148503166872622gmail_msg">I guess some will argue that the OSM newcomers are people of good will and that they just want to help and that they my feel offended/discouraged. Of course their intentions are high and yes they may feel a bit hurt. But this is really a classic in humanitarian response: people with the best intentions in the world may not fit for it, just because they are not experienced yet. <u class="m_2217148503166872622gmail_msg"></u><u class="m_2217148503166872622gmail_msg"></u></p></div><div class="m_2217148503166872622gmail_msg"><p class="MsoNormal m_2217148503166872622gmail_msg"><u class="m_2217148503166872622gmail_msg"></u> <u class="m_2217148503166872622gmail_msg"></u></p></div><div class="m_2217148503166872622gmail_msg"><p class="MsoNormal m_2217148503166872622gmail_msg">Mapping in OSM in crisis response is not an exciting one-shot hobby : it does have its learning curve and it is key to learn how to map correctly before being dropped over complex humanitarian contexts. This is why I mentioned three sets of necessary skills for the jobs I created these last days on <a href="http://taches.francophonelibre.org" class="m_2217148503166872622gmail_msg" target="_blank">http://taches.<wbr>francophonelibre.org</a>. And the beginner mappers who joined the job that fitted for beginners are people that already have a few months of OSM experience, not newcomers. Newcomers should be driven over non urgent fields.<br class="m_2217148503166872622gmail_msg"><br class="m_2217148503166872622gmail_msg">If someone is not interested to learn first in not a mass media covered crisis context : this is not a problem, it is actually a good way to see real motivations. I personally prefer to get one mapper that will become a huge, excellent contributor, 3-4 more occasional but still producing neat data, than to lose 10 that would create crappy objects and just leave forever afterwards anyway. <u class="m_2217148503166872622gmail_msg"></u><u class="m_2217148503166872622gmail_msg"></u></p></div><div class="m_2217148503166872622gmail_msg"><p class="MsoNormal m_2217148503166872622gmail_msg"><u class="m_2217148503166872622gmail_msg"></u> <u class="m_2217148503166872622gmail_msg"></u></p></div><p class="MsoNormal m_2217148503166872622gmail_msg" style="margin-bottom:12.0pt">I guess the resulting need of duplicating the number of necessary edits (crappy ones then corrections) to get a clean data is a rather a good way to grow the number of total contributors and the number of total edits created through the # of the HOT TM instance that seems to be so important for the board of HOT US Inc (two current directors have contacted me for this purpose) to make communication and raise funds from the figures. But what is at stake here is to provide good baseline data for humanitarian response, not distorted metrics.<u class="m_2217148503166872622gmail_msg"></u><u class="m_2217148503166872622gmail_msg"></u></p></div><p class="MsoNormal m_2217148503166872622gmail_msg">Séverin<u class="m_2217148503166872622gmail_msg"></u><u class="m_2217148503166872622gmail_msg"></u></p></div></div></div>______________________________<wbr>_________________<br class="m_2217148503166872622gmail_msg">
HOT mailing list<br class="m_2217148503166872622gmail_msg">
<a href="mailto:HOT@openstreetmap.org" class="m_2217148503166872622gmail_msg" target="_blank">HOT@openstreetmap.org</a><br class="m_2217148503166872622gmail_msg">
<a href="https://lists.openstreetmap.org/listinfo/hot" rel="noreferrer" class="m_2217148503166872622gmail_msg" target="_blank">https://lists.openstreetmap.<wbr>org/listinfo/hot</a><br class="m_2217148503166872622gmail_msg">
</blockquote></div>
<br>______________________________<wbr>_________________<br>
HOT mailing list<br>
<a href="mailto:HOT@openstreetmap.org">HOT@openstreetmap.org</a><br>
<a href="https://lists.openstreetmap.org/listinfo/hot" rel="noreferrer" target="_blank">https://lists.openstreetmap.<wbr>org/listinfo/hot</a><br>
<br></blockquote></div></div>