Samenvatting
Mol SSL, Van Gunst SG, Pigmans VG, Opstelten W. Invloed van focusgroepen op NHG-Standaarden en implementatieproducten. Huisarts Wet 2011;54(6):298-303. Achtergrond Om NHG-Standaarden en bijbehorende implementatieproducten beter af te stemmen op het gebruik door huisartsen, organiseert het NHG tijdens de ontwikkeling daarvan groepsinterviews (‘focusgroepen’), waarin de huisartsen meepraten over de inhoud en ook de implementatie van de standaard. Wij wilden weten in hoeverre de adviezen van deze huisartsenfocusgroepen ook daadwerkelijk worden overgenomen en zo nee, waarom niet. Ook wilden we weten of de deelnemers tevreden waren over de bijeenkomsten. Methode Voor zeventien NHG-Standaarden gingen wij na hoeveel van de adviezen van focusgroepen terug te vinden was in de standaarden en implementatieproducten, en vroegen wij de NHG-medewerkers naar de redenen om een advies af te wijzen. De tevredenheid van de deelnemers maten wij met een vragenlijst onder deelnemende huisartsen en een groepsinterview onder NHG-medewerkers. Resultaten Van de in totaal 281 inhoudelijke adviezen die de zeventien focusgroepen gaven, werden er 209 (74%) overgenomen in de definitieve teksten van de standaarden. Redenen om een advies af te wijzen, waren meestal een verschil van opvatting over de inhoud of over het belang ervan. Van de 151 voorgestelde implementatieproducten – voor het oplossen van 94 implementatieknelpunten – werden er 93 (62%) daadwerkelijk gerealiseerd. Naast het ingeschatte belang speelde hier ook een rol of het voorgestelde product al dan niet paste in het bestaande arsenaal. Zowel de NHG-medewerkers als de responderende huisartsen waren zeer tevreden over de focusgroepbijeenkomsten. Conclusie Groepsinterviews met huisartsen zijn waardevol voor het beter afstemmen van de inhoud van de NHG-Standaarden en implementatieproducten op de wensen van praktiserende huisartsen.
Wat is bekend?
- Om ervoor te zorgen dat richtlijnen in de praktijk ook worden nageleefd, moet men huisartsen zo veel mogelijk betrekken bij de ontwikkeling ervan.
- Daarom heeft het NHG de betrokkenheid van huisartsen bij de ontwikkeling en implementatie van NHG-Standaarden georganiseerd via een aantal kanalen.
- Sinds een aantal jaren is één van deze kanalen de focusgroep: een groepsinterview met praktiserende huisartsen onder leiding van NHG-medewerkers.
Wat is nieuw?
- Focusgroepen leveren een waardevolle bijdrage aan de NHG-Standaarden. De meeste adviezen zijn terug te vinden in de tekst van de standaard en in inmplementatieproducten.
- Het zou zelfs nuttig kunnen zijn om al in een eerder stadium van de ontwikkeling focusgroepen te organiseren.
Inleiding
Onduidelijkheid, verschil van mening over de inhoud en praktische bezwaren zijn voor huisartsen belangrijke redenen om adviezen uit NHG-Standaarden niet op te volgen.1 Het NHG probeert daar iets aan te doen door huisartsen te betrekken bij de ontwikkeling en implementatie van de standaarden.2 Hun invloed komt tot uiting in verschillende stadia. Zo bestaat de NHG-Adviesraad Standaarden (NAS), die adviseert over de keuze van onderwerpen, geheel uit huisartsen. Ook de werkgroep die een standaard maakt – de standaardwerkgroep –, bestaat grotendeels uit huisartsen, onder wie zowel fulltime praktiserende als universitair gebonden collega’s. Bovendien krijgen vijftig aselect gekozen huisartsen het verzoek om schriftelijk commentaar te leveren op de conceptversie. En sinds 2002 worden in de allerlaatste fase groepsinterviews gehouden waarin een zogeheten focusgroep van twaalf praktiserende huisartsen twee uur lang discussieert over de conceptstandaard, in aanwezigheid van een wetenschappelijk medewerker van de afdeling Richtlijnontwikkeling en een wetenschappelijk medewerker van de afdeling Implementatie. In deze bijeenkomst gaat het vooral om de duidelijkheid en toepasbaarheid van de standaard, en geven de deelnemers aan wat hen zou kunnen helpen bij de praktische implementatie ervan. De benaming ‘focusgroepinterview’ is feitelijk onjuist, want de gebruikte methode is een variant van de zogeheten ‘nominale groepstechniek’.3 Iedere deelnemer brengt zijn of haar belangrijkste knelpunten in, die één voor één worden besproken. Het interview resulteert in een lijst met adviezen voor aanpassing van de betreffende NHG-Standaard en een geprioriteerde lijst van knelpunten die men verwacht tegen te komen bij de implementatie. Bovendien doen de deelnemers voorstellen voor implementatieproducten. Focusgroepbijeenkomsten worden vooral georganiseerd bij nieuwe standaarden en, in geval van een herziening, als er belangrijke veranderingen zijn ten opzichte van de eerdere versie. De deelnemers worden geworven onder huisartsopleiders, omdat die de standaarden bij uitstek kritisch beoordelen en toepassen, en onder Erkend Kwaliteitsconsulenten (EKC’s) omdat zij vertrouwd zijn met de verschillende implementatieproducten. In dit artikel beschrijven we de evaluatie van de focusgroepbijeenkomsten, waarbij we ons richten op de vraag in hoeverre adviezen voor aanpassingen van de standaard of ontwikkeling van implementatieproducten worden overgenomen en wat de redenen zijn voor eventuele afwijzing. Voorts is de satisfactie met de focusgroepen geëvalueerd (procesevaluatie).
Methode
Evaluatie van het effect
Tussen 2006 en 2010 verschenen er zeventien NHG-Standaarden waarvan het concept in een focusgroepbijeenkomst besproken is [kader]. De adviezen van deze focusgroepen zijn schriftelijk vastgelegd. Wij (SG of SM) vergeleken de conceptstandaard met de definitieve standaard en scoorden of een advies geheel, gedeeltelijk of niet was overgenomen. De uitslag legden wij vervolgens voor aan de wetenschappelijk medewerker van de afdeling Richtlijnontwikkeling die de standaardwerkgroep begeleid had, met het verzoek om bij niet-overgenomen adviezen de reden te noteren [tabel 1]. Voor de implementatieproducten volgden wij dezelfde procedure en was de onderbouwing afkomstig van de wetenschappelijk medewerker van de afdeling Implementatie [tabel 2]. We rubriceerden de adviezen van de focusgroepen naar type (zoals aard en taakgebied van het geadviseerde implementatieproduct)4 om te kunnen beoordelen of bepaalde typen adviezen vaker werden overgenomen dan andere.
Kader: standaarden waarover een focusgroep gehouden is in de periode 2006-2010
- Artritis
- Astma bij volwassenen
- Atriumfibrilleren
- Bacteriële huidinfecties
- Diepe veneuze trombose
- Erectiele disfunctie
- Hand- en polsklachten
- Influenza en influenzavaccinatie
- Kinderen met koorts
- Obstipatie
- Otitis media acuta bij kinderen
- Polymyalgia rheumatica
- Rectaal bloedverlies
- Schouderklachten
- Subfertiliteit
- Ulcus cruris venosum
- Virushepatitis en andere leveraandoeningen
NHG-Standaard | Focusgroepadvies | Type opmerking | Overgenomen | Onderbouwing |
---|---|---|---|---|
Diepe veneuze trombose | ‘afwezigheid van trauma’ beter omschrijven | tekstueel | ja | tekst is geworden: ‘afwezigheid van trauma die zwelling in kuit verklaart’ |
Erectiele disfunctie | gesprekken voeren met patiënten is lastig | nieuwe vraag | ja | gespreksmodel ingevoegd |
Kinderen met koorts | kind met koorts langer dan 3 dagen: kan soms telefonisch worden afgehandeld in plaats van met consult | inhoudelijk | nee | gerichte keuze van standaardwerkgroep om opmerking niet over te nemen |
Obstipatie | benadrukken: vezelinname gedetailleerd uitvragen (via diëtist of met vragenlijst) omdat schatten niet goed genoeg is | tekstueel | nee | standaardwerkgroep twijfelt aan belang van opmerking |
NHG- Standaard | Implementatieknelpunt | Voorgestelde implementatieproducten waarin dit knelpunt verwerkt zou kunnen worden |
---|---|---|
Astma bij volwassenen | voorlichting aan patiënten, door huisarts en POH, over aard aandoening en inhalatie instructie |
|
begrip dubbeldiagnose astma en COPD is lastig |
| |
Artritis | vaardigheid bij lichamelijk onderzoek |
|
Erectiele disfunctie | woorden voor erectiele disfunctie in andere culturen |
|
voorlichting in andere taal en cultuur |
|
Procesevaluatie
Wij vroegen de wetenschappelijk medewerkers van het NHG en de deelnemende huisartsen om het proces in de focusgroepen te evalueren. Met de NHG-medewerkers hielden wij – per afdeling – een gezamenlijk interview waarin doelstellingen, tijdstip en werkwijze van de focusgroepbijeenkomsten besproken werden. Voor de 146 huisartsen die tussen maart 2007 en april 2010 hadden deelgenomen aan de focusgroepen stelden wij een online vragenlijst samen op basis van semi-gestructureerde interviews met vier deelnemers. Van 21 deelnemers hadden wij geen e-mailadres, zodat uiteindelijk 125 huisartsen de vragenlijst kregen. Twee onderzoekers (SM en SG) rubriceerden de antwoorden op de open vragen.
Resultaten
Adviezen over de inhoud
In de periode 2006-2010 gaven de focusgroepen in totaal 281 adviezen, die betrekking hadden op 17 NHG-Standaarden (range 7-55 per standaard). Van deze adviezen werden er 185 (66%; range 40-82% per standaard) geheel en 25 (8%; range 0-19% per standaard) gedeeltelijk overgenomen. Tweeënzeventig adviezen (26%; range 18-50% per standaard) werden niet overgenomen. De meest gegeven adviezen waren tekstueel: tekst verduidelijken, herordenen – bijvoorbeeld noot naar hoofdtekst – of als tabel of algoritme weergeven [tabel 3]. Andere veel gegeven types waren adviezen om een nog niet besproken onderwerp aan de standaard toe te voegen of om een richtlijn beter te onderbouwen zodat huisartsen deze eerder zouden gaan implementeren. Aanbevelingen om de praktische uitvoerbaarheid te vergroten werden het vaakst overgenomen, de andere types werden elk ongeveer even vaak overgenomen. De meest genoemde redenen om een advies niet op te volgen, waren een verschil van opvatting over de inhoud of over het belang ervan [tabel 4]. Een zesde van de aanbevelingen werd niet overgenomen wegens gebrek aan wetenschappelijke onderbouwing.
Type advies | n | Geheel of gedeeltelijk overgenomen | |
---|---|---|---|
n | % | ||
Tekstueel (verhelderen, tabel, plaatje, algoritme, schema) | 123 | 92 | 75% |
Nieuwe vraag van de huisartsen in standaard te beantwoorden | 52 | 37 | 71% |
Meer onderbouwing geven om huisartsen te overtuigen | 50 | 36 | 72% |
Verandering van de richtlijn want inhoudelijk mee oneens | 26 | 20 | 77% |
Verandering van de richtlijn om praktische uitvoerbaarheid te vergroten | 14 | 13 | 93% |
Belang van een richtlijn meer benadrukken (zoals noot naar hoofdtekst) | 6 | 3 | 50% |
Restcategorie | 10 | 8 | 80% |
Reden | n |
---|---|
Oneens met advies | 17 |
Twijfel aan belang advies | 15 |
Onvoldoende wetenschappelijke onderbouwing | 12 |
Vergeten door te voeren | 7 |
Advies niet begrepen | 4 |
Anders (bijvoorbeeld past niet in format standaard) | 6 |
Weet niet meer of geen antwoord ingevuld | 11 |
Adviezen over de implementatie
In totaal noemden de focusgroepen 94 knelpunten bij de implementatie, en zij stelden in totaal 151 implementatieproducten voor om deze knelpunten aan te pakken (gemiddeld 9 producten per standaard; range 1-19; [tabel 2] geeft enige voorbeelden). De vaakst gegeven suggestie was het knelpunt te verwerken in een Programma voor Individuele Nascholing (PIN); andere suggesties betroffen materiaal voor patiëntenvoorlichting, onderwijsmateriaal voor toetsgroepen en filmmateriaal [tabel 5]. Voor 75 (80%) van de 94 genoemde knelpunten kwamen uiteindelijk implementatieproducten tot stand. Van de 151 voorgestelde implementatieproducten werden er 93 (62%) gerealiseerd, waarvan 85 geheel en 8 gedeeltelijk. In de meeste gevallen ging het om individuele nascholingsproducten of patiëntenbrieven [tabel 5].
(Onderdeel van) implementatieproduct | Voorgesteld | Gerealiseerd | |
---|---|---|---|
n | % | ||
Individuele nascholing (PIN) | 79 | 66 | 84% |
Patiëntenbrieven | 24 | 15 | 63% |
Patiëntenvoorlichting, anders (bijvoorbeeld plaatjes) | 6 | 0 | 0% |
Onderwijsmateriaal voor toetsgroepen | 11 | 3 | 27% |
Filmmateriaal | 9 | 4 | 44% |
Trainingen in groepen | 7 | 2 | 29% |
Materiaal voor praktijkondersteuner of praktijkassistente | 6 | 1 | 17% |
Overige (bijvoorbeeld aanpassing in HIS) | 9 | 2 | 22% |
Reden | n |
---|---|
Verschil van mening over het belang | 15 |
Past niet in bestaand arsenaal (bijvoorbeeld afbeeldingen in patiëntenbrief) | 14 |
Taak andere afdeling | 3 |
Vergeten door te voeren | 11 |
Overige (bijvoorbeeld ondersteuning HIS, aanpassing telefoonwijzer) | 12 |
Ontbreekt | 3 |
Taakgebied | Voorgesteld | Gerealiseerd | |
---|---|---|---|
n | % | ||
Vakinhoudelijk handelen | 57 | 42 | 74% |
Arts-patiëntcommunicatie | 54 | 35 | 65% |
Samenwerking | 10 | 5 | 50% |
Organiseren | 14 | 8 | 57% |
Maatschappelijk handelen | 2 | 2 | 100% |
Wetenschap en onderwijs | 2 | 2 | 100% |
Professionaliteit | 12 | 6 | 50% |
Procesevaluatie door NHG-medewerkers
Aan de groepsinterviews namen zes wetenschappelijk medewerkers van de afdeling Richtlijnontwikkeling en tien van de afdeling Implementatie deel. Naar hun mening beantwoordden de focusgroepen aan beide doelstellingen: zij kregen goede suggesties voor het bijstellen van de standaard en duidelijkheid over knelpunten in de implementatie. Zij vonden dat de focusgroepen duidelijk meerwaarde hadden boven de schriftelijke commentaarronde onder huisartsen. Voor controversiële of complexe onderwerpen zouden ze zelfs liever twee focusgroepen hebben: één aan het begin van de standaardontwikkeling om sturing te geven aan de inhoud, en aan het eind een tweede die vooral gericht is op de implementatie. De wetenschappelijk medewerkers waren tevreden over de werkwijze en de leiding tijdens de bijeenkomsten.
Procesevaluatie door huisartsen
Van de 125 benaderde huisartsdeelnemers vulden 59 (47%) de vragenlijst in. Van de respondenten was 34% tussen de 40 en 49 jaar en 50% tussen de 50 en 59 jaar. De leeftijdsverdeling van de huisartsdeelnemers was onbekend. Van alle respondenten was 41% vrouw tegen 40% in de totale groep huisartsdeelnemers. De deelname aan focusgroepbijeenkomsten werd als leerzaam en plezierig ervaren [tabel 8]. De respondenten achtten het belang van de focusgroepen voor het ontwikkelen van standaarden hoger dan voor het ontwikkelen van implementatieproducten.
Deelname aan focusgroep leerzaam | 4,3 |
Deelname aan focusgroep plezierig | 4,5 |
Focusgroep belangrijk voor ontwikkelen NHG-Standaard | 4,3 |
Focusgroep belangrijk voor ontwikkelen implementatieproducten | 3,8 |
Belang persoonlijk invloed uitoefenen via deze methode | 3,9 |
Discussie
Uit onze evaluatie blijkt duidelijk dat de focusgroepbijeenkomsten invloed hebben op de inhoud van de NHG-Standaarden en op de implementatieproducten. De adviezen worden vaak overgenomen en de bijeenkomsten worden hogelijk gewaardeerd, zowel door de deelnemende huisartsen als door de wetenschappelijk medewerkers van het NHG.
Beperkingen
Onze evaluatie heeft enkele beperkingen. Ten eerste lopen de focusgroepbijeenkomsten parallel aan de schriftelijke commentaarrondes, dus een aantal suggesties zou ook zonder focusgroepbijeenkomst wel gedaan zijn. In dat opzicht was het beter geweest als wij de resultaten van een schriftelijke commentaarronde, een focusgroepbijeenkomst en een combinatie van beide vergeleken hadden. Maar dan zou voor iedere standaard slechts één van deze varianten moeten zijn toegepast en zou men vervolgens een groot aantal standaarden moeten analyseren. Ten tweede maant de respons van 47% op de huisartsenenquête tot enige voorzichtigheid bij de interpretatie van de gerapporteerde tevredenheid. Wij weten niet of die zich ook uitstrekt tot de niet-responderende deelnemers. In de derde plaats bestrijkt onze evaluatie een periode van vier jaar, waardoor zowel de NHG-medewerkers als de huisartsdeelnemers last kunnen hebben gehad van ‘recall bias’. Dit verklaart voor een deel ook de ontbrekende antwoorden in [tabel 4]. Een laatste beperking is dat we uit deze evaluatie niet kunnen afleiden of de standaarden waarbij focusgroepen betrokken waren ook beter worden gevolgd door huisartsen dan standaarden die zonder focusgroep zijn opgesteld.
Aanbevelingen
De suggestie om bij complexe standaarden of controversiële thema’s ook aan het begin van het ontwikkeltraject een focusgroepbijeenkomst te houden, lijkt zinvol. Hoewel ook de NAS de standaardenwerkgroep adviseert over opzet en inhoud van de te ontwikkelen standaard, kan een focusgroep, vooral door het karakter van het groepsinterview, bijdragen aan het nader exploreren van mogelijke knelpunten. Het verdient aanbeveling om deze optie te onderzoeken. Een andere conclusie is dat het goed zou zijn als de NHG-medewerkers extra toezien op adequate verwerking van de adviezen. Een van de frequentste redenen om een productadvies niet over te nemen is dat het niet past binnen het bestaande arsenaal. Naar aanleiding van deze bevinding zal bekeken moeten worden of het NHG nieuwe producten voor implementatie kan ontwikkelen, zoals illustraties in de patiëntenbrieven en instructiefilmpjes. Tot slot is het opvallend dat focusgroepdeelnemers weinig adviezen geven met betrekking tot de taakgebieden ‘maatschappelijk handelen’ (bijvoorbeeld doelmatig antibiotica voorschrijven, inzicht in resistentie) en ‘wetenschap en onderwijs’ (bijvoorbeeld kunnen onderbouwen waarom een bepaald geneesmiddel niet wordt aanbevolen).4 In de focusgroepbijeenkomsten zou aan deze taakgebieden extra aandacht besteed kunnen worden.
Conclusie
Alom hecht men grote waarde aan de betrokkenheid van belanghebbenden bij de ontwikkeling van standaarden. De internationaal geaccepteerde ‘appraisal of guidelines research and evaluation’ (AGREE), een instrument voor de beoordeling van de kwaliteit van richtlijnen, hanteert een aantal criteria om deze betrokkenheid te toetsen.5 Een daarvan is dat de richtlijn in de praktijk getest is onder de beoogde gebruikers voordat deze definitief wordt vastgesteld. Een focusgroepbijeenkomst zou kunnen worden beschouwd als een minder tijdrovend alternatief voor een dergelijke ‘proefimplementatie’.6 Om onze bevindingen in breder verband te plaatsen hebben we nagegaan hoe richtlijnen in andere landen en specialismen getest worden. Daartoe hebben we allereerst het internet geraadpleegd over de werkwijze van instituten die betrokken zijn bij de richtlijnontwikkeling in de (huisarts)geneeskunde. Bij het Scottish Intercollegiate Guidelines Network (SIGN) bespreken meer dan honderd huisartsen de conceptrichtlijn in een openbare bijeenkomst.7 Het National Institute for Clinical Excellence (NICE, Engeland en Wales) betrekt beroepsorganisaties, maar geen huisartsen uit het veld, bij de ontwikkeling van richtlijnen.8 De wetenschappelijke huisartsenverenigingen in Finland, Australië, Canada en de Verenigde Staten geven op hun websites geen informatie over de werkwijze. Ook uit de literatuur blijkt dat de AGREE-aanbeveling om de richtlijn in de praktijk uit te proberen zelden wordt opgevolgd.9101112131415 Onderzoek naar een proefimplementatie die vergelijkbaar is met de focusgroepen van het NHG hebben we niet gevonden. Wel vonden wij een onderzoek naar schriftelijke commentaarronden onder niet-academisch werkzame collegae bij het ontwikkelen van oncologierichtlijnen: ongeveer 70% van de adviezen werd overgenomen, vergelijkbaar dus met onze resultaten.16 Twee kwalitatieve onderzoeken naar ‘stakeholder involvement’ bij richtlijnen in de eerste lijn lieten zien dat het betrekken van huisartsen bij de richtlijn de kwaliteit verhoogt.17, 18 Ons onderzoek vond plaats onder huisartsen. Het zou interessant zijn om na te gaan of groepsinterviews in de tweede lijn een vergelijkbare invloed hebben. Samengevat blijken groepsinterviews met huisartsen waardevol om de NHG-Standaarden en daaraan gerelateerde implementatieproducten beter af te stemmen op de wensen van huisartsen uit het veld. Nader onderzoek zal moeten uitwijzen of dit ook leidt tot betere naleving van de standaarden.
Literatuur
- 1.↲Lugtenberg M, Zegers-van Schaick JM, Westert GP, Burgers JS. Why don’t physicians adhere to guideline recommendations in practice? An analysis of barriers among Dutch general practitioners. Implement Sci 2009;4:54.
- 2.↲Burgers J, Grol R. Richtlijnen als hulpmiddel bij de verbetering van de zorg. In: Grol R, Wensing M, redactie. Implementatie: Effectieve verbetering van de patiëntenzorg. Maarssen: Elsevier, 2006.
- 3.↲Murphy MK, Black NA, Lamping DL, McKee CM, Sanderson CF, Askham J, et al. Consensus development methods, and their use in clinical guideline development. Health Technol Assess. 1998;2:i-iv, 1-88.
- 4.↲↲Van Berkestijn LGM, Van Duin BJ, Hoekstra M, Maiburg HJS, Oosterling EMP, Sagasser MH, et al. Competentieprofiel van de huisarts. Utrecht: LHV/NHG, 2005.
- 5.↲AGREE [internet]. http://www.agreecollaboration.org/pdf/agreeinstrumentfinal.pdf. Geraadpleegd 25 januari 2011.
- 6.↲Burgers JS, Assendelft WJJ, Van Everdingen JJE. Evidence-based richtlijnen. In: Offringa M, Assendelft WJJ, Scholten RJPM, redactie. Inleiding in evidence-based medicine. 3e dr. Houten: Bohn Stafleu van Loghum, 2008.
- 7.↲SIGN [internet]. http://www.sign.ac.uk/guidelines/fulltext/50/section8.html. Geraadpleegd 25 januari 2011.
- 8.↲NICE [internet]. http://www.nice.org.uk/guidance/index.jsp?action=folder&r=true&o=28900. Geraadpleegd 25 januari 2011.
- 9.↲Lo Vecchio A, Giannattasio A, Duggan C, De Masi S, Ortisi MT, Parola L, et al. Evaluation of the quality of guidelines for acute gastroenteritis in children with the AGREE instrument. J Pediatr Gastroenterol Nutr 2011;52:183-9.
- 10.↲Cates JR, Young DN, Bowerman DS, Porter RC. An independent AGREE evaluation of the Occupational Medicine Practice Guidelines. Spine J 2006;6:72-7.
- 11.↲Tan JK, Wolfe BJ, Bulatovic R, Jones EB, Lo AY. Critical appraisal of quality of clinical practice guidelines for treatment of psoriasis vulgaris, 2006-2009. J Invest Dermatol 2010;130:2389-95.
- 12.↲Kinnunen-Amoroso M, Pasternack I, Mattila S, Parantainen A. valuation of the practice guideilines of Finnish Institute of Occcupational Health with AGREE Instrument. Ind Health 2009;47:689-93.
- 13.↲Hurdowar A, Graham ID, Bayley M, Harrison M, Wood-Dauphinee S, Bhogal S. Quality of stroke rehabilitation clinical practice guidelines. J Eval Clin Pract 2007;13:657-64.
- 14.↲Bouwmeester W, Van Enst A, Van Tulder M. Quality of low back pain guidelines improved. Spine (Phila Pa 1976) 2009;34:2562-7.
- 15.↲Burgers JS, Fervers B, Haugh M, Brouwers M, Browman G, Philip T, et al. International assessment of the quality of clinical practice guidelines in oncology using the Appraisal of Guidelines and Research and Evaluation Instrument. J Clin Oncol 2004;22:2000-7.
- 16.↲Browman GP, Makarski J, Robinson R, Brouwers M. Practitioners as experts: The influence of practicing oncologists ‘in-the-field’ on evidence-based guideline development. J Clin Oncol 2005;23:113-9.
- 17.Kennedy S, Seymour J, Almack K, Cox K. Key stakeholders' experiences and views of the NHS End of Life Care Programme: findings from a national evaluation. Palliat Med 2009;23:283-94.
- 18.Mason JM, Delaney B, Moayyedi P, Thomas M, Walt R; North of England Dyspepsia Guideline Development Group. Managing dyspepsia without alarm signs in primary care: new national guidance for England and Wales. Aliment Pharmacol Ther 2005;21:1135-43.
Reacties
Er zijn nog geen reacties.