Công cụ 1. Thảo luận nhóm tập trung (FGD)

 

Mục đích: Cho phép tất cả những người tham gia chia sẻ quan điểm và ý kiến của họ về tình hình / vấn đề của cộng đồng một cách tự do, dựa trên các câu hỏi hướng dẫn do thúc đẩy viên cung cấp. Cho phép người thúc đẩy hiểu biết về cộng đồng và các vấn đề chính của họ.

 

Cách thức:  

Hâm nóng sự nhiệt tình của người tham gia đối với cuộc thảo luận và thiết lập mối quan hệ với họ: mỗi cá nhân giới thiệu một vòng, giới thiệu lý do và các chủ đề của buổi họp. Một người địa phương cũng có thể giới thiệu về du khách và mục đích của chuyến thăm, cũng như về bản thân cộng đồng.

Hỏi người tham gia về cuộc sống của họ trong cộng đồng. Sử dụng các câu hỏi hướng dẫn đã chuẩn bị sẵn về các vấn đề đang bàn đến. Các vấn đề đang bàn có thể do lãnh đạo cộng đồng hoặc người liên hệ của nhóm thúc đẩy lựa chọn trước.

Cho phép tất cả những người tham gia lên tiếng, đặc biệt nếu một số người đang nói hết. Đặt câu hỏi thăm dò một cách tôn trọng.

Tóm tắt và xác nhận các câu trả lời bằng một hoặc hai câu hỏi (liên quan) trước khi chuyển sang câu hỏi tiếp theo.

Tất cả các điểm được tóm tắt và viết lên bảng.

Khi kết thúc buổi thảo luận, nhóm  hỗ trợ sẽ hỏi ý kiến ​​những người tham gia cộng đồng về vấn đề liên quan và / hoặc ưu tiên nhất của họ. Họ có thể chọn một hoặc hai vấn đề.

(Các) vấn đề sẽ là trọng tâm của các công cụ PAR tiếp theo của nhóm thúc đẩy. Mỗi nhóm thúc đẩy có thể có vấn đề tương tự hoặc khác nhau.

 

Bình luận

Phương pháp thảo luận nhóm tập trung nhằm mục đích giới thiệu nhóm và những người tham gia cộng đồng với nhau và để thu thập ý kiến về những vấn đề mà cộng đồng đang phải đối mặt và những gì mọi người đánh giá cao về cộng đồng và chỗ của họ. (Xem phần “8 lời khuyên cho câu hỏi hay”.)

Image

Công cụ 2. Vẽ Bản đồ Cộng đồng có sự Tham gia

Mục đích

Cho phép người tham gia chia sẻ sự đánh giá cao và có cái nhìn rộng về cộng đồng của họ, bao gồm:

- Địa lý và biên giới, tài nguyên và sử dụng đất, các vấn đề và mối quan hệ với và trong môi trường xung quanh.

- Các thành phần chính: xóm/ bon/ nhóm nhỏ (gia đình / ngành v.v.).

- Các loại cây trồng chủ lực (lương thực chính và cây trồng thương mại) và tài nguyên (độ phì của đất, nước); hệ thống sản xuất nông nghiệp chính (truyền thống, hữu cơ, hóa chất, hỗn hợp); dịch vụ, thẩm quyền, địa điểm linh thiêng và tôn giáo, và những nơi quan trọng đối với người dân trong cộng đồng.

 

Cách thức

Yêu cầu một người trong làng vẽ bản đồ cộng đồng của họ trên một tờ giấy lớn. Bản đồ không nhất thiết phải chính xác, chỉ là một bản phác thảo, gồm có các ranh giới ở mỗi hướng. Các yếu tố chính có thể được mô tả bằng các màu sắc được chỉ định (cây trồng, hệ thống sản xuất, các vấn đề môi trường, địa điểm linh thiêng, các vùng xung đột, v.v.)

Các nhóm khác nhau sống trong cộng đồng sẽ được chọn một màu nhất định của biểu tượng ngôi nhà. (Các nhóm này đã được xác định trước đó trong Cuộc Thảo luận Nhóm Tập trung và Lát cắt Đi bộ).

Ví dụ: có thể đưa ra các màu khác nhau tùy theo: quyền sở hữu hoặc quyền hưởng dụng đất (nếu quyền truy cập / kiểm soát đất là vấn đề chính).

Yêu cầu mỗi người tham gia viết tên của họ trên biểu tượng ngôi nhà thuộc loại màu của họ và viết ra thông tin cụ thể cần thiết cho phân tích. Đối với nông nghiệp, có thể bao gồm: diện tích đất canh tác; hệ thống sản xuất; số lượng vật nuôi, cây trồng chính; các vấn đề và vấn đề trong nông nghiệp, v.v.

Sau đó, mỗi người tham gia đặt biểu tượng ngôi nhà của họ trên bản đồ, hiển thị vị trí của trang trại hoặc ngôi nhà của họ và giải thích về những gì họ đã viết.

Sau khi mỗi người làm xong việc này, mọi người sẽ thảo luận về các vấn đề đã đặt ra (bao gồm cả tình hình chung về tài nguyên đất, nước và rừng) và một số đề xuất có thể đưa ra từ những người tham gia. Tất cả những đóng góp từ những người tham gia đều được viết trong những mảnh giấy lớn mà mọi người đều có thể đọc được.

Một bản tóm tắt các điểm thảo luận được đưa ra để nâng cao sự phản hồi và hiểu biết sâu sắc hơn về các vấn đề, đồng thời xác nhận lại kết quả từ những người tham gia.

 

Bình luận

Thảo luận để đi đến phân tích này cũng quan trọng, nếu không muốn nói là quan trọng hơn sản phẩm cuối cùng. Phân tích được thực hiện để trao quyền và hỗ trợ kiến thức và phản hồi của người tham gia về cộng đồng và cách tốt nhất để can thiệp vào cộng đồng đó, chứ không phải để tạo ra một báo cáo phân tích cuối cùng.

Không có phân tích đúng hay sai. Kết quả phân tích mang tính chủ quan và bị ảnh hưởng bởi niềm tin, mối quan tâm và thông tin có sẵn cho chúng ta. Sự tham gia vào việc phân tích càng rộng thì việc phân tích càng có tính đại diện cho thực tế.

 

Image

Công cụ 3:  Lát cắt đi bộ

Mục đích:

Cho phép người tham gia chia sẻ cái nhìn rộng lớn của họ trong khi chỉ ra các đặc điểm của cộng đồng và cung cấp các cuộc thảo luận sâu hơn về các vấn đề của họ.

 

Cách thức: Những người tham gia trong cộng đồng quyết định nơi sẽ thực hiện lát cắt đi bộ. Một người trong số họ vẽ một đường cắt dọc theo bản đồ được tạo trước đó. Lát cắt này có thể "cắt ngang" tất cả các vùng/ khu vực của cộng đồng để cung cấp một cái nhìn đại diện. Đường cắt cũng có thể đi ngang qua các vùng quan trọng liên quan đến vấn đề đang được phân tích.

Nhóm đi theo đường cắt trên bản đồ trong khi đi bộ để quan sát điều kiện, con người, các vấn đề và cơ hội trong từng khu vực. Các thành viên của nhóm nghiên cứu nói chuyện với những người dân địa phương mà họ gặp trên đường đi để có thêm thông tin. Các thành viên trong nhóm thúc đẩy sẽ quan tâm đến việc quan sát những điều khác nhau trong cộng đồng về vấn đề đã chọn.

Sau đó, một sơ đồ được vẽ ra về những điều quan sát được trong khi thực hiện lát cắt đi bộ.

Image

 

Công cụ 4: Dòng thời gian lịch sử

Mục đích:

Cho phép người tham gia theo dõi lịch sử và sự phát triển của một vấn đề quan trọng trong làng. Điều này rất hữu ích trong việc hiểu được một điều gì đó đã phát triển như thế nào, chẳng hạn như các tập quán trong sử dụng đất, sản xuất lương thực, các tục lệ trong hôn nhân và thị tộc, hoặc một tổ chức hoặc một vấn đề cộng đồng, xung đột, v.v. Dòng thời gian cũng có thể được sử dụng để mô tả lịch sử của cộng đồng, lịch sử dự án hoặc tổ chức, lịch sử cá nhân. Ngoài việc trình bày các sự kiện quan trọng, các mốc thời gian cũng có thể xác định những thay đổi theo thời gian.

 

Cách thức:

Hỏi người tham gia về điểm bắt đầu của vấn đề hoặc sự việc đang được thảo luận, lịch sử ban đầu và sau đó là những diễn biến quan trọng nhất của vấn đề, cho đến thời điểm hiện tại. Minh họa dòng thời gian lịch sử trên một tờ giấy lớn.

Biểu thị từng sự phát triển, diễn biến lịch sử hoặc điểm nút bằng một biểu tượng để tất cả mọi người đều được rõ toàn bộ vấn đề.

Các điểm được tổng hợp và trình bày để xác nhận lại với những người tham gia, yêu cầu họ nhận xét, phản ánh và đi sâu thêm.

4. Các điểm thảo luận cũng được tóm tắt trong một tờ giấy khổ lớn.

5. Dòng thời gian cũng có thể được vẽ trên mặt đất bằng que, lá và các đồ vật khác.

 6. Một cách tiếp cận khác là yêu cầu mỗi người tham gia viết một sự kiện trên một tờ giấy và sau đó yêu cầu nhóm sắp xếp các sự kiện theo thứ tự thời gian. Ngày chính xác không quan trọng, mà là những thay đổi đáng kể đã xảy ra.

 

Bình luận:

Ví dụ về các mốc thời gian

• Sự kiện chính trị

• Các đợt bùng phát dịch bệnh lớn

• Thay đổi tài nguyên thiên nhiên

• Thay đổi văn hóa (ví dụ: thay đổi các giá trị xã hội)

• Phát triển lịch sử dự án

• Giới thiệu công nghệ hiện đại

• Những thay đổi trong ngành công nghiệp hoặc nông nghiệp

• Lịch sử cá nhân của các thành viên cộng đồng được chọn

Thảo luận để đi đến phân tích này cũng quan trọng, nếu không muốn nói là quan trọng hơn các sản phẩm cuối cùng. Phân tích được thực hiện để trao quyền và hỗ trợ kiến thức và phản hồi của người tham gia về cộng đồng và cách tốt nhất để can thiệp vào cộng đồng đó, chứ không phải để tạo ra một báo cáo phân tích cuối cùng.

 

Image

Công cụ 5: Lịch thời vụ

Mục tiêu:

Cho phép người tham gia phản hồi về các hoạt động, sự kiện và diễn biến chính của họ trong năm, để họ phân tích xu hướng và mô hình theo mùa, thời vụ và nguyên nhân gây ra những điều này. Mục đích lớn hơn là xác định xem các mô hình nào mà họ muốn tiếp tục và những loại nào mà họ muốn thay đổi.

Có thể có các lịch khác nhau cho nam và nữ, để phản ánh sự khác biệt về vai trò giới.

 

Cách thức:

Người tham gia được hỏi về các mùa quan trọng trong cuộc sống của họ về các khía cạnh kinh tế, xã hội, chính trị và văn hóa. Những điều này được phản ánh trong lịch mùa vụ, với thông tin về mùa / các hoạt động / khía cạnh trên các cột đầu tiên và các tháng trong năm trên các cột còn lại. Những người tham gia có thể muốn sử dụng lịch truyền thống của họ, nếu lịch của họ khác với lịch Tây phương.

 Thảo luận về các quan sát và hiểu biết sâu sắc về lịch, tùy thuộc vào chủ đề hoặc mục tiêu: Ví dụ: thời gian bận rộn nhất trong năm là gì, tại sao? Tầm quan trọng của những sự kiện này? Mối quan hệ giữa các sự kiện và các mẫu thức?

 

Bình luận

VÍ DỤ VỀ LỊCH MÙA VỤ

Sự thay đổi giá đối với thực phẩm hoặc các mặt hàng khác

Các mùa bản địa

Các bệnh nền phổ biến

Khí hậu (lượng mưa và nhiệt độ)

Các loại và số lượng nhiên liệu nấu ăn hoặc sưởi ấm

Trình tự các loại cây trồng, sâu bệnh và dịch bệnh

Sự kiện xã hội

Sự thay đổi trong nguồn cung cấp thực phẩm

Di cư

Bệnh gia súc

Thu nhập và chi tiêu

Các hoạt động tạo thu nhập

Khối lượng công việc của nam giới, phụ nữ và trẻ em

VÍ DỤ VỀ MỐI QUAN HỆ ĐƯỢC KHÁM PHÁ VỚI LỊCH MÙA VỤ

Thu nhập và chi tiêu

Di cư và bùng phát dịch bệnh

Thời tiết và dịch bệnh

Thu nhập và sử dụng trung tâm y tế

Khối lượng công việc và mô hình bệnh tật

 

Công cụ 6: Biểu đồ Venn hay các bên liên quan – Xác định các tác nhân chính

Mục đích:

  Cho phép người tham gia phân tích và hiểu:

- Các bên chính có ảnh hưởng đến cộng đồng hoặc nhóm người, các mối quan hệ và liên minh giữa họ

- Các vấn đề chính trong cộng đồng

  

Cách thức:

Động não về các tác nhân chính trong cộng đồng, (hoặc từ bên ngoài cộng đồng) có thể là cá nhân hoặc nhóm, bao gồm tổ chức, gia đình, v.v., những người đang ảnh hưởng trực tiếp hoặc gián tiếp đến cuộc sống và mối quan hệ của mọi người hoặc nhóm của họ.

Viết tên của từng tác nhân trên một mảnh bìa cứng có hình vuông hoặc hình tròn. Kích thước của hình dạng phụ thuộc vào mức độ ảnh hưởng / quyền lực của mỗi tác nhân.

Vạch ra các mối quan hệ giữa các tác nhân trên một tờ giấy lớn bằng các đường kẻ và mũi tên (màu sắc biểu thị các loại quan hệ khác nhau; liên minh, ảnh hưởng, xung đột hoặc không liên tục).

Xác định rõ ràng (các) vấn đề ảnh hưởng đến mỗi mối quan hệ. Viết chúng vào các tờ giấy vuông và thêm vào sơ đồ.

 

Bình luận:

Đảm bảo lập bản đồ bao gồm các tác nhân và vấn đề ở nhiều cấp độ khác nhau, địa phương, cấp huyện / quốc gia, khu vực / quốc tế bao gồm tổ chức hoặc doanh nghiệp của riêng bạn.

Image

Công cụ 7:  Xương cá  – phân tích nguyên nhân, hậu quả

Mục đích:

Cho phép người tham gia phân tích và hiểu:

- Nguyên nhân cơ bản gây ra vấn đề chính của họ.

- Nguyên nhân phụ của cùng một vấn đề.

- Hậu quả hoặc kết quả hữu hình của vấn đề.

 

Cách thức:

Thảo luận đâu là những vấn đề ảnh hưởng đến mọi người và những vấn đề này là ưu tiên của họ để hành động. Họ có thể bỏ phiếu cho một hoặc hai vấn đề chính nếu họ không thể đồng đồng thuận.

Vẽ đầu cá và viết tên vấn đề chính của cộng đồng.

Vẽ cột sống kết nối với đầu.

Vẽ xương cá tỏa ra từ xương sống. Động não về nguyên nhân chính của vấn đề và viết chúng lên những chiếc xương cá này.

Từ mỗi nguyên nhân chính vẽ ra các xương cá thứ cấp đại diện cho các nguyên nhân phụ (tức là nguyên nhân của các nguyên nhân) và suy nghĩ về chúng.

Vẽ vảy cá và viết bên trong mỗi cái một kết quả hoặc một ảnh hưởng của vấn đề này.

 

Bình luận:

Đảm bảo rằng nguyên nhân phụ là nguyên nhân của nguyên nhân chính chứ không phải là kết quả trực tiếp của chúng. Sử dụng câu hỏi TẠI SAO để thăm dò nguyên nhân chính và phụ.

 

Công cụ 8: Xếp hạng sở thích – Chọn giải pháp

 

Mục đích:

Những người tham gia chia sẻ quan điểm của họ và chọn từ các giải pháp khác nhau có thể được thực hiện liên quan đến các vấn đề hoặc để tiếp tục các bước đã được thực hiện.

 

Cách thức:

Người tham gia trình bày các lựa chọn hoặc các bước cần thực hiện liên quan đến các vấn đề của họ, và những người tham gia khác bày tỏ quan điểm của họ.

Các lựa chọn được liệt kê trong một cột và người tham gia bỏ phiếu cho từng lựa chọn, cho điểm 10 cho lựa chọn đầu tiên của họ, 9 cho lựa chọn thứ hai và 8 cho lựa chọn thứ 3.

Các phiếu bầu sau đó được tính và lựa chọn có số điểm cao nhất sẽ được chọn.

 

Bình luận:

Những người tham gia không nhất thiết phải đồng ý với tất cả các ý tưởng. Họ có thể bao gồm nhận xét, đánh dấu hoặc gạch chéo ý tưởng của nhau NHƯNG họ không thể gạch bỏ ý tưởng không phải của mình.

 

Công cụ 9:  Phân tích trường lực - Phân tích lực, đưa ra giải pháp và thể hiện cam kết

 

Mục đích:

 Những người tham gia phân tích các lực lượng tạo điều kiện và cản trở có thể ảnh hưởng đến quá trình hành động đã chọn của họ. Điều này sẽ giúp họ dự đoán và chuẩn bị cho các vấn đề trên đường đi. Trong bài tập này, những người tham gia cũng thể hiện cam kết đối với hành động tập thể mà họ đã quyết định.

 

Cách thức:

Tùy chọn được thể hiện dưới dạng mục tiêu, được viết trên đầu dòng ở giữa tờ giấy khổ lớn. Vẽ một đường ở giữa.

Các lực lượng hỗ trợ được xác định và viết trên đầu dòng, với các mũi tên hướng lên trên. Các lực lượng tạo điều kiện hoạt động để hỗ trợ việc đạt được mục tiêu. Chiều dài của mũi tên biểu thị cường độ của lực.

Lực cản mục tiêu được viết bên dưới dòng, mỗi lực thể hiện bằng  một mũi tên hướng xuống. Chiều dài của mũi tên cũng biểu thị cường độ của lực.

Những người tham gia bày tỏ ý kiến ​​về những hành động có thể giúp giảm thiểu những hạn chế. Tất cả các đề xuất được viết lên một mảnh giấy khác dán trên bảng hoặc tường.

Sau đó, những người tham gia được hỏi những hành động nào có thể giúp tối đa hóa các lực lượng tạo điều kiện hoặc cơ hội. Chúng có thể được viết lại bằng những thẻ màu khác bộ gợi ý trên.

Trong khi xem xét các hành động được đề xuất, mỗi người tham gia có thể bày tỏ ý kiến ​​của mình và tình nguyện đặt một mảnh giấy màu đỏ hình trái tim (hoặc bất kỳ hình dạng hoặc màu sắc nào khác) vào gợi ý mà họ muốn cam kết hoặc đóng góp.

 

Bình luận:

Những người tham gia không nhất thiết phải đồng ý với tất cả các ý tưởng. Họ có thể bao gồm nhận xét, đánh dấu hoặc gạch chéo ý tưởng của nhau NHƯNG họ không thể gạch bỏ ý tưởng không phải của mình.

 

8 Lời nhắc nhở để có thể đặt câu hỏi hay

Những câu hỏi hay, thường thì: 

• Đàm thoại âm thanh 

• Sử dụng những từ mà người tham gia sử dụng 

• Dễ hiểu 

• Rõ ràng

• Ngắn 

• Có kết thúc mở (“Các câu hỏi mở là dấu hiệu của phỏng vấn nhóm” (sđd, tr. 41) 

• Một chiều (câu hỏi chỉ hỏi về một thứ và không gom những thứ có thể được coi là khác nhau. Ví dụ: hỏi liệu điều gì đó "hữu ích và thiết thực" có thể gây nhầm lẫn vì một số người hiểu 2 điều này là khác nhau.) 

• Với các chỉ dẫn cụ thể (Bạn yêu cầu họ xếp hạng, viết ra giấy, trả lời bằng lời nói, v.v.). 

 

Câu hỏi phải rõ ràng, trung thực, kích thích và phù hợp. Tránh những câu hỏi có xu hướng chỉ làm nhóm nản lòng hoặc khiến mọi người xấu hổ. Nói chung, tốt nhất là đặt câu hỏi cho nhóm hơn là đặt các cá nhân tại chỗ. Câu hỏi đầu tiên phải dễ trả lời đối với mọi người và một số người cho rằng nên đặt câu hỏi tích cực trước câu hỏi tiêu cực. 

 

Nên thiết kế không chứa quá nhiều câu hỏi để có thời gian thăm dò. Lập kế hoạch từ 5 đến 20 phút cho mỗi câu hỏi (tùy thuộc vào câu hỏi). 

 

Bạn có thể sử dụng câu hỏi cuối cùng làm "câu hỏi bảo hiểm" và làm một bản tóm tắt các câu hỏi được hỏi và sau đó hỏi điều gì đó có hiệu lực là "Chúng ta còn bỏ lỡ điều gì không?"

 

CÁC LOẠI CÂU HỎI

Các câu hỏi có thể phục vụ các mục đích khác nhau, thu thập thêm thông tin, làm rõ quan điểm, so sánh các điểm và hơn thế nữa.

 

Câu hỏi mở

“Trải nghiệm của bạn khi làm việc X”

"Bạn cảm thấy thế nào về Y?"

"Một số cách mà X khác với Y là gì?"

"Bạn thích điều gì ở X?"

"Bạn không thích điều gì ở X?"

"Những nhu cầu của khu phố này là gì?"

 

Câu hỏi đóng

"Có công bằng khi nói X là đúng không?"

"Bạn có nghĩ Y là chính xác không?"

"Bạn chuyển đến nơi này khi nào vậy?"

“Bạn ủng hộ tuyên bố này ở mức độ nào trong thang điểm 1-5?”

 

Câu hỏi để biết thêm thông tin

"Bạn có thể nói gì khác hơn về điều đó hay không?"

"Bạn có thể cho tôi một ví dụ?"

"Bạn có muốn thêm điều gì khác không?"

“Có ai đó có thể xây dựng thêm dựa trên những thông tin này được không?

"Với thang điểm 1-5, hãy đánh giá mức độ quan trọng của điều này bằng cách cho điểm?"

"Tại sao?"

"Có điều gì khác bạn muốn thêm vào không?"

“Bạn có thể cho tôi biết thêm về cảm nhận của bạn về X không?”

"Tại sao bạn nghĩ rằng bạn cảm thấy như vậy?"

 

Câu hỏi để làm rõ hơn

  “Tôi muốn chắc chắn rằng tôi đang hiểu đúng, bạn có thể giải thích thêm hay không?”

"Bạn có thể cho tôi một ví dụ được không?"

"bạn có thể tóm tắt quan điểm của bạn cho các ghi chú này được không?"

“Bạn có ý gì khi nói X là [‘không tốt ’]?”

  “Từ X có ý nghĩa gì với bạn?

 

Câu hỏi để so sánh các quan điểm:

"Những người khác cảm thấy thế nào về điểm đó?"

"Ai có thêm quan điểm khác hay không?"

"Có ai đó có thể giúp xây dựng thêm dựa trên nền tảng này không?"

 

ĐẶT CÂU HỎI

Nên

Không nên

Hỏi “tại sao”?

Đặt nhiều câu hỏi "có" hoặc "không". (Yes/NO questions)

Hãy đi tiếp nếu bạn chưa rõ— "bạn sẽ cho tôi biết thêm về điều đó chứ?"

Hỏi nhiều hơn một câu hỏi cùng một lúc.

Hỏi chi tiết cụ thể nếu bạn nhận được câu trả lời rất chung chung cho một câu hỏi 

Đặt những câu hỏi phủ đầu (“Điều này có đúng là YYY quan trọng không?”)

Hỏi những người khác trong nhóm xem quan điểm của họ là gì khi bạn chỉ nghe ý kiến của một người 

“Đúng người” hoặc nói với họ rằng họ đã sai về điều gì đó

Tìm kiếm ý kiến đóng góp từ tất cả những người tham gia

Sợ yêu cầu làm rõ

Hỏi xem quy trình đã rõ ràng hay chưa

Gây áp lực để ai đó nói 

 

Tài liệu tham khảo và đọc thêm

Fals-Borda, O., Rahman, M.  (1991). Action and Knowledge: Breaking the monopoly with Participatory Action-Research. New York: Apex Press.

Pretty, J., et. al (1995). A Trainer’s Guide for Participatory Learning and Action. London: IIED.

Reason, P., Bradbury, H. (2008). Action Research: Participative Inquiry and Practice 2nd edition. London: Sage Publications.

Kumar, S. (1999). Force-Field Analysis: Applications in PRA. PLA Notes, Issue 36, pp. 17-23.

Krueger, R., Casey, M.A. (2000). Focus Groups: a practical guide for applied research, 3rd edition. London: Sage Publications.