Hari ini benar-benar terlalu mudah: Anda dapat berjalan ke komputer dan dengan sedikit atau tanpa pengetahuan tentang apa yang Anda lakukan, membuat waras dan omong kosong dengan kecepatan yang benar-benar menakjubkan. (J.Kotak)

Penilaian ahli

Pendapat para ahli sering muncul dalam praktik, misalnya saat mencicipi makanan. Secara umum, mereka khas untuk survei sosiologis, misalnya, manajer kontrol kualitas melakukan survei pelanggan di supermarket. Menggunakan metode ahli skala pesanan sering digunakan untuk mengevaluasi kualitas. Masalah perbandingan diputuskan berdasarkan prinsip "lebih baik lebih buruk", "lebih sedikit". Lagi Informasi rinci tentang berapa kali lebih baik atau lebih buruk sering tidak diperlukan.

Perbandingan berpasangan (objek dibandingkan satu sama lain secara berpasangan). Saat menyusun skala urutan atau yang disebut deret peringkat, para ahli menggunakan metode pencocokan berpasangan. Di tab. 1 menunjukkan contoh peringkat enam objek dengan perbandingan berpasangan. Ini adalah hasil kerja seorang ahli yang mengevaluasi objek dengan cara tertentu. Preferensi satu objek di atas yang lain ditunjukkan oleh 1, situasi sebaliknya adalah 0.

baris peringkat(skala pesanan) untuk objek, penilaian komparatif yang diberikan dalam tab. 1 akan terlihat seperti:

Q4

Jika Anda menggunakan beberapa ahli, Anda bisa mendapatkan hasil yang lebih akurat.

Anda dapat menggunakan kriteria yang lebih maju, misalnya menentukan keunggulan dengan skor 1, menentukan kualitas terburuk dengan skor -1, dan menentukan kualitas yang setara dengan skor 0. Mekanisme untuk menyusun seri peringkat tetap sama.

Psikolog telah membuktikan bahwa perbandingan berpasangan mendasari pilihan apa pun (yaitu, Anda memilih produk dengan membandingkannya secara berpasangan), namun, skala pesanan sering disusun terlebih dahulu (bukan seri peringkat) dan poin referensi (referensi) ditetapkan di dalamnya, yang disebut poin.

Ini adalah bagaimana skala intensitas gempa dua belas poin MSK - 64, skala mineralogi Mohs, skala lima poin untuk menilai pengetahuan, poin dalam skating, dll. muncul. Tabel 2 menunjukkan skala kekerasan Mohs untuk mineral sebagai contoh.

Nomor objek							Hasil

Tabel 1. Peringkat enam objek dengan perbandingan berpasangan

Tabel 2. Skala Mohs

Setiap mineral berikutnya meninggalkan goresan pada mineral sebelumnya, mis. lebih padat. Hasil pengukuran yang diperoleh dengan perbandingan berpasangan dapat disempurnakan dengan pendekatan berturut-turut.

Pengaruh komposisi ahli terhadap hasil pemeriksaan

Saat membentuk kelompok ahli, disarankan untuk melakukan pengujian, saling evaluasi para ahli dan memeriksa konsistensi pendapat.

Pengujian terdiri dari pemecahan tugas oleh para ahli, dengan hasil yang diketahui oleh penyelenggara pengujian, tetapi tidak diketahui oleh para ahli, dan pengujian, dengan menggunakan kriteria Fisher, hipotesis bahwa penilaian para ahli yang berbeda termasuk dalam rangkaian penilaian umum yang sama.

Penilaian diri terdiri dari kenyataan bahwa setiap ahli dalam waktu yang terbatas menjawab pertanyaan-pertanyaan dari kuesioner yang disusun secara khusus. Tes semacam itu dilakukan di komputer dan kemudian skor diperoleh. Para ahli juga dapat mengevaluasi satu sama lain, tetapi ini membutuhkan lingkungan yang saling percaya dan pengalaman bekerja sama. Konsistensi pendapat ahli dapat dinilai dengan nilai koefisien konkordansi:

di mana S- jumlah deviasi kuadrat dari semua perkiraan peringkat setiap objek pemeriksaan dari nilai rata-rata;
n- jumlah ahli;
m- jumlah objek keahlian.

Koefisien konkordansi bervariasi dalam kisaran 0<W<1, причем 0 - полная несогласованность, 1 - полное единодушие.

Contoh

Penting untuk menentukan tingkat persetujuan antara pendapat lima ahli, hasil peringkat yang tujuh objek diberikan pada Tabel 3. Untuk menentukan tingkat persetujuan, digunakan ukuran khusus - koefisien konkordansi Kendall (dari lat. concordare- menyelaraskan, mengatur.

Nomor objek pemeriksaan	Penilaian ahli					Jumlah peringkat	Penyimpangan dari mean	Kuadrat deviasi

Tabel 3. Data untuk menilai konsistensi pendapat lima ahli

Kami memperkirakan jumlah rata-rata aritmatika dari peringkat:

Q cf = (21 + 15 + 9 + 28 + 7 + 25 + 35)/7 = 20.

Kemudian kita perkirakan jumlah deviasi kuadrat dari mean: S = 630. Tentukan nilai koefisien konkordansi:

W = 12 * 630 / 25 * (343 - 7) = 0,9.

Apakah banyak atau sedikit? Jika kita melakukan perhitungan yang sesuai dalam STATISTIK, Anda bisa mendapatkan tabel hasil berikut:

Beras. 1. Hasil analisis dalam STATISTICA

Dari tabel ini dapat disimpulkan bahwa perbedaan pendapat para ahli dalam contoh ini tidak signifikan: p<0.00014.

Pengaruh terhadap hasil pemeriksaan kuantitatif komposisi ahli. Dengan peningkatan jumlah ahli dalam kelompok, akurasi pengukuran meningkat, yang khas untuk beberapa pengukuran.

Jumlah ahli n, memberikan akurasi pengukuran yang diberikan, dapat ditetapkan dengan mengetahui hukum distribusi pendapat ahli dan kesalahan standar maksimum yang diizinkan dari perkiraan seks. Kemudian, dengan menggunakan ekspresi terkenal, kita dapat menentukan jumlah minimum ahli n, memberikan akurasi pengukuran yang ditentukan:

di mana adalah standar deviasi, yang ditentukan oleh rumus:

di mana rata-rata aritmatika penilaian ahli;
- jumlah penilaian yang diberikan oleh para ahli.

Ada juga pendapat individu dan kolektif para ahli, yang terakhir dianggap lebih akurat, dan yang paling penting, disepakati. Orang dengan pelatihan khusus, calon konsumen dan produsen produk dapat bertindak sebagai ahli.

Pada sebagian besar jenis penelitian yang dipertimbangkan, subjek penelitian adalah sudut pandang konsumen (swasta atau perusahaan). Namun, ada juga studi yang dilakukan dengan mempertimbangkan semua faktor yang mempengaruhi pasar tertentu, seperti persaingan, afiliasi, tren umum, perubahan undang-undang, proyek pemain saat ini dan yang direncanakan, peraturan industri, risiko, dll. Dan baik dalam publikasi, studi ini tidak termasuk dalam statistik industri. Di sini, penelitian meja dan survei konsumen dapat digunakan sebagai elemen, tetapi alat utama dalam hal ini adalah wawancara ahli dengan pelaku pasar, analis independen, ketua asosiasi, jurnalis, orang yang terlibat dalam intelijen kompetitif, dll.

Metode peer review - Ini adalah jenis penelitian di mana responden adalah ahli - spesialis dalam bidang kegiatan tertentu.

Tujuan utama dari metode peer review - identifikasi aspek kompleks dari masalah yang diteliti, meningkatkan keandalan informasi, kesimpulan.

Fitur khas dari metode ini adalah melibatkan partisipasi yang kompeten dari para ahli (expertise) dalam analisis dan pemecahan masalah penelitian.

Keahlian - prosedur untuk memperoleh informasi dari para ahli. Penilaian ahli adalah penilaian ahli tentang berbagai bidang aktivitas manusia, yang melibatkan prosedur untuk membandingkan objek dan propertinya menurut kriteria yang dipilih.

Spesifik dari survei ahli terdiri dari berikut ini.

Tidak perlu menggunakan pertanyaan tidak langsung atau kontrol dalam kuesioner.

Program survei ahli tidak rinci dan bersifat konseptual.

Dalam kuesioner, lebih baik menggunakan pertanyaan terbuka dengan kebebasan penuh untuk memilih bentuk jawabannya.

Persyaratan peraturan dasar untuk peer review :

pemilihan ahli yang cermat;

penilaian keandalan informasi yang diberikan oleh para ahli;

menciptakan kondisi untuk penggunaan tenaga ahli secara produktif selama studi;

mempertimbangkan faktor-faktor yang mempengaruhi penilaian ahli;

pelestarian informasi ahli tanpa distorsi di semua tahap penelitian.

Kualitas dan keandalan penilaian ahli berkurang dengan pemilihan ahli secara acak.

Kriteria Seleksi Ahli adalah:

tingkat kompetensi, yang indikatornya dapat berupa keberadaan gelar akademik ahli, gelar akademik, pengalaman kerja dalam spesialisasi, jabatan resmi, jumlah karya yang diterbitkan, dll.;

kemampuan untuk menavigasi pencapaian terbaru ilmu pengetahuan modern di bidang-bidang yang menjadi subjek keahlian;

kombinasi spesialisasi sempit dan pandangan umum seorang ahli;

kemampuan untuk menganalisis dan mensintesis masalah yang dipelajari,

kemampuan untuk memproses dan mengasimilasi informasi baru secara kualitatif;

karakter moral yang tinggi;

kombinasi yang secara psikologis dapat diterima satu sama lain dalam kelompok ahli dari berbagai usia, aliran ilmiah yang berbeda, dll.

Kelompok ahli tidak boleh banyak. Metode seleksi ahli mengasingkan objektif - penggunaan teknik seleksi khusus - dan subyektif - Keterlibatan tenaga ahli itu sendiri dalam prosedur seleksi.

Pendekatan objektif memiliki dua pilihan :

a) metode dokumenter - pemilihan ahli berdasarkan data sosio-demografis.

b) metode eksperimental - pemilihan berdasarkan pengujian kandidat.

Pendekatan subjektif juga memiliki beberapa variasi. ;

a) pengesahan - pemilihan ahli dilakukan dengan bantuan pemungutan suara terbuka atau rahasia dari calon anggota kelompok ahli masa depan (dapat dilakukan dalam beberapa putaran);

b) metode saling evaluasi dalam poin atau peringkat;

c) metode penilaian kompetensi diri.

Survei ahli dapat mengambil bentuk yang berbeda. :

survei individu satu kali (kuesioner atau wawancara);

survei kolektif satu kali (rapat, brainstorming);

survei individu dalam beberapa putaran (teknik Delphian);

survei kolektif dalam beberapa putaran (diskusi, pertemuan, seleksi multi-tahap).

Bentuk lain dari survei ahli - diskusi tradisional - metode percakapan dengan sekelompok kecil ahli tentang topik penelitian. Tujuan dari diskusi adalah untuk mengembangkan opini kolektif kelompok. Prasyarat untuk diskusi kelompok yang sukses adalah perumusan yang jelas tentang subjek diskusi dan keakraban dengannya oleh sebagian besar peserta.

Untuk sebagian besar, keberhasilan diskusi tergantung pada budaya, persiapan, perilaku dan desain pendapat kolektif para ahli.

Metode penilaian yang dirujuk - pengulangan beberapa siklus diskusi dengan mengidentifikasi esensi dari ketidaksepakatan yang muncul dan perkembangan bertahap dari pendapat umum dari semua atau sebagian besar peserta ujian, sementara mereka yang tidak setuju memiliki hak untuk kesimpulan pribadi.

Metode pemeriksaan dalam kerja kolektif para pesertanya, mereka memiliki banyak keuntungan yang jelas, tetapi pada saat yang sama mereka juga memiliki sejumlah kelemahan. Kelemahan utama terkait dengan pengaruh para ahli satu sama lain. Kekurangan ini diatasi dengan bantuan survei individu dalam beberapa putaran. Versi korespondensi dari metode "penilaian yang dirujuk" telah memperoleh nama metode delphi, atau teknologi Delphic (dari nama kota Yunani kuno, yang menjadi terkenal sebagai pusat ramalan ramalan).

Teknik Delphi menjamin anonimitas responden: para ahli tidak bertemu satu sama lain, mereka mengisi kuesioner anonim atau terhubung langsung untuk bekerja dengan komputer.

Setelah babak pertama, para ahli berkenalan dengan karakteristik akhir dari posisi grup secara keseluruhan. Di babak kedua, mereka mendapat kesempatan untuk mendekatkan pendapat mereka ke posisi mayoritas, atau mempelajari alasan penyimpangannya. Di babak ketiga, informasi baru membuka kesempatan untuk mempertimbangkan kembali sudut pandang Anda sekali lagi.

Variasi sederhana dari teknik Delphi ("mini delphi") memungkinkan

kumpulkan pendapat ahli tentang 2-3 putaran dalam beberapa jam atau hari.

Kelemahan dari metode Delphi adalah: :

kompleksitas persiapan, pelaksanaan dan pemrosesan hasil,

investasi waktu dan uang yang relatif besar.

Terlepas dari kekurangannya, teknik Delphic telah menerima distribusi yang signifikan; Dalam hal skala penerapan di banyak negara, metode ini termasuk dalam lima besar metode peramalan sosial yang paling populer.

Survei ahli dalam bentuknya yang modern seringkali didasarkan pada penggunaan bersama dari berbagai metode, bentuk dan prosedur. Jadi, berdasarkan penggunaan teknologi Delphic, salah satu sistem peramalan Amerika, "Pola", dibangun, yang memungkinkan Anda untuk membuat sistem model informasi dalam bentuk pohon tujuan. Pekerjaan membuat sistem dimulai dengan pembuatan skenario, yaitu deskripsi keadaan dan arah pengembangan objek yang diteliti. Pada tahap berikutnya, pohon tujuan dibangun, sub-tujuan yang diperlukan dan cukup dikembangkan untuk setiap tujuan, yang merupakan syarat untuk mencapai tujuan bersama. Pada tahap ketiga, koefisien kepentingan relatif kriteria dan tujuan di semua tingkatan ditentukan. Selanjutnya, jenis pekerjaan tertentu yang diperlukan, sumber daya, dan tenggat waktu untuk implementasinya ditentukan. Rantai terpanjang adalah waktu pelaksanaan seluruh kompleks pekerjaan.

Kementerian Pendidikan dan Ilmu Pengetahuan Rusia

Universitas Teknik Negeri Mari

Departemen kontrol dan produksi peralatan radio

pada topik: Metode penilaian ahli

Selesai: Seni. gr. BZD-41

Kopilova I.V.

Diperiksa oleh Prof. kafe Siprus

Skulkin N.M.

Yoshkar-Ola 2012

pengantar

Penilaian ahli

Tahapan penilaian ahli

Jenis penilaian ahli

Mengolah hasil survei para ahli

Kesimpulan

Bibliografi

pengantar

Contoh metode penilaian ahli. Bagaimana lingkungan ekonomi akan berubah dari waktu ke waktu? Apa yang akan terjadi pada lingkungan alam dalam sepuluh tahun? Bagaimana lingkungan akan berubah? Akankah keamanan lingkungan dari produksi industri dipastikan, atau akankah gurun buatan manusia mulai menyebar? Cukuplah untuk memikirkan pertanyaan-pertanyaan alami ini, untuk menganalisis bagaimana kita membayangkan hari ini sepuluh atau bahkan lebih dari dua puluh tahun yang lalu, untuk memahami bahwa tidak mungkin ada ramalan yang dapat diandalkan 100%. Alih-alih pernyataan dengan angka tertentu, hanya penilaian kualitatif yang dapat diharapkan. Namun demikian, kami para insinyur harus membuat keputusan, misalnya, tentang proyek dan investasi lingkungan dan lainnya, yang konsekuensinya akan terasa dalam sepuluh, dua puluh, dan seterusnya. bertahun-tahun. Bagaimana menjadi? Masih beralih ke metode penilaian ahli. Apa saja metode-metode tersebut?

1. Penilaian ahli

Penilaian ahli- prosedur untuk mendapatkan penilaian masalah berdasarkan pendapat spesialis (ahli) untuk tujuan pengambilan keputusan selanjutnya (pilihan).

Pakar(dari bahasa Latin "expertus" - berpengalaman) - ini adalah orang-orang yang memiliki pengetahuan dan mampu mengungkapkan pendapat yang masuk akal tentang fenomena yang diteliti.

Metode penilaian ahli - ini adalah metode mengatur pekerjaan dengan spesialis ahli dan memproses pendapat ahli.

Inti dari metode penilaian ahli terletak pada kenyataan bahwa perkiraan didasarkan pada pendapat spesialis atau tim spesialis berdasarkan pengalaman profesional, ilmiah, dan praktis. Ada penilaian ahli individu dan kolektif.

Expert judgement sering digunakan dalam seleksi, misalnya:

satu varian perangkat teknis yang akan diluncurkan menjadi serangkaian beberapa sampel,

kelompok astronot dari banyak pelamar,

satu set proyek penelitian untuk pendanaan dari kumpulan aplikasi,

penerima pinjaman lingkungan dari banyak pelamar,

ketika memilih proyek investasi untuk implementasi di antara yang disajikan, dll.

2. Tahapan evaluasi ahli

1. Menetapkan tujuan studi.

Evaluasi ahli melibatkan penciptaan semacam pikiran dengan kemampuan yang lebih besar dibandingkan dengan kemampuan individu. Sumber kemungkinan multimind adalah pencarian asosiasi dan asumsi yang lemah berdasarkan pengalaman seorang spesialis individu. Pendekatan ahli memungkinkan Anda untuk memecahkan masalah yang tidak dapat diselesaikan dengan cara analitis biasa, termasuk:

· Memilih solusi terbaik di antara yang tersedia.

· Memperkirakan perkembangan proses.

· Menemukan solusi yang mungkin untuk masalah yang kompleks.

Sebelum memulai studi ahli, perlu didefinisikan dengan jelas tujuan (masalah) dan merumuskan pertanyaan yang sesuai untuk para ahli. Dalam hal ini, disarankan untuk mematuhi aturan berikut:

· Definisi yang jelas tentang kondisi, waktu, kendala eksternal dan internal masalah. * Kemampuan untuk menjawab pertanyaan dengan akurasi yang dialami manusia.

· Pertanyaannya lebih baik dirumuskan sebagai pernyataan kualitatif daripada sebagai perkiraan angka. Untuk perkiraan numerik, tidak disarankan untuk menetapkan lebih dari lima gradasi.

· Para ahli mengevaluasi opsi yang mungkin, dan orang tidak boleh mengharapkan mereka untuk mengembangkan rencana tindakan yang lengkap, deskripsi terperinci tentang solusi yang mungkin.

2. Pilihan bentuk penelitian, penentuan anggaran proyek.

Jenis penilaian ahli yang ada dapat diklasifikasikan menurut kriteria berikut:

· Menurut bentuk partisipasi para ahli: penuh waktu, paruh waktu. Metode tatap muka memungkinkan para ahli untuk fokus pada masalah yang dipecahkan, yang meningkatkan kualitas hasil, tetapi metode jarak jauh bisa lebih murah.

· Dengan jumlah iterasi (pengulangan prosedur untuk meningkatkan akurasi) - satu langkah dan iteratif.

· Menurut tugas yang harus diselesaikan: menghasilkan solusi dan mengevaluasi opsi.

· Berdasarkan jenis jawaban: ideologis, peringkat, evaluasi objek dalam skala relatif atau absolut (numerik).

· Menurut metode pengolahan pendapat ahli: langsung dan analitis.

· Dengan jumlah ahli yang terlibat: tidak terbatas, terbatas. Biasanya 5-12 ahli digunakan.

Metode penilaian ahli yang paling terkenal adalah metode Delphi, brainstorming dan metode analisis hierarki. Setiap metode memiliki waktu dan kebutuhan ahlinya sendiri. Setelah memilih metode evaluasi ahli, dimungkinkan untuk menentukan biaya prosedur, yang meliputi pembayaran ahli, sewa tempat, pembelian alat tulis, pembayaran spesialis dalam melakukan dan menganalisis hasil pemeriksaan.

3. Persiapan bahan informasi, bentuk kuesioner, moderator prosedur.

Para ahli sebelum membuat penilaian harus mendiversifikasi masalah yang disajikan. Untuk melaksanakan prosedur ini, perlu disiapkan bahan informasi yang menguraikan masalah, data statistik yang tersedia, bahan referensi, formulir kuesioner, inventaris. Kesalahan berikut harus dihindari: menyebutkan pengembang materi, menyoroti satu atau beberapa opsi solusi, mengungkapkan sikap manajemen terhadap hasil yang diharapkan. Data harus serbaguna dan netral. Bentuk kuesioner untuk para ahli perlu dikembangkan terlebih dahulu. Tergantung metodenya, bisa dengan pertanyaan terbuka dan tertutup, jawaban bisa diberikan dalam bentuk penilaian, perbandingan berpasangan, seri peringkat, dalam poin atau dalam bentuk penilaian absolut.

Prosedur itu sendiri dilakukan oleh moderator independen dari prosedur, yang mengontrol kepatuhan terhadap peraturan, mendistribusikan materi dan kuesioner, tetapi tidak mengungkapkan pendapatnya sendiri.

4. Pemilihan ahli.

Masalah pemilihan ahli adalah salah satu yang paling sulit dalam teori dan praktik penelitian ahli. Jelas, sebagai ahli perlu menggunakan orang-orang yang penilaiannya paling membantu untuk membuat keputusan yang memadai. Tetapi bagaimana mengidentifikasi, menemukan, memilih orang-orang seperti itu? Harus dikatakan terus terang bahwa tidak ada metode untuk memilih ahli yang pasti akan menjamin keberhasilan ujian.

Dua komponen dapat dibedakan dalam masalah pemilihan ahli - menyusun daftar kemungkinan ahli dan memilih komisi ahli dari mereka sesuai dengan kompetensi calon.

Pakar harus memiliki pengalaman di bidang yang relevan dengan tugas yang akan diselesaikan. Saat memilih ahli, seseorang harus mempertimbangkan momen kepentingan pribadi, yang dapat menjadi hambatan signifikan untuk mendapatkan penilaian yang objektif. Untuk tujuan ini, misalnya, metode Shar digunakan, ketika satu ahli, spesialis yang paling dihormati, merekomendasikan sejumlah orang lain dan selanjutnya di sepanjang rantai sampai tim yang diperlukan dipilih.

5. Melakukan pemeriksaan.

Prosedurnya bervariasi tergantung pada metode yang digunakan. Rekomendasi umum:

· Tetapkan dan ikuti aturan. Meningkatkan waktu untuk membuat keputusan di luar yang optimal tidak meningkatkan akurasi jawaban.

6. Analisis statistik hasil . Setelah menerima jawaban dari para ahli, perlu dilakukan evaluasi. Ini memungkinkan:

1) Menilai konsistensi pendapat ahli. Dengan tidak adanya kesepakatan yang signifikan di antara para ahli, perlu untuk mengidentifikasi penyebab inkonsistensi (keberadaan kelompok) dan mengenali tidak adanya pendapat yang disepakati (hasil yang tidak signifikan).

) Perkirakan kesalahan penelitian.

)Membangun model properti objek berdasarkan jawaban para ahli (untuk keahlian analitis). Hasil evaluasi ahli diterbitkan dalam bentuk laporan. Laporan tersebut menunjukkan tujuan penelitian, komposisi ahli, penilaian yang diterima dan analisis statistik dari hasil.

7. Penyusunan laporan dengan hasil penilaian ahli.

. Jenis penilaian ahli

Metode penilaian ahli dapat dibagi menjadi dua kelompok:

§ metode kerja kolektif kelompok ahli

§ metode untuk memperoleh pendapat individu dari anggota kelompok ahli.

Metode kerja kolektif kelompok ahli melibatkan memperoleh pendapat umum dalam diskusi bersama tentang masalah yang sedang dipecahkan. Metode-metode ini kadang-kadang disebut sebagai metode opini kolektif langsung. Keuntungan utama dari metode ini terletak pada kemungkinan analisis masalah yang komprehensif. Kelemahan metode tersebut adalah rumitnya prosedur untuk memperoleh informasi, rumitnya pembentukan opini kelompok atas penilaian individu ahli, kemungkinan adanya tekanan dari otoritas dalam kelompok.

Metode kerja tim termasuk brainstorming, scripting, permainan bisnis, rapat, dan penilaian.

Serangan otak.Ini diselenggarakan sebagai pertemuan para ahli, yang pidatonya dikenakan pembatasan satu, tetapi sangat signifikan - seseorang tidak dapat mengkritik proposal orang lain. Anda dapat mengembangkannya, Anda dapat mengekspresikan ide-ide Anda, tetapi Anda tidak dapat mengkritik! Selama pertemuan, para ahli, "saling menginfeksi", mengungkapkan pertimbangan yang semakin boros. Dua jam kemudian, sesi yang direkam pada tape recorder atau kamera video berakhir, dan tahap kedua brainstorming dimulai - analisis ide yang diungkapkan. Biasanya, dari 100 ide, 30 pantas dielaborasi lebih lanjut, dari 5-6 mereka memungkinkan untuk merumuskan proyek yang diterapkan, dan 2-3 akhirnya membawa efek menguntungkan - keuntungan, peningkatan keamanan lingkungan, perbaikan lingkungan alam , dll. Pada saat yang sama, interpretasi ide adalah proses kreatif. Misalnya, ketika membahas kemungkinan melindungi kapal dari serangan torpedo, gagasan itu diungkapkan: "Berbariskan para pelaut di sepanjang sisi dan tiup torpedo untuk mengubah arahnya." Setelah elaborasi, ide ini mengarah pada penciptaan perangkat khusus yang menciptakan gelombang yang menjatuhkan torpedo.

Metode "635"- salah satu jenis curah pendapat. Angka 6, 3, 5 menunjukkan enam peserta, yang masing-masing harus menuliskan tiga ide dalam waktu lima menit. Daun itu bergerak. Jadi, dalam waktu setengah jam setiap orang akan menuliskan 18 ide dalam aset mereka, dan semuanya bersama-sama - 108. Struktur ide didefinisikan dengan jelas. Modifikasi metode dimungkinkan. Metode ini banyak digunakan di luar negeri (terutama di Jepang) untuk memilih dari berbagai ide yang paling orisinal dan progresif dalam memecahkan masalah tertentu.

permainan bisnisdidasarkan pada pemodelan fungsi sistem manajemen sosial ketika melakukan operasi yang bertujuan untuk mencapai tujuan. Tidak seperti metode sebelumnya, di mana penilaian ahli dibentuk dalam diskusi kolektif, permainan bisnis melibatkan kerja aktif kelompok ahli, yang masing-masing anggotanya memiliki tanggung jawab tertentu sesuai dengan aturan dan program yang telah disusun sebelumnya.

Keuntungan utama dari permainan bisnis adalah kemampuan untuk mengembangkan solusi dalam dinamika, dengan mempertimbangkan semua tahapan proses yang dipelajari dengan interaksi semua elemen sistem manajemen publik. Kerugiannya terletak pada kompleksitas pengorganisasian permainan bisnis dalam kondisi yang mendekati situasi masalah nyata.

Metode pertemuan("komisi", "meja bundar") - yang paling sederhana dan tradisional. Ini melibatkan mengadakan pertemuan atau diskusi untuk mengembangkan pendapat kolektif bersama tentang masalah yang sedang dipecahkan. Berbeda dengan metode “brainstorming”, masing-masing ahli tidak hanya dapat menyampaikan pendapatnya, tetapi juga dapat mengkritik usulan orang lain. Sebagai hasil dari diskusi yang cermat, kemungkinan kesalahan dalam pengembangan keputusan berkurang.

Keuntungan dari metode ini adalah kesederhanaan implementasinya. Namun, dalam rapat, pendapat yang salah dari salah satu peserta dapat diadopsi karena otoritas, posisi resmi, ketekunan, atau kemampuan berpidatonya.

Metode komisi- salah satu metode penilaian ahli, berdasarkan pekerjaan komisi khusus. Kelompok ahli di "meja bundar" mendiskusikan masalah tertentu untuk menyepakati sudut pandang dan mengembangkan pendapat umum. Kerugian dari metode ini adalah bahwa kelompok ahli dalam penilaian mereka dipandu terutama oleh logika kompromi.

Metode penulisan naskahdidasarkan pada penentuan logika suatu proses atau fenomena dalam waktu dalam berbagai kondisi. Ini melibatkan pembentukan urutan peristiwa yang berkembang selama transisi dari situasi saat ini ke keadaan objek di masa depan. Skenario khusus dapat berupa deskripsi urutan dan kondisi integrasi internasional ekonomi negara-negara, termasuk pertanyaan-pertanyaan berikut:

dari bentuk yang paling sederhana ke yang lebih kompleks proses ini harus dilalui;

bagaimana hal itu akan mempengaruhi ekonomi nasional dan hubungan ekonomi negara-negara;

apa masalah keuangan, organisasi, sosial, hukum yang mungkin timbul selama internasionalisasi ekonomi.

Skenario ramalan menentukan strategi pengembangan objek ramalan. Ini harus mencerminkan tujuan umum pengembangan objek, kriteria untuk mengevaluasi tingkat atas pohon tujuan, prioritas masalah dan sumber daya untuk mencapai tujuan utama. Skenario menampilkan solusi yang konsisten untuk masalah, kemungkinan hambatan. Dalam hal ini, bahan yang diperlukan untuk pengembangan objek peramalan digunakan.

Skenario harus ditulis sedemikian rupa sehingga setelah membacanya, tujuan umum dari pekerjaan yang dilakukan sehubungan dengan tugas-tugas sosial-ekonomi untuk periode perkiraan menjadi jelas.

Biasanya bersifat multivariat dan menyoroti tiga garis perilaku:

optimis - pengembangan sistem dalam situasi yang paling menguntungkan;

pesimis - pengembangan sistem dalam situasi yang paling tidak menguntungkan;

bekerja - pengembangan sistem, dengan mempertimbangkan penangkalan terhadap faktor-faktor negatif, yang kemungkinan besar penampilannya.

Sebagai bagian dari skenario perkiraan, disarankan untuk menyusun strategi cadangan jika terjadi situasi yang tidak terduga.

Skrip yang sudah selesai harus dianalisis. Berdasarkan analisis informasi yang dianggap cocok untuk ramalan mendatang, tujuan dirumuskan, kriteria ditentukan, dan solusi alternatif dipertimbangkan.

metode pengadilanadalah semacam metode "pertemuan" dan dilaksanakan dengan analogi dengan pelaksanaan sidang.

Solusi yang dipilih bertindak sebagai "tergugat";

dalam peran "hakim" - pembuat keputusan;

dalam peran "jaksa" dan "pembela" - anggota kelompok ahli.

Peran “saksi” dilakukan dengan berbagai kondisi seleksi dan argumentasi para ahli. Saat melakukan "persidangan" semacam itu, keputusan tertentu ditolak atau dibuat.

Dianjurkan untuk menggunakan metode "pengadilan" ketika ada beberapa kelompok ahli yang mengikuti solusi yang berbeda.

Metode untuk memperoleh pendapat individu dari anggota kelompok ahli didasarkan pada penerimaan awal informasi dari para ahli yang diwawancarai secara independen satu sama lain, dengan pemrosesan selanjutnya dari data yang diterima. Metode tersebut meliputi metode kuesioner, wawancara dan metode Delphi. Keuntungan utama dari metode evaluasi pakar individu adalah efisiensinya, kemampuan untuk sepenuhnya menggunakan kemampuan individu seorang pakar, tidak adanya tekanan dari otoritas, dan biaya keahlian yang rendah. Kerugian utama mereka adalah tingginya tingkat subjektivitas dari perkiraan yang diperoleh karena terbatasnya pengetahuan seorang ahli.

metode Delphi.Tujuannya adalah untuk mengembangkan program survei individu multi-putaran berturut-turut. Survei individu para ahli biasanya dilakukan dalam bentuk kuesioner. Kemudian pemrosesan statistik mereka dilakukan di komputer dan opini kolektif kelompok dibentuk, argumen yang mendukung berbagai penilaian diidentifikasi dan digeneralisasi. Informasi yang diproses komputer dikomunikasikan kepada para ahli, yang dapat memperbaiki perkiraan, menjelaskan alasan ketidaksetujuan mereka dengan penilaian kolektif. Prosedur ini dapat diulang hingga 3-4 kali. Akibatnya, ada penyempitan kisaran perkiraan dan penilaian yang konsisten dibuat mengenai prospek pengembangan objek. Fitur metode Delphi:

a) anonimitas ahli (anggota kelompok ahli tidak saling kenal, interaksi anggota kelompok saat mengisi kuesioner sepenuhnya dikecualikan);

b) kemungkinan menggunakan hasil putaran survei sebelumnya;

c) karakteristik statistik pendapat kelompok.

Metode ini membantu untuk menentukan sebelumnya perkembangan situasi bermasalah jangka panjang. Spesialis kami yang bekerja di bidang peramalan ilmiah dan teknis juga mengembangkan metode untuk memproses penilaian ahli. Mereka disebut heuristik.

Metode wawancaramelibatkan percakapan antara seorang peramal dan seorang ahli sesuai dengan skema tanya jawab, di mana peramal, sesuai dengan program yang telah dikembangkan sebelumnya, mengajukan pertanyaan kepada ahli mengenai prospek pengembangan objek yang diprediksi. Keberhasilan penilaian semacam itu sangat tergantung pada kemampuan seorang ahli untuk memberikan pendapat dadakan tentang berbagai masalah.

Metode analitismenyediakan pekerjaan independen menyeluruh dari seorang ahli tentang analisis tren, penilaian keadaan dan jalur pengembangan objek yang diprediksi. Seorang ahli dapat menggunakan semua informasi yang dia butuhkan tentang objek ramalan. Dia menulis temuannya dalam bentuk memorandum. Keuntungan utama dari metode ini adalah kemungkinan penggunaan maksimal dari kemampuan individu ahli. Namun, sangat tidak cocok untuk memprediksi sistem yang kompleks dan mengembangkan strategi karena terbatasnya pengetahuan seorang pakar di bidang pengetahuan terkait.

. Mengolah hasil survei para ahli

survei individu ahli kolektif

Mari kita beralih ke pertimbangan prosedur yang dilakukan pada tahap pemrosesan hasil interogasi.

Atas dasar penilaian ahli, informasi umum tentang objek (fenomena) yang diteliti diperoleh dan solusi dibentuk, yang ditentukan oleh tujuan pemeriksaan. Saat memproses penilaian individu para ahli, berbagai metode kuantitatif dan kualitatif digunakan. Pilihan metode ini atau itu tergantung pada kompleksitas masalah yang dipecahkan, bentuk di mana pendapat para ahli disajikan, dan tujuan pemeriksaan.

Paling sering, saat memproses hasil survei, metode statistik matematika digunakan.

Tergantung pada tujuan pemeriksaan, masalah berikut dapat diselesaikan saat memproses penilaian:

· pembentukan penilaian umum;

· penentuan berat relatif benda;

· menetapkan tingkat persetujuan pendapat para ahli, dll.

1)Pembentukan penilaian umum

Jadi, biarkan sekelompok ahli mengevaluasi beberapa objek, lalu x j - penilaian ahli ke-j, , di mana m adalah jumlah ahli.

Untuk membentuk penilaian umum dari sekelompok ahli, nilai rata-rata paling sering digunakan. Misalnya, median (M E ), untuk mana perkiraan semacam itu diambil, dalam kaitannya dengan jumlah taksiran besar yang sama dengan jumlah taksiran yang lebih kecil.

Estimasi titik untuk sekelompok ahli juga dapat digunakan, dihitung sebagai mean aritmatika:

2)Menentukan berat relatif benda

Terkadang diperlukan untuk menentukan seberapa penting (signifikan) satu atau lain faktor (objek) dari sudut pandang kriteria apa pun. Dalam hal ini, kita katakan bahwa kita perlu menentukan bobot setiap faktor.

Salah satu cara untuk menentukan bobot adalah sebagai berikut. Biarkan x aku j - penilaian faktor i, diberikan oleh ahli ke-j, , , n - jumlah objek yang dibandingkan, m - jumlah ahli. Kemudian bobot benda ke-i, dihitung menurut perkiraan semua ahli (wi ), adalah sama dengan:

dimana aku aku j - berat benda ke-i, dihitung menurut perkiraan ahli ke-j, sama dengan:

3)Menetapkan tingkat kesepakatan di antara para ahli

Jika beberapa ahli berpartisipasi dalam survei, perbedaan dalam penilaian mereka tidak dapat dihindari, tetapi besarnya perbedaan ini penting. Penilaian kelompok dapat dianggap cukup andal hanya jika ada kesepakatan yang baik antara jawaban spesialis individu.

Untuk menganalisis pencar dan konsistensi perkiraan, karakteristik statistik digunakan - ukuran pencar.

Rentang variasi (R):

Xmax - x min ,

dimana x maks- penilaian maksimum objek; min - penilaian minimum objek.

Simpangan baku, dihitung dengan rumus terkenal:

di mana xj adalah skor yang diberikan oleh ahli ke-j; adalah jumlah ahli.

Koefisien variasi (V), yang biasanya dinyatakan sebagai persentase:

Pendekatan untuk pemeriksaan konsistensi yang digunakan dalam evaluasi objek dengan metode peringkat bersifat spesifik.

Dalam hal ini, hasil kerja pakar adalah rangking, yaitu urutan rangking (untuk pakar j): x 1j , x 2j, …, x nj .

Konsistensi antara peringkat dua ahli dapat ditentukan dengan menggunakan koefisien korelasi peringkat Spearman:

di mana xij adalah peringkat yang ditetapkan untuk objek ke-i oleh ahli ke-j; ik adalah peringkat yang ditetapkan untuk objek ke-i oleh pakar ke-k; i adalah perbedaan antara peringkat yang ditetapkan untuk ke-i obyek.

Nilainya dapat bervariasi dari -1 hingga +1. Dengan perkiraan kebetulan yang lengkap, koefisiennya sama dengan satu. Kesetaraan koefisien minus satu diamati dengan perbedaan terbesar dalam pendapat para ahli.

Selain itu, perhitungan koefisien korelasi peringkat dapat digunakan sebagai cara untuk menilai hubungan antara faktor apa pun dan fitur yang dihasilkan (reaksi) dalam kasus di mana fitur tidak dapat diukur secara akurat, tetapi dapat dipesan.

Dalam hal ini, nilai koefisien Spearman dapat diartikan sama dengan nilai koefisien korelasi pasangan. Nilai positif menunjukkan hubungan langsung antara faktor-faktor, nilai negatif menunjukkan kebalikannya, sedangkan semakin dekat nilai absolut koefisien dengan satu, semakin dekat hubungannya.

Ketika perlu untuk menentukan konsistensi dalam peringkat sejumlah besar (lebih dari dua) pakar, yang disebut koefisien konkordansi dihitung - koefisien korelasi peringkat keseluruhan untuk sekelompok m pakar:

Perhatikan bahwa apa yang dikurangi dalam tanda kurung tidak lebih dari jumlah rata-rata peringkat (bila dijumlahkan untuk setiap objek) yang diterima oleh i objek dari para ahli.

Koefisien W bervariasi dalam rentang dari 0 hingga 1. Kesetaraannya dengan satu berarti bahwa semua ahli memberikan peringkat yang sama pada objek. Semakin mendekati nilai koefisien ke nol, semakin tidak konsisten perkiraan para ahli.

Kesimpulan

Pengalaman, intuisi, rasa perspektif, dikombinasikan dengan informasi, membantu spesialis memilih tujuan dan arah pengembangan yang paling penting secara lebih akurat, menemukan opsi terbaik untuk memecahkan masalah ilmiah, teknis, dan sosial-ekonomi yang kompleks dalam kondisi di mana tidak ada informasi tentang memecahkan masalah serupa di masa lalu.

Penggunaan metode penilaian ahli membantu memformalkan prosedur untuk mengumpulkan, meringkas, dan menganalisis pendapat spesialis untuk mengubahnya menjadi bentuk yang paling nyaman untuk membuat keputusan yang tepat. Namun, perlu dicatat bahwa metode penilaian ahli tidak dapat menggantikan keputusan administratif atau perencanaan, ini hanya memungkinkan Anda untuk mengisi kembali informasi yang diperlukan untuk persiapan dan adopsi keputusan tersebut. Meluasnya penggunaan penilaian ahli dibenarkan hanya jika tidak mungkin untuk menerapkan metode yang lebih akurat untuk menganalisis masa depan.

Metode ahli terus dikembangkan dan ditingkatkan. Arah utama perkembangan ini ditentukan oleh sejumlah faktor, di antaranya dapat menunjukkan keinginan untuk memperluas ruang lingkup, meningkatkan tingkat penggunaan metode matematika dan komputer elektronik, dan juga menemukan cara untuk menghilangkan kekurangan yang muncul. Terlepas dari kemajuan yang dicapai dalam beberapa tahun terakhir dalam pengembangan dan penggunaan praktis metode penilaian ahli, ada sejumlah masalah dan tugas yang memerlukan penelitian metodologis lebih lanjut dan verifikasi praktis. Perlu perbaikan sistem seleksi pakar, peningkatan reliabilitas karakteristik opini kelompok, pengembangan metode pemeriksaan validitas penilaian, dan mempelajari penyebab tersembunyi yang menurunkan reliabilitas penilaian pakar. Namun, bahkan saat ini, penilaian ahli dalam kombinasi dengan metode matematika dan statistik lainnya merupakan alat penting untuk meningkatkan manajemen di semua tingkatan.

Bibliografi

1Orlov A.I. Penilaian ahli. // Laboratorium pabrik. ? 1996.? T.62.? nomor 1. ? hal.54-60.

2Orlov A.I. Penilaian ahli. Prok. uang saku. - M.: 2002.

Beshelev S.D., Gurvich F.G. Penilaian ahli dalam membuat keputusan yang direncanakan. Prok. uang saku. - M.: Ekonomi, 1976. ? 287 hal.

Evlanov L.G., Kutuzov V.A. Penilaian ahli dalam manajemen. - M.: Ekonomi, 1978. ? 133 hal.

Pengelolaan. Prok. uang saku. / Ed. JV Prokofieva. - M.: Pengetahuan, 2000. - 288 hal.

Beshelev S.D., Gurvich F.G. Penilaian ahli. - M.: Nauka, 1973. - 79 hal.

Metode statistik untuk analisis penilaian ahli. - M.: Nauka, 1977. - 384 hal.

Moiseev N.N. Masalah matematika analisis sistem. - M.: Nauka, 1981. - 487 hal.

Litvak B.G. Penilaian ahli dan pengambilan keputusan. - M.: Paten, 1996.

Karakteristik metode penilaian ahli [Sumber daya elektronik]: #"justify">Penilaian ahli. / Wikipedia. [Sumber daya elektronik]: #"justify">Penilaian ahli. // StatSoft: Konsultasi SPC. [Sumber daya elektronik]: http://www.spc-consulting.ru/app/expert.htm

Bimbingan Belajar

Butuh bantuan untuk mempelajari suatu topik?

Pakar kami akan memberi saran atau memberikan layanan bimbingan belajar tentang topik yang Anda minati.
Kirim lamaran menunjukkan topik sekarang untuk mencari tahu tentang kemungkinan mendapatkan konsultasi.

Keahlian adalah penilaian yang diperoleh dengan meminta pendapat ahli. Pakar (dari bahasa Latin e x p e r t u s - berpengalaman) adalah orang yang berpengetahuan luas dalam bidang kegiatan tertentu, diundang untuk memecahkan suatu masalah yang memerlukan pengetahuan khusus. Pemeriksaan dapat bersifat individu (ketika satu spesialis terlibat dalam memecahkan masalah) atau kelompok. Para ahli dapat menyampaikan pendapatnya secara lisan atau mengisi formulir khusus. Para ahli dikonsultasikan jika tidak mungkin atau sangat sulit untuk melakukan pengukuran menggunakan metode yang lebih akurat (V.M. Zatsiorsky, 1982; B.G. Litvak, 1996; V.S. Rubin, 2006; E.R. Yakhontov, 2006).

Misalnya, keahlian digunakan dalam kasus berikut: a) saat memprediksi situasi; b) ketika menganalisis peristiwa yang tidak ada metode pengukuran lain; c) ketika membenarkan adopsi keputusan manajerial tertentu dalam kondisi ketidakpastian (V.V. Muzychenko, 2003; N.N. Pilipenko, E.L. Tatarsky, 2007).

Melakukan pemeriksaan meliputi tahapan utama berikut: pembentukan tujuannya, pemilihan ahli, pilihan metodologi, survei ahli, pengolahan informasi yang diterima, termasuk penilaian konsistensi penilaian ahli individu. Penilaian ahli dibagi menjadi kuantitatif dan kualitatif (BG Litvak, 2002).

Pemilihan ahli merupakan tahap pemeriksaan yang paling penting. Persyaratan utama tenaga ahli adalah: kompetensi, minat kerja komisi ahli, efisiensi, keluasan pandangan, objektivitas, dan independensi penilaian. Ketepatan penilaian ahli sangat bergantung pada jumlah ahli. Seperti yang ditunjukkan oleh praktik, jumlah ahli yang optimal adalah 7-12 orang (E.M. Korotkov, 2003). Evaluasi ahli dapat dilakukan dengan menggunakan pendekatan sebagai berikut: a) diskusi tertutup diikuti dengan pemungutan suara tertutup atau pengisian formulir ahli khusus; b) kebebasan berbicara tanpa diskusi dan pemungutan suara; c) diskusi terbuka tentang masalah yang diangkat, diikuti dengan pemungutan suara terbuka atau tertutup.

Ada banyak cara berbeda untuk melakukan penilaian kualitas. Yang paling sederhana disebut metode preferensi (atau peringkat alternatif). Dengan menggunakan metode ini, para ahli menyusun objek yang dinilai berdasarkan penurunan kualitasnya (Tabel 1).

Tabel 1. Formulir formulir ahli yang disusun selama pemeriksaan dengan metode preferensi

JENIS PARIWISATA	Hasil peringkat
Nomor ahli	Jumlah poin
Pedesaan
kesehatan
Ziarah
Informatif
Petualangan
Menghibur
rekreasi
Olahraga
Eksotik
Ekologis

Tempat yang ditempati oleh setiap objek ditentukan oleh jumlah poin yang dicetak: semakin rendah jumlah poin, semakin tinggi tempat yang ditempati. Sebagai contoh, Tabel 1 menyajikan hasil pemeringkatan sepuluh jenis pariwisata oleh enam spesialis (ahli) menurut tingkat daya tariknya bagi penduduk Rusia.

Sering digunakan dan metode pemeriksaan lain - metode perbandingan berpasangan. Dalam hal ini, ahli mengisi tabel di mana semua objek yang dibandingkan ditunjukkan baik secara horizontal maupun vertikal (Tabel 2).

Tabel 2. Contoh formulir pakar yang diisi oleh masing-masing pakar saat melakukan pemeriksaan dengan metode perbandingan berpasangan

									Jumlah poin
Bulgaria
Jerman

Misalnya, perlu untuk menentukan negara paling populer dari delapan yang disajikan, di mana orang Rusia ingin melakukan perjalanan wisata. Pada Tabel 2, setiap sel mengacu pada dua objek yang dibandingkan, dan satu diletakkan di dalamnya untuk salah satu yang, menurut pendapat ahli, memiliki kualitas yang lebih tinggi atau lebih penting. Objek lain yang dibandingkan ini disetel ke nol. Kemudian jumlah total poin yang dicetak dihitung dan tempat (peringkat) objek ujian ditentukan.

Evaluasi hasil pemeriksaan mungkin memiliki bentuk yang lebih kompleks. Selanjutnya, sebagai contoh, kami akan memberikan ujian bertahap yang ditujukan untuk "Pemilihan kepala perusahaan perjalanan".

Tahap nomor 1. Mengisi formulir ahli. Seperti yang telah kita tetapkan, masing-masing ahli harus mengisi formulir ahli, yang sebenarnya adalah matriks preferensi, dan kolom dan baris matriks ini disebut kualitas yang dipilih (Tabel 3). Arti dari pengisian ini adalah untuk membandingkan semua kualitas secara bergantian satu sama lain. Dalam hal ini (yaitu dalam perbandingan timbal balik), kualitas yang lebih disukai diberikan 2 poin, dan kualitas yang kurang disukai adalah 0 poin. Jika tidak mungkin untuk memberikan preferensi pada salah satu dari dua kualitas yang dibandingkan, masing-masing diberikan 1 poin.

Tabel 3. Matriks Preferensi

Jadi, dalam contoh kami, pada langkah pertama, kami mulai membandingkan kualitas baris pertama, mis. Pertama-tama, kami membandingkan "keramahan" dari baris pertama dan "kewajiban" dari baris ke-2. Biarkan, menurut pendapat salah satu ahli, untuk direktur perusahaan perjalanan, yang kualitasnya dibandingkan satu sama lain, "keramahan" lebih disukai daripada "kewajiban". Kemudian nilai 2 dimasukkan dalam "sel 1.2", masing-masing, "wajib" diberikan 0 poin dan nilai ini dimasukkan dalam "sel 2.1". Jadi, pada langkah pertama, hanya baris pertama dan, karenanya, kolom pertama yang diisi, dan "secara otomatis" tergantung pada preferensi yang dipilih untuk baris pertama. Selanjutnya, ahli membandingkan kualitas pada baris kedua, yaitu. membandingkan "wajib" dengan semua kualitas lainnya. Selain itu, tidak perlu lagi membandingkan “sosialisasi” dan “kewajiban”, karena perbandingan ini sudah dilakukan pada langkah pertama. Demikian pula, semua kualitas yang tersisa dibandingkan. Dalam contoh kita, matriks preferensi yang telah selesai akan terlihat seperti ini (Tabel 3).

Untuk memeriksa kebenaran pengisian matriks preferensi, Anda harus memperhatikan fakta bahwa semua elemen relatif terhadap diagonal utama memiliki korespondensi timbal balik, yaitu, jika nilai 2 ditulis dalam "sel 1.2", maka nilai 0 harus ditulis di "sel 2.1", masing-masing, jika di "sel 1.3" nilai 1 ditulis, maka di "sel 3.1", masing-masing, nilai 1 juga harus ditulis, dll.

Tahap nomor 2. Memproses matriks preferensi. Pada tahap ini, setiap pakar mulai memproses matriks preferensi. Pertama-tama, semua nilai sel matriks dengan baris dijumlahkan. Dengan cara ini dimungkinkan untuk menghitung jumlah total poin yang diterima oleh setiap kualitas alternatif, yaitu. intinya mengetahui bobot mutlak masing-masing kualitas individu (V). Perhatikan bahwa bobot absolut maksimum setiap kualitas () sama dengan:

di mana N adalah jumlah kualitas yang dibandingkan.

Dalam contoh kami, nilai ini adalah 14. Setelah memproses matriks preferensi, dapat dilihat bahwa kualitas seperti "keramahan" memiliki bobot absolut 5, "kewajiban" - 9, "ketepatan waktu" - 4, dll.

Maka perlu untuk menentukan bobot absolut total semua kualitas matriks preferensi sesuai dengan rumus:

Dalam contoh kita = 8 (8 - 1) = 56.

Jika beberapa ahli ikut serta dalam pemeriksaan, maka bobot rata-rata setiap kualitas harus dihitung dengan menggunakan rumus:

di mana? = ? +? + … + ?; k - jumlah ahli; dan 1, 2 ... n adalah nomor baris saat ini (nomor seri kualitas).

Dan akhirnya, mudah untuk menghitung bobot relatif dari setiap kualitas menggunakan rumus:

= [ / N (N - 1)] ?100% jika beberapa ahli berpartisipasi dalam pemeriksaan, dan

100% jika satu ahli berpartisipasi dalam ujian.

Dalam kasus kami, kami hanya memiliki satu ahli dan, oleh karena itu, nilai k=1. Oleh karena itu, bobot relatif yang sesuai dengan kualitas "sosialisasi" adalah sama dengan (5/56) ? 100% = 8,9%; kualitas "kewajiban" - (9/56)? 100% = 16,2%; kualitas "ketepatan waktu" - (4/56) ? 100% = 7,1%; kualitas "ketenangan" - (8/56) ? 100% = 14,3%; kualitas "pengalaman kerja" - (5/56) ? 100% = 8,9%; kualitas "keadilan" - (11/56) ? 100% = 19,6%; kualitas "kompetensi" - (14/56) ? 100% = 25,0%.

Tahap nomor 3. Analisis hasil pemeriksaan Mengetahui bobot relatif dari setiap kualitas, Anda dapat memberi peringkat, menempatkannya dalam urutan kepentingan yang meningkat. Pertanyaan penting lainnya, yang juga harus dijawab dengan menggunakan hasil yang diperoleh, kualitas apa yang tanpanya kandidat tidak dapat mengambil posisi yang diusulkan dalam keadaan apa pun? Untuk menemukan batas antara kualitas yang diperlukan dan cukup, disarankan untuk menggunakan koefisien batas yang sama dengan 4/3n (V.V. Muzychenko, 2003). Jadi, jika ada n kualitas, maka batas tersebut akan melewati bobot sebesar (4/3) n. Dalam kasus kami, nilai ini adalah 11 dan, oleh karena itu, kualitas seperti "kompetensi" dan "keadilan" diperlukan untuk kepala perusahaan perjalanan.

Dari metode yang lebih kompleks dalam melakukan pemeriksaan, "Metode Delphi", "Metode brainstorming", "Metode 6.3.5." dan beberapa teknik lainnya.

Metode Delphi Namanya berasal dari kota Yunani kuno Delphi, di mana, menurut legenda, di kuil Apollo pada periode dari abad IX. SM. menurut abad IV. IKLAN ada dewan orang bijak ("the Delphic oracle"), yang terkenal dengan ramalannya. Inti dari metode ini terletak pada pengembangan pendapat yang disepakati dengan pengulangan berulang dari survei tertulis individu dari ahli yang sama. Setelah putaran pertama survei, semua jawaban dianalisis dan dibawa ke perhatian masing-masing ahli dalam bentuk konsolidasi. Kemudian, setelah setiap putaran, data survei diproses lagi, dan hasilnya dilaporkan kepada para ahli, yang menunjukkan lokasi penilaian. Putaran pertama survei dilakukan tanpa argumentasi. Yang kedua, jawaban yang berbeda dari yang lain tunduk pada argumentasi, atau ahli dapat mengubah penilaian. Setelah penilaian stabil, survei berhenti dan keputusan yang diajukan oleh para ahli diadopsi (A. Durovich, L. Anastasova, 2002).

"Brainstorming" adalah salah satu yang utama dalam mengatur dan melakukan pemeriksaan (B.G. Litvak, 1996; E.M. Korotkov, 2003; E.R. Yakhontov, 2006). Brainstorming biasanya terdiri dari dua putaran. Pada putaran pertama, ide-ide dihasilkan, dan pada putaran kedua, ide-ide yang diidentifikasi didiskusikan, dievaluasi, dan sudut pandang kolektif dikembangkan.

Babak pertama diadakan sedemikian rupa sehingga masing-masing pakar dapat dengan bebas menyampaikan pendapatnya. Setiap sudut pandang atau ide yang diungkapkan harus didiskusikan dan tidak dapat dinyatakan salah. Tugas utama putaran pertama adalah untuk mendapatkan, mungkin, gambaran yang lebih lengkap tentang faktor-faktor yang dapat mempengaruhi perkembangan situasi. Di babak kedua, dari faktor-faktor yang diidentifikasi di babak pertama, hanya yang paling signifikan yang harus ditinggalkan. Untuk melakukan ini, mereka perlu dievaluasi secara kritis, sehingga para ahli yang berpartisipasi dalam tahap kedua dibagi menjadi pendukung dan penentang pendapat yang diungkapkan. Pendukung mencoba memberikan bukti yang diperlukan untuk mendukung sudut pandang yang diungkapkan, dan lawan mencoba untuk membantahnya. Kemudian, berdasarkan hasil diskusi, keputusan akhir dibuat.

Metode penilaian ahli kualitatif, seperti yang kita lihat, memiliki banyak pilihan, salah satunya adalah “6. 3,5". Esensinya terletak pada kenyataan bahwa 6 ahli dalam 5 menit menawarkan 3 pilihan untuk memecahkan masalah yang diteliti, para ahli menulis jawaban mereka pada formulir khusus (Tabel 4). Lima menit kemudian, enam ahli berikutnya diundang untuk prosedur yang sama. Dengan demikian, dalam waktu setengah jam Anda bisa mendapatkan 108 proposal baru.

Tabel 4. Contoh formulir ahli yang diisi selama pemeriksaan menggunakan “6. 3,5"

Masalah yang diteliti
nomor pilihan	Saran untuk memecahkan masalah oleh kelompok ahli
Ahli pertama dari grup	Ahli kedua		Keempat		ahli kelompok
Opsi kedua
Opsi ketiga

Sejumlah proposal yang terkumpul dalam waktu singkat kemudian dianalisis dengan cermat, dan para pakar ahli menarik kesimpulan dan memberikan proposal spesifik tentang masalah yang diangkat.

Kadang-kadang spesifikasi objek evaluasi ahli sedemikian rupa sehingga para ahli dapat mengukur indikator individu. Dalam hal ini, lebih dibenarkan menggunakan metode penilaian kuantitatif objek keahlian. Di antara metode untuk mendapatkan perkiraan ahli kuantitatif, yang paling umum digunakan adalah "Kuantifikasi Langsung", "Metode Titik Tengah" dan "Metode Churchman-Akoff".

Kuantifikasi langsung digunakan bila perlu untuk menentukan nilai suatu indikator yang diukur secara kuantitatif. Dalam hal ini, masing-masing ahli secara langsung menunjukkan nilai indikator untuk objek yang dinilai. Misalnya, perkiraan kapasitas pasar wisata diperkirakan; harga unit produksi di mana ia akan memiliki permintaan yang kompetitif; volume produksi yang optimal; nilai perusahaan, dll.

metode titik tengah. Metode ini digunakan bila ada banyak alternatif pilihan yang dapat dikuantifikasi. Dalam hal ini, jika melalui f () kami menyatakan penilaian alternatif pertama, dan melalui f () - penilaian alternatif kedua, maka selanjutnya ahli diundang untuk menentukan alternatif ketiga, penilaian yang f () terletak di tengah antara nilai f() dan f() dan sama dengan f() + f()/2. Selanjutnya pakar menunjukkan suatu alternatif yang nilainya terletak di tengah antara f() dan f(), kemudian opsi yang nilainya f() terletak di tengah-tengah antara nilai f( dan f ().Prosedur selesai ketika preferensi komparatif dari semua alternatif yang berpartisipasi dalam pemeriksaan ditentukan.

Metode Churchman-Akoff. Metode ini digunakan dalam penilaian kuantitatif preferensi komparatif pilihan alternatif dan memungkinkan penyesuaian perkiraan yang diberikan oleh para ahli. Semua opsi alternatif diberi peringkat berdasarkan preferensi, dan masing-masing diberi perkiraan kuantitatif oleh ahli, sebagai aturan, dalam pecahan satu, sedangkan jumlah total perkiraan opsi alternatif harus sama dengan 1 (atau 100%). Selanjutnya, ahli membandingkan penilaian opsi alternatif pertama f () dan jumlah opsi alternatif yang tersisa berdasarkan preferensi. Jika opsi pertama lebih disukai daripada jumlah opsi alternatif yang tersisa, maka opsi tersebut dikeluarkan dari pertimbangan lebih lanjut. Ketika kurang disukai daripada jumlah alternatif yang tersisa, itu dibandingkan dengan jumlah alternatif kecuali yang terakhir. Jika opsi alternatif pada beberapa langkah ternyata lebih disukai daripada jumlah opsi alternatif lainnya, maka opsi tersebut dikeluarkan dari pertimbangan lebih lanjut. Proses ini berlanjut sampai semua alternatif ditinjau secara berurutan, dan skor dapat disesuaikan.

Seperti yang dapat kita lihat, pariwisata mencakup banyak bidang kehidupan manusia, dan oleh karena itu studi tentang pariwisata terkait erat dengan psikologi manusia. Paling lengkap, menurut pendapat kami, kebutuhan untuk menerapkan metode psikodiagnostik dalam pariwisata dibuktikan dalam karyanya oleh M.B. Birzhakov (1999, p. 181): “Arah perjalanan mana yang akan dipilih turis, negara mana yang lebih disukai musim ini, jenis pariwisata apa yang paling populer? Apa yang menguntungkan untuk ditawarkan di pasar pariwisata, kemana mengarahkan aktivitas Anda dalam mempromosikan produk pariwisata Anda? Bagaimana membangun tur untuk memenuhi keinginan klien? Banyak dari pertanyaan ini tidak dapat dijawab tanpa mempelajari psikologi manusia dan prasyarat untuk memotivasi tindakan dan pengambilan keputusan.

Kirim karya bagus Anda di basis pengetahuan sederhana. Gunakan formulir di bawah ini

Mahasiswa, mahasiswa pascasarjana, ilmuwan muda yang menggunakan basis pengetahuan dalam studi dan pekerjaan mereka akan sangat berterima kasih kepada Anda.

Diposting pada http://www.allbest.ru/

LEMBAGA SOSIAL-EKONOMI MOSKOW

dengan topik "Metodologi untuk melakukan penilaian ahli"

Siswa:

Artyushenko Yulia Viktorovna

Grup: M10B-D-O-z

Moskow 2014

pengantar

2. Metode penilaian ahli

Kesimpulan

pengantar

Dalam studi manajemen, metode penilaian ahli banyak digunakan. Ini karena kompleksitas banyak masalah, asalnya dari "faktor manusia", kurangnya alat eksperimental atau normatif yang andal.

Tidak dapat disangkal bahwa untuk membuat keputusan yang tepat, perlu mengandalkan pengalaman, pengetahuan, dan intuisi para spesialis. Setelah Perang Dunia Kedua, dalam kerangka teori manajemen (manajemen), disiplin independen mulai berkembang - penilaian ahli.

Metode penilaian ahli adalah metode untuk mengorganisir pekerjaan dengan ahli spesialis dan mengolah pendapat ahli yang dinyatakan dalam bentuk kuantitatif dan/atau kualitatif dalam rangka menyiapkan informasi untuk pengambilan keputusan oleh pengambil keputusan.

Banyak karya telah dikhususkan untuk mempelajari kemungkinan dan fitur penerapan penilaian ahli. Mereka mempertimbangkan bentuk survei ahli (berbagai jenis kuesioner, wawancara), pendekatan penilaian (pemeringkatan, normalisasi, berbagai jenis pengurutan, dll.), metode untuk memproses hasil survei, persyaratan ahli dan pembentukan kelompok ahli, masalah ahli pelatihan, penilaian kompetensi mereka (saat memproses penilaian, koefisien kompetensi ahli, keandalan pendapat mereka diperkenalkan dan diperhitungkan), metode pengorganisasian survei ahli. Pilihan bentuk dan metode untuk melakukan survei ahli, pendekatan untuk memproses hasil survei, dll. tergantung pada tugas khusus dan kondisi pemeriksaan.

Metode ahli sekarang digunakan dalam situasi di mana pilihan, pembenaran dan evaluasi konsekuensi keputusan tidak dapat dilakukan atas dasar perhitungan yang akurat. Situasi seperti itu sering muncul dalam perkembangan masalah modern dalam mengelola produksi sosial dan, terutama, dalam peramalan dan perencanaan jangka panjang. Dalam beberapa tahun terakhir, penilaian ahli telah banyak digunakan dalam peramalan sosial-politik dan ilmiah-teknis, dalam perencanaan ekonomi nasional, industri, asosiasi, dalam pengembangan program ilmiah, teknis, ekonomi dan sosial utama, dalam memecahkan manajemen tertentu. masalah. peringkat manajemen ahli

1. Esensi, metode dan proses penilaian ahli

1.1 Inti dari penilaian ahli

Kemungkinan menggunakan penilaian ahli, pembenaran objektivitasnya biasanya didasarkan pada fakta bahwa karakteristik yang tidak diketahui dari fenomena yang diteliti ditafsirkan sebagai variabel acak, refleksi dari hukum distribusi yang merupakan penilaian individu dari ahli spesialis. pada keandalan dan pentingnya suatu peristiwa. Diasumsikan bahwa nilai sebenarnya dari karakteristik yang diteliti berada dalam kisaran perkiraan yang diterima dari kelompok ahli, dan bahwa opini kolektif yang digeneralisasikan dapat diandalkan.

Namun, beberapa studi teoritis mempertanyakan asumsi ini. Misalnya, diusulkan untuk membagi masalah yang penilaian ahli digunakan menjadi dua kelas. Kelas pertama mencakup masalah-masalah yang dilengkapi dengan informasi yang cukup baik dan untuk itu prinsip "pengukur yang baik" dapat digunakan, mengingat ahli sebagai penjaga sejumlah besar informasi, dan pendapat kelompok ahli dekat dengan yang benar. Kelas kedua mencakup masalah yang tidak memiliki cukup pengetahuan untuk memastikan validitas asumsi di atas; ahli tidak dapat dianggap sebagai “pengukur yang baik”, dan pengolahan hasil pemeriksaan perlu didekati dengan cermat, karena dalam hal ini pendapat seorang (tunggal) ahli, yang lebih memperhatikan kajian sedikit- masalah yang dipelajari, mungkin menjadi yang paling signifikan, dan selama pemrosesan formal itu akan hilang. Dalam hal ini, pengolahan hasil kualitatif harus diterapkan terutama pada masalah-masalah kelas kedua. Penggunaan metode rata-rata (berlaku untuk "pengukur yang baik") dalam hal ini dapat menyebabkan kesalahan yang signifikan.

Tugas pengambilan keputusan kolektif tentang pembentukan tujuan, peningkatan metode dan bentuk manajemen biasanya dapat dikaitkan dengan kelas satu. Namun, ketika mengembangkan prakiraan dan rencana jangka panjang, disarankan untuk mengidentifikasi pendapat "langka" dan menjadikannya analisis yang lebih menyeluruh.

Masalah lain yang perlu diingat ketika melakukan analisis sistem adalah sebagai berikut: bahkan dalam kasus pemecahan masalah yang berkaitan dengan kelas satu, orang tidak boleh lupa bahwa penilaian ahli tidak hanya membawa fitur subjektif sempit yang melekat pada masing-masing pakar, tetapi juga fitur kolektif-subyektif yang tidak hilang saat memproses hasil survei (dan saat menggunakan prosedur Delphi, fitur tersebut bahkan dapat ditingkatkan). Dengan kata lain, penilaian ahli harus dilihat sebagai semacam "sudut pandang publik", tergantung pada tingkat pengetahuan ilmiah dan teknis masyarakat mengenai subjek penelitian, yang dapat berubah seiring dengan berkembangnya sistem dan gagasan kita tentangnya. . Oleh karena itu, survei ahli bukanlah prosedur satu kali. Cara memperoleh informasi tentang masalah kompleks yang ditandai dengan tingkat ketidakpastian yang tinggi ini harus menjadi semacam "mekanisme" dalam sistem yang kompleks, yaitu. perlu untuk membuat sistem kerja yang teratur dengan para ahli.

Perhatian juga harus diberikan pada fakta bahwa penggunaan pendekatan frekuensi klasik untuk menilai probabilitas ketika mengorganisir survei ahli bisa jadi sulit, dan kadang-kadang tidak mungkin (karena ketidakmungkinan membuktikan legitimasi menggunakan sampel yang representatif). Oleh karena itu, saat ini, studi sedang berlangsung pada sifat probabilitas penilaian ahli, berdasarkan teori, himpunan fuzzy Zadeh, pada gagasan penilaian ahli sebagai tingkat konfirmasi hipotesis atau sebagai kemungkinan pencapaian sebuah tujuan. Salah satu jenis metode pakar adalah metode mempelajari kekuatan dan kelemahan organisasi, peluang dan ancaman terhadap kegiatannya - metode analisis SWOT.

Pengumpulan informasi pakar tergantung pada pilihan metode penilaian pakar. Biasanya, untuk mengumpulkan informasi pakar, dokumen khusus disusun, misalnya, kuesioner yang disetujui oleh manajer terkait dan kemudian dikirim ke pakar.

Pemrosesan informasi pakar dilakukan dengan menggunakan metode yang dipilih, biasanya dengan penggunaan teknologi komputer. Data yang diperoleh sebagai hasil pemrosesan dianalisis dan digunakan untuk memecahkan masalah analisis dan sintesis sistem kontrol.

Penilaian ahli digunakan untuk analisis, diagnosis keadaan, prediksi opsi pengembangan selanjutnya:

1) objek, yang perkembangannya sebagian atau seluruhnya tidak sesuai dengan deskripsi subjek atau formalisasi matematis;

2) dengan tidak adanya statistik yang cukup representatif dan andal tentang karakteristik objek;

3) dalam kondisi ketidakpastian yang besar di lingkungan untuk berfungsinya objek, lingkungan pasar;

4) dalam peramalan pasar baru jangka menengah dan panjang, objek industri baru yang sangat dipengaruhi oleh penemuan dalam ilmu dasar (misalnya, industri mikrobiologi, elektronik kuantum, teknik nuklir);

5) dalam kasus di mana waktu atau dana yang dialokasikan untuk peramalan dan pengambilan keputusan tidak memungkinkan untuk menyelidiki masalah menggunakan model formal;

6) tidak ada sarana teknis pemodelan yang diperlukan, misalnya, teknologi komputer dengan karakteristik yang sesuai;

7) dalam situasi ekstrim.

Tugas yang diselesaikan dalam proses penilaian ahli sistem kontrol dapat dibagi menjadi dua kelompok:

1) tugas sintesis sistem kontrol baru dan evaluasinya;

2) tugas analisis (pengukuran) sistem manajemen yang ada sesuai dengan indikator dan kriteria kinerja yang dipilih.

Tugas kelompok pertama meliputi: pembentukan citra sistem yang sedang dibuat; meramalkan indikator teknis dan ekonomi dari tahapan siklus hidupnya; pembuktian arah utama reorganisasi sistem manajemen sosial; pemilihan metode tindakan dan hasil yang optimal atau memuaskan dengan menggunakan sistem kontrol yang dibuat, dll. Beberapa informasi ahli yang diperoleh selama menyelesaikan masalah ini bersifat kualitatif dan dibentuk dalam bentuk penilaian kompleks dalam bentuk deskriptif. Namun, tugas sintesis yang diselesaikan dengan bantuan penilaian ahli dapat bersifat kuantitatif, dan solusinya akan dikaitkan dengan pembenaran berbagai parameter (karakteristik) dari sistem yang dibuat. Tugas kelompok kedua mencakup semua tugas mengevaluasi varian sistem kontrol yang ada atau dibuat menggunakan indikator dan kriteria kinerja yang ditentukan. Contoh tugas tersebut adalah: menentukan karakteristik struktural, fungsional atau informasi dari sistem; evaluasi efektivitasnya dalam melakukan berbagai operasi; penentuan kelayakan operasi lebih lanjut dari sarana kontrol dan komunikasi teknis, dll.

1.2 Peran ahli dalam manajemen

Keahlian adalah pendapat, ide, keputusan, atau penilaian berdasarkan penerapan pengalaman berharga dari seorang spesialis, pengetahuan mendalam tentang subjek penelitian dan teknologi analisis kualitatif.

Keahlian bisa individu atau kelompok. Dalam keahlian kelompok, pemilihan sekelompok ahli dan metodologi untuk pemrosesan akhir hasil pekerjaannya sangat penting.

Pendapat ahli adalah dokumen yang mencatat jalannya penelitian dan hasilnya. Pada saat yang sama, kesimpulan dan pendapat para ahli dapat memiliki bentuk kategoris ("ya", "tidak"), dan probabilistik (dalam bentuk asumsi, peringkat, koefisien preferensi, dll.).

Dalam mengatur pekerjaan para ahli, perlu mematuhi prinsip-prinsip berikut:

1. Ide, pendapat, dan penilaian harus sesuai dengan skema yang telah disiapkan sebelumnya. Ini memungkinkan Anda untuk menggeneralisasi, membandingkan, menyoroti yang esensial, dll. Skema semacam itu seharusnya tidak membatasi pemikiran dan membatasi fantasi. Skema dapat memungkinkan dan mengasumsikan kemungkinan modifikasi dan penambahannya.

2. Pemrosesan pendapat ahli harus dilakukan tidak hanya dalam generalisasi kuantitatif, tetapi juga melalui analisis kualitatif, menyoroti yang utama, penting, penting, relevan, asli, baru, dll. Pendapat ahli dapat menjadi bahan pemeriksaan yang kedua panggung.

3. Pakar harus independen, yaitu bebas dari batasan organisasi atau konseptual, serta psikologis. Dalam hal ini, pengalaman, pengetahuan, dan intuisi mereka diwujudkan dengan cara terbaik.

4. Pekerjaan kelompok ahli harus memiliki tujuan. Memahami mengapa dan mengapa suatu pemeriksaan dilakukan merupakan unsur penting dalam pelaksanaannya. Dalam banyak kasus, diperlukan pelatihan khusus dari para ahli, yang berperan dalam memobilisasi upaya dan intelijen.

5. Bentuk pengorganisasian kerja kelompok ahli bermacam-macam: baik masing-masing ahli melakukan pemeriksaan secara individu, kemudian hasilnya dirangkum dan disistematisasikan, atau para ahli bekerja secara kolektif, saling berinteraksi.

6. Pekerjaan paralel dan multi-tahap dari beberapa kelompok ahli dimungkinkan. Perbandingan keahlian memberikan informasi penting.

Ada banyak metode untuk mendapatkan penilaian ahli. Dalam beberapa, mereka bekerja dengan masing-masing ahli secara terpisah, dia bahkan tidak tahu siapa lagi yang ahli, dan karena itu mengungkapkan pendapatnya terlepas dari otoritas. Di tempat lain, para ahli dikumpulkan untuk menyiapkan bahan bagi pengambil keputusan, sementara para ahli mendiskusikan masalah satu sama lain, belajar dari satu sama lain, dan pendapat yang salah dibuang. Dalam beberapa metode, jumlah ahli tetap dan sedemikian rupa sehingga metode statistik untuk memeriksa konsistensi pendapat dan kemudian meratakannya memungkinkan pengambilan keputusan yang tepat. Di tempat lain, jumlah penguji bertambah selama ujian, misalnya, saat menggunakan metode "bola salju".

Seorang ahli atau sekelompok ahli yang bertindak sebagai ahli terkadang diidentikkan dengan alat ukur yang memiliki kesalahan pengukuran yang acak dan sistematis.

Kesalahan acak disebabkan oleh subjektivitas pendapat ahli tentang masalah yang sedang dipertimbangkan dan dapat menyimpang ke satu arah atau lainnya dari nilai sebenarnya. Dampak dari kesalahan tersebut dikurangi dengan rata-rata jumlah perkiraan yang memadai.

Kesalahan sistematis melekat pada seluruh tim ahli dan tidak dapat dihilangkan dengan memproses perkiraan yang diperoleh. Hal ini menunjukkan bahwa dalam beberapa kasus perlu untuk mendekati hasil survei ahli dengan sangat hati-hati, yang terkadang dapat mengungkapkan sudut pandang yang umumnya salah, tergantung pada tingkat pengetahuan dan keyakinan para ahli.

1.3 Proses peninjauan sejawat

Tahapan utama dari proses peer review meliputi:

Pembentukan maksud dan tujuan penilaian ahli;

Pembentukan kelompok manajemen dan pelaksanaan keputusan untuk melakukan penilaian ahli;

Memilih metode untuk memperoleh informasi ahli dan metode untuk pemrosesannya;

Pemilihan kelompok ahli dan formasi, jika perlu, kuesioner survei;

Survei ahli (expertise);

Pengolahan dan analisis hasil pemeriksaan;

Interpretasi hasil yang diperoleh;

Penyusunan laporan.

Tugas melakukan penilaian ahli ditetapkan oleh pengambil keputusan. Tahap pembentukan tujuan dan sasaran evaluasi ahli adalah yang utama. Keandalan hasil yang diperoleh dan nilai pragmatisnya bergantung padanya. Pembentukan tujuan dan sasaran evaluasi ahli ditentukan oleh esensi masalah yang dipecahkan. Di sini, faktor-faktor berikut harus diperhitungkan: keandalan dan kelengkapan informasi awal yang tersedia, bentuk penyajian hasil yang diperlukan (kualitatif atau kuantitatif), kemungkinan area penggunaan informasi yang diterima, waktu penyerahannya, sumber daya yang tersedia untuk manajemen, kemungkinan menarik spesialis dari bidang pengetahuan lain, dan banyak lagi. Tugas diformalkan dalam bentuk dokumen panduan (misalnya, keputusan untuk melakukan penilaian ahli).

Untuk mempersiapkan keputusan dan memandu semua pekerjaan lebih lanjut, kepala ujian ditunjuk. Ini mendefinisikan komposisi grup manajemen. Kelompok kontrol memberikan umpan balik kepada para ahli atau metode Delphi.

Kelompok manajemen dipercayakan tidak hanya dengan semua pekerjaan organisasi dan perencanaan untuk menyediakan kondisi yang menguntungkan bagi aktivitas kreatif para ahli yang efektif, tetapi juga dengan pekerjaan analitis pada pemilihan kelompok ahli, menentukan metode untuk memperoleh dan memproses informasi, menyusun kuesioner - kuesioner , interpretasi hasil yang bermakna.

Rentang besar dan kompleks tugas yang harus diselesaikan ini memerlukan masuknya spesialis berkualifikasi tinggi dalam kelompok manajemen baik di bidang masalah yang sedang dipertimbangkan dan di bidang lain - psikologi, matematika, kedokteran, sosiologi.

Pemilihan pakar khusus dilakukan atas dasar analisis kualitas masing-masing pakar yang diusulkan. Berbagai metode digunakan untuk tujuan ini:

penilaian calon ahli berdasarkan analisis statistik hasil kegiatan masa lalu sebagai ahli pada masalah studi SU;

penilaian kolektif calon ahli sebagai spesialis di bidang ini

penilaian sendiri terhadap calon tenaga ahli;

penentuan analitis kompetensi calon tenaga ahli.

Namun, semua metode ini memiliki kelemahan tertentu, termasuk: kurangnya metodologi penilaian tunggal yang diakui secara umum; kompleksitas penilaian yang tinggi; munculnya masalah etika ketika menggunakan metode penilaian subjektif.

Selama pekerjaan ini, beberapa metode sering digunakan secara bersamaan: penilaian diri dan penilaian kolektif kualitas ahli yang diusulkan. Pendekatan ini memungkinkan untuk memilih ahli secara wajar dengan kualitas yang diperlukan. Namun, harus diakui bahwa metode penilaian kinerja masa lalu tampaknya lebih objektif daripada metode penilaian diri dan penilaian kolektif.

Secara umum, pembentukan kelompok ahli didahului dengan kegiatan sebagai berikut:

masalah diidentifikasi dan dirumuskan;

tujuan dan ruang lingkup kegiatan kelompok ditentukan;

daftar ahli awal disusun;

analisis dan pemilihan ahli dilakukan (berdasarkan penggunaan satu atau lebih metode untuk memilihnya);

daftar tenaga ahli ditetapkan; . persetujuan ahli untuk berpartisipasi dalam pekerjaan kelompok ahli diperoleh;

daftar perwakilan ahli akhir ditentukan. Semua ahli potensial, tergantung pada kualitas dan kompetensinya, dapat diklasifikasikan ke dalam tujuh kelas

Contoh gradasi kualitas dan kompetensi tenaga ahli.

Pemilihan jumlah kelas ahli kualitas dalam hal ini disebabkan oleh "aturan tujuh", yang secara tradisional digunakan dalam memecahkan masalah manajemen mutu.

Gradasi ini memungkinkan untuk memilih ahli yang dibutuhkan untuk bekerja dalam kelompok ahli. Untuk mendapatkan hasil studi SU yang cukup objektif, diinginkan untuk memilih di antara para ahli yang termasuk dalam kelas kualitas 1-4. Kandidat ahli dari kelas berkualitas rendah tidak boleh dilibatkan dalam ujian.

Terlepas dari metode penilaian kualitas kandidat yang dipilih, para ahli dalam semua kasus harus memenuhi persyaratan tertentu, termasuk:

* kompetensi profesional dan pengalaman praktis dan penelitian di bidang manajemen;

* kreativitas (kemampuan memecahkan masalah kreatif); . intuisi ilmiah;

Ketertarikan pada hasil objektif pekerjaan ahli;

* independensi penilaian;

* Efisiensi "disiplin" kemampuan untuk beralih dari satu jenis kegiatan ke yang lain, komunikatif, kemandirian penilaian, motivasi tindakan);

* objektivitas;

* ketidaksesuaian;

* pengetahuan umum yang tinggi.

Pelaksanaan pengumpulan pendapat ahli meliputi penentuan: tempat dan waktu pengumpulan pendapat; bentuk dan metode pengumpulan pendapat; jumlah putaran pengumpulan pendapat; komposisi dan isi dokumentasi; tata cara memasukkan hasil pendapat ahli ke dalam dokumen.

Sangat penting untuk menentukan bentuk pengumpulan pendapat ahli. Di antara semua bentuk pengumpulan pendapat yang diketahui, seseorang dapat mencatat individu, kolektif (kelompok) dan campuran. Dengan demikian, bentuk-bentuk ini berbeda terutama dalam hal partisipasi para ahli dalam pekerjaan (individu atau kolektif) dan masing-masing memiliki sejumlah varietas:

* bertanya;

* wawancara;

* diskusi;

* brainstorming

* pertemuan;

* permainan bisnis.

Semuanya memiliki kelebihan dan kekurangan masing-masing. Dalam banyak kasus, masing-masing varietas ini digunakan bersama dengan yang lain, yang seringkali memberikan efek dan objektivitas yang lebih besar. Apakah bentuk campuran digunakan ketika mengumpulkan pendapat ahli dalam kasus beberapa ambiguitas masalah, dalam kasus ketidaksepakatan? pendapat individu atau perbedaan pendapat para ahli dalam diskusi kolektif.

Setelah melakukan survei terhadap sekelompok ahli, hasilnya diolah. Informasi awal untuk diproses adalah data numerik yang mengungkapkan preferensi para ahli dan pembenaran substantif untuk preferensi ini. Tujuan pengolahan adalah untuk mendapatkan data umum dan informasi baru yang terkandung dalam bentuk tersembunyi dalam penilaian ahli. Berdasarkan hasil pengolahan tersebut, maka terbentuklah solusi dari permasalahan tersebut.

Adanya data numerik dan pernyataan ahli yang bermakna menyebabkan perlunya penerapan metode kualitatif dan kuantitatif untuk mengolah hasil evaluasi ahli kelompok. Bagian dari metode ini pada dasarnya tergantung pada kelas masalah yang diselesaikan oleh evaluasi ahli.

Seluruh rangkaian masalah dapat dibagi menjadi dua kelas. Kelas pertama mencakup masalah yang solusinya memiliki tingkat pengetahuan dan pengalaman yang cukup, yaitu, ada potensi informasi yang diperlukan. Ketika memecahkan masalah yang termasuk dalam kelas ini, para ahli dianggap sebagai pengukur rata-rata yang baik. Istilah “baik rata-rata” mengacu pada kemungkinan memperoleh hasil pengukuran yang mendekati kebenaran. Bagi banyak ahli, penilaian mereka mengelompok di sekitar nilai sebenarnya. Oleh karena itu untuk mengolah hasil evaluasi ahli kelompok masalah kelas satu, seseorang dapat berhasil menerapkan metode statistik matematika berdasarkan rata-rata data.

Kelas kedua mencakup masalah-masalah yang solusinya belum terakumulasi potensi informasi yang memadai. Dalam hal ini, pendapat para ahli bisa sangat berbeda satu sama lain. Selain itu, penilaian seorang ahli, yang sangat berbeda dengan pendapat lainnya, bisa jadi benar. Jelas, penggunaan metode untuk rata-rata hasil penilaian ahli kelompok dalam memecahkan masalah kelas dua dapat menyebabkan kesalahan besar. Oleh karena itu, pengolahan hasil survei ahli dalam hal ini harus didasarkan pada metode yang tidak menggunakan prinsip rata-rata, tetapi pada metode analisis kualitatif.

Mengingat masalah kelas pertama adalah yang paling umum dalam praktik peer review, fokus bab ini adalah pada metode pengolahan hasil review untuk masalah kelas ini.

Tergantung pada tujuan penilaian ahli dan metode pengukuran yang dipilih, tugas utama berikut muncul saat memproses hasil survei:

1) membangun penilaian objek secara umum berdasarkan penilaian individu ahli;

2) membangun penilaian umum berdasarkan perbandingan berpasangan objek oleh masing-masing ahli;

3) penentuan bobot relatif benda;

4) menentukan konsistensi pendapat ahli;

5) penentuan dependensi antar peringkat;

6) penilaian keandalan hasil pengolahan.

Tugas membangun penilaian umum objek berdasarkan penilaian individu ahli muncul dalam penilaian ahli kelompok. Solusi untuk masalah ini tergantung pada metode pengukuran yang digunakan oleh para ahli.

Ketika memecahkan banyak masalah, tidak cukup untuk mengatur objek menurut satu indikator atau beberapa indikator. Diinginkan untuk memiliki nilai numerik untuk setiap objek, yang menunjukkan kepentingan relatifnya dibandingkan dengan objek lain. Dengan kata lain, untuk banyak masalah perlu memiliki perkiraan objek yang tidak hanya melakukan urutannya, tetapi juga memungkinkan seseorang untuk menentukan tingkat preferensi satu objek di atas yang lain. Untuk mengatasi masalah ini, Anda bisa langsung menerapkan metode evaluasi langsung. Namun, dalam kondisi tertentu, masalah yang sama dapat diselesaikan dengan memproses perkiraan ahli.

Penentuan konsistensi pendapat ahli dilakukan dengan menghitung ukuran numerik yang mencirikan derajat kesamaan pendapat individu. Analisis nilai ukuran konsistensi berkontribusi pada pengembangan penilaian yang benar tentang tingkat pengetahuan umum tentang masalah yang dipecahkan dan identifikasi pengelompokan pendapat ahli. Analisis kualitatif tentang alasan pengelompokan pendapat memungkinkan untuk menetapkan keberadaan pandangan dan konsep yang berbeda, untuk mengidentifikasi sekolah ilmiah, untuk menentukan sifat kegiatan profesional, dll. Semua faktor ini memungkinkan untuk lebih memahami hasil penelitian. survei para ahli.

Dengan mengolah hasil evaluasi ahli, dimungkinkan untuk menentukan ketergantungan antara peringkat berbagai ahli dan dengan demikian membangun kesatuan dan perbedaan pendapat para ahli. Peran penting juga dimainkan oleh pembentukan hubungan antara peringkat yang dibangun di atas berbagai indikator perbandingan objek. Identifikasi ketergantungan semacam itu memungkinkan seseorang untuk mengungkapkan indikator perbandingan terkait dan, mungkin, mengelompokkannya menurut tingkat koneksi. Pentingnya tugas menentukan ketergantungan untuk latihan sudah jelas. Misalnya, jika indikator perbandingan adalah tujuan yang berbeda, dan objek adalah sarana untuk mencapai tujuan, maka membangun hubungan antara peringkat yang mengurutkan sarana dalam hal mencapai tujuan memungkinkan Anda untuk menjawab pertanyaan tentang sejauh mana dimana pencapaian satu tujuan dengan sarana tersebut memberikan kontribusi terhadap pencapaian tujuan lainnya. .

Estimasi yang diperoleh berdasarkan pemrosesan adalah objek acak, jadi salah satu tugas penting dari prosedur pemrosesan adalah menentukan keandalannya. Perhatian yang tepat harus diberikan pada solusi masalah ini.

Memproses hasil pemeriksaan adalah proses yang memakan waktu. Melakukan perhitungan manual perkiraan dan indikator keandalannya dikaitkan dengan biaya tenaga kerja yang besar, bahkan dalam kasus pemecahan masalah pemesanan sederhana. Dalam hal ini, disarankan untuk menggunakan teknologi komputer dan khususnya komputer. Penggunaan komputer menimbulkan masalah dalam mengembangkan program komputer yang mengimplementasikan algoritma untuk memproses hasil evaluasi ahli.

2. Metode penilaian ahli

analisis SWOT

Jenis khusus dari metode pakar, yang sangat populer, adalah metode asli analisis SWOT. Itu mendapat namanya dari huruf pertama dari empat kata bahasa Inggris, yang dalam terjemahan Rusia berarti: Kekuatan dan Kelemahan, Peluang dan Ancaman.

Metodologi ini dapat digunakan sebagai metodologi universal. Ini memiliki efek khusus dalam mempelajari proses dalam sistem sosial-ekonomi, yang dicirikan oleh dinamisme, kemampuan kontrol, ketergantungan faktor fungsi internal dan eksternal, perkembangan siklus.

Menurut metodologi analisis ini, distribusi faktor-faktor yang menjadi ciri subjek penelitian dilakukan menurut empat komponen ini, dengan mempertimbangkan apakah faktor ini termasuk dalam kelas faktor eksternal atau internal.

Akibatnya, muncul gambaran korelasi kekuatan dan kelemahan, peluang dan bahaya, yang menunjukkan bagaimana situasi harus diubah agar pembangunan berhasil.

Alokasi faktor ke kuadran atau sektor matriks ini tidak selalu mudah. Kebetulan faktor yang sama secara bersamaan mencirikan kekuatan dan kelemahan subjek. Selain itu, faktor bertindak secara situasional. Dalam satu situasi, mereka terlihat seperti kebajikan, di lain - kerugian. Terkadang mereka tidak proporsional dalam signifikansi mereka. Keadaan ini dapat dan harus diperhitungkan.

Faktor yang sama dapat ditempatkan di beberapa kuadran jika sulit untuk secara jelas menentukan tempatnya. Ini tidak akan berdampak buruk pada penelitian. Bagaimanapun, inti dari metode ini adalah untuk mengidentifikasi faktor-faktor, menempatkannya sedemikian rupa sehingga konsentrasinya menunjukkan cara-cara untuk memecahkan masalah, sehingga dapat dikelola.

Dalam setiap kuadran, faktor-faktor tersebut tidak harus memiliki bobot yang sama, tetapi harus disajikan secara keseluruhan.

Matriks lengkap menunjukkan keadaan sebenarnya, keadaan masalah dan sifat situasi. Ini adalah tahap pertama dari analisis SWOT.

Langkah kedua adalah melakukan analisis komparatif kekuatan dan peluang, yang harus menunjukkan bagaimana menggunakan kekuatan. Pada saat yang sama, perlu untuk menganalisis kelemahan dalam kaitannya dengan bahaya yang ada. Analisis semacam itu akan menunjukkan seberapa besar kemungkinan terjadinya krisis. Lagi pula, bahaya meningkat ketika muncul dalam kondisi kelemahan, ketika pihak yang lemah tidak memungkinkan untuk menghalangi bahaya.

Tentunya sangat berguna untuk membuat analisis perbandingan kekuatan dan bahaya yang ada. Bagaimanapun, kekuatan dapat digunakan dengan buruk dalam mencegah krisis, kekuatan harus dilihat tidak hanya dalam kaitannya dengan peluang yang menguntungkan, tetapi juga dalam kaitannya dengan bahaya.

Dalam studi sistem kontrol, subjek metode ini dapat berupa berbagai masalah pengembangan kontrol. Misalnya, efisiensi, personel, gaya, pembagian fungsi, struktur sistem manajemen, mekanisme manajemen, motivasi, profesionalisme, dukungan informasi, komunikasi dan perilaku organisasi, dll.

Penggunaan tenaga ahli atau konsultan internal yang terlatih dan terpilih secara khusus membuat metode ini lebih efektif.

Metode CERDAS

Ada banyak modifikasi dari metode analisis SWOT. Yang paling menarik di antaranya adalah metode pengembangan dan analisis tujuan.

Diketahui bahwa tujuan manajemen merupakan faktor penentu dalam keberhasilan, efisiensi, strategi dan pengembangan. Tanpa tujuan, tidak mungkin mengembangkan rencana atau program. Tetapi ini tidak hanya menyangkut tujuan manajemen, tetapi juga tujuan penelitian. Lagi pula, tidak mudah untuk merumuskan tujuan ini dengan benar. Program penelitian, penggunaan metode penelitian tergantung pada tujuannya.

Tujuan harus dikembangkan sesuai dengan kriteria achievability, spesificity, evaluability (measurability), dengan memperhatikan Tempat dan Waktu. Kriteria ini mencerminkan kata-kata bahasa Inggris - Spesifik, Measurable, Achievable, Relevant, Timed, dalam nama singkatannya adalah SMART. Itulah yang disebut metode ini.

Metode ini mengasumsikan penilaian tujuan yang konsisten menurut seperangkat kriteria yang disusun dalam bentuk matriks. Berikut adalah seperangkat faktor yang sebanding yang mencerminkan karakteristik tujuan: sulit dicapai - mudah dicapai, biaya tinggi - biaya rendah, memiliki dukungan staf - tidak memiliki dukungan staf, memiliki prioritas - tidak memiliki prioritas, membutuhkan banyak waktu - membutuhkan sedikit waktu, berdampak luas - memiliki pengaruh terbatas, berorientasi teknologi tinggi - berorientasi teknologi rendah (konvensional), terkait dengan organisasi manajemen baru - tidak terhubung dengan organisasi manajemen baru.

Langkah selanjutnya adalah membuat matriks definisi masalah. Untuk mencapai tujuan, sejumlah masalah harus dipecahkan. Tetapi untuk ini mereka harus terlebih dahulu didefinisikan.

Pembagian masalah dilakukan menurut kriteria berikut: situasi yang ada, situasi yang diinginkan, kemungkinan pencapaian tujuan. Kriteria ini mencirikan horizontal matriks. Kriteria berikut dipertimbangkan secara vertikal: definisi masalah, evaluasi masalah (parameter kuantitatif), organisasi solusi (siapa, di mana, kapan), biaya pemecahan masalah.

Matriks ini memungkinkan Anda untuk merencanakan penelitian.

Metode pemeringkatan dan evaluasi.

Menurut metode peringkat, ahli melakukan peringkat (pengurutan) objek yang dipelajari dari sistem organisasi tergantung pada kepentingan relatifnya (preferensi), ketika objek yang paling disukai diberi peringkat 1, dan yang paling tidak disukai adalah peringkat terakhir, sama dalam nilai absolut dengan jumlah objek yang dipesan. Pengurutan yang lebih tepat terjadi dengan jumlah objek studi yang lebih sedikit, dan sebaliknya.

Dengan pengaturan objek keahlian yang disukai (berdasarkan peringkat) oleh seorang ahli, jumlah peringkat harus sama dengan jumlah jumlah seluruh deret alami dari jumlah objek H, dimulai dari satu: H= (H+ 1): 2.

Jajaran yang dihasilkan dari pemeringkatan objek menurut data survei ditentukan sebagai jumlah dari peringkat untuk setiap objek. Dalam hal ini, sebagai hasilnya, peringkat pertama ditugaskan ke objek yang menerima jumlah peringkat terkecil, dan yang terakhir - ke objek dengan jumlah peringkat terbesar, mis. objek yang paling tidak signifikan (contoh penentuan peringkat tiga objek yang dihasilkan oleh tujuh ahli)

Semakin banyak ahli yang terlibat, semakin tinggi objektivitas hasil evaluasi. Namun, keterlibatan sejumlah besar ahli yang memenuhi syarat dan intensitas tenaga kerja yang tinggi dari pekerjaan ahli meningkatkan biaya penilaian kualitas. Oleh karena itu, untuk mengurangi kompleksitas pekerjaan para ahli, digunakan metode peringkat, yang hanya memberikan peringkat indikator, dan bukan penentuan numeriknya oleh para ahli.

Namun demikian, metode ini digunakan dalam praktek belajar SU, meskipun kesederhanaan dan intensitas tenaga kerja yang relatif rendah. Hal ini disebabkan banyaknya jumlah objek penelitian yang diperingkatkan.

Metode penilaian langsung

Ini adalah urutan objek yang diteliti (misalnya, ketika memilih parameter untuk menyusun model parametrik) tergantung pada kepentingannya dengan menetapkan poin untuk masing-masingnya. Dalam hal ini, objek terpenting diberi jumlah poin tertinggi pada skala yang diterima (penilaian diberikan). Rentang skala penilaian yang paling umum adalah dari 0 hingga 1; 0 sampai 5; 0 sampai 10; 0 hingga 100. Dalam kasus yang paling sederhana, skornya bisa 0 atau 1.

Terkadang penilaian dilakukan secara lisan. Misalnya, “sangat penting”, “penting”, “tidak penting”, dll., yang terkadang juga diterjemahkan ke dalam skala poin (masing-masing 3, 2, 1) untuk kemudahan dalam memproses hasil survei.

Penilaian langsung harus digunakan dengan penuh keyakinan pada kesadaran profesional para ahli tentang sifat-sifat objek yang diteliti. Menurut hasil penilaian, ditentukan peringkat dan bobot (kepentingan) setiap objek yang diteliti.

Kesimpulan

Saat ini, berbagai metode penilaian ahli semakin banyak digunakan. Mereka sangat diperlukan dalam memecahkan masalah kompleks dalam mengevaluasi dan memilih objek teknis, termasuk untuk tujuan khusus, dalam menganalisis dan memprediksi situasi dengan sejumlah besar faktor signifikan - di mana pun diperlukan untuk melibatkan pengetahuan, intuisi, dan pengalaman banyak ahli yang berkualifikasi tinggi. .

Metode ahli terus dikembangkan dan ditingkatkan. Arah utama perkembangan ini ditentukan oleh sejumlah faktor, di antaranya dapat menunjukkan keinginan untuk memperluas ruang lingkup, meningkatkan tingkat penggunaan metode matematika dan komputer elektronik, dan juga menemukan cara untuk menghilangkan kekurangan yang muncul.

Terlepas dari kemajuan yang dicapai dalam beberapa tahun terakhir dalam pengembangan dan penggunaan praktis metode penilaian ahli, ada sejumlah masalah dan tugas yang memerlukan penelitian metodologis lebih lanjut dan verifikasi praktis. Perlu perbaikan sistem seleksi pakar, peningkatan reliabilitas karakteristik opini kelompok, pengembangan metode pemeriksaan validitas penilaian, dan mempelajari penyebab tersembunyi yang menurunkan reliabilitas penilaian pakar.

Dasar penilaian ahli properti dan kualitas bisnis kandidat didasarkan pada parameter kuantitatif dan kriteria evaluasi yang diperoleh dari hasil wawancara. Meskipun ada unsur konvensi dan subjektivitas di sini, namun, dengan perkembangan skala penilaian yang baik dan pendekatan para ahli (profesional) yang penuh perhatian, adalah mungkin untuk mengevaluasi subjek dengan tingkat keandalan yang tinggi.

Daftar literatur yang digunakan

1. Grigorov V. M. Pakar dalam sistem manajemen produksi publik // M .: Thought, 1976

2.Demidova A.V. Studi sistem kontrol. - M.: Prior-izdat, 2005. - 96 hal.

3. Ignatieva A.V. Studi sistem kontrol. - M.: UNITI-DANA, 2003. - 157 hal.

4. Kafidov V.V. Studi sistem kontrol. - M.: Proyek Akademik, 2005. - 160 hal.

5. Malin A.S. Studi sistem kontrol. - M.: GU VSHE, 2005. - 399 hal.

6. Reylyan Ya.R. Dasar pengambilan keputusan manajerial // M.: Keuangan dan statistik, 1989

7. Remennikov V.B. Pengembangan solusi manajemen. Prok. uang saku. -- M.: UNITI-DANA, 2000.

8. Smolkin A.M. Manajemen: fondasi organisasi. -- M.: INFRA-M, 1999.

Diselenggarakan di Allbest.ru

Dokumen serupa

Pemecahan masalah, argumentasi dan pembentukan perkiraan kuantitatif hasil dengan metode formal. Komponen metode penilaian ahli. Metode generasi ide kolektif ("brainstorming"). Metode Delphi, fitur metode kelompok fokus, analisis SWOT.

presentasi, ditambahkan 30/03/2014


Esensi dan konten, tahap utama analisis ahli, ruang lingkup dan fitur aplikasi praktisnya, interpretasi hasil. Tingkat keandalan pemeriksaan ini. Penerapan metode penilaian ahli untuk membangun pohon tujuan.

makalah, ditambahkan 25/02/2012


Konsep dan fitur penerapan teknologi pakar sebagai bagian integral dari proses persiapan dan pengambilan keputusan manajemen yang penting. Mempelajari tahapan utama survei ahli. Pemilihan ahli. Metode Delphi, POLA, brainstorming.

abstrak, ditambahkan 10/09/2016


Penggunaan penilaian ahli. Penerapan metode yang berbeda untuk memecahkan satu masalah. Peringkat, perbandingan berpasangan dan ganda, evaluasi langsung, metode Thurstone adalah prosedur pengukuran ahli yang paling umum digunakan. Metode tipe Delphi.

tes, ditambahkan 03/09/2011


Esensi dan jenis penilaian ahli, tujuan penggunaannya. Tahapan utama penelitian ahli. Karakteristik metode kerja kolektif kelompok ahli, serta metode untuk memperoleh pendapat individu. Memproses hasil survei spesialis.

abstrak, ditambahkan 04/03/2012


Karakteristik prosedur ahli: fitur metode dan model heuristik, metode penilaian individu, penilaian ahli kolektif. Spesifik pemeriksaan, isi dan pengolahan hasil. Penilaian ahli tingkat risiko negara.

abstrak, ditambahkan 10/05/2010


Metode untuk mendapatkan penilaian ahli. Masalah pemilihan ahli. Dokumen normatif yang mengatur kegiatan komisi ahli. Pengambilan keputusan di bawah risiko dan ketidakpastian. Tugas untuk pengambilan keputusan di bawah ketidakpastian.

pekerjaan kontrol, ditambahkan 15/07/2010


Esensi dan jenis keputusan dalam proses manajemen produksi. Persyaratan utama untuk kualitas keputusan manajemen. Metode untuk mengoptimalkan keputusan manajerial. Metode untuk mengoptimalkan keputusan dengan metode penilaian ahli.

makalah, ditambahkan 05/08/2002


Kajian metode peramalan pembangunan: metode ekstrapolasi, keseimbangan, normatif dan sasaran program. Studi tentang organisasi pekerjaan seorang ahli, pembentukan kuesioner dan tabel penilaian ahli. Analisis model peramalan matematis dan statistik.

tes, ditambahkan 19/06/2011


Metodologi dan tahapan klasifikasi sistem menurut berbagai kriteria. Menyusun kuesioner untuk mendapatkan penilaian ahli, perincian wajib, dan pertanyaan utama. Esensi dan konstruksi pohon tujuan, prinsip-prinsip perinciannya. Metodologi untuk mengevaluasi sistem yang kompleks.