How much is a scientist Total Performance Index (TPI)?شاخص عملکرد کل یک دانشمند
رستم عبداللهی |
۱۳ دی ۱۳۹۷

As you know, in dairy bull evaluation forms, we have a metric called Total Performance Index (TPI). TPI is a method of ranking bulls according to a linear function. It seeks to identify bulls who excel in three categories: production, health and conformation. TPI selects elite bulls who represent the best combination of desired traits. A question which arises is whether we have a metric to evaluate the scientists or not.

In this regard, there is no single metric to evaluate a scientist. On top of that, it depends upon what you are evaluating them for. Some people consider H-Index as scientist additive genetic value (breeding value)? Do you believe that number of papers or number of citations per paper (H-index) is the most appropriate criteria for evaluating a scientist? We all know that it is not possible to cover the multidimensional complexity of research performance and to undertake inter-personal comparisons with H-index!

What would happen if we derive a selection index to measure a scientist’s Total Performance Index (TPI)? So, the questions are: which characteristics should be included in the index and how much are their weights? There are many characteristics as knowledge, sense of humor, speaking and communications skiles, creativity, curiosity, skepticism, objectivity, logic, passionately, self-motivating, Risk taker, Persistency and Resiliency, open-mind and honesty and etc. How to measure all these characteristics? By interview, asking reference, looking at the resume, ..

Do you think that a linear model can fit a scientist TPI with high reliability?

What are the fixed effects which should be included in the model? University/institute, year of graduation, age, gender, race, salary, researcher website and …

Do we need the pedigree of scientists? For example, how much are the weights to give to his mentors, students or his/her collateral H-index to obtain a value with more reliability?

In conclusion, measuring a scientist or researcher’s TPI is a complicated matter. So, now we can figure out that people who are in charge of evaluating or interviewing the scientists, have a tough job.

 

در ارزیابی گاوهای شیری ما از شاخصی به نام TPI برای انتخاب گاو نر ممتاز استفاده می کنیم. این شاخص ترکیبی از صفات تولیدی، سلامتی و تیپ می باشد. آیا برای انتخاب یک محقق یا دانشمند شاخص خاصی وجود دارد.

به طور کلی هیچ شاخص منحصر به فردی برای ارزیابی یک محقق و یا دانشمند وجود ندارد. برخی از افراد از شاخص H-Index به عنوان ارزش اصلاحی هر دانشمند یا محقق یاد می کنند. مقالات زیادی در ارتباط با نقاط قوت و ضعف این شاخص نوشته شده است. اما سوال این است آیا این امکان وجود دارد تا یک شاخصی که علاوه بر تعداد مقالات و یا تعداد ارجاع به مقالات خصوصیات دیگر محققان را در بر بگیرد، برای ارزیابی محققان تشکیل داد که همانند TPI در برگیرنده خصوصیات متنوعی از افراد از اخلاق، بیان، دانش، خلاقیت، درستکاری، اهل منطق بودن و سخت کوشی و … را در بر بگیرد. به هر حال آنچه مشخص است اندازه گیری هر کدام از این صفات چالش های خاص خود را دارد. حال فرض کنیم این صفات را اندازه گرفتیم. به هر کدام چه وزنه ای بدهیم؟ آیا با استفاده از یک مدل خطی میتوان TPI هر فرد را بدست آورد؟ چه فاکتورهای ثابتی برای برآورد نااریب خصوصیات باید وارد مدل شوند. آیا نیاز است شجره افراد مانند H-Index استاد راهنما و همکاران و … نیز در نظر گرفته شود.

به هر حال، با توجه به توضیحات بالا، باید متوجه شویم که ارزیابی محققان و دانشمندان کار مشکلی است و برای کسانی که اینچنین مسئولیت هایی را دارند آرزوی موفقیت می کنیم.

 
avatar
3 Comment threads
4 Thread replies
0 Followers
 
Most reacted comment
Hottest comment thread
5 Comment authors
مهدی بهلولیمریم قلی زادهرستم عبداللهیSa maمحمد قادرزاده Recent comment authors
جدیدترین قدیمی ترین بیشترین رای
محمد قادرزاده
محمد قادرزاده

سلام وقت بخیر
برای ارزیابی عملکرد محققان، با توجه به شرایط و امکانات دانشگاه های مختلف و کشورهای مختلف، شرایط محیطی بسیار موثره، باید اثرات متقابل محیط و ژنوتیپ رو هم در نظر گرفت تا بشه برای هر کشور خاص یک شاخص استاندارد تعریف کرد در نظر گرفتن یک شاخص ثابت برای کلیه کشورها یا کلیه محققان خیلی درست یا دقیق نیست!! شاخص هایی مثل ضریب توسعه یافتگی یک کشور یا دانشگاه یا ضریب دسترسی به اطلاعات یا سختی دسترسی به دیتاهای با صحت بالا می تونه تا حدودی به برآورد نااریب و تعریف مدل ارزیابی کمک کنه.
با سپاس

Sa ma
Sa ma

Hello Thanks a bunch especially due to writing in English You are utterly right, there is no authentic criteria specificlly in Iran to evaluate scientists. I think these kind of problems are just the hurdels of third world countries . One more thing I think pull string or favourtism is like a major gene or it has become a major gene like double masculing which can take a great coefficient in selection indes , not every where just in Iran. وقتی اساتید دانشگاه در یک درس ژنتیکی روز دنیا در یک دانشگاه مطرح ایران مثل کرج لغت summary را سوماری… بیشتر

مریم قلی زاده
مریم قلی زاده

با سلام و تشکر از مطلب جالبتون بنظر من ارزیابی یه محقق از روی مقالاتش (کیفیت مقالاتش) و کارهای علمی که انجام داده باید سنحیده بشه عوامل محیطی یا دانشگاه یا کشور کاملا بی معنی هست. عوامل محیطی برای بررسی عملکرد دام مهم هست اما برای انسان نه. یه محقق یا یه انسان به هر سطحی بخواهد میرسد مگر اینکه خودش نخواسته باشد. بنظر من مثلا به دنیا امدن در یک روستا که به عنوان یه شاخص بی امکاناتی درنطر گرفته میشه یا درس خوندن در یک دانشگاه ضعیف کاملا شاخص غلطی هست چون هر فردی در هر موقعیتی که… بیشتر

مهدی بهلولی
مهدی بهلولی

سلام و وقت شما بخیر، با نظر شما موافق نیستم. بنظر بنده عوامل محیطی انسان را خیلی خیلی بیشتر از حیوانات، میتواند تحت تأثیر قرار دهد. شرایط محیطی متفاوت طبیعتا نتیجه متفاوتی را هم برای حیوان و هم برای انسان به همراه خواهد داشت، که آقای دکتر عبداللهی به خوبی به این مورد اشاره کردند. همچنین شرایط محیطی صفاتی مثل انگیزه، روحیه، امید به زندگی و خیلی از موارد دیگر از این قبیل را متاثر میسازد که این صفات برای نوع بشر دارای اهمیت هستند که کاملا به طور مستقیم عملکرد را تحت تأثیر قرار میدهند. پس به لحاظ ارزش… بیشتر