Comparing Training of "Lasers in Dentistry" by Two Mobile-based and Booklet Approach Training Methods in Dentistry Students

Document Type : original article

Authors

1 Oral and Maxillofacial Disease Research Center, School of Dentistry, Mashhad University of Medical Sciences, Mashhad, Iran

2 Dentist Mashhad Iran

3 Dental School, Mashhad University of Medical Sciences, Mashhad, Iran

4 BSC of Statistics, School of Dentistry, Mashhad University of Medical Sciences, Mashhad, Iran

Abstract

Introduction: This study aimed to investigate Moodle mobile educational application, which can be run in Android and ios operating systems for improving knowledge regarding laser applications among the students of dentistry.
Materials and Methods: A total of 59 subjects were selected from the dentistry students of first academic semester in Mashhad University of Medical Sciences, Iran who chose the course of practical oral diseases. The participants were divided into two groups. First, the pretest was conducted and the basic knowledge of the students regarding laser application in dentistry was evaluated. Next, Moodle mobile software was introduced during a half of a semester to the students of the test group and they learned how to work with it in a workshop held at the beginning of the semester. Afterwards, Moodle mobile was installed on their mobile phones. On the other hand, the participants in the control group were trained by booklet. In both groups, the knowledge of the students in terms of the application of laser in dentistry was evaluated pre- and post-intervention. All the data were analyzed by McNemar test, paired t-test, and Mann-Whitney U test using SPSS software version 19 (SPSS Inc., Chicago, IL).
Results: The mean scores of the students trained by the booklet changed from 7.3 pretest to 13.9 post-intervention, which was statistically significant (P<0.001). Furthermore, the mean scores of students trained by software increased from 7.8 pre-intervention to 16.6 post-intervention. The latter alteration was found to be statistically significant (P<0.001). The post-intervention mean scores in the software and booklet groups were 16.6 and 13.9, respectively. The difference between these mean scores was statistically significant (P<0.001).
Conclusion: According to the results of this study, both software and booklet training methods elevated the knowledge of dentistry students concerning the application of lasers in dentistry. However, the educational software was revealed to be significantly more effective than the booklet.

Keywords

Main Subjects


مقدمه

استفاده از لیزر به عنوان یک تکنیک منحصر به فرد و وسیله کمک درمانی ارزشمند، در سراسر جهان به کار گرفته می شود. از ویژگی های منحصر به فرد لیزر می توان به جراحی بدون تماس، بدون خونریزی، بهبودی سریع، اثر بخشی عالی اشاره کرد. همچنین استفاده از این تکنیک باعث افزایش رضایت مندی بیماران می گردد. ذکر این نکته لازم است که استفاده از این نوع وسایل نیازمند آموزش دقیق و مهارت های کافی می باشد.(1)

به جرأت می توان گفت امروزه تعداد دستگاه های موبایل از تعداد انسان های روی کره زمین بیشتر است. به عنوان مثال فروش موبایل فقط در سه ماهه چهارم سال 2013 حدود 48804 میلیون دستگاه بوده است. یکی از مهمترین دلایلی که موجب برتری محسوس این نوع رسانه می شود، در دسترس بودن همیشگی آن و توانایی آن در جلوگیری از اتلاف وقت در زمان های بلااستفاده ی روز می باشد. بررسی ها نشان می دهد که بیشتر مردم ایران از موبایل های مجهز به اندروید و  ios استفاده می کنند. همچنین مطالعه ای تازه نشان می دهد که آموزش به وسیله موبایل موثرتر از آموزش به وسیله رایانه می باشد.(3و2)

 E-learning یا آموزش الکترونیکی، به طور کلی بهره گیری از سیستم های الکترونیکی، مثل کامپیوتر، اینترنت، CD های مولتی مدیا، نشریه های الکترونیکی و خبرنامه های مجازی و نظایر این ها است که با هدف کاستن از رفت و آمدها و صرفه جویی در وقت و هزینه بوده و همزمان یادگیری بهتر و آسان تر صورت می گیرد. دانش پزشکی دائماً در حال تغییر و تحول می باشد به طوری که هر 4 تا 5 سال به طور متوسط 50 درصد دانش پزشکی و در طول 8 تا 10 سال، 75 درصد آن نو می شود. این برنامه ها می توانند برای جامعه دانشجویان پزشکی که کمبود همیشگی زمان دارند نیز مفید باشند و امکان استفاده ی بهتر از زمان های بلااستفاده در طول روز را فراهم کنند. به عنوان مثال در اوقات بیکاری در کشیک های بیمارستان یا حد فاصل میان کلاس ها است که می تواند جای حمل کتب سنگین پزشکی را بگیرند.(6-3)

در حال حاضر، بسیاری از کشورهای پیشرو در زمینه ی ارتباط از راه دور، در حال ایجاد و راه اندازی دانشگاه ها و کلاس های مجازی یا توسعه نظام های سنتی خود هستند. کشورهای مختلف از جمله آمریکا، کانادا، انگلیس، استرالیا و چین در بکارگیری IT در آموزش پزشکی پیشگام بوده اند. در دانشکده های پزشکی آمریکا از جمله دانشگاه هاروارد، کلمبیا، بوستون، میشیگان و ... دروس پزشکی (عمدتاً علوم پایه) آنلاین می باشد. در دانشگاه های منچستر و شیفیلد در انگلیس و دانشکده های پزشکی چین نیز تلاشهای مؤثری در این مورد صورت گرفته است. در ایران نیز دانشگاه علوم پزشکی شهید بهشتی و دانشگاه علوم پزشکی تهران پیشگام بوده اند.(10-7و3)

به طور کلی با توجه به اینکه لیزر درمانی جزء شیوه های موفق بدون باقی گذاشتن اسکار بعد از عمل با کنترل عفونت می باشد و امروزه شاهد رشد روزافزونی در تعداد
 نرم افزارهای پزشکی با قابلیت دانلود بر روی تلفن های هوشمند هستیم؛ لذا در این مقاله، آموزش دانشجویان دندانپزشکی به کمک نرم افزار آموزشی Moodle mobile با قابلیت اجرا روی سیستم عامل اندروید و iOS که برای ارتقای آگاهی دانشجویان درباره کاربردهای لیزر در دندانپزشکی تعبیه شده است با روش سنتی آموزش با کتابچه، مورد مقایسه قرار گرفت.

مواد و روش ها

این پژوهش مصوب کمیته اخلاق دانشگاه علوم پزشکی مشهد به شماره IR.mums.sd.REC.1394.198 می باشد. در این مطالعه تعداد 59 دانشجوی دندانپزشکی دانشگاه علوم پزشکی مشهد از دانشجویان سال پنجم و ششم که با لیزر آشنایی نداشتند و واحد درسی بیماری های دهان عملی 1 و 2 را در نیم سال اول تحصیلی 96-95 انتخاب کرده بودند، وارد مطالعه شدند. شایان ذکر است که مبحث کاربرد لیزر در دندانپزشکی در کوریکولوم آموزشی دندانپزشکی ارائه شده توسط وزارت بهداشت و درمان نمی باشد و این درس برای اولین بار به صورت اختیاری در این نیمسال تحصیلی در اختیار دانشجویان قرار گرفته است. با استفاده از پرتاب سکه دانشجویان سال پنجم و ششم به دو گروه تقسیم شدند. گروه اول که شامل دانشجویان سال شش بودند روش دفترچه (30 نفر) و به گروه دوم که دانشجویان سال پنجم بودند روش نرم افزار (29 نفر) تخصیص یافت. برای مقایسه این دو روش، دو آزمون، یکی قبل از شروع تدریس و دیگری بعد از پایان تدریس، از دانشجویان گرفته شد و ارزیابی ها بر مبنای متوسط نمرات کسب شده انجام شد. محتویات آموزشی دفترچه و نرم افزار یکسان بوده است. طراحی سوالات آزمون بر اساس جدیدترین رفرنس های لیزر در دندانپزشکی صورت گرفت.

Moodle Mobile اپلیکیشن برای سیستم عامل های android ، iOS ، Windows phone و Windows 8.1 به بالا می باشد که از طریق Google Play و Apple Market و Windows App Store  در دسترس است. نرم افزار آموزشی کاربردهای لیزر در دندانپزشکی با قابلیت اجرا بر روی تلفن های هوشمند تحت سیستم عامل اندروید و iOS و توانایی نمایش اطلاعات مدرسین و راه های ارتباطی با آنها، توانایی نمایش داده های آموزشی مختلف اعم از عکس، اسلاید، متن و فایل ویدئویی و توانایی برگزاری آزمون بر اساس مطالب ذکر شده در دفترچه  طراحی شد.

پس از برگزاری پیش آزمون و  بررسی اطلاعات پایه دانشجویان از کاربرد لیزر در دندانپزشکی، نرم افزار Moodle mobile  در طول یک نیم سال تحصیلی به دانشجویان گروه دوم در یک کارگاه عملی آموزش داده شد و نسخه هایی از آن به صورت رایگان بر روی تلفن های همراه آنان نصب گردید. گروه دیگر هم  به وسیله ی کتابچه آموزش دیدند.

در هر دو گروه پیش از آغاز مطالعه و پس از اتمام آموزش، میزان آگاهی از کاربردهای لیزر به وسیله ی آزمون ارزیابی شد و نتایج آن به وسیله ی آزمون آماری مک نمار، تی جفت شده و من ویتنی با نرم افزار SPSS (V. 19, SPSS Inc., Chicago, IL) بررسی شد. لازم به ذکر است که در این مطالعه تمام شماری صورت گرفته است و شیوه جمع آوری اطلاعات به صورت میدانی بوده است.

یافته ها

از 59 دانشجو، 26 نفر پسر و 33 نفر دختر بودند. تعداد دانشجویان پسر در گروه های کتابچه و نرم افزار به ترتیب 7/56 درصد و 2/55 درصد و تعداد دانشجویان دختر در گروه های مذکور به ترتیب 3/43 درصد و 8/44 درصد بود. بنابراین دو گروه از نظر توزیع جنس همگن بودند (908/0P=). با توجه به اینکه شرکت کنندگان همگی از دانشجویان سال پنجم و ششم بودند سن آنها تقریبا مشابه و حدود 24 سال بود. (نمودار 1)

مقایسه نمرات پیش آزمون دو گروه نشان داد که تفاوت معنی داری بین دو گروه وجود نداشت. میانگین نمره برای گروه اول (آموزش با کتابچه) 8/7 و برای گروه دوم (آموزش با نرم افزار) 3/7 بود (386/0P=) کمترین و بیشترین نمره برای گروه اول به ترتیب 7 و 12 و برای گروه دوم 4 و 14 بود.

بعد از آموزش دانشجویان، میانگین نمره برای گروه اول به 9/13 و برای گروه دوم به 6/16 افزایش یافت که این تفاوت از نظر آماری معنی دار بود (001/0P<) کمترین و بیشترین نمره برای دانشجویان آموزش داده شده با کتابچه به ترتیب 9 و 18 و برای دانشجویان گروه نرم افزار به ترتیب 4 و 20 بود.

متوسط تفاوت نمرات قبل و بعد آموزش در دانشجویانی که بوسیله نرم افزار آموزش دیده بودند برابر 8/8 و در دانشجویانی که بوسیله کتابچه آموزش دیده بودند برابر 7/6 بود که این میزان اختلاف بین دو گروه، از نظر آماری  معنی دار بود (001/0P<). به عبارت دیگر نرم افزار به طور معنی داری نسبت به کتابچه متوسط نمرات را افزایش داده بود. (جدول 1)


 

نمودار 1 : توزیع فراوانی نسبی دانشجویان مورد مطالعه بر حسب جنس

 

جدول 1 : میانگین و انحراف معیار نمرات قبل و بعد آموزش و بین دو روش کتابچه و نرم افزار *

زمان اندازه گیری

کتابچه (تعداد=30)

نرم افزار (تعداد=29)

نتیجه آزمون

انحراف معیار ± میانگین

میانه

انحراف معیار ± میانگین

میانه

قبل آموزش

7.3 ± 2.4

7

7.8 ± 2.4

7

b T=0.87  P=0.386

بعد آموزش

13.9 ± 2.7

14

16.6 ± 3.5

17

a Z=3.74  P<0,001

تغییرات

6.7 ± 3.0

6

8.8 ± 4.7

9

a Z=2.66  P=0.008

نتیجه آزمون

001/0P<t=16.7 

001/0P<b Z=4.48 

 

a: نتیجه آزمون من ویتنی       b: نتیجه آزمون تی   c: نتیجه آزمون ویلکاکسون

 

 


بحث

موبایل یا تلفن همراه وسیله ای است که اگر چه در ابتدا تجملی در نظر گرفته می شد، اما رفته رفته با افزایش کارایی هایش به یک ابزار ضروری تبدیل گشته است. امروزه همه قشرها از پیر تا نوجوان گرفته بدون تلفن همراه خود سردرگم هستند و بدون آن بسیاری از امور روزمره علی الخصوص برای جوانان و نوجوانان غیر ممکن است. با توجه به رشد روزافزون استفاده از این وسائل در جامعه ی امروزی و در میان کاربرد های متنوع نرم افزار های تلفن همراه، جای خالی ابزار کمک آموزشی پزشکی به زبان فارسی احساس می شود. همچنین تحولات عظیم لیزر در دندانپزشکی باعث افزایش پذیرش این تکنولوژی توسط عموم مردم و متخصصین شده است.(11و10)

Rung  و همکارانش(9) با هدف بررسی میزان استفاده دانشجویان دندانپزشکی از تلفن های هوشمند برای مقاصد آموزشی، پرسشنامه ای را میان 232 دانشجو استرالیایی توزیع کردند. در نتایج این مطالعه آمده است که 9/87 درصد دانشجویان از تلفن هوشمند و 3/82 درصد از اینترنت 3G برخوردار بودند. که از این میان تنها 32 درصد فقط از نرم افزار های آموزشی استفاده می کردند. از طرف دیگر، بنابر مطالعه ی Ozdalga و همکارانش(12) که کاربردهای مختلف تلفن های هوشمند در حیطه ی پزشکی و در میان پزشکان و دانشجویان را بررسی نموده بودند، چنین  نتیجه گیری شد که اکثر نرم افزارهایی که به صورت گسترده مورد استفاده قرار می گیرند، به بررسی بیشتری نیازمند بوده و از پشتوانه علمی کافی برخوردار نیستند. لذا طراحی این مطالعه با هدف سنجش و مقایسه ی اثرات آموزشی کاربرد لیزر در دندانپزشکی توسط نرم افزار های تلفن همراه و روش رایج کتابچه انجام و نتایج آن ثبت شد.

براساس برخی مطالعات، 6 درصد نرم افزارهای آموزشی از جانب شاغلین حرفه  پزشکی، 15 درصد آن ها از جانب انجمن ها یا انتشارات این حرفه و 63 درصد این نرم افزارها توسط خود کاربران طراحی شده بود. این پژوهش کم رنگ بودن نقش شاغلین حرفه پزشکی در ساخت و طراحی این نرم افزارها به خصوص در زمینه ی ارزیابی کیفیت، تنظیم و امنیت را نشان می دهد.(13و8) بنابراین انجام پژوهش های بیشتر در زمینه ی تاثیر گذاری نرم افزار های آموزشی حیطه ی پزشکی، شاید بتواند شاغلین رشته های پزشکی و مرتبط با پزشکی را به سمت طراحی و ارزیابی کیفیت این گونه نرم افزار ها سوق دهد و در آینده شاهد پیشرفت های چشمگیری در زمینه ی آموزش الکترونیک باشیم.

Bullock و همکاران(14)، مطالعه ای مداخله ی در میان پزشکان سال اول در انگلستان انجام دادند. 125 دانشجو در این پژوهش شرکت داشتند، در طی یک سال انجام این طرح نتایج نشان دهنده کاهش قابل توجه و معنی دار در استفاده از نسخه های چاپی و افزایش احساس رضایت در میان پزشکان بود.

در مطالعه ی حاضر، پس از برگزاری پیش آزمون و بررسی یکسان بودن اطلاعات پایه دانشجویان دندانپزشکی از کاربرد لیزر در دندانپزشکی، مشخص شد که هر دو روش آموزشی کتابچه و نرم افزار تلفن همراه سبب افزایش معلومات کاربرد لیزر شده بود. موثر بودن آموزش از طریق نرم افزار های آموزشی، توسط محققین بسیاری نظیر Chang و همکارانش(4) اثبات شده است. آنها در مطالعه ی خود از نرم افزار دارویی Telemedicine که در گوشی تلفن همراه با سیستم عامل اندروید نصب شده بود، به منظور ارزیابی اطلاعات رزیدنت های پزشکی استفاده کردند. در این پژوهش این گونه نتیجه گیری شد که تلفن های هوشمند به طور معناداری بر میزان اطلاعات پزشکی در بالین بیماران و همچنین میزان یادگیری پزشکان در منزل موثرند. در پرسشنامه ای که Charani و همکارانش(15) برای ارزیابی توسعه و اجرای یک نرم افزار با قابلیت اجرا بر روی تلفن های هوشمند برای تجویز آنتی بیوتیک در سال 2013 طراحی کردند، 70 درصد پزشکانی که از این نرم افزار استفاده کرده بودند، اظهار نمودند که استفاده از این نرم افزار دانش آن ها در ارتباط با آنتی بیوتیک ها را ارتقا بخشیده بود.  بنابراین فواید و کاربرد نرم افزار های آموزشی به عنوان وسیله ای آموزشی انکار ناپذیر است.(16) مطالعه مروری کوهستانی و همکاران(17) نشان می دهد که آموزش به وسیله موبایل در دانشجویان پزشکی بسیار موثر واقع می شود. که این مطالعه نتایج مطالعه حاضر را تایید می نماید.

بنابر نتایج مطالعه ی ما مشخص شد نرم افزار آموزشی به طور معنی داری نسبت به کتابچه متوسط نمرات را افزایش داده است. به طور موافق Atherton و همکارانش(18) در پژوهشی مشابه، استفاده از نرم افزارهای تلفن های هوشمند را نسبت به اطلاعات علمی چاپ شده بسیار موثر تر دانستند. تفاوت پژوهش ما با مطالعه ی فوق، جمعیت مطالعه و شیوه ی آموزش بود به این صورت که در همایش پزشکی، از نرم افزار آموزشی استفاده شده بود و منابع اطلاعاتی پزشکی از طریق اینترنت قابل استفاده بود. از دلایل دیگر تاثیر معنی دار و مثبت نرم افزار آموزشی نسبت به کتابچه، می توان به سازنده گرا و تعاملی بودن نرم افزار آموزشی اشاره کرد.  به طور مشابه، در مطالعه ی بابازاده کمانگر و همکارانش(10) تاثیر آموزش مبتنی بر تلفن همراه بر میزان یادگیری دانشجویان دندانپزشکی در درس پاتولوژی دهان عملی بررسی شد و نتایج حاکی از تاثیر گذاری معنی دار آموزش مبتنی بر موبایل بر نمرات پایانی دانشجویان بود.

Golenhofen و همکاران(2)  اثر نرم افزار eMed-App بر یادگیری دروس آناتومی دانشجویان را مورد بررسی قرار دادند. نتایج مشاهده آنها بیانگر استفاده بیش از 70 درصدی دانشجویان از این نرم افزار بود. بیشتر دانشجویان eMed را به منظور آماده شدن برای امتحان استفاده کرده بودند. میانگین زمان استفاده از این نرم افزار حدود 15 دقیقه گزارش شده است. نتایج امتحانات نشان می دهد که دانشجویانی که نمرات بالاتری داشتند در مقایسه با دانشجویان ضعیف تر، بهره بیشتری از این نرم افزار برده بودند. همچنین Chase و همکاران(19) با مروری که بر مقالات مختلف داشتند به این نتیجه رسیدند که استفاده از موبایل برای آموزش بسیار موثر می باشد ولی همچنان مشکلات استفاده از این نوع وسائل در کلینیک پا برجاست. همچنین نویسندگان متذکر شدند که بیشتر دانشجویان تمایل به استفاده از نرم افزار های آموزشی در اوقات فراغت خود دارند و این برنامه ها نباید به اجبار استفاده شود.

از جمله محدودیت ها و مشکلات مربوط به نرم افزار های آموزش پزشکی، مشکلات مربوط به ملاحظات قانونی حقوقی نرم افزار ها و تضمین هزینه اثربخشی آن ها می باشد. Charani و همکارانش(15) به بررسی ملاحظات قانونی و مجوز های دولتی نرم افزارهای مرتبط با سلامت تلفن های هوشمند پرداختند و اذعان داشتند که آموزش های لازم در رابطه با روش استفاده و ملاحظات قانونی جهت حداکثر بهره برداری از نرم افزارهای آموزشی برای مصرف کنندگان ارائه شود. در مطالعه ی ما به منظور جلوگیری از به وجود آمدن این قبیل مشکلات، چگونگی استفاده از نرم افزار Moodle mobile در یک کارگاه عملی در ابتدای ترم به دانشجویان داده شد و مجریان طرح تمامی ملاحظات قانونی را متذکر شدند.

نتیجه گیری

به طور کلی بر اساس نتایج این مطالعه مشخص شد هر دو روش آموزشی کتابچه و نرم افزار آموزشی باعث ارتقای آگاهی و افزایش معلومات کاربرد لیزر در دندانپزشکی می شود اما نرم افزار آموزشی بطور معنی داری نسبت به کتابچه موثر تر واقع می شود. پیشنهاد می شود در آینده مطالعات بیشتر با موضوعات متنوع تری در رابطه با نرم افزار های آموزشی انجام شود. همچنین زمینه گسترش نرم افزار های آموزشی مبتنی بر موبایل به عنوان شیوه آموزشی نوین فراهم شود.

تشکر و قدردانی

این مقاله برگرفته از پایان نامه شماره 950065 مصوب 20/2/1396 می باشد. از معاونت پژوهشی و فناوری دانشکده دندانپزشکی مشهد و همچنین کمیته تحقیقات دانشجویی دانشکده دندانپزشکی دانشگاه علوم پزشکی مشهد برای همکاری در تکمیل این مقاله کمال تشکر و قدردانی را داریم.

  1. Deppe H, Horch HH. Laser applications in oral surgery and implant dentistry. Lasers Med Sci 2007; 22(4):217-21.
  2. Golenhofen N, Heindl F, Grab-Kroll C, Messerer DA, Bockers TM, Bockers A. The use of a mobile learning tool by medical students in undergraduate anatomy and its effects on assessment outcomes. Anat Sci Educ 2019; 10:1002.
  3. Franck P, Henderson PW, Rothaus KO. Basics of lasers: history, physics, and clinical applications. Clin Plast Surg 2016; 43(3):505-13.
  4. Chang AY, Ghose S, Littman-Quinn R,  Anolik RB, Kyer A, Mazhani L, et al. Use of mobile learning by resident physicians in Botswana. Telemed J E Health 2012; 18(1):11-3.
  5. Harden RM. Trends and the future of postgraduate medical education. Emerg Med J 2006; 23(10):798-802.
  6. Konings KD, van Berlo J, Koopmans R, Hoogland H, Spanjers IA, ten Haaf JA, et al. Using a smartphone app and coaching group sessions to promote residents' reflection inthe workplace. Acad Med 2016; 91(3):365-70.
  7. Bates DW, Gawande AA. Improving safety with information technology. N Engl J Med 2003; 348(25):2526-34.
  8. Edlin JC, Deshpande RP. Caveats of smartphone applications for the cardiothoracic trainee. J Thorac Cardiovasc Surg 2013; 146(6):1321-6.
  9. Rung A, Warnke F, Mattheos N. Investigating the use of smartphones for learning purposes by Australian dental students. JMIR Mhealth Uhealth 2014; 2(2):e20.
  10. Babazadeh-Kamangar M, Jahanian I, Gholinia H, Abbaszadeh H. A preliminary study of the effect of mobile-based education on dental students' learning in practical course of oral pathology. J Med Educ Dev 2016; 9(22):21-6.
  11. Masters K, Ellaway RH, Topps D,Archibald D, Hogue RJ. Mobile technologies in medical education: AMEE Guide No. 105. Med Teach 2016; 38(6):537-49.
  12. Ozdalga E, Ozdalga A, Ahuja N. The smartphone in medicine: a review of current and potential use among physicians and students. J MedInternet Res 2012; 14(5):e128.
  13. Gandhi M, Beasley A, Vinas E, Sangi-Haghpeykar H, Ramin SM, Kilpatrick CC. Electronic learning-spaced education to facilitate resident knowledge and guide program didactics. Obstet Gynecol 2016; 128(Suppl 1):23S-6.
  14. Bullock A, Dimond R, Webb K, Lovatt J, Hardyman W, Stacey M. How a mobile app supports the learning and practice of newly qualified doctors in the UK: an intervention study. BMC Med Educ 2015; 15:71.
  15. Charani E, Castro-Sánchez E, Moore LS, Holmes A. Do smartphone applications in healthcare require a governance and legal framework? It depends on the application! BMC Med 2014; 12(1):29.
  16. Charani E, Kyratsis Y, Lawson W, Wickens H, Brannigan ET, Moore LS, et al. An analysis of the development and implementation of a smartphone application for the delivery of antimicrobial prescribing policy: lessons learnt. J Antimicrob Chemother 2013; 68(4):960-7.
  17. Koohestani HR, Soltani Arabshahi SK, Fata L, Ahmadi F. The educational effects of mobilelearning on students of medical sciences: A systematic review in experimental studies. J Adv Med Educ Prof 2018; 6(2):58-69.
  18. Atherton S, Javed M, Webster S, Hemington-Gorse S. Use of a mobile device app: a potential new tool for poster presentations and surgical education. J Vis Commun Med 2013; 36(1-2):6-10.
  19. Chase TJG, Julius A, Chandan JS, Powell E, Hall CS, Phillips BL, et al. Mobile learning in medicine: an evaluation of attitudes and behaviours of medical students. BMC Med Educ 2018; 18(1):152.