تبديل حركات انساني به يك نقاشي مفهومي بر اساس موسيقي با كمك سيستم ثبت حركت: اقدام‌پژوهي

Converting Human Movements into a Conceptual Painting based on Music Using a Motion Capture System: Action Research

مقدمه: ثبت حركات به وسيله دستگاه Motion Capture، موضوعي است كه در سال‌هاي اخير مورد توجه بسياري قرار گرفته و از آن در موارد مختلفي همچون بهبود عملكرد بيماران مبتلا به مشكلات حركتي، افزايش انگيزه و خلاقيت كاربران استفاده ‌شده است. همچنين، مي‌توان از اين صنعت در فيلمبرداري و ساخت انيميشن‌هاي دو و سه ‌بعدي بهره برد. تحقيقات نشان داده است كه استفاده از اين دستگاه براي بالا بردن خلاقيت و قدرت تفكر بسيار مناسب است. هدف از انجام پژوهش حاضر، بهره‌گيري از دستگاه Motion Capture براي تبديل حركات خلاقانه انساني با كمك موسيقي به يك نقاشي مفهومي بود. مواد و روش‌ها: براي بومي‌سازي فرايند مورد نظر، از داستان رستم و سهراب شاهنامه فردوسي و بخش اول آلبوم موسيقي هفتواد مسعود نكويي به نام مقدمه استفاده گرديد. بر اساس متن داستان و ضرب‌آهنگ موسيقيايي مورد استفاده، يك مدل انساني آموزش داده شد تا حركات متناسبي اجرا نمايد. مدل اجازه داشت در اجراي نهايي از سليقه خود نيز در خلق حركات بهره گيرد. با پوشيدن لباس داراي نشانگرهاي قابل ‌شناسايي، با استفاده از سيستم Motion Capture، حركات وي در سيستم Vicon Vero ثبت شد. اين اطلاعات به موتور Unity انتقال يافت و بدون مدل‌سازي از سگمان‌هاي بدن، رنگ و براش‌هاي مختلف، براي تصويرسازي مسير حركات نشاگرهاي دست ‌و پا و سر و قلب تعريف شد. يافته‌ها: با تعريف انواع براش‌ها در رنگ‌هاي مختلف و با اندازه‌هاي متفاوت، حركات انساني با بهره‌گيري از موسيقي به يك نقاشي مفهومي تبديل گرديد. نتيجه‌گيري: در مطالعه حاضر يك فرايند خلاقانه تحت عنوان Motion Paint براي اولين بار در ايران به اجرا درآمد. از اين فرايند مي‌توان براي جذاب شدن فرايند درمان حركتي به ‌ويژه در مشكلات مزمن بهره برد.

Introduction: Motion capturing is a concept which has been taken into consideration in recent decades and it has been used for various purposes like improving the performance of patients with motor problems and increasing motivation and creativity of users. It can also be used in film industry both in two- and three-dimensional animations. Research has shown that this system may be used to enhance creativity and intellect. The aim of this study is to use the Vicon motion capturing device to convert creative human movements into a conceptual painting with the help of music. Materials and Methods: For cultural adaption of the system, the first chapter of “HAFTVAD” music album called “The Introduction” composed by Masoud Nekoyi and the story of Rostam and Sohrab from Shahnameh, written by the Persian poet Ferdowsi, were chosen as the musical groundwork and the scenario for this survey. A human model was trained to perform movements in accordance with the musical and fictional workarounds of the study; the model was also allowed to use self-created styles in movements in the final performance. The segmental movements of the model body were identified in the Vicon Vero system by wearing clothes equipped with reflective markers. This information was transmitted into the Unity engine, and without modeling the body's segments, different colors and brushes were defined to illustrate the path of the movements of the hands, feet, head, and heart. Results: By defining various brushes in different colors, human movements were converted into a conceptual painting in accordance with the music. Conclusion: This study discussed a creative process, entitled Motion Paint, which was implemented in Iran for the first time. This method can be used to make the process of exercise therapy more attractive, especially in chronic motor problems.