Advances in deep learning significantly affect reinforcement learning, which results in the emergence of Deep RL (DRL). DRL does not need a data set and has the potential beyond the performance of human experts, resulting in significant developments in the field of artificial intelligence. However, because a DRL agent has to interact with the environment a lot while it is trained, it is difficult to be trained directly in the real environment due to the long training time, high cost, and possible material damage. Therefore, most or all of the training of DRL agents for real-world applications is conducted in virtual environments. This study focused on the difficulty in a mobile robot to reach its target by making a path plan in a real-world environment. The Minimalistic Gridworld virtual environment has been used for training the DRL agent, and to our knowledge, we have implemented the first real-world implementation for this environment. A DRL algorithm with higher performance than the classical Deep Q-network algorithm was created with the expanded environment. A mobile robot was designed for use in a real-world application. To match the virtual environment with the real environment, algorithms that can detect the position of the mobile robot and the target, as well as the rotation of the mobile robot, were created. As a result, a DRL-based mobile robot was developed that uses only the top view of the environment and can reach its target regardless of its initial position and rotation.
Futbol sahalarının aydınlatılması yeni bir uygulama olmamakla birlikte ilerleyen teknoloji sayesinde yeni geliştirmelere ihtiyaç duyulmaktadır. Özellikle nesnelerin interneti kavramı gün geçtikçe hayatımızda daha fazla yer edinirken aydınlatma ekipmanlarının da bu kapsamda daha teknolojik bir hale getirilmesi kaçınılmazdır. Futbol sahasının aydınlatma seviyesinin değiştirilmesi gereken durumlarda kontrol sinyalleri kablolu veya kablosuz olarak iletilebilir. Ancak futbol sahası aydınlatma projektörlerinde kullanılan LED sürücülerin kontrolü için sinyal kablosu kullanılmasının bazı dezavantajları vardır. Saha aydınlatmasında kullanılan LED sürücülerin sinyal kablolarıyla kontrol edilmesi durumunda, kablo maliyeti, işçilik ve ortamdaki elektriksel gürültülerden etkilenme açısından değerlendirilirse, güvenli ve düşük maliyetli kablosuz sinyal taşımanın önemi net olarak ortaya çıkmaktadır. Bu çalışmada LoRa modülasyon tabanlı kontrol kartları geliştirilmiş ve Diyarbakır ilinde bulunan bir futbol sahasının aydınlatma sistemine uygulanmıştır. Bu sayede kontrol sinyallerinin kablo ile taşındığı sistemlere göre daha düşük maliyetli ve güvenli kablosuz bir sistem kurulmuştur.