<?xml version="1.0" encoding="utf-8"?>
<journal>
<title>Journal of Iranian Association of Electrical and Electronics Engineers</title>
<title_fa>نشریه مهندسی برق و الکترونیک ایران</title_fa>
<short_title>Journal of Iranian Association of Electrical and Electronics Engineers</short_title>
<subject>Engineering &amp; Technology</subject>
<web_url>http://jiaeee.com</web_url>
<journal_hbi_system_id>1</journal_hbi_system_id>
<journal_hbi_system_user>admin</journal_hbi_system_user>
<journal_id_issn>2676-5810</journal_id_issn>
<journal_id_issn_online>2676-6086</journal_id_issn_online>
<journal_id_pii>8</journal_id_pii>
<journal_id_doi>10.61882/jiaeee</journal_id_doi>
<journal_id_iranmedex></journal_id_iranmedex>
<journal_id_magiran></journal_id_magiran>
<journal_id_sid>14</journal_id_sid>
<journal_id_nlai>8888</journal_id_nlai>
<journal_id_science>13</journal_id_science>
<language>fa</language>
<pubdate>
	<type>jalali</type>
	<year>1399</year>
	<month>6</month>
	<day>1</day>
</pubdate>
<pubdate>
	<type>gregorian</type>
	<year>2020</year>
	<month>9</month>
	<day>1</day>
</pubdate>
<volume>17</volume>
<number>3</number>
<publish_type>online</publish_type>
<publish_edition>1</publish_edition>
<article_type>fulltext</article_type>
<articleset>
	<article>


	<language>fa</language>
	<article_id_doi></article_id_doi>
	<title_fa>کنترل جمعیت سلول‌های سرطانی در مدل غیرخطی سرطان ملانوما با لحاظ عدم قطعیت با استفاده از الگوریتم یادگیری Q تحت سیاست استدلال مبتنی بر مورد(CBR)</title_fa>
	<title>Controlling the Cancer Cells in a Nonlinear Model of Melanoma by Considering the Uncertainty Using Q-learning Algorithm Under the Case Based Reasoning Policy</title>
	<subject_fa>کنترل</subject_fa>
	<subject>Control</subject>
	<content_type_fa>پژوهشي</content_type_fa>
	<content_type>Research</content_type>
	<abstract_fa>&lt;div style=&quot;text-align: justify;&quot;&gt;&lt;strong&gt;سرطان پوست یکی از خطرناک&#8204;ترین سرطان&#8204;هایی است که همه ساله افراد زیادی به آن مبتلا می&#8204;شوند. به همین دلیل تشخیص و درمان سریع این سرطان بسیار برای پزشکان حایز اهمیت می&#8204;باشد، در چند دهه اخیر برای بهبود تشخیص و درمان این بیماری استفاده از روش&#8204;های هوشمند بسیار مورد توجه&lt;/strong&gt; &lt;strong&gt;قرار گرفته است. هدف اصلی در این مقاله، تعیین مقدار بهینه دارو برای از بین&#8204;بردن سلول&#8204;های سرطانی می&#8204;باشد به گونه&#8204;ای که از تاثیر سوء دارو بر روی سلول&#8204;های سالم جلوگیری شود. از الگوریتم یادگیری &lt;/strong&gt;&lt;span dir=&quot;LTR&quot;&gt;Q&lt;/span&gt;&lt;strong&gt;&amp;nbsp; بدین منظور استفاده شده است. برای انتخاب اعمال، از سیاست استدلال مبتنی بر مورد با نام اختصاری&lt;/strong&gt; &lt;span dir=&quot;LTR&quot;&gt;CBR&lt;/span&gt;&lt;strong&gt;که یک نوع سیاست اکتشافی شتاب داده شده می&#8204;باشد، استفاده گشته است که باعث افزایش سرعت یادگیری و کاهش زمان،&amp;nbsp; برای رسیدن به سیاست بهینه می&#8204;شود. مورد دیگری که در این مقاله لحاظ شده است، تاثیر نیمه عمر دارو برای بدست&#8204;آوردن اثر دارو در هر لحظه در بدن بیمار می&#8204;باشد. &lt;/strong&gt;&lt;strong&gt;برای اینکه&amp;nbsp; عملکرد روش یادگیری تقویتی در کنترل سلول&#8204;های سرطانی و تعیین میزان بهینه دوز دارو&amp;nbsp; بهتر نشان داده شود، این روش با&amp;nbsp; یکی از روش&#8204;های کنترل بهینه به نام روش همیلتونین و روش تزریق دوز داروی ثابت مقایسه شده است. &lt;/strong&gt;&lt;strong&gt;در نهایت نشان داده شده است مجموع دوز داروی تزریقی به بیمار با استفاده از روش یادگیری تقویتی در مقایسه با حالتی که از روش کنترل بهینه و دوز داروی ثابت برای تمام زمان&#8204;ها استفاده شده است، بسیار کاهش پیدا کرده است و در ضمن جمعیت سلول&lt;/strong&gt;&lt;strong&gt;&#8204;های سرطانی نیز کنترل شده است&lt;/strong&gt;&lt;span dir=&quot;LTR&quot;&gt;.&lt;/span&gt;&lt;strong&gt; با اعمال نویز و عدم قطعیت در پارامترهای سیستم و شرایط اولیه باز هم روش انتخابی قادر به کنترل سلول&#8204;های سرطانی می&#8204;باشد.&lt;/strong&gt;&lt;/div&gt;</abstract_fa>
	<abstract>&lt;div style=&quot;text-align: justify;&quot;&gt;&lt;strong&gt;Melanoma is one of the most dangerous types of cancers and every year, many people suffer from this cancer&lt;span dir=&quot;RTL&quot;&gt;.&lt;/span&gt; Hence, quick diagnosis and treatment are significantly important for the physicians. In the recent decade, intelligent methods have attracted considerable attention for diagnosing and treating the melanoma&lt;span dir=&quot;RTL&quot;&gt;.&lt;/span&gt; The main objective of this paper is determining the optimal dosage of the drug for the elimination of the cancer cells while preventing from the side effect of the drug on the normal cells&lt;span dir=&quot;RTL&quot;&gt;.&lt;/span&gt; To this aim, the Q-learning algorithm is employed&lt;span dir=&quot;RTL&quot;&gt;.&lt;/span&gt; In order to select the actions, a Case-Based Reasoning (CBR) policy is used, which is an accelerated heuristic policy. The considered policy has increased the learning speed and reduced the overall time, to reach the optimal policy&lt;span dir=&quot;RTL&quot;&gt;.&lt;/span&gt; The half-life effect of the drug is also considered to obtain the side effect of the drug on the patient&amp;#39;s body, at each time step.&amp;nbsp;In order to demonstrate Q-learning algorithm performance in cancer cells control and optimal dosage determination purposes, Q-learning is compared with two methods, including fix dosage injection method and Hamiltonian method, which is one of the most important optimal control methods. Finally, it is revealed that the total injected dosage by using Reinforcement Learning method (Q-learning) is significantly reduced within the whole period of time in comparison with employing the optimal control and a fixed dosage injection cases. The number of cancer cells is controlled, as well. It should be noted that by applying the noise and uncertainty to the system parameters and the initial conditions, the proposed method can successfully control the cancer cells&lt;span dir=&quot;RTL&quot;&gt;.&lt;/span&gt;&lt;/strong&gt;&lt;/div&gt;</abstract>
	<keyword_fa>سرطان ملانوما, الگوریتم یادگیری Q, سیاست استدلال مبتی بر مورد, اثرات سوء دارو, نیمه عمر دارو, کنترل بهینه</keyword_fa>
	<keyword>melanoma cancer, Q-learning algorithm, case based reasoning, side effect of the drug, half-life of drug, optimal control.</keyword>
	<start_page>25</start_page>
	<end_page>37</end_page>
	<web_url>http://jiaeee.com/browse.php?a_code=A-10-943-1&amp;slc_lang=fa&amp;sid=1</web_url>


<author_list>
	<author>
	<first_name>Amin</first_name>
	<middle_name></middle_name>
	<last_name>Noori</last_name>
	<suffix></suffix>
	<first_name_fa>امین</first_name_fa>
	<middle_name_fa></middle_name_fa>
	<last_name_fa>نوری</last_name_fa>
	<suffix_fa></suffix_fa>
	<email>Amin_noori@ieee.org</email>
	<code>10031947532846006561</code>
	<orcid>10031947532846006561</orcid>
	<coreauthor>Yes
</coreauthor>
	<affiliation>Shahrood University of Technology, Shahrood, Iran,</affiliation>
	<affiliation_fa>دانشکده مهندسی برق و رباتیک دانشگاه صنعتی شاهرود- شاهرود- ایران</affiliation_fa>
	 </author>


	<author>
	<first_name>Elnaz</first_name>
	<middle_name></middle_name>
	<last_name>Kalhor</last_name>
	<suffix></suffix>
	<first_name_fa>الناز</first_name_fa>
	<middle_name_fa></middle_name_fa>
	<last_name_fa>کلهر</last_name_fa>
	<suffix_fa></suffix_fa>
	<email>E.kalhor123@sadjad.ac.ir</email>
	<code>10031947532846006562</code>
	<orcid>10031947532846006562</orcid>
	<coreauthor>No</coreauthor>
	<affiliation>Sadjad University of Technology</affiliation>
	<affiliation_fa>دانشکده مهندسی برق- دانشگاه صنعتی سجاد</affiliation_fa>
	 </author>


	<author>
	<first_name>Mohammad ali</first_name>
	<middle_name></middle_name>
	<last_name>sadrnia</last_name>
	<suffix></suffix>
	<first_name_fa>محمد علی</first_name_fa>
	<middle_name_fa></middle_name_fa>
	<last_name_fa>صدرنیا</last_name_fa>
	<suffix_fa></suffix_fa>
	<email>masadrnia@shahroodut.ac.ir</email>
	<code>10031947532846006563</code>
	<orcid>10031947532846006563</orcid>
	<coreauthor>No</coreauthor>
	<affiliation>Shahrood University of Technology, Shahrood, Iran,</affiliation>
	<affiliation_fa>دانشکده مهندسی برق و رباتیک دانشگاه صنعتی شاهرود- شاهرود- ایران</affiliation_fa>
	 </author>


	<author>
	<first_name>Sara</first_name>
	<middle_name></middle_name>
	<last_name>Saboori Rad</last_name>
	<suffix></suffix>
	<first_name_fa>سارا</first_name_fa>
	<middle_name_fa></middle_name_fa>
	<last_name_fa>صبوری راد</last_name_fa>
	<suffix_fa></suffix_fa>
	<email>Sabourirads@mums.ac.ir</email>
	<code>10031947532846006564</code>
	<orcid>10031947532846006564</orcid>
	<coreauthor>No</coreauthor>
	<affiliation>3Faculty of Medicine, Mashhad University of Medical Sciences</affiliation>
	<affiliation_fa>دانشکده پوست- دانشگاه علوم پزشکی مشهد</affiliation_fa>
	 </author>


</author_list>


	</article>
</articleset>
</journal>
