{"id":2245,"date":"2017-06-30T18:05:37","date_gmt":"2017-06-30T13:35:37","guid":{"rendered":"https:\/\/mizfa.com\/blog\/?p=2245"},"modified":"2024-12-12T14:05:36","modified_gmt":"2024-12-12T10:35:36","slug":"robots-txt","status":"publish","type":"post","link":"https:\/\/mizfa.com\/blog\/robots-txt\/","title":{"rendered":"\u0641\u0627\u06cc\u0644 robots.txt \u0648 \u0646\u062d\u0648\u0647 \u0633\u0627\u062e\u062a \u0622\u0646"},"content":{"rendered":"<p>\u0641\u0627\u06cc\u0644 \u0631\u0648\u0628\u0648\u062a robots.txt \u0686\u06cc\u0633\u062a\u061f \u0646\u062d\u0648\u0647 \u0633\u0627\u062e\u062a \u0641\u0627\u06cc\u0644 robots.txt \u0686\u06af\u0648\u0646\u0647 \u0627\u0633\u062a\u061f \u0628\u0647\u062a\u0631\u06cc\u0646 \u0648 \u0645\u0646\u0627\u0633\u0628 \u062a\u0631\u06cc\u0646 \u0641\u0627\u06cc\u0644 \u0631\u0648\u0628\u0648\u062a \u0628\u0631\u0627\u06cc \u0648\u0631\u062f\u067e\u0631\u0633 \u0648 \u062c\u0648\u0645\u0644\u0627 \u0686\u06cc\u0633\u062a\u061f \u067e\u0627\u0633\u062e \u0628\u0647 \u0647\u0645\u0647 \u0627\u06cc\u0646 \u067e\u0631\u0633\u0634\u200c\u0647\u0627 \u0631\u0627 \u0645\u06cc\u200c\u062a\u0648\u0627\u0646\u06cc\u062f \u062f\u0631 \u0627\u06cc\u0646 \u0645\u0642\u0627\u0644\u0647 \u0627\u0632 \u0633\u0627\u06cc\u062a \u0645\u06cc\u0632\u0641\u0627 \u0645\u0637\u0627\u0644\u0639\u0647 \u0646\u0645\u0627\u06cc\u06cc\u062f. \u0647\u0645\u0686\u0646\u06cc\u0646 \u062f\u0631 \u0627\u06cc\u0646 \u0645\u0642\u0627\u0644\u0647 \u06f8 \u0645\u062b\u0627\u0644 \u06a9\u0627\u0631\u0628\u0631\u062f\u06cc \u062f\u0631\u0628\u0627\u0631\u0647 \u0641\u0627\u06cc\u0644 \u0631\u0648\u0628\u0648\u062a (\u0631\u0628\u0627\u062a) \u06af\u0641\u062a\u0647 \u0634\u062f\u0647 \u0627\u0633\u062a. \u0647\u0645\u0631\u0627\u0647 \u0628\u0627\u0634\u06cc\u062f.<\/p>\n<h2>\u0641\u0627\u06cc\u0644 robots.txt \u0686\u06cc\u0633\u062a<\/h2>\n<p><strong>\u0641\u0627\u06cc\u0644 robots.txt<\/strong> \u06cc\u06a9 \u0641\u0627\u06cc\u0644 \u0645\u062a\u0646\u06cc \u0627\u0633\u062a \u06a9\u0647 \u0628\u0647\u200c\u0648\u0633\u06cc\u0644\u0647 \u0622\u0646 \u062e\u0637\u200c\u0645\u0634\u06cc \u0628\u0631\u0627\u06cc \u0631\u0628\u0627\u062a \u0645\u0648\u062a\u0648\u0631\u0647\u0627\u06cc \u062c\u0633\u062a\u062c\u0648 \u062a\u0639\u06cc\u06cc\u0646 \u0645\u06cc\u200c\u06a9\u0646\u06cc\u0645 \u06a9\u0647 \u0686\u0647 \u0622\u062f\u0631\u0633\u200c\u0647\u0627\u06cc\u06cc \u0631\u0627 \u062e\u0632\u0634 \u0648 \u0627\u06cc\u0646\u062f\u06a9\u0633 \u06a9\u0646\u0646\u062f \u0648 \u0686\u0647 \u0622\u062f\u0631\u0633\u200c\u0647\u0627\u06cc\u06cc \u0631\u0627 \u062e\u0632\u0634 \u0648 \u0627\u06cc\u0646\u062f\u06a9\u0633 \u0646\u06a9\u0646\u0646\u062f.<\/p>\n<p>\u062a\u0648\u062c\u0647 \u062f\u0627\u0634\u062a\u0647 \u0628\u0627\u0634\u06cc\u062f \u06a9\u0647 <strong>\u0645\u0627\u0647\u06cc\u062a \u062e\u0632\u0634 \u0628\u0627 \u0627\u06cc\u0646\u062f\u06a9\u0633 \u0641\u0631\u0642 \u062f\u0627\u0631\u062f<\/strong>. \u06cc\u06a9 \u0631\u0628\u0627\u062a \u0628\u0627\u06cc\u062f \u062f\u0631 \u0627\u0628\u062a\u062f\u0627 \u062e\u0632\u0634\u06cc \u0631\u0627 \u0635\u0648\u0631\u062a \u0628\u062f\u0647\u062f \u0648 \u0633\u067e\u0633 \u062a\u0635\u0645\u06cc\u0645 \u0645\u06cc\u200c\u06af\u06cc\u0631\u062f \u06a9\u0647 \u0622\u0646 \u0631\u0627 \u062f\u0631 \u062f\u06cc\u062a\u0627\u0628\u06cc\u0633 \u0645\u0648\u062a\u0648\u0631\u0647\u0627\u06cc \u062c\u0633\u062a\u062c\u0648 \u0630\u062e\u06cc\u0631\u0647 \u06a9\u0646\u062f \u06cc\u0627 \u0646\u0647. \u0627\u06af\u0631 \u0630\u062e\u06cc\u0631\u0647 \u0634\u0648\u062f \u0639\u0645\u0644 \u0627\u06cc\u0646\u062f\u06a9\u0633 \u0631\u062e\u200c\u062f\u0627\u062f\u0647 \u0627\u0633\u062a. \u0645\u0627 \u062f\u0631 \u0627\u06cc\u0646 \u0645\u0642\u0627\u0644\u0647 \u0627\u0632 \u0633\u0627\u06cc\u062a \u0645\u06cc\u0632\u0641\u0627 \u0628\u0647 \u0646\u062d\u0648\u0647 \u0627\u06cc\u062c\u0627\u062f \u0648 \u0633\u0627\u062e\u062a \u0641\u0627\u06cc\u0644 robots.txt \u0645\u06cc\u200c\u067e\u0631\u062f\u0627\u0632\u06cc\u0645 \u0648 \u0634\u0645\u0627 \u0628\u0627 \u062e\u0648\u0627\u0646\u062f\u0646 \u0627\u06cc\u0646 \u0645\u0642\u0627\u0644\u0647 \u0635\u0631\u0641 \u0646\u0638\u0631 \u0627\u0632 \u0627\u06cc\u0646\u06a9\u0647 \u0686\u0647 \u0646\u0648\u0639 <abbr title=\"Content Management System\">CMS<\/abbr> (\u0648\u0631\u062f\u067e\u0631\u0633\u060c \u062c\u0648\u0645\u0644\u0627 \u0648 &#8230;) \u062f\u0627\u0631\u06cc\u062f\u060c \u0645\u06cc\u200c\u062a\u0648\u0627\u0646\u06cc\u062f \u0627\u06cc\u0646 \u0641\u0627\u06cc\u0644 \u0631\u0627 \u0627\u06cc\u062c\u0627\u062f \u0648 \u0645\u062f\u06cc\u0631\u06cc\u062a \u06a9\u0646\u06cc\u062f.<!--more--><br \/>\n\u0645\u0648\u062a\u0648\u0631\u0647\u0627\u06cc \u062c\u0633\u062a\u062c\u0648 \u0628\u0627 \u062e\u0632\u06cc\u062f\u0646 \u062f\u0631 \u0645\u06cc\u0627\u0646 \u0635\u0641\u062d\u0627\u062a \u0633\u0627\u06cc\u062a \u0634\u0645\u0627\u060c \u0622\u0646\u200c\u0647\u0627 \u0631\u0627 \u0627\u06cc\u0646\u062f\u06a9\u0633 \u0645\u06cc\u200c\u06a9\u0646\u062f \u0648 \u0628\u0627 \u062f\u0646\u0628\u0627\u0644 \u06a9\u0631\u062f\u0646 \u0644\u06cc\u0646\u06a9\u200c\u0647\u0627 \u0648\u0627\u0631\u062f \u0635\u0641\u062d\u0627\u062a \u06cc\u0627 \u0633\u0627\u06cc\u062a\u200c\u0647\u0627\u06cc \u062f\u06cc\u06af\u0631 \u0645\u06cc\u200c\u0634\u0648\u0646\u062f. \u0647\u0631 \u0631\u0628\u0627\u062a \u0627\u0633\u062a\u0627\u0646\u062f\u0627\u0631\u062f\u06cc \u0642\u0628\u0644 \u0627\u0632 \u062e\u0632\u06cc\u062f\u0646 \u0635\u0641\u062d\u0647\u200c\u0627\u06cc \u0627\u0632 \u06cc\u06a9 \u062f\u0627\u0645\u0646\u0647\u060c \u0627\u0628\u062a\u062f\u0627 \u0641\u0627\u06cc\u0644 robots.txt \u0631\u0627 \u0645\u06cc\u200c\u062e\u0648\u0627\u0646\u062f \u0648 \u0628\u0631 \u0627\u0633\u0627\u0633 \u062f\u0633\u062a\u0648\u0631\u0627\u062a \u0645\u0648\u062c\u0648\u062f \u062f\u0631 \u0627\u06cc\u0646 \u0641\u0627\u06cc\u0644\u060c \u0627\u062c\u0627\u0632\u0647 \u062e\u0632\u06cc\u062f\u0646 \u0631\u0627 \u067e\u06cc\u062f\u0627 \u0645\u06cc\u200c\u06a9\u0646\u062f \u062a\u0627 \u0628\u062a\u0648\u0627\u0646\u062f \u0627\u06cc\u0646\u062f\u06a9\u0633 \u0631\u0627 \u0627\u0646\u062c\u0627\u0645 \u062f\u0647\u062f.<\/p>\n<p>\u067e\u0633 \u0628\u0627\u06cc\u062f \u062f\u0642\u062a \u062f\u0627\u0634\u062a\u0647 \u0628\u0627\u0634\u06cc\u062f \u06a9\u0647 \u0686\u0647 \u0635\u0641\u062d\u0627\u062a\u06cc \u0631\u0627 \u0628\u0631\u0627\u06cc \u062e\u0632\u06cc\u062f\u0646 \u0645\u0646\u0639 \u0645\u06cc\u200c\u06a9\u0646\u06cc\u062f \u0686\u0631\u0627\u06a9\u0647 \u0627\u06af\u0631 \u0628\u0647\u200c\u0627\u0634\u062a\u0628\u0627\u0647 \u0635\u0641\u062d\u0627\u062a \u0645\u0647\u0645 \u062e\u0648\u062f \u0631\u0627 \u0645\u062e\u0635\u0648\u0635\u0627\u064b \u0635\u0641\u062d\u0627\u062a \u0641\u0631\u0648\u062f \u06cc\u0627 \u0647\u0645\u0627\u0646 \u0644\u0646\u062f\u06cc\u0646\u06af \u067e\u06cc\u062c \u0631\u0627 \u0627\u0632 \u0637\u0631\u06cc\u0642 \u0627\u06cc\u0646 \u0641\u0627\u06cc\u0644 \u0628\u0631\u0627\u06cc \u0631\u0628\u0627\u062a\u200c\u0647\u0627 \u0645\u0633\u062f\u0648\u062f \u06a9\u0646\u06cc\u062f \u0636\u0631\u0628\u0647 \u0628\u062f\u06cc \u0628\u0647 \u0633\u0626\u0648 \u0633\u0627\u06cc\u062a \u0648 \u062f\u0631\u0646\u062a\u06cc\u062c\u0647 \u062a\u062c\u0627\u0631\u062a \u0622\u0646\u0644\u0627\u06cc\u0646 \u062e\u0648\u062f \u0648\u0627\u0631\u062f \u0645\u06cc\u200c\u06a9\u0646\u06cc\u062f.<\/p>\n<h3>\u0641\u0627\u06cc\u0644 robots.txt \u06cc\u0627 \u0645\u062a\u0627\u062a\u06af \u0631\u0648\u0628\u0627\u062a<\/h3>\n<p>\u0627\u06af\u0631 \u0645\u06cc\u200c\u062e\u0648\u0627\u0647\u06cc\u062f \u0622\u062f\u0631\u0633\u06cc \u0627\u0632 \u0635\u0641\u062d\u0627\u062a \u0648 \u0644\u06cc\u0646\u06a9\u200c\u0647\u0627\u06cc \u0622\u0646 \u062a\u0648\u0633\u0637 \u0631\u0648\u0628\u0627\u062a \u0628\u0631\u0631\u0633\u06cc \u0634\u0648\u062f \u0627\u0645\u0627 \u062f\u0631 \u0646\u062a\u0627\u06cc\u062c \u062c\u0633\u062a\u062c\u0648 \u0646\u0645\u0627\u06cc\u0634 \u062f\u0627\u062f\u0647 \u0646\u0634\u0648\u062f\u060c \u062f\u0631\u0646\u062a\u06cc\u062c\u0647 \u0628\u0627\u06cc\u062f \u0628\u062c\u0627\u06cc \u0641\u0627\u06cc\u0644 robots.txt \u0627\u0632 <strong>\u0645\u062a\u0627\u062a\u06af \u0631\u0628\u0627\u062a<\/strong> \u0627\u0633\u062a\u0641\u0627\u062f\u0647 \u06a9\u0646\u06cc\u062f.\u00a0\u0627\u06af\u0631 \u0642\u0635\u062f \u062f\u0627\u0631\u06cc\u062f \u0627\u06cc\u0646 \u0631\u0648\u0634 \u0631\u0627 \u0628\u0647 \u0634\u06a9\u0644 \u0628\u0647\u06cc\u0646\u0647 \u0627\u0646\u062c\u0627\u0645 \u062f\u0647\u06cc\u062f \u0645\u0642\u0627\u0644\u0647 \u0645\u062a\u0627\u062a\u06af robots \u0645\u0627 \u0631\u0627 \u062d\u062a\u0645\u0627\u064b \u0628\u062e\u0648\u0627\u0646\u06cc\u062f \u062a\u0627 \u0628\u0647 \u0646\u06a9\u0627\u062a \u062c\u0627\u0644\u0628\u06cc \u062f\u0631\u0628\u0627\u0631\u0647 \u0627\u06cc\u0646 \u0645\u062a\u0627\u062a\u06af \u062f\u0633\u062a \u067e\u06cc\u062f\u0627 \u06a9\u0646\u06cc\u062f.<\/p>\n<h2>\u0686\u0647\u0627\u0631 \u06a9\u0627\u0631\u0628\u0631\u062f \u0627\u0635\u0644\u06cc \u0641\u0627\u06cc\u0644 robots.txt<\/h2>\n<table style=\"border-collapse: collapse; width: 100%; height: 115px;\">\n<tbody>\n<tr style=\"height: 23px;\">\n<td style=\"width: 50%; height: 23px;\">\u062f\u0633\u062a\u0648\u0631<\/td>\n<td style=\"width: 50%; height: 23px;\">\u0634\u0631\u062d \u062f\u0633\u062a\u0648\u0631<\/td>\n<\/tr>\n<tr style=\"height: 23px;\">\n<td style=\"width: 50%; height: 23px;\">User-agent<\/td>\n<td style=\"width: 50%; height: 23px;\">\u00a0\u062a\u0639\u06cc\u06cc\u0646 \u0645\u06cc\u200c\u06a9\u0646\u062f \u06a9\u0647 \u06a9\u062f\u0627\u0645 \u062e\u0632\u0646\u062f\u0647\u200c\u0647\u0627 \u0633\u0627\u06cc\u062a \u0634\u0645\u0627 \u0631\u0627 \u062e\u0632\u0634 \u06a9\u0646\u0646\u062f<\/td>\n<\/tr>\n<tr style=\"height: 23px;\">\n<td style=\"width: 50%; height: 23px;\">Disallow<\/td>\n<td style=\"width: 50%; height: 23px;\">\u062a\u0639\u06cc\u06cc\u0646 \u0645\u06cc\u200c\u06a9\u0646\u062f \u06a9\u062f\u0627\u0645 \u0635\u0641\u062d\u0627\u062a \u062e\u0632\u0634 \u0646\u0634\u0648\u0646\u062f<\/td>\n<\/tr>\n<tr style=\"height: 23px;\">\n<td style=\"width: 50%; height: 23px;\">Allow<\/td>\n<td style=\"width: 50%; height: 23px;\">\u062a\u0639\u06cc\u06cc\u0646 \u0645\u06cc\u200c\u06a9\u0646\u062f \u06a9\u062f\u0627\u0645 \u0635\u0641\u062d\u0627\u062a \u062e\u0632\u0634 \u0634\u0648\u0646\u062f<\/td>\n<\/tr>\n<tr style=\"height: 23px;\">\n<td style=\"width: 50%; height: 23px;\">Sitemap<\/td>\n<td style=\"width: 50%; height: 23px;\">\u0644\u0648\u06a9\u06cc\u0634\u0646 <abbr title=\"eXtensible Markup Language\">XML<\/abbr> Sitemap \u0634\u0645\u0627 \u0631\u0627 \u0628\u0647 \u0645\u0648\u062a\u0648\u0631 \u062c\u0633\u062a\u062c\u0648 \u0646\u0634\u0627\u0646 \u0645\u06cc\u200c\u062f\u0647\u062f<\/td>\n<\/tr>\n<\/tbody>\n<\/table>\n<p>\u062f\u0631 \u0628\u062e\u0634 \u0646\u062d\u0648\u0647 \u0633\u0627\u062e\u062a \u0641\u0627\u06cc\u0644 robots.txt \u0628\u06cc\u0634\u062a\u0631 \u0631\u0627\u062c\u0639 \u0628\u0647 \u0627\u06cc\u0646 \u062f\u0633\u062a\u0648\u0631\u0627\u062a \u0635\u062d\u0628\u062a \u062e\u0648\u0627\u0647\u06cc\u0645 \u06a9\u0631\u062f.<\/p>\n<h2>\u0686\u0631\u0627 \u0641\u0627\u06cc\u0644 robots.txt \u0628\u0631\u0627\u06cc \u0633\u0626\u0648 \u0645\u0647\u0645 \u0627\u0633\u062a\u061f<\/h2>\n<p>\u06af\u0648\u06af\u0644 \u0628\u0647 \u0633\u0627\u06cc\u062a \u0634\u0645\u0627 \u0633\u0647\u0645\u06cc\u0647 \u06cc\u0627 \u0628\u0648\u062f\u062c\u0647 \u062e\u0632\u0634 \u0645\u0634\u062e\u0635\u06cc \u0627\u062e\u062a\u0635\u0627\u0635 \u0645\u06cc\u200c\u062f\u0647\u062f. \u062f\u0631 \u0639\u06cc\u0646 \u062d\u0627\u0644\u060c \u062f\u0631 \u0633\u0627\u06cc\u062a \u0634\u0645\u0627 \u0635\u0641\u062d\u0627\u062a \u063a\u06cc\u0631 \u0645\u0647\u0645\u06cc \u0648\u062c\u0648\u062f \u062f\u0627\u0631\u062f \u06a9\u0647 \u0646\u06cc\u0627\u0632\u06cc \u0628\u0647 \u062f\u06cc\u062f\u0646 \u0634\u062f\u0646 \u0646\u062f\u0627\u0631\u0646\u062f. \u0628\u0631\u0627\u06cc \u0645\u062b\u0627\u0644 \u0628\u06cc\u0627\u06cc\u06cc\u062f \u0641\u0631\u0636 \u06a9\u0646\u06cc\u0645 \u0634\u0645\u0627 \u0633\u0627\u06cc\u062a \u0641\u0631\u0648\u0634\u06af\u0627\u0647\u06cc\u200c\u0627\u06cc \u06a9\u0647 \u062f\u0631\u0627\u06cc\u062f \u06a9\u0647 \u0647\u0632\u0627\u0631\u0627\u0646 \u0635\u0641\u062d\u0647 \u062f\u0627\u0631\u062f \u0648 \u0627\u0632 \u0641\u06cc\u0644\u062a\u0631\u0647\u0627\u06cc \u0632\u06cc\u0627\u062f\u06cc \u0628\u0631\u0627\u06cc \u0627\u06cc\u0646 \u0645\u062d\u0635\u0648\u0644\u0627\u062a \u0627\u0633\u062a\u0641\u0627\u062f\u0647 \u06a9\u0631\u062f\u0647 \u0627\u06cc\u062f.<\/p>\n<p>\u0627\u06cc\u0646 \u0635\u0641\u062d\u0627\u062a \u0641\u06cc\u0644\u062a\u0631\u06cc \u0627\u0631\u0632\u0634 \u0633\u0626\u0648\u06cc\u06cc \u0646\u062f\u0627\u0631\u0646\u062f \u0648 \u062d\u062a\u06cc \u0645\u0645\u06a9\u0646 \u0627\u0633\u062a \u0645\u062d\u062a\u0648\u0627\u06cc \u062a\u06a9\u0631\u0627\u0631\u06cc \u0646\u06cc\u0632 \u0642\u0644\u0645\u062f\u0627\u062f \u0634\u0648\u0646\u062f. \u0645\u0647\u0645\u062a\u0631 \u0627\u0632 \u0622\u0646\u060c \u062e\u0632\u0634 \u0627\u06cc\u0646 \u0635\u0641\u062d\u0627\u062a \u0628\u0648\u062f\u062c\u0647 \u062e\u0632\u0634 \u0648 \u0627\u06cc\u0646\u062f\u06a9\u0633 \u0634\u062f\u0646 \u0633\u0627\u06cc\u0631 \u0635\u0641\u062d\u0627\u062a \u0627\u0631\u0632\u0634\u0645\u0646\u062f \u0633\u0627\u06cc\u062a \u0634\u0645\u0627 \u0631\u0627 \u0645\u06cc\u200c\u06af\u06cc\u0631\u062f. \u0628\u0646\u0627\u0628\u0631\u0627\u06cc\u0646\u060c \u06cc\u06a9\u06cc \u0627\u0632 \u06a9\u0627\u0631\u0628\u0631\u062f\u0647\u0627\u06cc \u0627\u0635\u0644\u06cc \u0641\u0627\u06cc\u0644 robots.txt \u0627\u0637\u0645\u06cc\u0646\u0627\u0646 \u0627\u0632 \u0628\u0648\u062f\u062c\u0647 \u0628\u0646\u062f\u06cc \u062f\u0631\u0633\u062a \u0628\u0648\u062f\u062c\u0647 \u062e\u0632\u0634 \u0633\u0627\u06cc\u062a \u0634\u0645\u0627\u0633\u062a.<\/p>\n<h2>\u062f\u0631 \u0686\u0647 \u0635\u0641\u062d\u0627\u062a\u06cc \u0628\u0627\u06cc\u062f \u0627\u0632 robots.txt \u0627\u0633\u062a\u0641\u0627\u062f\u0647 \u06a9\u0631\u062f\u061f<\/h2>\n<p>\u062f\u0631 \u0622\u062f\u0631\u0633\u200c\u0647\u0627\u06cc \u0645\u062a\u0641\u0627\u0648\u062a\u06cc \u0645\u06cc\u200c\u062a\u0648\u0627\u0646 \u0627\u0632 robots.txt \u0628\u0631\u0627\u06cc \u0645\u0646\u0628\u0639 \u06a9\u0631\u062f\u0646 \u062e\u0632\u0646\u062f\u0647\u200c\u0647\u0627 \u0627\u0633\u062a\u0641\u0627\u062f\u0647 \u06a9\u0631\u062f. \u0627\u0645\u0627 \u06cc\u06a9 \u062f\u0633\u062a\u0648\u0631 \u06a9\u0627\u0631 \u06a9\u0644\u06cc \u0648\u062c\u0648\u062f \u062f\u0627\u0631\u062f. \u0645\u0627 \u0627\u0632 \u0641\u0627\u06cc\u0644 robots.txt \u0627\u0633\u062a\u0641\u0627\u062f\u0647 \u0645\u06cc\u200c\u06a9\u0646\u0645 \u062a\u0627 \u0647\u0631 \u0635\u0641\u062d\u0647\u200c\u0627\u06cc \u06a9\u0647 \u062c\u0632\u0648 \u0627\u0633\u062a\u0631\u0627\u062a\u0698\u06cc \u0633\u0626\u0648 \u0646\u06cc\u0633\u062a (\u0628\u0631\u0627\u06cc \u0645\u062b\u0627\u0644 \u0635\u0641\u062d\u0627\u062a \u00ab\u0627\u0641\u0632\u0648\u062f\u0646 \u0628\u0647 \u0633\u0628\u062f \u062e\u0631\u06cc\u062f\u00bb \u06cc\u0627 \u00ab\u0633\u0631\u0686 \u062f\u0627\u062e\u0644\u06cc\u00bb \u0648\u0628\u0633\u0627\u06cc\u062a) \u0631\u0627 \u0645\u0646\u0639 \u06a9\u0646\u06cc\u0645. \u067e\u0633\u00a0\u0641\u0627\u06cc\u0644\u200c\u0647\u0627\u06cc \u067e\u06cc \u062f\u06cc \u0627\u0641\u06cc \u0645\u062b\u0644 \u0628\u0631\u0648\u0634\u0648\u0631 \u06cc\u0627 \u0631\u0627\u0647\u0646\u0645\u0627\u06cc \u0627\u0633\u062a\u0641\u0627\u062f\u0647 \u0627\u0632 \u0645\u062d\u0635\u0648\u0644 \u06a9\u0647 \u0646\u06cc\u0627\u0632\u06cc \u0646\u06cc\u0633\u062a \u0645\u0648\u062a\u0648\u0631 \u062c\u0633\u062a\u062c\u0648 \u0622\u0646\u200c\u0647\u0627 \u0631\u0627 \u0627\u06cc\u0646\u062f\u06a9\u0633 \u06a9\u0646\u062f \u0631\u0627 \u0628\u0627\u06cc\u0633\u062a\u06cc \u0628\u0627 \u0627\u0633\u062a\u0641\u0627\u062f\u0647 \u0627\u0632 robots.txt \u0645\u0646\u0639 \u06a9\u0631\u062f. \u06cc\u0627 \u0627\u06af\u0631 \u0628\u062e\u0648\u0627\u0647\u06cc\u0645 \u0645\u062b\u0627\u0644 \u062f\u0648\u0645\u06cc \u0628\u0632\u0646\u06cc\u0645\u060c\u00a0\u0627\u06a9\u0627\u0646\u062a\u200c\u0647\u0627\u06cc \u06a9\u0627\u0631\u0628\u0631\u0627\u0646 \u0648 \u06cc\u0627 \u067e\u0631\u0648\u0641\u0627\u06cc\u0644\u200c\u0647\u0627\u06cc \u0627\u06cc\u0634\u0627\u0646 \u0646\u06cc\u0632 \u062c\u0632\u0648 \u0622\u0646 \u062f\u0633\u062a\u0647 \u0627\u0632 \u0635\u0641\u062d\u0627\u062a\u06cc \u0647\u0633\u062a\u0646\u062f \u06a9\u0647 \u0628\u0627\u06cc\u062f \u0628\u0644\u0627\u06a9 \u0634\u0648\u0646\u062f.<\/p>\n<h2>\u0641\u0627\u06cc\u0644 robots.txt \u0628\u0627\u06cc\u062f \u062f\u0631 \u0686\u0647 \u0622\u062f\u0631\u0633\u06cc \u0642\u0631\u0627\u0631 \u062f\u0647\u06cc\u0645\u061f<\/h2>\n<p>\u0628\u0639\u062f \u0627\u0632 \u0633\u0627\u062e\u062a \u0641\u0627\u06cc\u0644 robots.txt \u0628\u0627 \u0641\u0631\u0645\u062a <abbr title=\"American Standard Code for Information Interchange\">ASCII<\/abbr> \u06cc\u0627 UTF-8 \u0627\u06cc\u0646 \u0641\u0627\u06cc\u0644 \u062d\u062a\u0645\u0627\u064b \u062f\u0631 \u0622\u062f\u0631\u0633 http:\/\/domain.com\/robots.txt \u0645\u0648\u0631\u062f \u062f\u0633\u062a\u0631\u0633\u06cc \u0631\u0628\u0627\u062a\u200c\u0647\u0627 \u0642\u0631\u0627\u0631 \u06af\u06cc\u0631\u062f (\u0628\u062c\u0627\u06cc domain.com \u0646\u0627\u0645 \u062f\u0627\u0645\u0646\u0647 \u0633\u0627\u06cc\u062a \u062e\u0648\u062f \u0631\u0627 \u0642\u0631\u0627\u0631 \u062f\u0647\u06cc\u062f). \u062d\u0627\u0644 \u062f\u0648 \u0646\u06a9\u062a\u0647 \u062f\u0631\u0628\u0627\u0631\u0647 \u0627\u06cc\u0646 \u0645\u0648\u0636\u0648\u0639:<\/p>\n<ul>\n<li>\u0627\u06af\u0631 \u0631\u0628\u0627\u062a \u062e\u0632\u0646\u062f\u0647 \u0642\u0635\u062f \u062f\u0627\u0634\u062a\u0647 \u0628\u0627\u0634\u062f \u0628\u0647 \u0632\u06cc\u0631 \u062f\u0627\u0645\u0646\u0647\u200c\u0647\u0627\u06cc \u0645\u0627 \u0633\u0631 \u0628\u0632\u0646\u062f \u0628\u0627\u06cc\u062f \u0628\u0631\u0627\u06cc \u0647\u0631 \u0632\u06cc\u0631\u062f\u0627\u0645\u0646\u0647 \u06cc\u06a9 \u0641\u0627\u06cc\u0644 robots.txt \u062c\u062f\u0627\u06af\u0627\u0646\u0647 \u0627\u06cc\u062c\u0627\u062f \u06a9\u0646\u06cc\u0645.<\/li>\n<li>\u0627\u06af\u0631 \u0633\u0627\u06cc\u062a \u0634\u0645\u0627 \u0647\u0645 \u0628\u0627 www \u0648 \u0647\u0645 \u0628\u062f\u0648\u0646 www \u0628\u0627\u0632 \u0645\u06cc\u200c\u0634\u0648\u062f \u0628\u0627\u06cc\u062f \u0641\u0627\u06cc\u0644 robots.txt \u0631\u0627 \u062f\u0631 \u0647\u0631 \u062f\u0648 \u062d\u0627\u0644\u062a \u06cc\u06a9\u0633\u0627\u0646 \u062a\u0646\u0638\u06cc\u0645 \u06a9\u0646\u06cc\u062f\u061b \u0647\u0645\u06cc\u0646 \u0645\u0648\u0636\u0648\u0639 \u0628\u0631\u0627\u06cc http \u0648 https \u0647\u0645 \u0635\u062f\u0642 \u0645\u06cc\u200c\u06a9\u0646\u062f \u0648\u0644\u06cc \u0628\u0647 \u0627\u06cc\u0646 \u0646\u06a9\u062a\u0647 \u062a\u0648\u062c\u0647 \u062f\u0627\u0634\u062a\u0647 \u0628\u0627\u0634\u06cc\u062f \u06a9\u0647 \u0627\u06af\u0631 \u0633\u0627\u06cc\u062a \u0628\u0647 \u0627\u06cc\u0646 \u0634\u06a9\u0644 \u062f\u0631 \u062f\u0633\u062a\u0631\u0633 \u0628\u0627\u0634\u062f \u0628\u0627\u0639\u062b \u0627\u06cc\u062c\u0627\u062f \u0645\u062d\u062a\u0648\u0627\u06cc \u062a\u06a9\u0631\u0627\u0631\u06cc \u0645\u06cc\u200c\u0634\u0648\u062f \u06a9\u0647 \u0628\u0631\u0627\u06cc \u0633\u0626\u0648 \u062f\u0627\u062e\u0644\u06cc \u0633\u0627\u06cc\u062a \u0628\u0647\u200c\u0634\u062f\u062a \u0636\u0631\u0631 \u0627\u0633\u062a \u0648 \u06cc\u06a9\u06cc \u0627\u0632 \u062f\u0644\u0627\u06cc\u0644 \u067e\u0646\u0627\u0644\u062a\u06cc \u0634\u062f\u0646 \u0633\u0627\u06cc\u062a \u062f\u0631 \u06af\u0648\u06af\u0644 \u0645\u06cc\u200c\u0628\u0627\u0634\u062f\u060c \u0686\u0631\u0627\u06a9\u0647 \u062a\u0645\u0627\u0645 \u0632\u06cc\u0631 \u062f\u0627\u0645\u0646\u0647\u200c\u0647\u0627 \u0627\u0632 \u0646\u06af\u0627\u0647 \u06af\u0648\u06af\u0644 \u06cc\u06a9 \u0633\u0627\u06cc\u062a \u0645\u062c\u0632\u0627 \u0645\u062d\u0633\u0648\u0628 \u0645\u06cc\u200c\u0634\u0648\u062f. \u0648\u0644\u06cc \u062f\u0631\u0628\u0627\u0631\u0647 \u0627\u06cc\u0646 \u0641\u0627\u06cc\u0644 \u0628\u062f\u0627\u0646\u06cc\u062f \u06a9\u0647 \u0627\u06af\u0631 \u0632\u06cc\u0631 \u062f\u0627\u0645\u0646\u0647\u200c\u0647\u0627\u06cc \u0634\u0645\u0627 \u062c\u062f\u0627\u06af\u0627\u0646\u0647 \u0628\u0627\u0632 \u0645\u06cc\u200c\u0634\u0648\u062f \u06af\u0648\u06af\u0644 \u0628\u0631\u0627\u06cc \u062e\u0648\u0627\u0646\u062f\u0646 \u0641\u0627\u06cc\u0644 robots.txt \u062f\u0627\u0645\u0646\u0647 http \u0631\u0627 \u0627\u0648\u0644\u0648\u06cc\u062a \u0642\u0631\u0627\u0631 \u0645\u06cc\u200c\u062f\u0647\u062f.\n<pre>http:\/\/www.site.com\nhttps:\/\/www.site.com\nhttp:\/\/site.com\nhttps:\/\/site.com<\/pre>\n<\/li>\n<li>\u0646\u06a9\u062a\u0647 \u0645\u0647\u0645 \u062f\u06cc\u06af\u0631 \u0627\u06cc\u0646\u06a9\u0647 \u06a9\u0647 \u0641\u0627\u06cc\u0644 robots.txt \u062d\u062a\u0645\u0627 \u0628\u0627\u06cc\u062f \u0628\u0627 <strong>\u062d\u0631\u0648\u0641 \u06a9\u0648\u0686\u06a9<\/strong> \u0646\u0648\u0634\u062a\u0647 \u0634\u0648\u062f. \u0627\u06cc\u0646 \u0641\u0627\u06cc\u0644 \u0647\u0645\u0627\u0646\u0646\u062f <abbr title=\"Uniform Resource Locator\">URL<\/abbr> \u0646\u0627\u0645 \u0627\u06cc\u0646 \u0641\u0627\u06cc\u0644 \u0646\u0633\u0628\u062a \u0628\u0647 \u062d\u0631\u0648\u0641 \u0628\u0632\u0631\u06af \u0648 \u06a9\u0648\u0686\u06a9 \u062d\u0633\u0627\u0633 \u0627\u0633\u062a. \u0628\u0647 \u0639\u0646\u0648\u0627\u0646 \u0645\u062b\u0627\u0644 \u0622\u062f\u0631\u0633\u200c\u0647\u0627\u06cc \u0632\u06cc\u0631 \u06a9\u0627\u0645\u0644\u0627 \u0628\u0627 \u0647\u0645 \u0641\u0631\u0642 \u062f\u0627\u0631\u0646\u062f \u0648 \u0641\u0642\u0637 \u0627\u0648\u0644\u06cc\u0646 \u0622\u062f\u0631\u0633 \u0635\u062d\u06cc\u062d \u0645\u06cc\u200c\u0628\u0627\u0634\u062f.\n<pre>mizfa.com\/robots.txt\nmizfa.com\/robotS.txt\nmizfa.com\/robots.TXT\nmizfa.com\/Robotx.txt\nmizfa.com\/ROBOTS.txt<\/pre>\n<\/li>\n<\/ul>\n<p><strong>\u0686\u0646\u062f \u0645\u062b\u0627\u0644 \u0628\u0631\u0627\u06cc \u062f\u0631\u06a9 \u0628\u0647\u062a\u0631 \u0645\u06a9\u0627\u0646 \u0635\u062d\u06cc\u062d \u0641\u0627\u06cc\u0644 robots.txt<\/strong><\/p>\n<table>\n<tbody>\n<tr>\n<td style=\"text-align: center;\">\u0622\u062f\u0631\u0633 \u0641\u0627\u06cc\u0644 robots.txt<\/td>\n<td style=\"text-align: center;\">\u0645\u0639\u062a\u0628\u0631 \u0628\u0648\u062f\u0646 \u0641\u0627\u06cc\u0644 \u062f\u0631 \u0622\u062f\u0631\u0633\u200c\u0647\u0627\u06cc<\/td>\n<td style=\"text-align: center;\">\u0645\u0639\u062a\u0628\u0631 \u0646\u0628\u0648\u062f\u0646 \u0641\u0627\u06cc\u0644 \u062f\u0631 \u0622\u062f\u0631\u0633\u200c\u0647\u0627\u06cc<\/td>\n<td style=\"text-align: center;\">\u062a\u0648\u0636\u06cc\u062d\u0627\u062a \u0628\u06cc\u0634\u062a\u0631<\/td>\n<\/tr>\n<tr>\n<td style=\"text-align: center;\">http:\/\/example.com\/robots.txt<\/td>\n<td style=\"text-align: center;\">http:\/\/mizfa.com\/<br \/>\nhttp:\/\/mizfa.com\/blog\/file<\/td>\n<td style=\"text-align: center;\">http:\/\/mizfa.academy\/<\/p>\n<blockquote class=\"wp-embedded-content\" data-secret=\"AOXuOAl9lI\"><p><a href=\"https:\/\/mizfa.com\/\">\u0634\u0631\u06a9\u062a \u062e\u062f\u0645\u0627\u062a \u0637\u0631\u0627\u062d\u06cc \u0633\u0627\u06cc\u062a \u0648 \u0633\u0626\u0648<\/a><\/p><\/blockquote>\n<p><iframe class=\"wp-embedded-content\" sandbox=\"allow-scripts\" security=\"restricted\" style=\"position: absolute; clip: rect(1px, 1px, 1px, 1px);\" title=\"&#8220;\u0634\u0631\u06a9\u062a \u062e\u062f\u0645\u0627\u062a \u0637\u0631\u0627\u062d\u06cc \u0633\u0627\u06cc\u062a \u0648 \u0633\u0626\u0648&#8221; &#8212; \u0637\u0631\u0627\u062d\u06cc \u0633\u0627\u06cc\u062a - \u0628\u0647\u06cc\u0646\u0647 \u0633\u0627\u0632\u06cc \u0648 \u0633\u0626\u0648 \u0633\u0627\u06cc\u062a\" src=\"https:\/\/mizfa.com\/embed\/#?secret=AOXuOAl9lI\" data-secret=\"AOXuOAl9lI\" width=\"600\" height=\"338\" frameborder=\"0\" marginwidth=\"0\" marginheight=\"0\" scrolling=\"no\"><\/iframe><br \/>\nhttp:\/\/mizfa.com:8181\/<\/td>\n<td style=\"text-align: center;\">\u0622\u062f\u0631\u0633 \u0641\u0627\u06cc\u0644 robots.txt \u0628\u0631\u0627\u06cc \u0632\u06cc\u0631 \u062f\u0627\u0645\u0646\u0647 \u0647\u0627 \u0648 \u062f\u0627\u0645\u0646\u0647\u200c\u0647\u0627\u06cc\u06cc \u06a9\u0647 \u0628\u0627 \u067e\u0648\u0631\u062a \u0628\u0627\u0632 \u0645\u06cc\u200c\u0634\u0648\u0646\u062f\u00a0 \u0645\u0639\u062a\u0628\u0631 \u0646\u06cc\u0633\u062a<br \/>\n\u0648 \u0641\u0642\u0637 \u0628\u0631\u0627\u06cc \u0647\u0645\u0627\u0646 \u062f\u0627\u0645\u0646\u0647 \u0648 \u062a\u0645\u0627\u0645 \u0641\u0648\u0644\u062f\u0631\u0647\u0627\u06cc \u0622\u0646 \u0645\u0639\u062a\u0628\u0631 \u0627\u0633\u062a.<\/td>\n<\/tr>\n<tr>\n<td style=\"text-align: center;\">http:\/\/www.example.com\/robots.txt<\/td>\n<td style=\"text-align: center;\">http:\/\/www.mizfa.com\/<\/td>\n<td style=\"text-align: center;\">http:\/\/mizfa.com\/<br \/>\nhttp:\/\/service.www.mizfa.com\/<br \/>\nhttp:\/\/www.mizfa.academy\/<\/td>\n<td style=\"text-align: center;\">\u0647\u0631 \u0632\u06cc\u0631 \u062f\u0627\u0645\u0646\u0647 \u0648 \u0647\u0645\u06cc\u0646\u0637\u0648\u0631 \u062f\u06cc\u06af\u0631 \u0648\u0631\u0698\u0646\u200c\u0647\u0627\u06cc \u0632\u06cc\u0631 \u062f\u0627\u0645\u0646\u0647 \u0628\u0627\u06cc\u062f \u06cc\u06a9 \u0641\u0627\u06cc\u0644 robots.txt \u0645\u062c\u0632\u0627 \u0627\u0632 \u0641\u0627\u06cc\u0644 robots.txt \u062f\u0627\u0645\u0646\u0647 \u0627\u0635\u0644\u06cc \u062f\u0627\u0634\u062a\u0647 \u0628\u0627\u0634\u062f. \u0627\u06cc\u0646 \u0645\u0648\u0636\u0648\u0639 \u062f\u0631 \u0645\u0648\u0631\u062f \u062f\u06cc\u06af\u0631 \u0648\u0631\u0698\u0646\u200c\u0647\u0627\u06cc \u062f\u0627\u0645\u0646\u0647 \u0627\u0635\u0644\u06cc \u0647\u0645 \u0635\u062f\u0642 \u0645\u06cc\u200c\u06a9\u0646\u062f \u0645\u06af\u0631 \u0622\u0646\u06a9\u0647 \u0631\u06cc\u062f\u0627\u06cc\u0631\u06a9\u062a \u0627\u0635\u0648\u0644\u06cc \u0635\u0648\u0631\u062a \u06af\u06cc\u0631\u062f \u06a9\u0647 \u062f\u0631 \u0627\u06cc\u0646 \u0635\u0648\u0631\u062a \u0646\u06cc\u0627\u0632\u06cc \u0628\u0647 \u0641\u0627\u06cc\u0644 robots.txt \u0645\u062c\u0632\u0627 \u0646\u06cc\u0633\u062a.<\/td>\n<\/tr>\n<tr>\n<td style=\"text-align: center;\">http:\/\/example.com\/blog\/robots.txt<\/td>\n<td style=\"text-align: center;\"><\/td>\n<td style=\"text-align: center;\"><\/td>\n<td style=\"text-align: center;\">\u0686\u0646\u06cc\u0646 \u0622\u062f\u0631\u0633 \u0641\u0627\u06cc\u0644\u06cc \u0627\u0635\u0644\u0627 \u062a\u0648\u0633\u0637 \u0631\u0628\u0627\u062a\u200c\u0647\u0627 \u062e\u0632\u0634 \u0646\u0645\u06cc\u200c\u0634\u0648\u062f.<\/td>\n<\/tr>\n<\/tbody>\n<\/table>\n<p>\u0627\u06af\u0631 \u062f\u0631 \u0645\u0648\u0631\u062f \u062c\u062f\u0648\u0644 \u0641\u0648\u0642 \u0627\u0628\u0647\u0627\u0645 \u062f\u0627\u0634\u062a\u06cc\u062f \u0628\u0627 \u06a9\u0645\u0627\u0644 \u0645\u06cc\u0644 \u062f\u0631 \u0628\u062e\u0634 \u06a9\u0627\u0645\u0646\u062a \u0627\u06cc\u0646 \u0645\u0637\u0644\u0628 \u067e\u0627\u0633\u062e\u06af\u0648\u06cc \u0634\u0645\u0627 \u0647\u0633\u062a\u06cc\u0645.<\/p>\n<h2>\u0646\u062d\u0648\u0647 \u0633\u0627\u062e\u062a \u0641\u0627\u06cc\u0644 robots.txt<\/h2>\n<p>\u0627\u06af\u0631 \u0628\u0639\u062f \u0627\u0632 \u0645\u0631\u0627\u062c\u0639\u0647 \u0628\u0647 \u0622\u062f\u0631\u0633 http:\/\/domain.com\/robots.txt \u062e\u0637\u0627\u06cc\u06cc \u0645\u0634\u0627\u0647\u062f\u0647 \u06a9\u0631\u062f\u06cc\u062f \u06cc\u0639\u0646\u06cc \u0633\u0627\u06cc\u062a \u0634\u0645\u0627 \u0641\u0627\u06cc\u0644 robots.txt \u0631\u0627 \u0646\u062f\u0627\u0631\u062f. \u0628\u0631\u0627\u06cc \u0633\u0627\u062e\u062a robots.txt \u06a9\u0627\u0641\u06cc \u0627\u0633\u062a \u0628\u0647 \u06a9\u0646\u062a\u0631\u0644 \u067e\u0646\u0644 \u0647\u0627\u0633\u062a \u0633\u0627\u06cc\u062a \u0645\u0631\u0627\u062c\u0639\u0647 \u06a9\u0646\u06cc\u062f\u060c \u062d\u0627\u0644 \u0627\u06af\u0631 \u06a9\u0646\u062a\u0631\u0644\u200c\u067e\u0646\u0644 \u0647\u0627\u0633\u062a \u0627\u0632 \u0646\u0648\u0639 \u0633\u06cc\u200c\u067e\u0646\u0644 \u0628\u0627\u0634\u062f \u0645\u062d\u06cc\u0637\u06cc \u0634\u0628\u06cc\u0647 \u0639\u06a9\u0633 \u0632\u06cc\u0631 \u062f\u0627\u0631\u062f.<\/p>\n<figure id=\"attachment_2346\" aria-describedby=\"caption-attachment-2346\" style=\"width: 624px\" class=\"wp-caption aligncenter\"><img fetchpriority=\"high\" decoding=\"async\" class=\"wp-image-2346\" title=\"\u0633\u0627\u062e\u062a robots.txt \u062f\u0631 \u0633\u06cc \u067e\u0646\u0644\" src=\"https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/cpanel-root.jpg\" alt=\"\u0633\u0627\u062e\u062a robots.txt \u062f\u0631 \u0633\u06cc \u067e\u0646\u0644\" width=\"624\" height=\"404\" srcset=\"https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/cpanel-root.jpg 700w, https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/cpanel-root-300x194.jpg 300w, https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/cpanel-root-190x122.jpg 190w\" sizes=\"(max-width: 624px) 100vw, 624px\" \/><figcaption id=\"caption-attachment-2346\" class=\"wp-caption-text\">\u0633\u0627\u062e\u062a robots.txt \u062f\u0631 \u0633\u06cc \u067e\u0646\u0644<\/figcaption><\/figure>\n<p>\u062f\u0631 \u0631\u06cc\u0634\u0647 \u06cc\u0627 \u0631\u0648\u062a \u0633\u0627\u06cc\u062a \u06cc\u06a9 \u0641\u0627\u06cc\u0644 \u0633\u0627\u062f\u0647 \u0627\u06cc\u062c\u0627\u062f \u06a9\u0631\u062f\u0647 \u0648 \u0641\u0631\u0645\u062a \u0648 \u0646\u0627\u0645 \u0622\u0646 \u0631\u0627 robots.txt \u062f\u0631\u062c \u06a9\u0646\u06cc\u062f. \u06af\u0648\u06af\u0644 \u062f\u0631 \u0645\u0642\u0627\u0644\u0647 <a href=\"https:\/\/support.google.com\/webmasters\/answer\/6062596?hl=en\" target=\"_blank\" rel=\"noopener noreferrer\">Create a robots.txt file<\/a> \u0628\u0647 \u0622\u0645\u0648\u0632\u0634 \u0633\u0627\u062e\u062a \u0641\u0627\u06cc\u0644 robots.txt \u0627\u0634\u0627\u0631\u0647 \u06a9\u0631\u062f\u0647 \u0627\u0633\u062a \u0648 \u0645\u0627 \u0647\u0645 \u062f\u0631 \u0627\u062f\u0627\u0645\u0647 \u0627\u06cc\u0646 \u0645\u0642\u0627\u0644\u0647 \u0628\u0647 \u0646\u0645\u0648\u0646\u0647 \u062f\u0633\u062a\u0648\u0631\u0627\u062a \u062f\u0631 \u0641\u0627\u06cc\u0644 Robots.txt \u0627\u0634\u0627\u0631\u0647 \u062e\u0648\u0627\u0647\u06cc\u0645 \u06a9\u0631\u062f \u0627\u0645\u0627 \u0642\u0628\u0644 \u0627\u0632 \u0647\u0631\u0686\u06cc\u0632 \u0628\u0647\u062a\u0631 \u0627\u0633\u062a \u0627\u0628\u062a\u062f\u0627 \u0628\u0647 \u062a\u0639\u0631\u06cc\u0641 \u0633\u0647 \u06a9\u0644\u0645\u0647\u200c\u06cc \u06a9\u0644\u06cc\u062f\u06cc \u0628\u067e\u0631\u062f\u0627\u0632\u06cc\u0645.<br \/>\n<strong>User-agent<\/strong> : \u0646\u0627\u0645 \u0631\u0628\u0627\u062a \u0645\u0648\u0631\u062f\u0646\u0638\u0631 \u0631\u0627 \u062c\u0644\u0648\u06cc \u0627\u06cc\u0646 \u0639\u0628\u0627\u0631\u062a \u0645\u06cc\u200c\u0646\u0648\u06cc\u0633\u06cc\u0645 \u06a9\u0647 \u0627\u0644\u0628\u062a\u0647 \u062d\u0633\u0627\u0633 \u0628\u0647 \u062d\u0631\u0648\u0641 \u06a9\u0648\u0686\u06a9 \u0648 \u0628\u0632\u0631\u06af \u0646\u06cc\u0633\u062a ( \u0628\u0647 \u0639\u0628\u0627\u0631\u062a \u062f\u06cc\u06af\u0631 non case sensitive \u0627\u0633\u062a). \u0628\u0627 \u0627\u0633\u062a\u0641\u0627\u062f\u0647 \u0627\u0632 \u06a9\u06cc\u0648\u0631\u062f user-agent \u0645\u06cc\u200c\u062a\u0648\u0627\u0646\u06cc\u062f \u0631\u0628\u0627\u062a \u062e\u0627\u0635\u06cc \u0631\u0627 \u0647\u062f\u0641 \u06af\u0631\u0641\u062a\u0647 \u06cc\u0627 \u0628\u0647\u200c\u0637\u0648\u0631\u06a9\u0644\u06cc\u060c \u062f\u0633\u062a\u0648\u0631\u06cc \u0631\u0627 \u062e\u0637\u0627\u0628 \u0628\u0647 \u0647\u0645\u0647 \u0622\u0646\u200c\u0647\u0627 \u062f\u0631\u062c \u06a9\u0646\u06cc\u062f. \u06af\u0627\u0647\u06cc \u0628\u0639\u0636\u06cc \u0627\u0632 \u0645\u0648\u062a\u0648\u0631\u0647\u0627\u06cc \u062c\u0633\u062a\u062c\u0648 \u0631\u0628\u0627\u062a\u200c\u0647\u0627\u06cc \u0645\u062e\u062a\u0644\u0641\u06cc \u0646\u06cc\u0632 \u062f\u0627\u0631\u0646\u062f \u0647\u0645\u0627\u0646\u0646\u062f \u0645\u0648\u062a\u0648\u0631 \u062c\u0633\u062a\u062c\u0648\u06cc \u06af\u0648\u06af\u0644 \u06a9\u0647 \u0628\u0631\u0627\u06cc \u062a\u0635\u0627\u0648\u06cc\u0631\u060c \u0627\u062e\u0628\u0627\u0631 \u0648 \u0645\u0648\u0627\u0631\u062f \u062f\u06cc\u06af\u0631 \u0631\u0628\u0627\u062a \u062e\u0627\u0635 \u062e\u0648\u062f \u0631\u0627 \u062f\u0627\u0631\u062f. \u062f\u0631 \u0627\u062f\u0627\u0645\u0647 \u0645\u062b\u0627\u0644\u200c\u0647\u0627\u06cc \u0645\u062a\u0646\u0648\u0639\u06cc \u062e\u0648\u0627\u0647\u06cc\u0645 \u0632\u062f \u062a\u0627 \u0628\u0647\u062a\u0631 \u0628\u0647 \u0627\u06cc\u0646 \u0627\u0645\u0631 \u067e\u06cc \u0628\u0628\u0631\u06cc\u062f.<br \/>\n\u0644\u06cc\u0633\u062a \u0631\u0628\u0627\u062a\u200c\u0647\u0627\u06cc \u0645\u0639\u0631\u0648\u0641 \u0645\u0648\u062a\u0648\u0631\u0647\u0627\u06cc \u062c\u0633\u062a\u062c\u0648 \u062f\u0631 \u0639\u06a9\u0633 \u0632\u06cc\u0631:<\/p>\n<figure id=\"attachment_2345\" aria-describedby=\"caption-attachment-2345\" style=\"width: 630px\" class=\"wp-caption aligncenter\"><a href=\"https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/user-agents-search-engines.jpg\"><img decoding=\"async\" class=\"wp-image-2345\" title=\"\u0644\u06cc\u0633\u062a \u0631\u0628\u0627\u062a\u200c\u0647\u0627\u06cc \u0645\u0639\u0631\u0648\u0641\" src=\"https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/user-agents-search-engines.jpg\" alt=\"\u0644\u06cc\u0633\u062a \u0631\u0628\u0627\u062a\u200c\u0647\u0627\u06cc \u0645\u0639\u0631\u0648\u0641\" width=\"630\" height=\"593\" srcset=\"https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/user-agents-search-engines.jpg 870w, https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/user-agents-search-engines-300x282.jpg 300w, https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/user-agents-search-engines-768x723.jpg 768w\" sizes=\"(max-width: 630px) 100vw, 630px\" \/><\/a><figcaption id=\"caption-attachment-2345\" class=\"wp-caption-text\">\u0644\u06cc\u0633\u062a \u0631\u0628\u0627\u062a\u200c\u0647\u0627\u06cc \u0645\u0639\u0631\u0648\u0641<\/figcaption><\/figure>\n<p>\u0627\u06af\u0631 \u0642\u0635\u062f \u062f\u0627\u0631\u06cc\u062f \u0627\u0637\u0644\u0627\u0639\u0627\u062a \u0628\u06cc\u0634\u062a\u0631\u06cc \u062f\u0631\u0628\u0627\u0631\u0647 \u0631\u0628\u0627\u062a\u200c\u0647\u0627\u06cc \u06af\u0648\u06af\u0644 \u06a9\u0633\u0628 \u06a9\u0646\u06cc\u062f\u00a0<a href=\"https:\/\/support.google.com\/webmasters\/answer\/1061943?hl=en\" target=\"_blank\" rel=\"noopener noreferrer\">\u0627\u06cc\u0646 \u0645\u0642\u0627\u0644\u0647<\/a>\u00a0\u0633\u0627\u06cc\u062a \u06af\u0648\u06af\u0644 \u0631\u0627 \u0645\u0637\u0627\u0644\u0639\u0647 \u0641\u0631\u0645\u0627\u06cc\u06cc\u062f.<br \/>\n<strong>Disallow<\/strong> : \u0645\u0642\u0627\u0628\u0644 \u0627\u06cc\u0646 \u06a9\u06cc\u0628\u0648\u0631\u062f\u060c \u062f\u0627\u06cc\u0631\u06a9\u062a\u0648\u0631\u06cc\u200c\u0627\u06cc \u0631\u0627 \u062f\u0631\u062c \u0645\u06cc\u200c\u06a9\u0646\u06cc\u062f \u06a9\u0647 \u0642\u0635\u062f \u0646\u062f\u0627\u0631\u06cc\u062f \u062a\u0648\u0633\u0637 \u0631\u0628\u0627\u062a \u0627\u06cc\u0646\u062f\u06a9\u0633 \u0634\u0648\u062f. \u0628\u0639\u062f \u0627\u0632 \u0639\u0628\u0627\u0631\u062a User-agent \u0645\u06cc\u200c\u062a\u0648\u0627\u0646\u06cc\u062f \u062f\u0631 \u0647\u0631\u0686\u0646\u062f \u0628\u0627\u0631 \u06a9\u0647 \u0644\u0627\u0632\u0645 \u0628\u0627\u0634\u062f \u0627\u0632 Disallow \u0627\u0633\u062a\u0641\u0627\u062f\u0647 \u0646\u0645\u0627\u06cc\u06cc\u062f. \u0628\u0647 \u0627\u06cc\u0646 \u0646\u06a9\u062a\u0647 \u0645\u0647\u0645 \u062a\u0648\u062c\u0647 \u06a9\u0646\u06cc\u062f \u06a9\u0647 \u0631\u0628\u0627\u062a \u0645\u0648\u062a\u0648\u0631\u0647\u0627\u06cc \u062c\u0633\u062a\u062c\u0648 \u0628\u0647 \u062d\u0631\u0648\u0641 \u06a9\u0648\u0686\u06a9 \u0648 \u0628\u0632\u0631\u06af \u062f\u0631 \u062f\u0627\u06cc\u0631\u06a9\u062a\u0648\u0631\u06cc\u200c\u0647\u0627 \u062d\u0633\u0627\u0633 \u0647\u0633\u062a\u0646\u062f. \u062f\u0631 \u0627\u062f\u0627\u0645\u0647 \u0645\u062b\u0627\u0644\u200c\u0647\u0627\u06cc \u0645\u062a\u0646\u0648\u0639\u06cc \u062e\u0648\u0627\u0647\u06cc\u0645 \u0632\u062f \u062a\u0627 \u0628\u0647\u062a\u0631 \u0628\u0647 \u0627\u06cc\u0646 \u0627\u0645\u0631 \u067e\u06cc \u0628\u0628\u0631\u06cc\u062f.<br \/>\n<strong>Allow<\/strong>\u00a0<strong>: <\/strong>\u0628\u0631\u0639\u06a9\u0633 \u062f\u0633\u062a\u0648\u0631 Disallow \u0627\u0633\u062a \u0647\u0631\u0686\u0646\u062f \u062f\u0633\u062a\u0648\u0631 Allow \u063a\u06cc\u0631\u0631\u0633\u0645\u06cc \u0627\u0633\u062a \u0648\u0644\u06cc \u062a\u0648\u0633\u0637 \u0627\u06a9\u062b\u0631 \u0631\u0628\u0627\u062a\u200c\u0647\u0627\u06cc \u0645\u0639\u0631\u0648\u0641 \u0634\u0646\u0627\u062e\u062a\u0647\u200c\u0634\u062f\u0647 \u0627\u0633\u062a.<\/p>\n<h2>\u0646\u0645\u0648\u0646\u0647 \u062f\u0633\u062a\u0648\u0631\u0627\u062a \u062f\u0631 \u0641\u0627\u06cc\u0644 Robots.txt<\/h2>\n<p>\u0642\u0628\u0644 \u0627\u0632 \u0647\u0631\u0686\u06cc\u0632 \u0628\u062f\u0627\u0646\u06cc\u062f \u06a9\u0647:<br \/>\n<strong>*<\/strong> \u0628\u0647 \u0647\u0645\u0647 \u0627\u0634\u0627\u0631\u0647 \u062f\u0627\u0631\u062f\u060c \u0645\u062b\u0644\u0627\u064b \u0647\u0645\u0647\u200c\u06cc \u0631\u0628\u0627\u062a\u200c\u0647\u0627 \u06cc\u0627 \u0647\u0645\u0647\u200c\u06cc \u06a9\u0627\u0631\u0627\u06a9\u062a\u0631\u0647\u0627. \u062f\u0631 \u0645\u062b\u0627\u0644\u200c\u0647\u0627\u06cc \u0632\u06cc\u0631 \u0628\u0647 \u062e\u0648\u0628\u06cc \u0645\u062a\u0648\u062c\u0647 \u06a9\u0627\u0631\u0628\u0631\u062f * \u0645\u06cc\u200c\u0634\u0648\u06cc\u062f.<br \/>\n<strong>\/<\/strong> \u0628\u0647 \u062a\u0646\u0647\u0627\u06cc\u06cc \u0628\u0647 \u0645\u0639\u0646\u06cc \u0647\u0645\u0647\u200c\u06cc \u0622\u062f\u0631\u0633\u200c\u0647\u0627 \u0627\u0633\u062a.<br \/>\n<strong>$<\/strong> \u0628\u0647 \u067e\u0627\u06cc\u0627\u0646 \u0645\u0633\u06cc\u0631 \u06cc\u06a9 <abbr title=\"Uniform Resource Locator\">URL<\/abbr> \u0627\u0634\u0627\u0631\u0647 \u0645\u06cc\u200c\u06a9\u0646\u062f.<\/p>\n<h3>\u0645\u062b\u0627\u0644 \u06cc\u06a9 &#8211; \u0639\u062f\u0645 \u062f\u0633\u062a\u0631\u0633\u06cc \u0628\u0647 \u06a9\u0644 \u0633\u0627\u06cc\u062a<\/h3>\n<p>\u062f\u0631 \u0646\u062a\u06cc\u062c\u0647 \u062f\u0631 \u062e\u0637 \u0627\u0648\u0644 \u0645\u062b\u0627\u0644 \u0632\u06cc\u0631 \u0628\u0627 \u062f\u0631\u062c * \u0647\u0645\u0647 \u0631\u0628\u0627\u062a \u0647\u0627\u06cc \u0645\u0648\u062a\u0648\u0631\u0647\u0627\u06cc \u062c\u0633\u062a\u062c\u0648 \u0631\u0627 \u062e\u0637\u0627\u0628 \u0642\u0631\u0627\u0631 \u0645\u06cc\u200c\u062f\u0647\u06cc\u0645 \u0648 \u062f\u0631 \u062e\u0637 \u062f\u0648\u0645 \u0628\u0627 \u062f\u0631\u062c \/ \u0628\u0647 \u0639\u062f\u0645 \u062e\u0632\u0634 \u0648 \u0627\u06cc\u0646\u062f\u06a9\u0633 \u062a\u0645\u0627\u0645 \u0622\u062f\u0631\u0633 \u0647\u0627\u06cc \u062f\u0627\u0645\u0646\u0647 \u0627\u0634\u0627\u0631\u0647 \u0645\u06cc\u200c\u06a9\u0646\u06cc\u0645. \u0628\u0646\u0627\u0628\u0631\u0627\u06cc\u0646 \u062f\u0633\u062a\u0648\u0631 \u0632\u06cc\u0631 \u06cc\u0639\u0646\u06cc: \u0647\u06cc\u0686\u200c\u06cc\u06a9 \u0627\u0632 \u0645\u0648\u062a\u0648\u0631\u0647\u0627\u06cc \u062c\u0633\u062a\u062c\u0648 \u0645\u062c\u0627\u0632 \u0628\u0647 \u062e\u0632\u06cc\u062f\u0646 \u0633\u0627\u06cc\u062a \u0634\u0645\u0627 \u0646\u0628\u0627\u0634\u0646\u062f.<\/p>\n<pre>User-agent: *\nDisallow: \/<\/pre>\n<h3>\u0645\u062b\u0627\u0644 \u062f\u0648 &#8211; \u062f\u0633\u062a\u0631\u0633\u06cc \u0628\u0647 \u06a9\u0644 \u0633\u0627\u06cc\u062a<\/h3>\n<p>\u062f\u0633\u062a\u0648\u0631 \u0632\u06cc\u0631 \u0628\u0631\u0639\u06a9\u0633 \u062f\u0633\u062a\u0648\u0631 \u0628\u0627\u0644\u0627 \u0645\u06cc\u200c\u06af\u0648\u06cc\u06cc\u062f \u0647\u0645\u0647 \u0631\u0628\u0627\u062a\u200c\u0647\u0627\u06cc \u0645\u0648\u062a\u0648\u0631\u0647\u0627\u06cc \u062c\u0633\u062a\u062c\u0648 \u0628\u0647 \u06a9\u0644\u06cc\u0647 \u0622\u062f\u0631\u0633\u200c\u0647\u0627\u06cc \u0633\u0627\u06cc\u062a \u062f\u0633\u062a\u0631\u0633\u06cc \u062f\u0627\u0631\u0646\u062f.<\/p>\n<pre>User-agent: *\nDisallow:<\/pre>\n<h2><img decoding=\"async\" class=\"wp-image-2360\" style=\"background-color: transparent; color: #767676; text-align: right; font-size: 16px;\" title=\"\u062e\u0644\u0627\u0635\u0647 \u062a\u0635\u0648\u06cc\u0631\u06cc \u0627\u0632 \u062f\u0648 \u0645\u062b\u0627\u0644 \u0628\u0627\u0644\u0627\" src=\"https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/robots-allow-all.png\" alt=\"\u0645\u062b\u0627\u0644 \u0627\u0632 \u0641\u0627\u06cc\u0644 robots.txt\" width=\"630\" height=\"252\" srcset=\"https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/robots-allow-all.png 1000w, https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/robots-allow-all-300x120.png 300w, https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/robots-allow-all-768x307.png 768w\" sizes=\"(max-width: 630px) 100vw, 630px\" \/><\/h2>\n<p>\u062e\u0644\u0627\u0635\u0647 \u062a\u0635\u0648\u06cc\u0631\u06cc \u0627\u0632 \u062f\u0648 \u0645\u062b\u0627\u0644 \u0628\u0627\u0644\u0627<\/p>\n<h3>\u0645\u062b\u0627\u0644 \u0633\u0647 &#8211; \u0639\u062f\u0645 \u062f\u0633\u062a\u0631\u0633\u06cc \u0628\u0647 \u062f\u0627\u06cc\u0631\u06a9\u062a\u0648\u0631\u06cc \u062e\u0627\u0635<\/h3>\n<p>\u062f\u0633\u062a\u0648\u0631 \u0632\u06cc\u0631 \u0628\u0647 \u0627\u06cc\u0646 \u0645\u0639\u0646\u0627\u0633\u062a \u06a9\u0647 \u0631\u0628\u0627\u062a \u06af\u0648\u06af\u0644 \u0628\u0647 \u067e\u0648\u0634\u0647 blog \u0648 \u0647\u0645\u0647 \u0632\u06cc\u0631\u067e\u0648\u0634\u0647\u200c\u0647\u0627\u06cc blog \u062f\u0633\u062a\u0631\u0633\u06cc \u0646\u062f\u0627\u0631\u062f. \u062f\u0631\u0648\u0627\u0642\u0639 \u0639\u062f\u0645 \u062f\u0633\u062a\u0631\u0633\u06cc \u0647\u0645 \u0634\u0627\u0645\u0644 \u0622\u062f\u0631\u0633 mizfa.com\/blog \u0648 \u0647\u0645 \u0634\u0627\u0645\u0644 \u0622\u062f\u0631\u0633\u200c\u0647\u0627\u06cc \u0628\u0647\u200c\u0645\u0627\u0646\u0646\u062f mizfa.com\/blog\/example \u0645\u06cc\u200c\u0634\u0648\u062f. \u062f\u0631 \u0627\u06cc\u0646 \u0634\u0631\u0627\u06cc\u0637 \u0628\u0642\u06cc\u0647 \u0631\u0628\u0627\u062a\u200c\u0647\u0627 \u0628\u0647\u200c\u062c\u0632 \u0631\u0628\u0627\u062a \u06af\u0648\u06af\u0644 \u062f\u0633\u062a\u0631\u0633\u06cc \u0628\u0647 \u0627\u06cc\u0646 \u062f\u0627\u06cc\u0631\u06a9\u062a\u0648\u0631\u06cc \u0631\u0627 \u062f\u0627\u0631\u0646\u062f.<\/p>\n<pre>User-agent: googlebot\nDisallow: \/blog<\/pre>\n<h3>\u0645\u062b\u0627\u0644 \u0686\u0647\u0627\u0631 &#8211; \u0627\u0648\u0644\u0648\u06cc\u062a \u0631\u0628\u0627\u062a \u0647\u0627<\/h3>\n<p>\u0647\u0645\u0627\u0646\u200c\u0637\u0648\u0631 \u06a9\u0647 \u06af\u0641\u062a\u06cc\u0645 \u0645\u0648\u062a\u0648\u0631\u0647\u0627\u06cc \u062c\u0633\u062a\u062c\u0648 \u0645\u0645\u06a9\u0646 \u0627\u0633\u062a \u062a\u0639\u062f\u0627\u062f \u0631\u0628\u0627\u062a\u200c\u0647\u0627\u06cc \u0632\u06cc\u0627\u062f\u06cc \u0628\u0631\u0627\u06cc \u0645\u0648\u0627\u0631\u062f \u062e\u0627\u0635 \u062f\u0627\u0634\u062a\u0647 \u0628\u0627\u0634\u0646\u062f \u0628\u0631\u0627\u06cc \u0647\u0645\u06cc\u0646 \u0627\u0648\u0644\u0648\u06cc\u062a \u0647\u0645 \u0628\u0631\u0627\u06cc \u0622\u0646\u0627\u0646 \u0645\u0647\u0645 \u0627\u0633\u062a. \u062f\u0631\u0635\u0648\u0631\u062a\u06cc\u200c\u06a9\u0647 \u062f\u0631 \u0641\u0627\u06cc\u0644 robots.txt \u062f\u0633\u062a\u0648\u0631\u0627\u062a\u06cc \u0631\u0627 \u062f\u0631\u062c \u06a9\u0631\u062f\u0647 \u0628\u0627\u0634\u06cc\u062f \u06a9\u0647 \u0686\u0646\u062f \u0628\u0644\u0627\u06a9 \u0645\u062e\u062a\u0644\u0641 \u0622\u0646\u200c\u0647\u0627 \u0628\u0631\u0627\u06cc \u06cc\u06a9 \u0631\u0628\u0627\u062a (\u062e\u0632\u0646\u062f\u0647) \u0635\u0627\u062f\u0642 \u0628\u0627\u0634\u062f\u060c \u0631\u0628\u0627\u062a \u0645\u0648\u062a\u0648\u0631 \u062c\u0633\u062a\u062c\u0648 \u0647\u0645\u06cc\u0634\u0647 \u062f\u0633\u062a\u0648\u0631\u06cc \u0631\u0627 \u06a9\u0647 \u0628\u0647\u200c\u0637\u0648\u0631 \u0648\u0627\u0636\u062d\u200c\u062a\u0631 \u0628\u0647 \u0622\u0646 \u0631\u0628\u0627\u062a \u062e\u0627\u0635 \u0627\u0634\u0627\u0631\u0647 \u0645\u06cc\u200c\u06a9\u0646\u062f \u0627\u0646\u062a\u062e\u0627\u0628 \u06a9\u0631\u062f\u0647 \u0648 \u062f\u0633\u062a\u0648\u0631\u0627\u062a \u0647\u0645\u0627\u0646 \u0628\u062e\u0634 \u0631\u0627 \u0627\u062c\u0631\u0627 \u062e\u0648\u0627\u0647\u062f \u06a9\u0631\u062f. \u0645\u062b\u0644\u0627\u064b \u0641\u0631\u0636 \u06a9\u0646\u06cc\u062f \u0627\u06af\u0631 \u0641\u0627\u06cc\u0644 robots.txt \u0647\u0645\u0627\u0646\u0646\u062f \u062f\u0633\u062a\u0648\u0631 \u0632\u06cc\u0631 \u06cc\u06a9 \u0628\u0644\u0627\u06a9 \u0645\u062e\u0635\u0648\u0635 Googlebot \u0648 \u06cc\u06a9 \u0628\u0644\u0627\u06a9 \u0645\u062e\u0635\u0648\u0635 Googlebot-Video \u0648\u062c\u0648\u062f \u062f\u0627\u0634\u062a\u0647 \u0628\u0627\u0634\u062f. \u062f\u0631 \u0627\u06cc\u0646 \u062d\u0627\u0644\u062a \u0627\u06af\u0631 \u0631\u0628\u0627\u062a \u0639\u06a9\u0633 \u06af\u0648\u06af\u0644 (Googlebot-Image) \u0648\u0627\u0631\u062f \u0633\u0627\u06cc\u062a \u0634\u0645\u0627 \u0634\u0648\u062f\u060c \u062f\u0631 \u0645\u06cc\u0627\u0646 \u0627\u06cc\u0646 \u0628\u0644\u0627\u06a9\u200c\u0647\u0627 \u0627\u0632 \u0627\u0648\u0644\u06cc \u067e\u06cc\u0631\u0648\u06cc \u062e\u0648\u0627\u0647\u062f \u06a9\u0631\u062f \u0648 \u0627\u06af\u0631 \u0631\u0628\u0627\u062a \u0648\u06cc\u062f\u06cc\u0648 \u06af\u0648\u06af\u0644 (Googlebot-Video) \u0648\u0627\u0631\u062f \u0633\u0627\u06cc\u062a \u0634\u0648\u062f\u060c \u0627\u0632 \u0628\u0644\u0627\u06a9 \u062f\u0648\u0645\u06cc \u067e\u06cc\u0631\u0648\u06cc \u062e\u0648\u0627\u0647\u062f \u06a9\u0631\u062f \u0648 \u062f\u0633\u062a\u0648\u0631\u0627\u062a \u0628\u0644\u0627\u06a9 \u0627\u0648\u0644\u06cc \u0631\u0627 \u0646\u0627\u062f\u06cc\u062f\u0647 \u06af\u0631\u0641\u062a\u0647 \u0686\u0631\u0627\u06a9\u0647 \u0628\u0644\u0627\u06a9 \u062f\u0648\u0645\u06cc \u0628\u0631\u0627\u06cc \u0622\u0646 \u062f\u0631 \u0627\u0648\u0644\u0648\u06cc\u062a \u0627\u0633\u062a.<\/p>\n<pre>User-agent: Googlebot\nDisallow: \/Photo\nUser-agent: Googlebot-Video\nAllow: \/blog<\/pre>\n<h3>\u0645\u062b\u0627\u0644 \u067e\u0646\u062c &#8211; <strong>Regular Expression<\/strong><\/h3>\n<p>\u0634\u0645\u0627 \u0645\u06cc\u200c\u062a\u0648\u0627\u0646\u06cc\u062f \u0627\u0632 <strong>\u0639\u0628\u0627\u0631\u0627\u062a \u0645\u0646\u0638\u0645 (Regular Expression)<\/strong> \u0647\u0645 \u0628\u0631\u0627\u06cc \u0627\u0633\u062a\u0641\u0627\u062f\u0647 \u062f\u0631 \u062f\u0633\u062a\u0648\u0631\u0627\u062a \u0641\u0627\u06cc\u0644 robots.txt \u0627\u0633\u062a\u0641\u0627\u062f\u0647 \u06a9\u0646\u06cc\u062f. \u0627\u0644\u0628\u062a\u0647 \u0627\u06cc\u0646 \u0639\u0628\u0627\u0631\u0627\u062a \u0645\u0646\u0638\u0645 \u0628\u0647 \u0634\u06a9\u0644 \u0631\u0633\u0645\u06cc \u062f\u0631 \u0627\u06cc\u0646 \u0641\u0627\u06cc\u0644 \u062a\u0639\u0631\u06cc\u0641\u200c\u0646\u0634\u062f\u0647\u200c\u0627\u0646\u062f \u0648\u0644\u06cc \u0627\u06a9\u062b\u0631 \u0631\u0628\u0627\u062a\u200c\u0647\u0627\u06cc \u0645\u0639\u0631\u0648\u0641 \u062f\u0631 \u062f\u0646\u06cc\u0627 \u0627\u0632 \u0639\u0628\u0627\u0631\u0627\u062a \u0645\u0646\u0638\u0645 \u0646\u06cc\u0632 \u067e\u0634\u062a\u06cc\u0628\u0627\u0646\u06cc \u0645\u06cc\u200c\u06a9\u0646\u0646\u062f. \u0645\u062b\u0644\u0627\u064b \u062f\u0631 \u062f\u0633\u062a\u0648\u0631 \u0646\u06cc\u0632 \u0627\u0634\u0627\u0631\u0647\u200c\u0634\u062f\u0647 \u06a9\u0647 \u06a9\u0644\u06cc\u0647 \u0631\u0628\u0627\u062a\u200c\u0647\u0627 \u0628\u0647 \u0641\u0627\u06cc\u0644\u200c\u0647\u0627 \u0628\u0627 \u067e\u0633\u0648\u0646\u062f pdf \u06a9\u0647 \u062f\u0631 \u0641\u0648\u0644\u062f\u0631 (\u062f\u0627\u06cc\u0631\u06a9\u062a\u0648\u0631\u06cc) test \u0648\u062c\u0648\u062f \u062f\u0627\u0631\u0646\u062f\u060c \u0646\u0628\u0627\u06cc\u062f \u062f\u0633\u062a\u0631\u0633\u06cc \u062f\u0627\u0634\u062a\u0647 \u0628\u0627\u0634\u0646\u062f.<\/p>\n<pre>User-agent: *\nDisallow: \/test\/*.pdf$<\/pre>\n<h3>\u0645\u062b\u0627\u0644 \u0634\u0634 &#8211; \u062a\u0639\u06cc\u06cc\u0646 \u0627\u0633\u062a\u062b\u0646\u0627 \u0628\u0631\u0627\u06cc \u062f\u0633\u062a\u0631\u0633\u06cc \u0628\u0647 \u0645\u062d\u062a\u0648\u0627\u06cc \u062f\u0627\u06cc\u0631\u06a9\u062a\u0648\u0631\u06cc<\/h3>\n<p>\u062d\u0627\u0644 \u0642\u0635\u062f \u062f\u0627\u0631\u06cc\u0645 \u06a9\u0645\u06cc \u062f\u0631\u0628\u0627\u0631\u0647 \u0648\u0631\u062f\u067e\u0631\u0633 \u062d\u0631\u0641 \u0628\u0632\u0646\u06cc\u0645 \u0648 \u06cc\u06a9 \u0641\u0627\u06cc\u0644 robots txt \u0628\u0631\u0627\u06cc \u0648\u0631\u062f\u067e\u0631\u0633 \u0628\u0647 \u0634\u06a9\u0644 \u0628\u0647\u06cc\u0646\u0647 \u0634\u062f\u0647 \u0648 \u0645\u0646\u0627\u0633\u0628 \u0627\u06cc\u062c\u0627\u062f \u06a9\u0646\u06cc\u0645. \u062f\u0633\u062a\u0648\u0631 \u0632\u06cc\u0631 \u06a9\u0647 \u062f\u0631 \u0628\u0633\u06cc\u0627\u0631\u06cc \u0627\u0632 \u0633\u0627\u06cc\u062a\u200c\u0647\u0627\u06cc \u0648\u0631\u062f\u067e\u0631\u0633 \u0627\u0633\u062a\u0641\u0627\u062f\u0647 \u0645\u06cc\u200c\u0634\u0648\u062f \u0628\u0647 \u0627\u06cc\u0646 \u0645\u0639\u0646\u0627\u0633\u062a \u06a9\u0647 \u062a\u0645\u0627\u0645 \u0631\u0628\u0627\u062a\u200c\u0647\u0627 \u0628\u0647 \u067e\u0648\u0634\u0647 wp-admin \u062f\u0633\u062a\u0631\u0633\u06cc \u0646\u062f\u0627\u0634\u062a\u0647 \u0628\u0627\u0634\u0646\u062f \u0648\u0644\u06cc \u0628\u0647 \u0641\u0627\u06cc\u0644 admin-ajax.php \u06a9\u0647 \u062f\u0631 \u0627\u06cc\u0646 \u067e\u0648\u0634\u0647 \u0647\u0633\u062a \u062f\u0633\u062a\u0631\u0633\u06cc \u067e\u06cc\u062f\u0627 \u06a9\u0646\u0646\u062f. \u0627\u0644\u0628\u062a\u0647 \u0628\u0648\u062f\u0646 \u0686\u0646\u06cc\u0646 \u062f\u0633\u062a\u0648\u0631\u0627\u062a\u06cc \u062f\u0631 \u0641\u0627\u06cc\u0644 robots.txt \u0636\u0631\u0631\u06cc \u0647\u0645 \u0646\u062f\u0627\u0631\u062f \u0647\u0631 \u0686\u0646\u062f \u0631\u0628\u0627\u062a \u062a\u0648\u0627\u0646\u0627\u06cc\u06cc \u0648\u0627\u0631\u062f \u0634\u062f\u0646 \u0628\u0647 \u0645\u062d\u06cc\u0637 \u0627\u062f\u0645\u06cc\u0646 \u0648\u0631\u062f\u067e\u0631\u0633 \u0631\u0627 \u0646\u062f\u0627\u0631\u062f \u0648\u0644\u06cc \u062e\u0637\u0627 \u062f\u0631 \u06a9\u062f\u0646\u0648\u06cc\u0633\u06cc \u0647\u0645 \u0627\u0632 \u0633\u0645\u062a \u06af\u0648\u06af\u0644 \u0648 \u0647\u0645 \u0627\u0632 \u0633\u0645\u062a \u0645\u0627 \u0637\u0628\u06cc\u0639\u062a\u0627 \u0627\u0645\u06a9\u0627\u0646\u200c\u067e\u0630\u06cc\u0631 \u0627\u0633\u062a. \u0627\u06af\u0631 \u062a\u0648\u062c\u0647 \u06a9\u0631\u062f\u0647 \u0628\u0627\u0634\u06cc\u062f \u0645\u0627 \u062f\u0631 \u0627\u06cc\u0646 \u0645\u0642\u0627\u0644\u0647 \u06cc\u06a9 \u0628\u0627\u0631 \u0627\u0632 \u06a9\u06cc\u0648\u0631\u062f User-agent \u0627\u0633\u062a\u0641\u0627\u062f\u0647 \u06a9\u0631\u062f\u06cc\u0645 \u0648 \u0633\u067e\u0633 \u06f2 \u062e\u0637 \u062f\u0633\u062a\u0648\u0631 \u0648\u0627\u0631\u062f \u06a9\u0631\u062f\u06cc\u0645\u060c \u0634\u0645\u0627 \u0645\u06cc\u200c\u062a\u0648\u0627\u0646\u06cc\u062f \u0628\u0647 \u062a\u0639\u062f\u0627\u062f \u062f\u0644\u062e\u0648\u0627\u0647 \u062f\u0633\u062a\u0648\u0631\u0627\u062a \u0644\u0627\u0632\u0645 \u0631\u0627 \u062f\u0631 \u0647\u0631 \u062e\u0637 \u0648\u0627\u0631\u062f \u0646\u0645\u0627\u06cc\u06cc\u062f.<\/p>\n<pre>User-agent: *\nDisallow: \/wp-admin\/\nAllow: \/wp-admin\/admin-ajax.php<\/pre>\n<h3>\u0645\u062b\u0627\u0644 \u0647\u0641\u062a &#8211; \u0627\u0634\u062a\u0628\u0627\u0647 \u0631\u0627\u06cc\u062c<\/h3>\n<p>\u06cc\u06a9\u06cc \u062f\u06cc\u06af\u0631 \u0627\u0632 \u062f\u0633\u062a\u0648\u0631\u0627\u062a \u0631\u0627\u06cc\u062c \u0648 \u0627\u0634\u062a\u0628\u0627\u0647 \u0627\u0632 \u0646\u06af\u0627\u0647 \u06cc\u06a9 \u0645\u062a\u062e\u0635\u0635 \u0633\u0626\u0648 \u062f\u0631 \u0641\u0627\u06cc\u0644 robots.txt \u0648\u0631\u062f\u067e\u0631\u0633 \u06a9\u0647 \u062f\u0631 \u0628\u0633\u06cc\u0627\u0631\u06cc \u0627\u0632 \u0633\u0627\u06cc\u062a\u200c\u0647\u0627\u06cc \u0645\u0639\u0631\u0648\u0641 \u0627\u06cc\u0631\u0627\u0646\u06cc \u0627\u0633\u062a\u0641\u0627\u062f\u0647 \u0645\u06cc\u200c\u0634\u0648\u062f \u06a9\u062f\u0647\u0627\u06cc \u0632\u06cc\u0631 \u0645\u06cc\u200c\u0628\u0627\u0634\u0646\u062f. \u0628\u0646\u062f\u0647 \u0634\u062e\u0635\u0627\u064b \u062f\u0631 \u0647\u06cc\u0686\u200c\u06cc\u06a9 \u0627\u0632 \u0633\u0627\u06cc\u062a\u200c\u0647\u0627\u06cc \u0645\u0639\u062a\u0628\u0631 \u062e\u0627\u0631\u062c\u06cc \u06a9\u0647 \u062f\u0627\u0631\u0627\u06cc \u0633\u06cc\u0633\u062a\u0645 \u0645\u062f\u06cc\u0631\u06cc\u062a \u0645\u062d\u062a\u0648\u0627 \u0648\u0631\u062f\u067e\u0631\u0633 \u0647\u0633\u062a\u0646\u062f \u0686\u0646\u06cc\u0646 \u06a9\u062f\u0647\u0627\u06cc\u06cc \u0631\u0627 \u067e\u06cc\u062f\u0627 \u0646\u06a9\u0631\u062f\u0645. \u0639\u062f\u0645 \u062f\u0633\u062a\u0631\u0633\u06cc \u0628\u0647 wp-includes \u06a9\u0647 \u062f\u0631 \u0622\u0646 \u06cc\u06a9 \u0633\u0631\u06cc \u0641\u0627\u06cc\u0644\u200c\u0647\u0627\u06cc \u0645\u0647\u0645 \u0645\u062b\u0644 \u062c\u06cc \u06a9\u0648\u0626\u0631\u06cc \u0627\u0633\u062a \u0628\u0627\u0639\u062b \u0645\u06cc\u200c\u0634\u0648\u062f \u0633\u0627\u06cc\u062a \u0628\u0647 \u0622\u0646 \u0634\u06a9\u0644\u06cc \u06a9\u0647 \u0628\u0627\u06cc\u062f \u0628\u0631\u0627\u06cc \u0645\u0648\u062a\u0648\u0631 \u062c\u0633\u062a\u062c\u0648 \u0646\u0645\u0627\u06cc\u0634 \u062f\u0647\u062f\u060c \u062e\u0631\u0648\u062c\u06cc \u0646\u06af\u06cc\u0631\u062f. \u0633\u0627\u06cc\u062a\u200c\u0647\u0627\u06cc \u0645\u062b\u0644\u00a0<a href=\"https:\/\/yoast.com\/robots.txt\" target=\"_blank\" rel=\"noopener noreferrer\">\u06cc\u0648\u0622\u0633\u062a<\/a>\u060c <a href=\"http:\/\/neilpatel.com\/robots.txt\" target=\"_blank\" rel=\"noopener noreferrer\">\u0646\u06cc\u0644 \u067e\u062a\u0644<\/a>\u060c <a href=\"http:\/\/searchengineland.com\/robots.txt\" target=\"_blank\" rel=\"noopener noreferrer\">searchengineland<\/a> \u0648 \u062f\u0647\u200c\u0647\u0627 \u0633\u0627\u06cc\u062a \u0645\u0639\u0631\u0648\u0641 \u0648\u0631\u062f\u067e\u0631\u0633 \u06a9\u0647 \u062f\u0631 \u0645\u0628\u062d\u062b \u0633\u0626\u0648 \u0635\u0627\u062d\u0628\u200c\u0646\u0638\u0631\u0647\u0627\u06cc \u062c\u0647\u0627\u0646\u06cc \u0647\u0633\u062a\u0646\u062f \u0627\u0632 \u0686\u0646\u06cc\u0646 \u062f\u0633\u062a\u0648\u0631\u0627\u062a\u06cc \u06a9\u0647 \u0628\u0627\u0639\u062b \u0639\u062f\u0645 \u062f\u0633\u062a\u0631\u0633\u06cc \u0628\u0647 \u0641\u0627\u06cc\u0644\u200c\u0647\u0627\u06cc wp-includes \u0645\u06cc\u200c\u0634\u0648\u062f \u0627\u0633\u062a\u0641\u0627\u062f\u0647 \u0646\u0645\u06cc\u200c\u06a9\u0646\u0646\u062f\u060c \u062d\u062a\u06cc \u0633\u0627\u06cc\u062a \u06cc\u0648\u0622\u0633\u062a \u062f\u0631 <a href=\"https:\/\/yoast.com\/dont-block-css-and-js-files\/\" target=\"_blank\" rel=\"noopener noreferrer\">\u0627\u06cc\u0646 \u0645\u0642\u0627\u0644\u0647<\/a> \u0627\u0634\u0627\u0631\u0647\u200c\u06a9\u0631\u062f\u0647 \u0686\u0646\u06cc\u0646 \u062f\u0633\u062a\u0648\u0631\u0627\u062a\u06cc \u0627\u0634\u062a\u0628\u0627\u0647 \u0627\u0633\u062a \u0648 \u0628\u0627\u0639\u062b \u0645\u0633\u062f\u0648\u062f \u0634\u062f\u0646 \u0631\u0628\u0627\u062a\u200c\u0647\u0627 \u0628\u0647 \u0628\u0639\u0636\u06cc \u0641\u0627\u06cc\u0644\u200c\u0647\u0627 \u0645\u06cc\u200c\u0634\u0648\u062f \u06a9\u0647 \u0628\u0631\u0627\u06cc \u0633\u0626\u0648 \u0633\u0627\u06cc\u062a \u062e\u0648\u0634\u0627\u06cc\u0646\u062f \u0646\u06cc\u0633\u062a.<\/p>\n<pre>User-agent: *\nDisallow: \/wp-admin\/\nDisallow: \/wp-includes\/<\/pre>\n[box type=&#8221;info&#8221; align=&#8221;&#8221; class=&#8221;&#8221; width=&#8221;&#8221;]<strong>\u0646\u06a9\u062a\u0647:<\/strong> \u062f\u0631 \u0645\u062b\u0627\u0644 \u0641\u0648\u0642 disallow \u06a9\u0631\u062f\u0646 \/wp-includes\/ \u0631\u0627 \u0628\u0647 \u0639\u0646\u0648\u0627\u0646 \u0627\u0634\u062a\u0628\u0627\u0647 \u0631\u0627\u06cc\u062c \u0645\u0639\u0631\u0641\u06cc \u06a9\u0631\u062f\u0647\u200c\u0627\u06cc\u0645\u060c \u0646\u0647 \/wp-admin\/.\u00a0 \u062f\u0631\u062c \/wp-admin\/ \u062f\u0631 \u0641\u0627\u06cc\u0644 robots.txt \u0648\u0631\u062f\u067e\u0631\u0633 \u06cc\u06a9 \u0631\u0648\u0634 \u067e\u06cc\u0634\u0641\u0631\u0636 \u0627\u0633\u062a \u0648 \u062a\u0631\u062c\u06cc\u062d \u062f\u0627\u062f\u06cc\u0645 \u062f\u0631 \u0647\u0631\u0645\u062b\u0627\u0644 \u0622\u0646 \u0631\u0627 \u0642\u0631\u0627\u0631 \u062f\u0647\u06cc\u0645. (\u0627\u0644\u0628\u062a\u0647 Disallow \u06a9\u0631\u062f\u0646 \/wp-admin\/ \u0646\u0633\u062e\u0647\u200c\u0627\u06cc \u0646\u06cc\u0633\u062a \u06a9\u0647 \u0628\u0634\u0648\u062f \u0628\u0631\u0627\u06cc \u0647\u0645\u0647 \u0648\u0628\u0633\u0627\u06cc\u062a\u200c\u0647\u0627 \u067e\u06cc\u0686\u06cc\u062f \u0648 \u06a9\u0627\u0645\u0644\u0627\u064b \u0628\u0633\u062a\u06af\u06cc \u0628\u0647 \u0633\u0627\u06cc\u062a \u062f\u0627\u0631\u062f)[\/box]\n<h3>\u0645\u062b\u0627\u0644 \u0647\u0634\u062a &#8211; \u0639\u062f\u0645 \u062f\u0633\u062a\u0631\u0633\u06cc \u0628\u0647 \u0622\u062f\u0631\u0633\u06cc \u0628\u0627 \u06a9\u0627\u0631\u0627\u06a9\u062a\u0631 \u062e\u0627\u0635<\/h3>\n<p>\u062f\u0633\u062a\u0648\u0631 \u0632\u06cc\u0631 \u0648\u0642\u062a\u06cc \u06a9\u0627\u0631\u0628\u0631\u062f \u062f\u0627\u0631\u062f \u06a9\u0647 \u0634\u0645\u0627 \u062f\u0631 \u0622\u062f\u0631\u0633\u200c\u0647\u0627\u06cc \u062e\u0648\u062f \u06a9\u0627\u0631\u0627\u06a9\u062a\u0631\u06cc \u0645\u0627\u0646\u0646\u062f ? \u0631\u0627 \u062f\u0627\u0634\u062a\u0647 \u0628\u0627\u0634\u06cc\u062f \u0686\u0631\u0627\u06a9\u0647 \u06af\u0627\u0647\u06cc \u0628\u0647 \u062f\u0644\u06cc\u0644 \u0645\u0634\u06a9\u0644\u0627\u062a \u0641\u0646\u06cc \u062f\u0631 \u0633\u0627\u06cc\u062a\u060c \u0645\u0642\u0627\u0644\u0647 \u0634\u0645\u0627 \u0645\u0645\u06a9\u0646 \u0627\u0633\u062a \u0628\u0627 \u0622\u062f\u0631\u0633\u200c\u0647\u0627\u06cc \u0645\u062e\u062a\u0644\u0641 \u0648 \u0628\u0627 \u0645\u0642\u0627\u062f\u06cc\u0631 \u0645\u062a\u0641\u0627\u0648\u062a \u0627\u0646\u062a\u0634\u0627\u0631 \u067e\u06cc\u062f\u0627 \u06a9\u0646\u062f. \u0628\u0647 \u0647\u0645\u06cc\u0646 \u0645\u0646\u0638\u0648\u0631 \u062f\u0633\u062a\u0648\u0631 \u0632\u06cc\u0631 \u0631\u0627 \u0628\u0647 \u0634\u06a9\u0644 \u0645\u0648\u0642\u062a \u062f\u0631\u062c \u0645\u06cc\u200c\u06a9\u0646\u06cc\u062f \u062a\u0627 \u0631\u0628\u0627\u062a\u200c\u0647\u0627 \u0622\u062f\u0631\u0633\u200c\u0647\u0627\u06cc \u062f\u0627\u0631\u0627\u06cc \u06a9\u0627\u0631\u0627\u06a9\u062a\u0631 \u0639\u0644\u0627\u0645\u062a \u0633\u0624\u0627\u0644 \u0631\u0627 \u0627\u06cc\u0646\u062f\u06a9\u0633 \u0646\u06a9\u0646\u0646\u062f.<\/p>\n<pre>User-agent: *\nDisallow: \/*?<\/pre>\n<p>\u062f\u0631 \u0645\u062b\u0627\u0644 \u067e\u0627\u06cc\u06cc\u0646 \u0628\u0627 \u062f\u0631\u062c $ \u062a\u0623\u06a9\u06cc\u062f \u0645\u06cc\u200c\u06a9\u0646\u06cc\u0645 \u06a9\u0647 \u0627\u06af\u0631 \u062f\u0631 \u0627\u0646\u062a\u0647\u0627\u06cc \u0622\u062f\u0631\u0633\u06cc \u0639\u0644\u0627\u0645\u062a \u0633\u0648\u0627\u0644 (?) \u0628\u0648\u062f\u060c \u0622\u0646 \u0622\u062f\u0631\u0633 \u0628\u0627\u06cc\u062f Disallow \u0634\u0648\u062f. \u062f\u0631 \u0646\u062a\u06cc\u062c\u0647 \u0645\u062b\u0627\u0644 \u067e\u0627\u06cc\u06cc\u0646 \u06cc\u0639\u0646\u06cc \u0647\u06cc\u0686 \u0631\u0628\u0627\u062a\u06cc \u0627\u062c\u0627\u0632\u0647\u200c\u06cc \u062e\u0632\u0634 \u0622\u062f\u0631\u0633\u200c\u0647\u0627\u06cc\u06cc \u06a9\u0647 \u0628\u0627 ? \u062a\u0645\u0627\u0645 \u0645\u06cc\u200c\u0634\u0648\u0646\u062f \u0631\u0627 \u0646\u062f\u0627\u0631\u0646\u062f. \u062f\u0631 \u0627\u06cc\u0646 \u0634\u0631\u0627\u06cc\u0637 \u0622\u062f\u0631\u0633\u200c\u0647\u0627\u06cc\u06cc \u06a9\u0647 \u0628\u0627 ? \u0628\u0647 \u0627\u062a\u0645\u0627\u0645 \u0646\u0645\u06cc\u200c\u0631\u0633\u0646\u062f \u062f\u0631 \u0646\u0638\u0631 \u06af\u0631\u0641\u062a\u0647 \u0646\u0645\u06cc\u200c\u0634\u0648\u0646\u062f.<\/p>\n<pre>User-agent: *\nDisallow: \/*?$<\/pre>\n<p>\u0627\u06af\u0631 \u0628\u0647 \u062f\u0646\u0628\u0627\u0644 \u0645\u062b\u0627\u0644 \u0647\u0627\u06cc \u0628\u06cc\u0634\u062a\u0631\u06cc \u0647\u0633\u062a\u06cc\u062f \u0645\u0642\u0627\u0644\u0647\u00a0<a href=\"https:\/\/developers.google.com\/search\/reference\/robots_txt#example-path-matches\" target=\"_blank\" rel=\"noopener noreferrer\">Robots.txt Specifications \u06af\u0648\u06af\u0644<\/a>\u00a0\u0647\u0645 \u0645\u06cc\u200c\u062a\u0648\u0627\u0646\u062f \u0628\u0631\u0627\u06cc \u0634\u0645\u0627 \u0645\u0641\u06cc\u062f \u0628\u0627\u0634\u062f.<\/p>\n<h2>\u062a\u0633\u062a \u0641\u0627\u06cc\u0644 robots.txt \u062f\u0631 \u0633\u0631\u0686 \u06a9\u0646\u0633\u0648\u0644 \u06af\u0648\u06af\u0644<\/h2>\n<p>\u062f\u0631 \u0646\u0647\u0627\u06cc\u062a \u0628\u0639\u062f \u0627\u0632 \u0633\u0627\u062e\u062a\u0646 \u0641\u0627\u06cc\u0644 robots.txt \u0646\u0648\u0628\u062a \u0628\u0647 \u062a\u0633\u062a \u0648 \u0635\u062d\u062a \u06a9\u0627\u0631\u06a9\u0631\u062f \u0622\u0646 \u0645\u06cc\u200c\u0631\u0633\u062f.<br \/>\n[box type=&#8221;warning&#8221; align=&#8221;&#8221; width=&#8221;&#8221;]\u0622\u067e\u062f\u06cc\u062a 2020: \u062a\u0648\u062c\u0647 \u062f\u0627\u0634\u062a\u0647 \u0628\u0627\u0634\u06cc\u062f \u062f\u0631 \u0648\u0631\u0698\u0646 \u062c\u062f\u06cc\u062f \u0633\u0631\u0686 \u06a9\u0646\u0633\u0648\u0644 \u0627\u0645\u06a9\u0627\u0646 <strong>\u062a\u0633\u062a \u0641\u0627\u06cc\u0644 robots.txt<\/strong> \u0648\u062c\u0648\u062f \u0646\u062f\u0627\u0631\u062f. \u0628\u0631\u0627\u06cc \u062a\u0633\u062a \u0627\u06cc\u0646 \u0641\u0627\u06cc\u0644 \u0627\u0632 \u0627\u06cc\u0646 <a href=\"https:\/\/www.google.com\/webmasters\/tools\/robots-testing-tool?utm_source=support.google.com\/webmasters\/&amp;utm_medium=referral&amp;utm_campaign=%206062598\" target=\"_blank\" rel=\"noopener noreferrer\">\u0644\u06cc\u0646\u06a9<\/a> \u0648\u0627\u0631\u062f \u0634\u0648\u06cc\u062f. \u0627\u06af\u0631 \u0628\u0627 \u062e\u0637\u0627\u06cc\u06cc \u0645\u0648\u0627\u062c\u0647 \u0634\u062f\u06cc\u062f <abbr title=\"Uniform Resource Locator\">URL<\/abbr> \u0633\u0627\u06cc\u062a (\u0645\u062b\u0644\u0627 http:\/\/mizfa.com) \u0631\u0627 \u062f\u0631 \u0633\u0631\u0686 \u06a9\u0646\u0633\u0648\u0644 \u0628\u0647 \u0639\u0646\u0648\u0627\u0646 property \u062c\u062f\u06cc\u062f \u0627\u0636\u0627\u0641\u0647 \u06a9\u0646\u06cc\u062f \u0648 \u0645\u062c\u062f\u062f \u0622\u0632\u0645\u0627\u06cc\u0634 \u06a9\u0646\u06cc\u062f.[\/box]\n\u06af\u0648\u06af\u0644 \u062f\u0631 \u0642\u0633\u0645\u062a\u06cc \u0627\u0632 \u0633\u0631\u0686 \u06a9\u0646\u0633\u0648\u0644 \u062e\u0648\u062f \u0634\u0631\u0627\u06cc\u0637 \u0631\u0627\u06cc\u06af\u0627\u0646\u06cc \u0628\u0631\u0627\u06cc \u062a\u0633\u062a \u0641\u0627\u06cc\u0644 robotx.txt \u0641\u0631\u0627\u0647\u0645 \u06a9\u0631\u062f\u0647 \u0627\u0633\u062a.\u00a0 \u0628\u0647 \u0627\u06cc\u0646 \u0645\u0646\u0638\u0648\u0631 \u0648\u0627\u0631\u062f \u0633\u0631\u0686 \u06a9\u0646\u0633\u0648\u0644 (\u0648\u0628\u0645\u0633\u062a\u0631\u062a\u0648\u0644\u0632) \u0634\u0648\u06cc\u062f. ( \u0627\u06af\u0631 \u0628\u0647 \u062f\u0646\u0628\u0627\u0644 \u06cc\u0627\u062f\u06af\u06cc\u0631\u06cc \u062d\u0631\u0641\u0647 \u0627\u06cc \u0633\u0631\u0686 \u06a9\u0646\u0633\u0648\u0644 \u0647\u0633\u062a\u06cc\u062f \u062d\u062a\u0645\u0627 \u0633\u0631\u06cc \u0628\u0647 \u0622\u0645\u0648\u0632\u0634 \u0633\u0631\u0686 \u06a9\u0646\u0633\u0648\u0644 \u0648\u0628\u0633\u0627\u06cc\u062a \u0645\u06cc\u0632\u0641\u0627 \u0628\u0632\u0646\u06cc\u062f)<\/p>\n<p><img loading=\"lazy\" decoding=\"async\" class=\"aligncenter wp-image-2384 size-full\" title=\"Webmasters ccount Sign In\" src=\"https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/Webmasters-account-Sign-In.jpg\" alt=\"Webmasters ccount Sign In\" width=\"600\" height=\"294\" srcset=\"https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/Webmasters-account-Sign-In.jpg 600w, https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/Webmasters-account-Sign-In-300x147.jpg 300w\" sizes=\"(max-width: 600px) 100vw, 600px\" \/><br \/>\n\u062f\u0631 \u0645\u0646\u0648\u0647\u0627\u06cc \u0645\u0648\u062c\u0648\u062f \u0633\u0631\u0686 \u06a9\u0646\u0633\u0648\u0644 &#8220;Crawl&#8221; \u0631\u0627 \u0627\u0646\u062a\u062e\u0627\u0628 \u06a9\u0646\u06cc\u062f.<\/p>\n<p><img loading=\"lazy\" decoding=\"async\" class=\"aligncenter wp-image-2383 size-full\" title=\"Webmasters ccount crawl\" src=\"https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/Webmasters-account-crawl.png\" alt=\"Webmasters ccount crawl\" width=\"209\" height=\"300\" \/><\/p>\n<p>\u0633\u067e\u0633 \u0632\u06cc\u0631\u0645\u0646\u0648\u06cc\u00a0 \u201crobots.txt Tester.\u201d \u0631\u0627 \u0627\u0646\u062a\u062e\u0627\u0628 \u06a9\u0631\u062f\u0647 \u062a\u0627 \u0627\u0628\u0632\u0627\u0631 \u062a\u0633\u062a \u0627\u06cc\u0646 \u0641\u0627\u06cc\u0644 \u0631\u0627 \u0645\u0634\u0627\u0647\u062f\u0647 \u06a9\u0646\u06cc\u062f.<\/p>\n<p><img loading=\"lazy\" decoding=\"async\" class=\"aligncenter wp-image-2382 size-full\" title=\"Webmasters ccount robots.txt\" src=\"https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/Webmasters-account-robots-txt.png\" alt=\"Webmasters ccount robots.txt\" width=\"206\" height=\"170\" \/><\/p>\n<p>\u062f\u0631 \u0633\u0645\u062a \u0631\u0627\u0633\u062a \u062f\u0633\u062a\u0648\u0631\u0627\u062a\u06cc \u0631\u0627 \u0645\u0634\u0627\u0647\u062f\u0647 \u0645\u06cc\u200c\u06a9\u0646\u06cc\u062f \u06a9\u0647 \u062f\u0631 \u0641\u0627\u06cc\u0644 robots.txt \u062f\u0631\u062c \u06a9\u0631\u062f\u0647 \u0628\u0648\u062f\u06cc\u062f. \u0627\u06cc\u0646 \u0646\u0634\u0627\u0646 \u062f\u0647\u0646\u062f\u0647 \u0627\u06cc\u0646 \u0627\u0633\u062a \u06a9\u0647 \u0634\u0645\u0627 \u0628\u0647 \u062f\u0631\u0633\u062a\u06cc \u0627\u06cc\u0646 \u0641\u0627\u06cc\u0644 \u0631\u0627 \u0627\u06cc\u062c\u0627\u062f \u06a9\u0631\u062f\u0647\u200c\u0627\u06cc\u062f \u0648 \u0645\u06a9\u0627\u0646 \u0622\u0646 \u0635\u062d\u06cc\u062d \u0627\u0633\u062a.<\/p>\n<p><img loading=\"lazy\" decoding=\"async\" class=\"aligncenter wp-image-2385\" title=\"\u062a\u0633\u062a \u0641\u0627\u06cc\u0644 robots.txt \u062f\u0631 \u0648\u0628\u0645\u0633\u062a\u0631\u062a\u0648\u0644\u0632\" src=\"https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/robots-txt-webmastertools.jpg\" alt=\"\u062a\u0633\u062a \u0641\u0627\u06cc\u0644 robots.txt \u062f\u0631 \u0648\u0628\u0645\u0633\u062a\u0631\u062a\u0648\u0644\u0632\" width=\"649\" height=\"456\" srcset=\"https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/robots-txt-webmastertools.jpg 862w, https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/robots-txt-webmastertools-300x211.jpg 300w, https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/robots-txt-webmastertools-768x540.jpg 768w\" sizes=\"(max-width: 649px) 100vw, 649px\" \/><\/p>\n<p>\u0627\u06af\u0631 \u0642\u0635\u062f \u062f\u0627\u0631\u06cc\u062f \u0645\u0637\u0645\u0626\u0646 \u0634\u0648\u06cc\u062f \u06a9\u0647 \u0622\u06cc\u0627 \u0631\u0628\u0627\u062a \u0628\u0647 \u0622\u062f\u0631\u0633\u06cc \u062f\u0633\u062a\u0631\u0633\u06cc \u062f\u0627\u0631\u062f \u06cc\u0627 \u0646\u0647\u060c \u0645\u06cc\u200c\u062a\u0648\u0627\u0646\u06cc\u062f \u062f\u0631 \u0642\u0633\u0645\u062a &#8220;Enter a <abbr title=\"Uniform Resource Locator\">URL<\/abbr> to test if it is blocked&#8221; \u0622\u062f\u0631\u0633 \u0631\u0627 \u0648\u0627\u0631\u062f \u06a9\u0646\u06cc\u062f \u0648 \u0646\u0648\u0639 \u0631\u0628\u0627\u062a \u06af\u0648\u06af\u0644 \u0631\u0627 \u0647\u0645 \u0645\u0634\u062e\u0635 \u0646\u0645\u0627\u06cc\u06cc\u062f \u0648 \u062f\u06a9\u0645\u0647 \u062a\u0633\u062a \u0631\u0627 \u0628\u0632\u0646\u06cc\u062f<\/p>\n<p><img loading=\"lazy\" decoding=\"async\" class=\"aligncenter wp-image-2386\" title=\"\u062f\u06a9\u0645\u0647 test \u0641\u0627\u06cc\u0644 robots.txt \u062f\u0631 \u0648\u0628\u0645\u0633\u062a\u0631\u062a\u0648\u0644\u0632 \u06af\u0648\u06af\u0644\" src=\"https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/Webmasters-account-test-url.png\" alt=\"\u062f\u06a9\u0645\u0647 test \u0641\u0627\u06cc\u0644 robots.txt \u062f\u0631 \u0648\u0628\u0645\u0633\u062a\u0631\u062a\u0648\u0644\u0632 \u06af\u0648\u06af\u0644\" width=\"321\" height=\"146\" srcset=\"https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/Webmasters-account-test-url.png 414w, https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/Webmasters-account-test-url-300x137.png 300w\" sizes=\"(max-width: 321px) 100vw, 321px\" \/><\/p>\n<p>\u0627\u06af\u0631 \u0628\u0627 \u067e\u06cc\u063a\u0627\u0645 &#8220;<span style=\"color: #339966;\">ALLOWED<\/span>&#8221; \u0645\u0648\u0627\u062c\u0647 \u0634\u062f\u06cc\u062f \u0628\u0647 \u0645\u0639\u0646\u0627\u06cc \u0622\u0646 \u0627\u0633\u062a \u06a9\u0647 \u0631\u0628\u0627\u062a \u06af\u0648\u06af\u0644 \u0628\u0647 \u0622\u0646 \u062f\u0627\u06cc\u0631\u06a9\u062a\u0648\u0631\u06cc \u062f\u0633\u062a\u0631\u0633\u06cc \u062f\u0627\u0631\u062f \u062f\u0631 \u063a\u06cc\u0631 \u0627\u06cc\u0646 \u0635\u0648\u0631\u062a \u0628\u0627 \u067e\u06cc\u063a\u0627\u0645 &#8220;<span style=\"color: #ff0000;\">BLOCKED<\/span>&#8221; \u0631\u0648\u0628\u0647\u200c\u0631\u0648 \u0645\u06cc\u200c\u0634\u0648\u06cc\u062f \u06a9\u0647 \u0628\u0646\u06cc \u0628\u0631 \u0622\u0646 \u0627\u0633\u062a \u06a9\u0647 \u0631\u0628\u0627\u062a \u062f\u0633\u062a\u0631\u0633\u06cc \u0628\u0647 \u0622\u0646 \u0622\u062f\u0631\u0633 (\u062f\u0627\u06cc\u0631\u06a9\u062a\u0648\u0631\u06cc) \u0631\u0627 \u0646\u062f\u0627\u0631\u062f.<\/p>\n<p>\u0627\u0637\u0644\u0627\u0639\u0627\u062a \u0628\u06cc\u0634\u062a\u0631 \u062f\u0631\u0628\u0627\u0631\u0647 \u062a\u0633\u062a \u0641\u0627\u06cc\u0644 robots.txt \u062f\u0631 <a href=\"https:\/\/support.google.com\/webmasters\/answer\/6062598?hl=en&amp;ref_topic=6061961\" target=\"_blank\" rel=\"noopener noreferrer\">\u0633\u0627\u06cc\u062a \u06af\u0648\u06af\u0644<\/a> \u0645\u0634\u0627\u0647\u062f\u0647 \u06a9\u0646\u06cc\u062f.<\/p>\n<h2>\u0686\u0646\u062f \u0646\u06a9\u062a\u0647 \u067e\u0627\u06cc\u0627\u0646\u06cc \u062f\u0631\u0628\u0627\u0631\u0647 \u0641\u0627\u06cc\u0644 robots.txt<\/h2>\n<ul>\n<li>\u0631\u0628\u0627\u062a\u200c\u0647\u0627\u06cc \u062e\u0632\u0646\u062f\u0647 \u0648 \u06cc\u0627 \u0628\u0639\u0636\u06cc \u0631\u0628\u0627\u062a\u200c\u0647\u0627\u06cc \u0645\u0648\u062a\u0648\u0631\u0647\u0627\u06cc \u062c\u0633\u062a\u062c\u0648 \u0645\u0645\u06a9\u0646 \u0627\u0633\u062a \u0628\u0647 \u062f\u0633\u062a\u0648\u0631\u0627\u062a \u0645\u0648\u062c\u0648\u062f \u062f\u0631 \u0641\u0627\u06cc\u0644 robots.txt \u06a9\u0647 \u062f\u0631\u062c\u200c\u0634\u062f\u0647 \u0631\u0627 \u0646\u0627\u062f\u06cc\u062f\u0647 \u0628\u06af\u06cc\u0631\u0646\u062f. \u0645\u062e\u0635\u0648\u0635\u0627\u064b \u0631\u0628\u0627\u062a\u200c\u0647\u0627\u06cc \u0627\u0633\u067e\u0645 \u06cc\u0627 \u0645\u0627\u0644\u0648\u0631 (malware robots) \u06a9\u0647 \u0628\u0631\u0627\u06cc \u0622\u0633\u06cc\u0628\u200c\u067e\u0630\u06cc\u0631\u06cc\u060c \u0633\u0627\u06cc\u062a\u200c\u0647\u0627 \u0631\u0627 \u0628\u062f\u0648\u0646 \u062a\u0648\u062c\u0647 \u0628\u0647 \u0627\u06cc\u0646\u00a0\u0645\u0633\u0627\u0626\u0644 \u0627\u0633\u06a9\u0646 \u0645\u06cc\u200c\u06a9\u0646\u0646\u062f. \u0648 \u0628\u0647 \u062f\u0646\u0628\u0627\u0644 \u0627\u06cc\u0645\u06cc\u0644 \u06a9\u0627\u0631\u0628\u0631\u0627\u0646 \u06cc\u0627 \u0645\u0648\u0627\u0631\u062f \u062f\u06cc\u06af\u0631 \u0647\u0633\u062a\u0646\u062f.<\/li>\n<li>\u0645\u0645\u06a9\u0646 \u0627\u0633\u062a \u0645\u062a\u062f\u0647\u0627\u06cc \u0641\u0627\u06cc\u0644 robots.txt \u0631\u0627 \u0628\u0627 \u0645\u062a\u0627\u062a\u06af robots \u0628\u0647 \u0627\u0634\u062a\u0628\u0627\u0647 \u0628\u06af\u06cc\u0631\u06cc\u062f \u0628\u0631\u0627\u06cc \u0647\u0645\u06cc\u0646 \u067e\u06cc\u0634\u0646\u0647\u0627\u062f \u0645\u06cc\u200c\u0634\u0648\u062f \u06a9\u0647 \u062d\u062a\u0645\u0627 \u0645\u0642\u0627\u0644\u0647 \u06a9\u0648\u062a\u0627\u0647 \u0648 \u0645\u0641\u06cc\u062f <a title=\"\u062a\u0641\u0627\u0648\u062a \u0641\u0627\u06cc\u0644 robots.txt \u0628\u0627 \u0645\u062a\u0627\u062a\u06af robots\" href=\"https:\/\/mizfa.com\/blog\/meta-tag-robots-vs-robots-txt\/\" target=\"_blank\" rel=\"noopener noreferrer\">\u062a\u0641\u0627\u0648\u062a \u0641\u0627\u06cc\u0644 robots.txt \u0628\u0627 \u0645\u062a\u0627\u062a\u06af robots<\/a> \u0631\u0627 \u0628\u062e\u0648\u0627\u0646\u06cc\u062f.<\/li>\n<li>\u0645\u0648\u062a\u0648\u0631\u0647\u0627\u06cc \u062c\u0633\u062a\u062c\u0648 \u0645\u062d\u062a\u0648\u0627\u06cc \u0641\u0627\u06cc\u0644 robots.txt \u0631\u0627 \u06a9\u064e\u0634 \u0645\u06cc\u200c\u06a9\u0646\u0646\u062f \u0627\u0645\u0627 \u0645\u0639\u0645\u0648\u0644\u0627 \u0645\u062d\u062a\u0648\u0627\u06cc \u06a9\u0634 \u0634\u062f\u0647 \u0631\u0627 \u0631\u0648\u0632\u06cc \u062d\u062f\u0627\u0642\u0644 \u06cc\u06a9 \u0628\u0627\u0631 \u0628\u0647 \u0631\u0648\u0632 \u0631\u0633\u0627\u0646\u06cc \u0645\u06cc\u200c\u06a9\u0646\u0646\u062f. \u0628\u0627 \u0627\u06cc\u0646 \u062d\u0627\u0644 \u0634\u0645\u0627 \u0627\u06af\u0631 \u062a\u0645\u0627\u06cc\u0644 \u062f\u0627\u0631\u06cc\u062f \u0628\u0639\u062f \u0627\u0632 \u062a\u063a\u06cc\u06cc\u0631\u0627\u062a \u062f\u0631 \u0627\u06cc\u0646 \u0641\u0627\u06cc\u0644\u060c \u0645\u0648\u062a\u0648\u0631\u0647\u0627\u06cc \u062c\u0633\u062a\u062c\u0648 \u0633\u0631\u06cc\u0639\u200c\u062a\u0631 \u06a9\u0634 \u0631\u0627 \u0622\u067e\u062f\u06cc\u062a \u06a9\u0646\u0646\u062f \u0641\u0627\u06cc\u0644 \u062e\u0648\u062f \u0631\u0627 \u062f\u0631 <a href=\"https:\/\/www.google.com\/webmasters\/tools\/submit-url\" target=\"_blank\" rel=\"noopener noreferrer\">\u0627\u06cc\u0646 \u0622\u062f\u0631\u0633<\/a> \u06af\u0648\u06af\u0644 \u0627\u0631\u0633\u0627\u0644 \u06a9\u0646\u06cc\u062f. \u0635\u062d\u0628\u062a \u0627\u0632 Cache \u0634\u062f\u060c \u0622\u06cc\u0627 \u0645\u06cc\u200c\u062f\u0627\u0646\u0633\u062a\u06cc\u062f \u06a9\u0647 \u06a9\u0634 \u06a9\u0631\u062f\u0646 \u0633\u0627\u06cc\u062a \u062a\u0623\u062b\u06cc\u0631\u0627\u062a \u0641\u0648\u0642\u200c\u0627\u0644\u0639\u0627\u062f\u0647\u200c\u0627\u06cc \u0631\u0648\u06cc \u0633\u0631\u0639\u062a \u0648\u0628\u0633\u0627\u06cc\u062a\u200c\u0647\u0627\u06cc\u06cc \u0628\u0627 \u062a\u0631\u0627\u0641\u06cc\u06a9 \u0628\u0627\u0644\u0627 \u062f\u0627\u0631\u062f\u061f \u0631\u0627\u0647 \u0648 \u0686\u0627\u0647\u0634 \u062f\u0631 \u0645\u0642\u0627\u0644\u0647 <a href=\"https:\/\/mizfa.com\/blog\/best-plugins-wordpress-cache\/\" target=\"_blank\" rel=\"noopener noreferrer\">\u0628\u0647\u062a\u0631\u06cc\u0646 \u0627\u0641\u0632\u0648\u0646\u0647 \u06a9\u0634 \u0648\u0631\u062f\u067e\u0631\u0633<\/a>!<\/li>\n<\/ul>\n<p>\u062e\u0628 \u0627\u0645\u06cc\u062f\u0648\u0627\u0631\u0645 \u0627\u0632 \u0622\u0645\u0648\u0632\u0634 \u0633\u0627\u062e\u062a \u0641\u0627\u06cc\u0644 robots.txt \u0648 \u0646\u06a9\u0627\u062a \u067e\u06cc\u0631\u0648 \u0622\u0646 \u0627\u0633\u062a\u0641\u0627\u062f\u0647 \u06a9\u0631\u062f\u0647\u200c\u0628\u0627\u0634\u06cc\u062f \u0648 \u0635\u0631\u0641 \u0646\u0638\u0631 \u0627\u0632 \u0627\u06cc\u0646\u06a9\u0647 \u0627\u0632 \u0648\u0631\u062f\u067e\u0631\u0633\u060c \u062c\u0648\u0645\u0644\u0627 \u06cc\u0627 \u0647\u0631 <abbr title=\"Content Management System\">CMS<\/abbr> \u062f\u06cc\u06af\u0631\u06cc \u0627\u0633\u062a\u0641\u0627\u062f\u0647 \u0645\u06cc\u200c\u06a9\u0646\u06cc\u062f \u0628\u062a\u0648\u0627\u0646\u06cc\u062f \u0628\u0631\u0627\u062d\u062a\u06cc robots.txt \u0628\u0633\u0627\u0632\u06cc\u062f. \u0647\u0631\u0686\u0646\u062f \u0628\u0631\u0627\u06cc \u0627\u06cc\u062c\u0627\u062f \u0641\u0627\u06cc\u0644 robots.txt \u0628\u0631\u0627\u06cc \u0648\u0631\u062f\u067e\u0631\u0633 \u0648 \u062f\u06cc\u06af\u0631 \u0633\u06cc \u0627\u0645 \u0627\u0633 \u0647\u0627 \u0645\u062b\u0644 \u062c\u0648\u0645\u0644\u0627 \u0645\u062b\u0627\u0644\u200c\u0647\u0627\u06cc\u06cc \u0627\u0631\u0627\u0626\u0647 \u062f\u0627\u062f\u06cc\u0645\u061b \u0627\u0645\u0627 \u0641\u0631\u0627\u0645\u0648\u0634 \u0646\u06a9\u0646\u06cc\u062f \u06a9\u0647 \u0627\u0645\u06a9\u0627\u0646 \u0646\u062f\u0627\u0631\u062f \u06cc\u06a9 \u0641\u0627\u06cc\u0644 \u0631\u0627 \u0628\u0647 \u0639\u0646\u0648\u0627\u0646 \u0628\u0647\u062a\u0631\u06cc\u0646 \u0641\u0627\u06cc\u0644 robots.txt \u0645\u0646\u0627\u0633\u0628 \u0648\u0631\u062f\u067e\u0631\u0633 \u06cc\u0627 <abbr title=\"Content Management System\">CMS<\/abbr>\u0647\u0627\u06cc \u062f\u06cc\u06af\u0631 \u062f\u0631\u0646\u0638\u0631 \u06af\u0631\u0641\u062a \u0648 \u0628\u0631\u0627\u06cc \u0647\u0645\u0647\u200c\u06cc \u0633\u0627\u06cc\u062a\u200c\u0647\u0627 \u0627\u0632 \u0647\u0645\u0627\u0646 \u06cc\u06a9 \u0641\u0627\u06cc\u0644 \u0627\u0633\u062a\u0641\u0627\u062f\u0647 \u06a9\u0631\u062f.<br \/>\n\u0631\u0627\u0633\u062a\u06cc \u0627\u06af\u0631 \u0634\u0645\u0627 \u0647\u0645 \u062a\u062c\u0631\u0628\u0647\u200c\u0627\u200c\u06cc \u062f\u0631\u0628\u0627\u0631\u0647 \u0646\u062d\u0648\u0647 \u06a9\u0627\u0631\u06a9\u0631\u062f \u0648 \u0633\u0627\u062e\u062a \u0641\u0627\u06cc\u0644 robots.txt \u062f\u0627\u0631\u06cc\u062f \u062e\u0648\u0634\u062d\u0627\u0644 \u0645\u06cc\u0634\u06cc\u0645 \u062f\u0631 \u0646\u0638\u0631\u0627\u062a \u0628\u0647 \u0627\u0634\u062a\u0631\u0627\u06a9 \u0628\u06af\u0630\u0627\u0631\u06cc\u062f :-)\u0631 \u0633\u0627\u06cc\u062a\u06cc \u0636\u0648\u062a \u062f\u0627\u0631\u062f\u061f&#8221;<\/p><div style=\"display: none;\"\n    class=\"kk-star-ratings kksr-valign-bottom kksr-align-left \"\n    data-id=\"2245\"\n    data-slug=\"\">\n    <div class=\"kksr-stars\">\n    <div class=\"kksr-stars-inactive\">\n            <div class=\"kksr-star\" data-star=\"1\">\n            <div class=\"kksr-icon\" style=\"width: 22px; height: 22px;\"><\/div>\n        <\/div>\n            <div class=\"kksr-star\" data-star=\"2\">\n            <div class=\"kksr-icon\" style=\"width: 22px; height: 22px;\"><\/div>\n        <\/div>\n            <div class=\"kksr-star\" data-star=\"3\">\n            <div class=\"kksr-icon\" style=\"width: 22px; height: 22px;\"><\/div>\n        <\/div>\n            <div class=\"kksr-star\" data-star=\"4\">\n            <div class=\"kksr-icon\" style=\"width: 22px; height: 22px;\"><\/div>\n        <\/div>\n            <div class=\"kksr-star\" data-star=\"5\">\n            <div class=\"kksr-icon\" style=\"width: 22px; height: 22px;\"><\/div>\n        <\/div>\n    <\/div>\n    <div class=\"kksr-stars-active\" style=\"width: 107.8px;\">\n            <div class=\"kksr-star\">\n            <div class=\"kksr-icon\" style=\"width: 22px; height: 22px;\"><\/div>\n        <\/div>\n            <div class=\"kksr-star\">\n            <div class=\"kksr-icon\" style=\"width: 22px; height: 22px;\"><\/div>\n        <\/div>\n            <div class=\"kksr-star\">\n            <div class=\"kksr-icon\" style=\"width: 22px; height: 22px;\"><\/div>\n        <\/div>\n            <div class=\"kksr-star\">\n            <div class=\"kksr-icon\" style=\"width: 22px; height: 22px;\"><\/div>\n        <\/div>\n            <div class=\"kksr-star\">\n            <div class=\"kksr-icon\" style=\"width: 22px; height: 22px;\"><\/div>\n        <\/div>\n    <\/div>\n<\/div>\n    <div class=\"kksr-legend\">\n            <strong class=\"kksr-score\">4.9<\/strong>\n        <span class=\"kksr-muted\">\/<\/span>\n        <strong>5<\/strong>\n        <span class=\"kksr-muted\">(<\/span>\n        <strong class=\"kksr-count\">12<\/strong>\n        <span class=\"kksr-muted\">\n            \u0627\u0645\u062a\u06cc\u0627\u0632        <\/span>\n        <span class=\"kksr-muted\">)<\/span>\n    <\/div>\n<\/div>\n","protected":false},"excerpt":{"rendered":"<p>\u0641\u0627\u06cc\u0644 \u0631\u0648\u0628\u0648\u062a robots.txt \u0686\u06cc\u0633\u062a\u061f \u0646\u062d\u0648\u0647 \u0633\u0627\u062e\u062a \u0641\u0627\u06cc\u0644 robots.txt \u0686\u06af\u0648\u0646\u0647 \u0627\u0633\u062a\u061f \u0628\u0647\u062a\u0631\u06cc\u0646 \u0648 \u0645\u0646\u0627\u0633\u0628 \u062a\u0631\u06cc\u0646 \u0641\u0627\u06cc\u0644 \u0631\u0648\u0628\u0648\u062a \u0628\u0631\u0627\u06cc \u0648\u0631\u062f\u067e\u0631\u0633 \u0648 \u062c\u0648\u0645\u0644\u0627 \u0686\u06cc\u0633\u062a\u061f \u067e\u0627\u0633\u062e \u0628\u0647 \u0647\u0645\u0647 \u0627\u06cc\u0646 \u067e\u0631\u0633\u0634\u200c\u0647\u0627 \u0631\u0627 \u0645\u06cc\u200c\u062a\u0648\u0627\u0646\u06cc\u062f \u062f\u0631 \u0627\u06cc\u0646 \u0645\u0642\u0627\u0644\u0647 \u0627\u0632 \u0633\u0627\u06cc\u062a \u0645\u06cc\u0632\u0641\u0627 \u0645\u0637\u0627\u0644\u0639\u0647 \u0646\u0645\u0627\u06cc\u06cc\u062f. \u0647\u0645\u0686\u0646\u06cc\u0646 \u062f\u0631 \u0627\u06cc\u0646 \u0645\u0642\u0627\u0644\u0647 \u06f8 \u0645\u062b\u0627\u0644 \u06a9\u0627\u0631\u0628\u0631\u062f\u06cc \u062f\u0631\u0628\u0627\u0631\u0647 \u0641\u0627\u06cc\u0644 \u0631\u0648\u0628\u0648\u062a (\u0631\u0628\u0627\u062a) \u06af\u0641\u062a\u0647 \u0634\u062f\u0647 \u0627\u0633\u062a. \u0647\u0645\u0631\u0627\u0647 \u0628\u0627\u0634\u06cc\u062f. \u0641\u0627\u06cc\u0644 robots.txt \u0686\u06cc\u0633\u062a [&hellip;]<\/p>\n","protected":false},"author":1,"featured_media":2352,"comment_status":"open","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"episode_type":"","audio_file":"","cover_image":"","cover_image_id":"","duration":"","filesize":"","date_recorded":"","explicit":"","block":"","filesize_raw":"","footnotes":""},"categories":[310,308,166],"tags":[200],"class_list":["post-2245","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-310","category-308","category-on-page","tag-robots"],"yoast_head":"<!-- This site is optimized with the Yoast SEO plugin v25.1 - https:\/\/yoast.com\/wordpress\/plugins\/seo\/ -->\n<title>\u0631\u0627\u0647\u0646\u0645\u0627\u06cc \u062c\u0627\u0645\u0639 \u0646\u062d\u0648\u0647 \u0633\u0627\u062e\u062a \u0641\u0627\u06cc\u0644 robots.txt \u0628\u0647 \u0647\u0645\u0631\u0627\u0647 8 \u0645\u062b\u0627\u0644 \u06a9\u0627\u0631\u0628\u0631\u062f\u06cc<\/title>\n<meta name=\"description\" content=\"\u062f\u0631 \u0627\u06cc\u0646 \u0645\u0642\u0627\u0644\u0647 \u0628\u0647 \u062a\u0639\u0631\u06cc\u0641 \u0641\u0627\u06cc\u0644 robots.txt \u0686\u06cc\u0633\u062a \u0645\u06cc\u200c\u067e\u0631\u062f\u0627\u0632\u06cc\u0645 \u0648 \u0622\u0646\u06a9\u0647 \u0627\u06cc\u0646 \u0641\u0627\u06cc\u0644 \u0686\u0647 \u062a\u0627\u062b\u06cc\u0631\u06cc \u062f\u0631 \u0633\u0626\u0648 \u062f\u0627\u0631\u062f \u0648 \u0647\u0645\u06cc\u0646\u0637\u0648\u0631 \u062a\u0627\u062b\u06cc\u0631 \u0622\u0646 \u062f\u0631 \u0646\u062d\u0648\u0647 \u062e\u0632\u0634 \u0631\u0628\u0627\u062a\u200c\u0647\u0627 \u0686\u06af\u0648\u0646\u0647 \u0627\u0633\u062a. \u062f\u0631 \u0627\u06cc\u0646 \u0631\u0627\u0647\u0646\u0645\u0627\u06cc \u06a9\u0627\u0645\u0644 \u0628\u0647 \u0646\u062d\u0648\u0647 \u0627\u06cc\u062c\u0627\u062f \u0648 \u0633\u0627\u062e\u062a \u0641\u0627\u06cc\u0644 robots.txt \u062f\u0631 \u0648\u0631\u062f\u067e\u0631\u0633 \u0648 \u062c\u0648\u0645\u0644\u0627 \u0647\u0645 \u067e\u0631\u062f\u0627\u062e\u062a\u0647 \u0645\u06cc\u200c\u0634\u0648\u062f \u0648 \u0647\u0645\u06cc\u0646\u0637\u0648\u0631 \u0627\u0634\u062a\u0628\u0627\u0647\u200c\u0647\u0627\u06cc \u0631\u0627\u06cc\u062c \u062f\u0631 \u0627\u06cc\u062c\u0627\u062f \u0627\u06cc\u0646 \u0641\u0627\u06cc\u0644 \u0645\u0647\u0645.\" \/>\n<meta name=\"robots\" content=\"index, follow, max-snippet:-1, max-image-preview:large, max-video-preview:-1\" \/>\n<link rel=\"canonical\" href=\"https:\/\/mizfa.com\/blog\/robots-txt\/\" \/>\n<meta property=\"og:locale\" content=\"fa_IR\" \/>\n<meta property=\"og:type\" content=\"article\" \/>\n<meta property=\"og:title\" content=\"\u0631\u0627\u0647\u0646\u0645\u0627\u06cc \u062c\u0627\u0645\u0639 \u0646\u062d\u0648\u0647 \u0633\u0627\u062e\u062a \u0641\u0627\u06cc\u0644 robots.txt \u0628\u0647 \u0647\u0645\u0631\u0627\u0647 8 \u0645\u062b\u0627\u0644 \u06a9\u0627\u0631\u0628\u0631\u062f\u06cc\" \/>\n<meta property=\"og:description\" content=\"\u062f\u0631 \u0627\u06cc\u0646 \u0645\u0642\u0627\u0644\u0647 \u0628\u0647 \u062a\u0639\u0631\u06cc\u0641 \u0641\u0627\u06cc\u0644 robots.txt \u0686\u06cc\u0633\u062a \u0645\u06cc\u200c\u067e\u0631\u062f\u0627\u0632\u06cc\u0645 \u0648 \u0622\u0646\u06a9\u0647 \u0627\u06cc\u0646 \u0641\u0627\u06cc\u0644 \u0686\u0647 \u062a\u0627\u062b\u06cc\u0631\u06cc \u062f\u0631 \u0633\u0626\u0648 \u062f\u0627\u0631\u062f \u0648 \u0647\u0645\u06cc\u0646\u0637\u0648\u0631 \u062a\u0627\u062b\u06cc\u0631 \u0622\u0646 \u062f\u0631 \u0646\u062d\u0648\u0647 \u062e\u0632\u0634 \u0631\u0628\u0627\u062a\u200c\u0647\u0627 \u0686\u06af\u0648\u0646\u0647 \u0627\u0633\u062a. \u062f\u0631 \u0627\u06cc\u0646 \u0631\u0627\u0647\u0646\u0645\u0627\u06cc \u06a9\u0627\u0645\u0644 \u0628\u0647 \u0646\u062d\u0648\u0647 \u0627\u06cc\u062c\u0627\u062f \u0648 \u0633\u0627\u062e\u062a \u0641\u0627\u06cc\u0644 robots.txt \u062f\u0631 \u0648\u0631\u062f\u067e\u0631\u0633 \u0648 \u062c\u0648\u0645\u0644\u0627 \u0647\u0645 \u067e\u0631\u062f\u0627\u062e\u062a\u0647 \u0645\u06cc\u200c\u0634\u0648\u062f \u0648 \u0647\u0645\u06cc\u0646\u0637\u0648\u0631 \u0627\u0634\u062a\u0628\u0627\u0647\u200c\u0647\u0627\u06cc \u0631\u0627\u06cc\u062c \u062f\u0631 \u0627\u06cc\u062c\u0627\u062f \u0627\u06cc\u0646 \u0641\u0627\u06cc\u0644 \u0645\u0647\u0645.\" \/>\n<meta property=\"og:url\" content=\"https:\/\/mizfa.com\/blog\/robots-txt\/\" \/>\n<meta property=\"og:site_name\" content=\"\u067e\u0627\u06cc\u06af\u0627\u0647 \u062f\u0627\u0646\u0634 \u0645\u06cc\u0632\u0641\u0627\" \/>\n<meta property=\"article:published_time\" content=\"2017-06-30T13:35:37+00:00\" \/>\n<meta property=\"article:modified_time\" content=\"2024-12-12T10:35:36+00:00\" \/>\n<meta property=\"og:image\" content=\"https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/what-is-robots-txt-file.jpg\" \/>\n\t<meta property=\"og:image:width\" content=\"800\" \/>\n\t<meta property=\"og:image:height\" content=\"400\" \/>\n\t<meta property=\"og:image:type\" content=\"image\/jpeg\" \/>\n<meta name=\"author\" content=\"\u067e\u0648\u0631\u06cc\u0627 \u0622\u0631\u06cc\u0627\u0641\u0631\" \/>\n<meta name=\"twitter:card\" content=\"summary_large_image\" \/>\n<meta name=\"twitter:creator\" content=\"@mizfa_com\" \/>\n<meta name=\"twitter:site\" content=\"@mizfa_com\" \/>\n<meta name=\"twitter:label1\" content=\"\u0646\u0648\u0634\u062a\u0647\u200c\u0634\u062f\u0647 \u0628\u062f\u0633\u062a\" \/>\n\t<meta name=\"twitter:data1\" content=\"\u067e\u0648\u0631\u06cc\u0627 \u0622\u0631\u06cc\u0627\u0641\u0631\" \/>\n\t<meta name=\"twitter:label2\" content=\"\u0632\u0645\u0627\u0646 \u062a\u0642\u0631\u06cc\u0628\u06cc \u0628\u0631\u0627\u06cc \u062e\u0648\u0627\u0646\u062f\u0646\" \/>\n\t<meta name=\"twitter:data2\" content=\"14 \u062f\u0642\u06cc\u0642\u0647\" \/>\n<script type=\"application\/ld+json\" class=\"yoast-schema-graph\">{\"@context\":\"https:\/\/schema.org\",\"@graph\":[{\"@type\":\"Article\",\"@id\":\"https:\/\/mizfa.com\/blog\/robots-txt\/#article\",\"isPartOf\":{\"@id\":\"https:\/\/mizfa.com\/blog\/robots-txt\/\"},\"author\":{\"name\":\"\u067e\u0648\u0631\u06cc\u0627 \u0622\u0631\u06cc\u0627\u0641\u0631\",\"@id\":\"https:\/\/mizfa.com\/blog\/#\/schema\/person\/fd20beff56c133336db2acaf1d5691cf\"},\"headline\":\"\u0641\u0627\u06cc\u0644 robots.txt \u0648 \u0646\u062d\u0648\u0647 \u0633\u0627\u062e\u062a \u0622\u0646\",\"datePublished\":\"2017-06-30T13:35:37+00:00\",\"dateModified\":\"2024-12-12T10:35:36+00:00\",\"mainEntityOfPage\":{\"@id\":\"https:\/\/mizfa.com\/blog\/robots-txt\/\"},\"wordCount\":314,\"commentCount\":92,\"publisher\":{\"@id\":\"https:\/\/mizfa.com\/blog\/#\/schema\/person\/fd20beff56c133336db2acaf1d5691cf\"},\"image\":{\"@id\":\"https:\/\/mizfa.com\/blog\/robots-txt\/#primaryimage\"},\"thumbnailUrl\":\"https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/what-is-robots-txt-file.jpg\",\"keywords\":[\"robots\"],\"articleSection\":[\"\u0622\u0645\u0648\u0632\u0634 \u0633\u0626\u0648 \u067e\u06cc\u0634\u0631\u0641\u062a\u0647\",\"\u0622\u0645\u0648\u0632\u0634 \u0633\u0626\u0648 \u0645\u0628\u062a\u062f\u06cc\",\"\u0633\u0626\u0648 \u062f\u0627\u062e\u0644\u06cc\"],\"inLanguage\":\"fa-IR\",\"potentialAction\":[{\"@type\":\"CommentAction\",\"name\":\"Comment\",\"target\":[\"https:\/\/mizfa.com\/blog\/robots-txt\/#respond\"]}]},{\"@type\":\"WebPage\",\"@id\":\"https:\/\/mizfa.com\/blog\/robots-txt\/\",\"url\":\"https:\/\/mizfa.com\/blog\/robots-txt\/\",\"name\":\"\u0631\u0627\u0647\u0646\u0645\u0627\u06cc \u062c\u0627\u0645\u0639 \u0646\u062d\u0648\u0647 \u0633\u0627\u062e\u062a \u0641\u0627\u06cc\u0644 robots.txt \u0628\u0647 \u0647\u0645\u0631\u0627\u0647 8 \u0645\u062b\u0627\u0644 \u06a9\u0627\u0631\u0628\u0631\u062f\u06cc\",\"isPartOf\":{\"@id\":\"https:\/\/mizfa.com\/blog\/#website\"},\"primaryImageOfPage\":{\"@id\":\"https:\/\/mizfa.com\/blog\/robots-txt\/#primaryimage\"},\"image\":{\"@id\":\"https:\/\/mizfa.com\/blog\/robots-txt\/#primaryimage\"},\"thumbnailUrl\":\"https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/what-is-robots-txt-file.jpg\",\"datePublished\":\"2017-06-30T13:35:37+00:00\",\"dateModified\":\"2024-12-12T10:35:36+00:00\",\"description\":\"\u062f\u0631 \u0627\u06cc\u0646 \u0645\u0642\u0627\u0644\u0647 \u0628\u0647 \u062a\u0639\u0631\u06cc\u0641 \u0641\u0627\u06cc\u0644 robots.txt \u0686\u06cc\u0633\u062a \u0645\u06cc\u200c\u067e\u0631\u062f\u0627\u0632\u06cc\u0645 \u0648 \u0622\u0646\u06a9\u0647 \u0627\u06cc\u0646 \u0641\u0627\u06cc\u0644 \u0686\u0647 \u062a\u0627\u062b\u06cc\u0631\u06cc \u062f\u0631 \u0633\u0626\u0648 \u062f\u0627\u0631\u062f \u0648 \u0647\u0645\u06cc\u0646\u0637\u0648\u0631 \u062a\u0627\u062b\u06cc\u0631 \u0622\u0646 \u062f\u0631 \u0646\u062d\u0648\u0647 \u062e\u0632\u0634 \u0631\u0628\u0627\u062a\u200c\u0647\u0627 \u0686\u06af\u0648\u0646\u0647 \u0627\u0633\u062a. \u062f\u0631 \u0627\u06cc\u0646 \u0631\u0627\u0647\u0646\u0645\u0627\u06cc \u06a9\u0627\u0645\u0644 \u0628\u0647 \u0646\u062d\u0648\u0647 \u0627\u06cc\u062c\u0627\u062f \u0648 \u0633\u0627\u062e\u062a \u0641\u0627\u06cc\u0644 robots.txt \u062f\u0631 \u0648\u0631\u062f\u067e\u0631\u0633 \u0648 \u062c\u0648\u0645\u0644\u0627 \u0647\u0645 \u067e\u0631\u062f\u0627\u062e\u062a\u0647 \u0645\u06cc\u200c\u0634\u0648\u062f \u0648 \u0647\u0645\u06cc\u0646\u0637\u0648\u0631 \u0627\u0634\u062a\u0628\u0627\u0647\u200c\u0647\u0627\u06cc \u0631\u0627\u06cc\u062c \u062f\u0631 \u0627\u06cc\u062c\u0627\u062f \u0627\u06cc\u0646 \u0641\u0627\u06cc\u0644 \u0645\u0647\u0645.\",\"breadcrumb\":{\"@id\":\"https:\/\/mizfa.com\/blog\/robots-txt\/#breadcrumb\"},\"inLanguage\":\"fa-IR\",\"potentialAction\":[{\"@type\":\"ReadAction\",\"target\":[\"https:\/\/mizfa.com\/blog\/robots-txt\/\"]}]},{\"@type\":\"ImageObject\",\"inLanguage\":\"fa-IR\",\"@id\":\"https:\/\/mizfa.com\/blog\/robots-txt\/#primaryimage\",\"url\":\"https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/what-is-robots-txt-file.jpg\",\"contentUrl\":\"https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/what-is-robots-txt-file.jpg\",\"width\":800,\"height\":400,\"caption\":\"\u0641\u0627\u06cc\u0644 robots.txt \u0686\u06cc\u0633\u062a\"},{\"@type\":\"BreadcrumbList\",\"@id\":\"https:\/\/mizfa.com\/blog\/robots-txt\/#breadcrumb\",\"itemListElement\":[{\"@type\":\"ListItem\",\"position\":1,\"name\":\"\u062e\u0627\u0646\u0647\",\"item\":\"https:\/\/mizfa.com\/blog\/\"},{\"@type\":\"ListItem\",\"position\":2,\"name\":\"\u0622\u0631\u0634\u06cc\u0648 \u0633\u0626\u0648\",\"item\":\"https:\/\/mizfa.com\/blog\/category\/seo\/\"},{\"@type\":\"ListItem\",\"position\":3,\"name\":\"\u0645\u0642\u0627\u0644\u0627\u062a \u0633\u0626\u0648\",\"item\":\"https:\/\/mizfa.com\/blog\/category\/seo\/seo-articles\/\"},{\"@type\":\"ListItem\",\"position\":4,\"name\":\"\u0633\u0626\u0648 \u062f\u0627\u062e\u0644\u06cc\",\"item\":\"https:\/\/mizfa.com\/blog\/category\/seo\/seo-articles\/on-page\/\"},{\"@type\":\"ListItem\",\"position\":5,\"name\":\"\u0641\u0627\u06cc\u0644 robots.txt \u0648 \u0646\u062d\u0648\u0647 \u0633\u0627\u062e\u062a \u0622\u0646\"}]},{\"@type\":\"WebSite\",\"@id\":\"https:\/\/mizfa.com\/blog\/#website\",\"url\":\"https:\/\/mizfa.com\/blog\/\",\"name\":\"\u067e\u0627\u06cc\u06af\u0627\u0647 \u062f\u0627\u0646\u0634 \u0645\u06cc\u0632\u0641\u0627\",\"description\":\"\u067e\u0627\u06cc\u06af\u0627\u0647 \u062f\u0627\u0646\u0634 \u0633\u0627\u06cc\u062a \u0645\u06cc\u0632\u0641\u0627 - \u0628\u0644\u0627\u06af \u0645\u06cc\u0632\u0641\u0627 \u062f\u0631 \u062e\u0648\u0632\u0647 \u0622\u0645\u0648\u0632\u0634 \u0637\u0631\u0627\u062d\u06cc \u0633\u0627\u06cc\u062a \u060c \u0622\u0645\u0648\u0632\u0634 \u0633\u0626\u0648 \u0648 \u0628\u0647\u06cc\u0646\u0647 \u0633\u0627\u0632\u06cc \u0633\u0627\u06cc\u062a \u0648 \u0647\u0645\u0686\u0646\u06cc\u0646 \u0622\u0645\u0648\u0632\u0634 \u0627\u0641\u0632\u0627\u06cc\u0634 \u0633\u0631\u0639\u062a \u0633\u0627\u06cc\u062a \u0641\u0639\u0627\u0644\u06cc\u062a \u0645\u06cc\u200c\u06a9\u0646\u062f.\",\"publisher\":{\"@id\":\"https:\/\/mizfa.com\/blog\/#\/schema\/person\/fd20beff56c133336db2acaf1d5691cf\"},\"potentialAction\":[{\"@type\":\"SearchAction\",\"target\":{\"@type\":\"EntryPoint\",\"urlTemplate\":\"https:\/\/mizfa.com\/blog\/?s={search_term_string}\"},\"query-input\":{\"@type\":\"PropertyValueSpecification\",\"valueRequired\":true,\"valueName\":\"search_term_string\"}}],\"inLanguage\":\"fa-IR\"},{\"@type\":[\"Person\",\"Organization\"],\"@id\":\"https:\/\/mizfa.com\/blog\/#\/schema\/person\/fd20beff56c133336db2acaf1d5691cf\",\"name\":\"\u067e\u0648\u0631\u06cc\u0627 \u0622\u0631\u06cc\u0627\u0641\u0631\",\"image\":{\"@type\":\"ImageObject\",\"inLanguage\":\"fa-IR\",\"@id\":\"https:\/\/mizfa.com\/blog\/#\/schema\/person\/image\/\",\"url\":\"https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2019\/02\/mizfa-watermark.png\",\"contentUrl\":\"https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2019\/02\/mizfa-watermark.png\",\"width\":600,\"height\":600,\"caption\":\"\u067e\u0648\u0631\u06cc\u0627 \u0622\u0631\u06cc\u0627\u0641\u0631\"},\"logo\":{\"@id\":\"https:\/\/mizfa.com\/blog\/#\/schema\/person\/image\/\"},\"description\":\"\u0627\u0648\u0644\u06cc\u0646 \u06a9\u0633\u0628 \u0648 \u06a9\u0627\u0631 \u0622\u0646\u0644\u0627\u06cc\u0646 \u062e\u0648\u062f\u0645 \u0631\u0648 \u062f\u0631 \u0641\u06cc\u0633\u0628\u0648\u06a9 \u0631\u0627\u0647\u200c\u0627\u0646\u062f\u0627\u0632\u06cc \u06a9\u0631\u062f\u0645\u060c \u0633\u0627\u0644 \u06f2\u06f0\u06f1\u06f1 \u06cc\u06a9\u06cc \u0627\u0632 \u067e\u0631\u062a\u0639\u0627\u0645\u0644\u200c\u062a\u0631\u06cc\u0646 \u0635\u0641\u062d\u0627\u062a \u0641\u0627\u0631\u0633\u06cc \u0628\u0627 \u06f8\u06f0 \u0647\u0632\u0627\u0631 \u0641\u0627\u0644\u0648\u0631 \u0641\u0639\u0627\u0644 \u0631\u0648 \u062f\u0627\u0634\u062a\u0645. \u0628\u0639\u062f \u0627\u06cc\u0646\u06a9\u0647 \u0641\u06cc\u0633\u0628\u0648\u06a9 \u062e\u0627\u0644\u06cc \u0627\u0632 \u06a9\u0627\u0631\u0628\u0631 \u0627\u06cc\u0631\u0627\u0646\u06cc \u0634\u062f \u0648\u0627\u0631\u062f \u062f\u0646\u06cc\u0627\u06cc \u0634\u0628\u06a9\u0647 \u0634\u062f\u0645 \u0648 \u062f\u0631 \u0627\u0646\u062a\u0647\u0627\u06cc \u0633\u0627\u0644 \u06f2\u06f0\u06f1\u06f2 \u0645\u062f\u0631\u06a9 MCSE \u0645\u0627\u06cc\u06a9\u0631\u0648\u0633\u0627\u0641\u062a \u0631\u0648 \u062f\u0631\u06cc\u0627\u0641\u062a \u06a9\u0631\u062f\u0645\u060c \u062f\u0631 \u062d\u0627\u0644\u06cc \u06a9\u0647 \u0646\u0645\u0631\u0647 \u0628\u0627\u0644\u0627 \u06af\u0631\u0641\u062a\u0645 \u0648\u0644\u06cc \u06a9\u0633\u06cc \u0628\u0647 \u062f\u0644\u06cc\u0644 \u0628\u0647 \u062e\u0637\u0631 \u0627\u0641\u062a\u0627\u062f\u0646 \u0645\u0648\u0642\u0639\u06cc\u062a \u0634\u063a\u0644\u06cc \u062e\u0648\u062f\u0634 \u0628\u0647 \u0639\u0646\u0648\u0627\u0646 \u06a9\u0627\u0631\u0622\u0645\u0648\u0632 \u0645\u0646\u0648 \u0642\u0628\u0648\u0644 \u0646\u0645\u06cc\u200c\u06a9\u0631\u062f\u060c \u0628\u0639\u062f\u0634 \u0628\u0627 \u0634\u0631\u0648\u0639 \u062f\u0648\u0631\u0627\u0646 \u062e\u062f\u0645\u062a \u0633\u0631\u0628\u0627\u0632\u06cc\u060c \u0645\u0633\u0626\u0648\u0644 \u0628\u0647\u06cc\u0646\u0647 \u0633\u0627\u0632\u06cc \u06cc\u06a9 \u0633\u0627\u06cc\u062a \u062e\u0628\u0631\u06cc \u0645\u0639\u062a\u0628\u0631 \u0634\u062f\u0645 \u0648 \u0633\u0626\u0648 \u06cc\u0627\u062f \u06af\u0631\u0641\u062a\u0645. \u062f\u0631 \u0627\u0628\u062a\u062f\u0627\u06cc \u0633\u0627\u0644 \u06f2\u06f0\u06f1\u06f4 \u062a\u0648\u0646\u0633\u062a\u0645 \u0627\u0632 \u0631\u062a\u0628\u0647 \u06f1\u06f5\u06f0\u06f0\u06f0 \u0628\u0647 \u06f4\u06f0\u06f0 \u0627\u0644\u06a9\u0633\u0627 \u0646\u0632\u062f\u06cc\u06a9 \u06a9\u0646\u0645\u060c \u0627\u0648\u0646 \u0632\u0645\u0627\u0646 \u0627\u0644\u06a9\u0633\u0627 \u062e\u06cc\u0644\u06cc \u0645\u0647\u0645 \u0628\u0648\u062f. \u0648\u0627\u0631\u062f \u062f\u0627\u0646\u0634\u06af\u0627\u0647 \u0634\u062f\u0645\u060c \u0628\u0647 \u062f\u0644\u06cc\u0644 \u0639\u062f\u0645 \u0639\u0644\u0627\u0642\u0647 \u0628\u0647 \u062f\u0627\u0646\u0634\u06af\u0627\u0647 \u0633\u0639\u06cc \u06a9\u0631\u062f\u0645 \u0632\u0648\u062f\u062a\u0631 \u062a\u0645\u0648\u0645\u0634 \u06a9\u0646\u0645 \u0648 \u0633\u0647 \u0633\u0627\u0644\u0647 \u062f\u0631 \u0645\u0642\u0637\u0639 \u06a9\u0627\u0631\u0634\u0646\u0627\u0633\u06cc IT \u0641\u0627\u0631\u063a \u0627\u0644\u062a\u062d\u0635\u06cc\u0644 \u0634\u062f\u0645\u060c \u062a\u0648\u06cc \u062f\u0627\u0646\u0634\u06af\u0627\u0647 \u0647\u0631 \u06a9\u0633\u06cc \u0645\u0646\u0648 \u0645\u06cc\u062f\u06cc\u062f \u06cc\u0627\u062f \u0633\u0626\u0648 \u0645\u06cc\u0648\u0641\u062a\u0627\u062f\u060c \u062f\u0631 \u0647\u0645\u0648\u0646 \u0633\u0627\u0644 \u0622\u062e\u0631 \u062f\u0627\u0646\u0634\u06af\u0627\u0647 \u0628\u0632\u0631\u06af\u200c\u062a\u0631\u06cc\u0646 \u06a9\u0627\u0646\u0627\u0644 \u062a\u0644\u06af\u0631\u0627\u0645\u06cc IT \u0628\u0627 \u06f4\u06f0 \u0647\u0632\u0627\u0631 \u0639\u0636\u0648 \u0631\u0648 \u062f\u0627\u0634\u062a\u0645\u060c \u06a9\u0647 \u0628\u0647 \u0645\u062c\u062a\u0645\u0639 \u0641\u0646\u06cc \u0641\u0631\u0648\u062e\u062a\u0645 \u062a\u0627 \u0628\u062a\u0648\u0646\u0645 \u062a\u0645\u0631\u06a9\u0632 \u0631\u0648 \u0641\u0642\u0637 \u0628\u0631 \u0631\u0648\u06cc \u0639\u0634\u0642 \u062e\u0648\u062f\u0645 \u06cc\u0639\u0646\u06cc \u0633\u0626\u0648 \u0628\u0630\u0627\u0631\u0645\u060c \u0648\u0642\u062a\u06cc \u06a9\u0627\u0646\u0627\u0644 \u062a\u0644\u06af\u0631\u0627\u0645 \u0641\u0631\u0648\u062e\u062a\u0645 \u062d\u0633 \u067e\u0631\u0648\u0627\u0632 \u0628\u0647\u0645 \u062f\u0633\u062a \u062f\u0627\u062f\u060c \u0647\u0631\u0686\u0646\u062f \u062f\u0631\u0622\u0645\u062f \u0686\u0646\u062f\u06cc\u0646 \u0645\u06cc\u0644\u06cc\u0648\u0646 \u0645\u0627\u0647\u0627\u0646\u0647 \u0631\u0648 \u0627\u0632 \u062f\u0633\u062a \u062f\u0627\u062f\u0645 \u0648\u0644\u06cc \u062f\u0648\u0628\u0627\u0631\u0647 \u0628\u0627\u06cc\u062f \u0645\u062b\u0644 \u06af\u0630\u0634\u062a\u0647 \u0628\u0627 \u067e\u0648\u0633\u062a\u06cc \u0646\u0648 \u06cc\u06a9 \u0641\u0635\u0644\u06cc \u0646\u0648 \u0631\u0648 \u0645\u06cc\u0633\u0627\u062e\u062a\u0645. \u062f\u0631 \u0627\u06cc\u0646 \u0686\u0646\u062f\u06cc\u0646 \u0633\u0627\u0644 \u0641\u0639\u0627\u0644\u06cc\u062a\u200c\u0647\u0627\u06cc \u0633\u0626\u0648 \u0628\u0647 \u0634\u06a9\u0644 \u062a\u062e\u0635\u0635\u06cc \u0628\u0646\u062f\u0647 \u062f\u0631 \u0642\u0627\u0644\u0628 \u067e\u0631\u0648\u0698\u0647\u200c\u0647\u0627\u06cc \u0645\u062e\u062a\u0644\u0641 \u0648 \u0622\u0645\u0648\u0632\u0634\u200c\u0647\u0627\u06cc \u062d\u0636\u0648\u0631\u06cc \u0648 \u063a\u06cc\u0631\u062d\u0636\u0648\u0631\u06cc \u062f\u0631 \u062f\u0641\u062a\u0631 \u0645\u06cc\u0632\u0641\u0627 \u0648 \u062f\u0627\u0646\u0634\u06af\u0627\u0647 \u0639\u0644\u0627\u0645\u0647 \u0637\u0628\u0627\u0637\u0628\u0627\u06cc\u06cc \u062a\u0647\u0631\u0627\u0646 \u0635\u0648\u0631\u062a \u200c\u06af\u0631\u0641\u062a\u0647\u060c \u062a\u062c\u0631\u0628\u0647 \u0628\u0647\u06cc\u0646\u0647 \u0633\u0627\u0632\u06cc \u0645\u0648\u0641\u0642\u06cc \u062f\u0631 \u0628\u0647\u0628\u0648\u062f UX \u0648 CRO \u067e\u0631\u0648\u0698\u0647\u200c\u0647\u0627\u06cc \u0633\u0626\u0648 \u06a9\u0633\u0628 \u06a9\u0631\u062f\u0645. \u062f\u0631 \u0627\u06a9\u062b\u0631 \u0627\u0628\u0632\u0627\u0631\u0647\u0627\u06cc \u06a9\u0627\u0631\u0628\u0631\u062f\u06cc \u06af\u0648\u06af\u0644 \u062a\u0633\u0644\u0637 \u06a9\u0627\u0645\u0644\u06cc \u062f\u0627\u0631\u0645. \u0639\u0627\u0634\u0642 \u06a9\u0633\u0628 \u062a\u062c\u0631\u0628\u0647 \u0647\u0627\u06cc \u062c\u062f\u06cc\u062f \u0647\u0633\u062a\u0645. \u0631\u0627\u0632 \u067e\u06cc\u0634\u0631\u0641\u062a \u062f\u0631 \u0647\u0631 \u06a9\u0627\u0631\u06cc \u0631\u0648 \u06cc\u0627\u062f\u06af\u06cc\u0631\u06cc \u0648 \u06cc\u0627\u062f\u062f\u0627\u062f\u0646 \u0645\u06cc\u200c\u062f\u0648\u0646\u0645 \u0648 \u0645\u06cc\u0632\u0641\u0627 \u06a9\u0647 \u062f\u0631 \u0627\u0648\u0627\u062e\u0631 \u06f2\u06f0\u06f1\u06f6 \u0631\u0627\u0647\u200c\u0627\u0646\u062f\u0627\u0632\u06cc \u0634\u062f \u062a\u0648\u0646\u0633\u062a \u0686\u0646\u06cc\u0646 \u0628\u0633\u062a\u0631 \u0645\u0646\u0627\u0633\u0628\u06cc \u0631\u0648 \u0628\u0631\u0627\u0645 \u0641\u0631\u0627\u0647\u0645 \u06a9\u0646\u0647. \u0647\u0645\u06cc\u0646\u0637\u0648\u0631 \u062f\u0631 \u062d\u0627\u0644 \u062d\u0627\u0636\u0631 \u0645\u062f\u06cc\u0631\u06cc\u062a \u06cc\u06a9 \u062a\u06cc\u0645 \u06f1\u06f0 \u0646\u0641\u0631\u06cc \u0627\u0632 \u062c\u0648\u0627\u0646\u0627\u0646 \u0641\u0639\u0627\u0644 \u0648 \u067e\u0631\u0627\u0646\u06af\u06cc\u0632\u0647 \u0631\u0648 \u062f\u0631 \u0645\u06cc\u0632\u0641\u0627 \u0628\u0647 \u0639\u0647\u062f\u0647 \u062f\u0627\u0631\u0645. \u0646\u0642\u062f \u0648 \u0628\u0627\u0632\u062e\u0648\u0631\u062f\u0647\u0627\u06cc \u0633\u0627\u0632\u0646\u062f\u0647 \u0634\u0645\u0627\u060c \u062c\u0648\u0647\u0631 \u062a\u0644\u0627\u0634\u200c\u0647\u0627\u06cc \u0645\u0633\u062a\u0645\u0631 \u0645\u0627\u0633\u062a \u062a\u0627 \u06cc\u06a9 \u0642\u062f\u0645 \u062e\u0648\u062f\u0645\u0648\u0646 \u0628\u0647\u0628\u0648\u062f \u0628\u062f\u06cc\u0645. \u0645\u0646\u062a\u0638\u0631\u06cc\u0645 ...\",\"sameAs\":[\"https:\/\/ariafar.name\/?utm_source=mizfa-blog\",\"https:\/\/www.linkedin.com\/in\/pouriaariafar\/\"],\"url\":\"https:\/\/mizfa.com\/blog\/writer\/pouriaariafar\/\"}]}<\/script>\n<!-- \/ Yoast SEO plugin. -->","yoast_head_json":{"title":"\u0631\u0627\u0647\u0646\u0645\u0627\u06cc \u062c\u0627\u0645\u0639 \u0646\u062d\u0648\u0647 \u0633\u0627\u062e\u062a \u0641\u0627\u06cc\u0644 robots.txt \u0628\u0647 \u0647\u0645\u0631\u0627\u0647 8 \u0645\u062b\u0627\u0644 \u06a9\u0627\u0631\u0628\u0631\u062f\u06cc","description":"\u062f\u0631 \u0627\u06cc\u0646 \u0645\u0642\u0627\u0644\u0647 \u0628\u0647 \u062a\u0639\u0631\u06cc\u0641 \u0641\u0627\u06cc\u0644 robots.txt \u0686\u06cc\u0633\u062a \u0645\u06cc\u200c\u067e\u0631\u062f\u0627\u0632\u06cc\u0645 \u0648 \u0622\u0646\u06a9\u0647 \u0627\u06cc\u0646 \u0641\u0627\u06cc\u0644 \u0686\u0647 \u062a\u0627\u062b\u06cc\u0631\u06cc \u062f\u0631 \u0633\u0626\u0648 \u062f\u0627\u0631\u062f \u0648 \u0647\u0645\u06cc\u0646\u0637\u0648\u0631 \u062a\u0627\u062b\u06cc\u0631 \u0622\u0646 \u062f\u0631 \u0646\u062d\u0648\u0647 \u062e\u0632\u0634 \u0631\u0628\u0627\u062a\u200c\u0647\u0627 \u0686\u06af\u0648\u0646\u0647 \u0627\u0633\u062a. \u062f\u0631 \u0627\u06cc\u0646 \u0631\u0627\u0647\u0646\u0645\u0627\u06cc \u06a9\u0627\u0645\u0644 \u0628\u0647 \u0646\u062d\u0648\u0647 \u0627\u06cc\u062c\u0627\u062f \u0648 \u0633\u0627\u062e\u062a \u0641\u0627\u06cc\u0644 robots.txt \u062f\u0631 \u0648\u0631\u062f\u067e\u0631\u0633 \u0648 \u062c\u0648\u0645\u0644\u0627 \u0647\u0645 \u067e\u0631\u062f\u0627\u062e\u062a\u0647 \u0645\u06cc\u200c\u0634\u0648\u062f \u0648 \u0647\u0645\u06cc\u0646\u0637\u0648\u0631 \u0627\u0634\u062a\u0628\u0627\u0647\u200c\u0647\u0627\u06cc \u0631\u0627\u06cc\u062c \u062f\u0631 \u0627\u06cc\u062c\u0627\u062f \u0627\u06cc\u0646 \u0641\u0627\u06cc\u0644 \u0645\u0647\u0645.","robots":{"index":"index","follow":"follow","max-snippet":"max-snippet:-1","max-image-preview":"max-image-preview:large","max-video-preview":"max-video-preview:-1"},"canonical":"https:\/\/mizfa.com\/blog\/robots-txt\/","og_locale":"fa_IR","og_type":"article","og_title":"\u0631\u0627\u0647\u0646\u0645\u0627\u06cc \u062c\u0627\u0645\u0639 \u0646\u062d\u0648\u0647 \u0633\u0627\u062e\u062a \u0641\u0627\u06cc\u0644 robots.txt \u0628\u0647 \u0647\u0645\u0631\u0627\u0647 8 \u0645\u062b\u0627\u0644 \u06a9\u0627\u0631\u0628\u0631\u062f\u06cc","og_description":"\u062f\u0631 \u0627\u06cc\u0646 \u0645\u0642\u0627\u0644\u0647 \u0628\u0647 \u062a\u0639\u0631\u06cc\u0641 \u0641\u0627\u06cc\u0644 robots.txt \u0686\u06cc\u0633\u062a \u0645\u06cc\u200c\u067e\u0631\u062f\u0627\u0632\u06cc\u0645 \u0648 \u0622\u0646\u06a9\u0647 \u0627\u06cc\u0646 \u0641\u0627\u06cc\u0644 \u0686\u0647 \u062a\u0627\u062b\u06cc\u0631\u06cc \u062f\u0631 \u0633\u0626\u0648 \u062f\u0627\u0631\u062f \u0648 \u0647\u0645\u06cc\u0646\u0637\u0648\u0631 \u062a\u0627\u062b\u06cc\u0631 \u0622\u0646 \u062f\u0631 \u0646\u062d\u0648\u0647 \u062e\u0632\u0634 \u0631\u0628\u0627\u062a\u200c\u0647\u0627 \u0686\u06af\u0648\u0646\u0647 \u0627\u0633\u062a. \u062f\u0631 \u0627\u06cc\u0646 \u0631\u0627\u0647\u0646\u0645\u0627\u06cc \u06a9\u0627\u0645\u0644 \u0628\u0647 \u0646\u062d\u0648\u0647 \u0627\u06cc\u062c\u0627\u062f \u0648 \u0633\u0627\u062e\u062a \u0641\u0627\u06cc\u0644 robots.txt \u062f\u0631 \u0648\u0631\u062f\u067e\u0631\u0633 \u0648 \u062c\u0648\u0645\u0644\u0627 \u0647\u0645 \u067e\u0631\u062f\u0627\u062e\u062a\u0647 \u0645\u06cc\u200c\u0634\u0648\u062f \u0648 \u0647\u0645\u06cc\u0646\u0637\u0648\u0631 \u0627\u0634\u062a\u0628\u0627\u0647\u200c\u0647\u0627\u06cc \u0631\u0627\u06cc\u062c \u062f\u0631 \u0627\u06cc\u062c\u0627\u062f \u0627\u06cc\u0646 \u0641\u0627\u06cc\u0644 \u0645\u0647\u0645.","og_url":"https:\/\/mizfa.com\/blog\/robots-txt\/","og_site_name":"\u067e\u0627\u06cc\u06af\u0627\u0647 \u062f\u0627\u0646\u0634 \u0645\u06cc\u0632\u0641\u0627","article_published_time":"2017-06-30T13:35:37+00:00","article_modified_time":"2024-12-12T10:35:36+00:00","og_image":[{"width":800,"height":400,"url":"https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/what-is-robots-txt-file.jpg","type":"image\/jpeg"}],"author":"\u067e\u0648\u0631\u06cc\u0627 \u0622\u0631\u06cc\u0627\u0641\u0631","twitter_card":"summary_large_image","twitter_creator":"@mizfa_com","twitter_site":"@mizfa_com","twitter_misc":{"\u0646\u0648\u0634\u062a\u0647\u200c\u0634\u062f\u0647 \u0628\u062f\u0633\u062a":"\u067e\u0648\u0631\u06cc\u0627 \u0622\u0631\u06cc\u0627\u0641\u0631","\u0632\u0645\u0627\u0646 \u062a\u0642\u0631\u06cc\u0628\u06cc \u0628\u0631\u0627\u06cc \u062e\u0648\u0627\u0646\u062f\u0646":"14 \u062f\u0642\u06cc\u0642\u0647"},"schema":{"@context":"https:\/\/schema.org","@graph":[{"@type":"Article","@id":"https:\/\/mizfa.com\/blog\/robots-txt\/#article","isPartOf":{"@id":"https:\/\/mizfa.com\/blog\/robots-txt\/"},"author":{"name":"\u067e\u0648\u0631\u06cc\u0627 \u0622\u0631\u06cc\u0627\u0641\u0631","@id":"https:\/\/mizfa.com\/blog\/#\/schema\/person\/fd20beff56c133336db2acaf1d5691cf"},"headline":"\u0641\u0627\u06cc\u0644 robots.txt \u0648 \u0646\u062d\u0648\u0647 \u0633\u0627\u062e\u062a \u0622\u0646","datePublished":"2017-06-30T13:35:37+00:00","dateModified":"2024-12-12T10:35:36+00:00","mainEntityOfPage":{"@id":"https:\/\/mizfa.com\/blog\/robots-txt\/"},"wordCount":314,"commentCount":92,"publisher":{"@id":"https:\/\/mizfa.com\/blog\/#\/schema\/person\/fd20beff56c133336db2acaf1d5691cf"},"image":{"@id":"https:\/\/mizfa.com\/blog\/robots-txt\/#primaryimage"},"thumbnailUrl":"https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/what-is-robots-txt-file.jpg","keywords":["robots"],"articleSection":["\u0622\u0645\u0648\u0632\u0634 \u0633\u0626\u0648 \u067e\u06cc\u0634\u0631\u0641\u062a\u0647","\u0622\u0645\u0648\u0632\u0634 \u0633\u0626\u0648 \u0645\u0628\u062a\u062f\u06cc","\u0633\u0626\u0648 \u062f\u0627\u062e\u0644\u06cc"],"inLanguage":"fa-IR","potentialAction":[{"@type":"CommentAction","name":"Comment","target":["https:\/\/mizfa.com\/blog\/robots-txt\/#respond"]}]},{"@type":"WebPage","@id":"https:\/\/mizfa.com\/blog\/robots-txt\/","url":"https:\/\/mizfa.com\/blog\/robots-txt\/","name":"\u0631\u0627\u0647\u0646\u0645\u0627\u06cc \u062c\u0627\u0645\u0639 \u0646\u062d\u0648\u0647 \u0633\u0627\u062e\u062a \u0641\u0627\u06cc\u0644 robots.txt \u0628\u0647 \u0647\u0645\u0631\u0627\u0647 8 \u0645\u062b\u0627\u0644 \u06a9\u0627\u0631\u0628\u0631\u062f\u06cc","isPartOf":{"@id":"https:\/\/mizfa.com\/blog\/#website"},"primaryImageOfPage":{"@id":"https:\/\/mizfa.com\/blog\/robots-txt\/#primaryimage"},"image":{"@id":"https:\/\/mizfa.com\/blog\/robots-txt\/#primaryimage"},"thumbnailUrl":"https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/what-is-robots-txt-file.jpg","datePublished":"2017-06-30T13:35:37+00:00","dateModified":"2024-12-12T10:35:36+00:00","description":"\u062f\u0631 \u0627\u06cc\u0646 \u0645\u0642\u0627\u0644\u0647 \u0628\u0647 \u062a\u0639\u0631\u06cc\u0641 \u0641\u0627\u06cc\u0644 robots.txt \u0686\u06cc\u0633\u062a \u0645\u06cc\u200c\u067e\u0631\u062f\u0627\u0632\u06cc\u0645 \u0648 \u0622\u0646\u06a9\u0647 \u0627\u06cc\u0646 \u0641\u0627\u06cc\u0644 \u0686\u0647 \u062a\u0627\u062b\u06cc\u0631\u06cc \u062f\u0631 \u0633\u0626\u0648 \u062f\u0627\u0631\u062f \u0648 \u0647\u0645\u06cc\u0646\u0637\u0648\u0631 \u062a\u0627\u062b\u06cc\u0631 \u0622\u0646 \u062f\u0631 \u0646\u062d\u0648\u0647 \u062e\u0632\u0634 \u0631\u0628\u0627\u062a\u200c\u0647\u0627 \u0686\u06af\u0648\u0646\u0647 \u0627\u0633\u062a. \u062f\u0631 \u0627\u06cc\u0646 \u0631\u0627\u0647\u0646\u0645\u0627\u06cc \u06a9\u0627\u0645\u0644 \u0628\u0647 \u0646\u062d\u0648\u0647 \u0627\u06cc\u062c\u0627\u062f \u0648 \u0633\u0627\u062e\u062a \u0641\u0627\u06cc\u0644 robots.txt \u062f\u0631 \u0648\u0631\u062f\u067e\u0631\u0633 \u0648 \u062c\u0648\u0645\u0644\u0627 \u0647\u0645 \u067e\u0631\u062f\u0627\u062e\u062a\u0647 \u0645\u06cc\u200c\u0634\u0648\u062f \u0648 \u0647\u0645\u06cc\u0646\u0637\u0648\u0631 \u0627\u0634\u062a\u0628\u0627\u0647\u200c\u0647\u0627\u06cc \u0631\u0627\u06cc\u062c \u062f\u0631 \u0627\u06cc\u062c\u0627\u062f \u0627\u06cc\u0646 \u0641\u0627\u06cc\u0644 \u0645\u0647\u0645.","breadcrumb":{"@id":"https:\/\/mizfa.com\/blog\/robots-txt\/#breadcrumb"},"inLanguage":"fa-IR","potentialAction":[{"@type":"ReadAction","target":["https:\/\/mizfa.com\/blog\/robots-txt\/"]}]},{"@type":"ImageObject","inLanguage":"fa-IR","@id":"https:\/\/mizfa.com\/blog\/robots-txt\/#primaryimage","url":"https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/what-is-robots-txt-file.jpg","contentUrl":"https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2017\/06\/what-is-robots-txt-file.jpg","width":800,"height":400,"caption":"\u0641\u0627\u06cc\u0644 robots.txt \u0686\u06cc\u0633\u062a"},{"@type":"BreadcrumbList","@id":"https:\/\/mizfa.com\/blog\/robots-txt\/#breadcrumb","itemListElement":[{"@type":"ListItem","position":1,"name":"\u062e\u0627\u0646\u0647","item":"https:\/\/mizfa.com\/blog\/"},{"@type":"ListItem","position":2,"name":"\u0622\u0631\u0634\u06cc\u0648 \u0633\u0626\u0648","item":"https:\/\/mizfa.com\/blog\/category\/seo\/"},{"@type":"ListItem","position":3,"name":"\u0645\u0642\u0627\u0644\u0627\u062a \u0633\u0626\u0648","item":"https:\/\/mizfa.com\/blog\/category\/seo\/seo-articles\/"},{"@type":"ListItem","position":4,"name":"\u0633\u0626\u0648 \u062f\u0627\u062e\u0644\u06cc","item":"https:\/\/mizfa.com\/blog\/category\/seo\/seo-articles\/on-page\/"},{"@type":"ListItem","position":5,"name":"\u0641\u0627\u06cc\u0644 robots.txt \u0648 \u0646\u062d\u0648\u0647 \u0633\u0627\u062e\u062a \u0622\u0646"}]},{"@type":"WebSite","@id":"https:\/\/mizfa.com\/blog\/#website","url":"https:\/\/mizfa.com\/blog\/","name":"\u067e\u0627\u06cc\u06af\u0627\u0647 \u062f\u0627\u0646\u0634 \u0645\u06cc\u0632\u0641\u0627","description":"\u067e\u0627\u06cc\u06af\u0627\u0647 \u062f\u0627\u0646\u0634 \u0633\u0627\u06cc\u062a \u0645\u06cc\u0632\u0641\u0627 - \u0628\u0644\u0627\u06af \u0645\u06cc\u0632\u0641\u0627 \u062f\u0631 \u062e\u0648\u0632\u0647 \u0622\u0645\u0648\u0632\u0634 \u0637\u0631\u0627\u062d\u06cc \u0633\u0627\u06cc\u062a \u060c \u0622\u0645\u0648\u0632\u0634 \u0633\u0626\u0648 \u0648 \u0628\u0647\u06cc\u0646\u0647 \u0633\u0627\u0632\u06cc \u0633\u0627\u06cc\u062a \u0648 \u0647\u0645\u0686\u0646\u06cc\u0646 \u0622\u0645\u0648\u0632\u0634 \u0627\u0641\u0632\u0627\u06cc\u0634 \u0633\u0631\u0639\u062a \u0633\u0627\u06cc\u062a \u0641\u0639\u0627\u0644\u06cc\u062a \u0645\u06cc\u200c\u06a9\u0646\u062f.","publisher":{"@id":"https:\/\/mizfa.com\/blog\/#\/schema\/person\/fd20beff56c133336db2acaf1d5691cf"},"potentialAction":[{"@type":"SearchAction","target":{"@type":"EntryPoint","urlTemplate":"https:\/\/mizfa.com\/blog\/?s={search_term_string}"},"query-input":{"@type":"PropertyValueSpecification","valueRequired":true,"valueName":"search_term_string"}}],"inLanguage":"fa-IR"},{"@type":["Person","Organization"],"@id":"https:\/\/mizfa.com\/blog\/#\/schema\/person\/fd20beff56c133336db2acaf1d5691cf","name":"\u067e\u0648\u0631\u06cc\u0627 \u0622\u0631\u06cc\u0627\u0641\u0631","image":{"@type":"ImageObject","inLanguage":"fa-IR","@id":"https:\/\/mizfa.com\/blog\/#\/schema\/person\/image\/","url":"https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2019\/02\/mizfa-watermark.png","contentUrl":"https:\/\/mizfa.com\/blog\/wp-content\/uploads\/2019\/02\/mizfa-watermark.png","width":600,"height":600,"caption":"\u067e\u0648\u0631\u06cc\u0627 \u0622\u0631\u06cc\u0627\u0641\u0631"},"logo":{"@id":"https:\/\/mizfa.com\/blog\/#\/schema\/person\/image\/"},"description":"\u0627\u0648\u0644\u06cc\u0646 \u06a9\u0633\u0628 \u0648 \u06a9\u0627\u0631 \u0622\u0646\u0644\u0627\u06cc\u0646 \u062e\u0648\u062f\u0645 \u0631\u0648 \u062f\u0631 \u0641\u06cc\u0633\u0628\u0648\u06a9 \u0631\u0627\u0647\u200c\u0627\u0646\u062f\u0627\u0632\u06cc \u06a9\u0631\u062f\u0645\u060c \u0633\u0627\u0644 \u06f2\u06f0\u06f1\u06f1 \u06cc\u06a9\u06cc \u0627\u0632 \u067e\u0631\u062a\u0639\u0627\u0645\u0644\u200c\u062a\u0631\u06cc\u0646 \u0635\u0641\u062d\u0627\u062a \u0641\u0627\u0631\u0633\u06cc \u0628\u0627 \u06f8\u06f0 \u0647\u0632\u0627\u0631 \u0641\u0627\u0644\u0648\u0631 \u0641\u0639\u0627\u0644 \u0631\u0648 \u062f\u0627\u0634\u062a\u0645. \u0628\u0639\u062f \u0627\u06cc\u0646\u06a9\u0647 \u0641\u06cc\u0633\u0628\u0648\u06a9 \u062e\u0627\u0644\u06cc \u0627\u0632 \u06a9\u0627\u0631\u0628\u0631 \u0627\u06cc\u0631\u0627\u0646\u06cc \u0634\u062f \u0648\u0627\u0631\u062f \u062f\u0646\u06cc\u0627\u06cc \u0634\u0628\u06a9\u0647 \u0634\u062f\u0645 \u0648 \u062f\u0631 \u0627\u0646\u062a\u0647\u0627\u06cc \u0633\u0627\u0644 \u06f2\u06f0\u06f1\u06f2 \u0645\u062f\u0631\u06a9 MCSE \u0645\u0627\u06cc\u06a9\u0631\u0648\u0633\u0627\u0641\u062a \u0631\u0648 \u062f\u0631\u06cc\u0627\u0641\u062a \u06a9\u0631\u062f\u0645\u060c \u062f\u0631 \u062d\u0627\u0644\u06cc \u06a9\u0647 \u0646\u0645\u0631\u0647 \u0628\u0627\u0644\u0627 \u06af\u0631\u0641\u062a\u0645 \u0648\u0644\u06cc \u06a9\u0633\u06cc \u0628\u0647 \u062f\u0644\u06cc\u0644 \u0628\u0647 \u062e\u0637\u0631 \u0627\u0641\u062a\u0627\u062f\u0646 \u0645\u0648\u0642\u0639\u06cc\u062a \u0634\u063a\u0644\u06cc \u062e\u0648\u062f\u0634 \u0628\u0647 \u0639\u0646\u0648\u0627\u0646 \u06a9\u0627\u0631\u0622\u0645\u0648\u0632 \u0645\u0646\u0648 \u0642\u0628\u0648\u0644 \u0646\u0645\u06cc\u200c\u06a9\u0631\u062f\u060c \u0628\u0639\u062f\u0634 \u0628\u0627 \u0634\u0631\u0648\u0639 \u062f\u0648\u0631\u0627\u0646 \u062e\u062f\u0645\u062a \u0633\u0631\u0628\u0627\u0632\u06cc\u060c \u0645\u0633\u0626\u0648\u0644 \u0628\u0647\u06cc\u0646\u0647 \u0633\u0627\u0632\u06cc \u06cc\u06a9 \u0633\u0627\u06cc\u062a \u062e\u0628\u0631\u06cc \u0645\u0639\u062a\u0628\u0631 \u0634\u062f\u0645 \u0648 \u0633\u0626\u0648 \u06cc\u0627\u062f \u06af\u0631\u0641\u062a\u0645. \u062f\u0631 \u0627\u0628\u062a\u062f\u0627\u06cc \u0633\u0627\u0644 \u06f2\u06f0\u06f1\u06f4 \u062a\u0648\u0646\u0633\u062a\u0645 \u0627\u0632 \u0631\u062a\u0628\u0647 \u06f1\u06f5\u06f0\u06f0\u06f0 \u0628\u0647 \u06f4\u06f0\u06f0 \u0627\u0644\u06a9\u0633\u0627 \u0646\u0632\u062f\u06cc\u06a9 \u06a9\u0646\u0645\u060c \u0627\u0648\u0646 \u0632\u0645\u0627\u0646 \u0627\u0644\u06a9\u0633\u0627 \u062e\u06cc\u0644\u06cc \u0645\u0647\u0645 \u0628\u0648\u062f. \u0648\u0627\u0631\u062f \u062f\u0627\u0646\u0634\u06af\u0627\u0647 \u0634\u062f\u0645\u060c \u0628\u0647 \u062f\u0644\u06cc\u0644 \u0639\u062f\u0645 \u0639\u0644\u0627\u0642\u0647 \u0628\u0647 \u062f\u0627\u0646\u0634\u06af\u0627\u0647 \u0633\u0639\u06cc \u06a9\u0631\u062f\u0645 \u0632\u0648\u062f\u062a\u0631 \u062a\u0645\u0648\u0645\u0634 \u06a9\u0646\u0645 \u0648 \u0633\u0647 \u0633\u0627\u0644\u0647 \u062f\u0631 \u0645\u0642\u0637\u0639 \u06a9\u0627\u0631\u0634\u0646\u0627\u0633\u06cc IT \u0641\u0627\u0631\u063a \u0627\u0644\u062a\u062d\u0635\u06cc\u0644 \u0634\u062f\u0645\u060c \u062a\u0648\u06cc \u062f\u0627\u0646\u0634\u06af\u0627\u0647 \u0647\u0631 \u06a9\u0633\u06cc \u0645\u0646\u0648 \u0645\u06cc\u062f\u06cc\u062f \u06cc\u0627\u062f \u0633\u0626\u0648 \u0645\u06cc\u0648\u0641\u062a\u0627\u062f\u060c \u062f\u0631 \u0647\u0645\u0648\u0646 \u0633\u0627\u0644 \u0622\u062e\u0631 \u062f\u0627\u0646\u0634\u06af\u0627\u0647 \u0628\u0632\u0631\u06af\u200c\u062a\u0631\u06cc\u0646 \u06a9\u0627\u0646\u0627\u0644 \u062a\u0644\u06af\u0631\u0627\u0645\u06cc IT \u0628\u0627 \u06f4\u06f0 \u0647\u0632\u0627\u0631 \u0639\u0636\u0648 \u0631\u0648 \u062f\u0627\u0634\u062a\u0645\u060c \u06a9\u0647 \u0628\u0647 \u0645\u062c\u062a\u0645\u0639 \u0641\u0646\u06cc \u0641\u0631\u0648\u062e\u062a\u0645 \u062a\u0627 \u0628\u062a\u0648\u0646\u0645 \u062a\u0645\u0631\u06a9\u0632 \u0631\u0648 \u0641\u0642\u0637 \u0628\u0631 \u0631\u0648\u06cc \u0639\u0634\u0642 \u062e\u0648\u062f\u0645 \u06cc\u0639\u0646\u06cc \u0633\u0626\u0648 \u0628\u0630\u0627\u0631\u0645\u060c \u0648\u0642\u062a\u06cc \u06a9\u0627\u0646\u0627\u0644 \u062a\u0644\u06af\u0631\u0627\u0645 \u0641\u0631\u0648\u062e\u062a\u0645 \u062d\u0633 \u067e\u0631\u0648\u0627\u0632 \u0628\u0647\u0645 \u062f\u0633\u062a \u062f\u0627\u062f\u060c \u0647\u0631\u0686\u0646\u062f \u062f\u0631\u0622\u0645\u062f \u0686\u0646\u062f\u06cc\u0646 \u0645\u06cc\u0644\u06cc\u0648\u0646 \u0645\u0627\u0647\u0627\u0646\u0647 \u0631\u0648 \u0627\u0632 \u062f\u0633\u062a \u062f\u0627\u062f\u0645 \u0648\u0644\u06cc \u062f\u0648\u0628\u0627\u0631\u0647 \u0628\u0627\u06cc\u062f \u0645\u062b\u0644 \u06af\u0630\u0634\u062a\u0647 \u0628\u0627 \u067e\u0648\u0633\u062a\u06cc \u0646\u0648 \u06cc\u06a9 \u0641\u0635\u0644\u06cc \u0646\u0648 \u0631\u0648 \u0645\u06cc\u0633\u0627\u062e\u062a\u0645. \u062f\u0631 \u0627\u06cc\u0646 \u0686\u0646\u062f\u06cc\u0646 \u0633\u0627\u0644 \u0641\u0639\u0627\u0644\u06cc\u062a\u200c\u0647\u0627\u06cc \u0633\u0626\u0648 \u0628\u0647 \u0634\u06a9\u0644 \u062a\u062e\u0635\u0635\u06cc \u0628\u0646\u062f\u0647 \u062f\u0631 \u0642\u0627\u0644\u0628 \u067e\u0631\u0648\u0698\u0647\u200c\u0647\u0627\u06cc \u0645\u062e\u062a\u0644\u0641 \u0648 \u0622\u0645\u0648\u0632\u0634\u200c\u0647\u0627\u06cc \u062d\u0636\u0648\u0631\u06cc \u0648 \u063a\u06cc\u0631\u062d\u0636\u0648\u0631\u06cc \u062f\u0631 \u062f\u0641\u062a\u0631 \u0645\u06cc\u0632\u0641\u0627 \u0648 \u062f\u0627\u0646\u0634\u06af\u0627\u0647 \u0639\u0644\u0627\u0645\u0647 \u0637\u0628\u0627\u0637\u0628\u0627\u06cc\u06cc \u062a\u0647\u0631\u0627\u0646 \u0635\u0648\u0631\u062a \u200c\u06af\u0631\u0641\u062a\u0647\u060c \u062a\u062c\u0631\u0628\u0647 \u0628\u0647\u06cc\u0646\u0647 \u0633\u0627\u0632\u06cc \u0645\u0648\u0641\u0642\u06cc \u062f\u0631 \u0628\u0647\u0628\u0648\u062f UX \u0648 CRO \u067e\u0631\u0648\u0698\u0647\u200c\u0647\u0627\u06cc \u0633\u0626\u0648 \u06a9\u0633\u0628 \u06a9\u0631\u062f\u0645. \u062f\u0631 \u0627\u06a9\u062b\u0631 \u0627\u0628\u0632\u0627\u0631\u0647\u0627\u06cc \u06a9\u0627\u0631\u0628\u0631\u062f\u06cc \u06af\u0648\u06af\u0644 \u062a\u0633\u0644\u0637 \u06a9\u0627\u0645\u0644\u06cc \u062f\u0627\u0631\u0645. \u0639\u0627\u0634\u0642 \u06a9\u0633\u0628 \u062a\u062c\u0631\u0628\u0647 \u0647\u0627\u06cc \u062c\u062f\u06cc\u062f \u0647\u0633\u062a\u0645. \u0631\u0627\u0632 \u067e\u06cc\u0634\u0631\u0641\u062a \u062f\u0631 \u0647\u0631 \u06a9\u0627\u0631\u06cc \u0631\u0648 \u06cc\u0627\u062f\u06af\u06cc\u0631\u06cc \u0648 \u06cc\u0627\u062f\u062f\u0627\u062f\u0646 \u0645\u06cc\u200c\u062f\u0648\u0646\u0645 \u0648 \u0645\u06cc\u0632\u0641\u0627 \u06a9\u0647 \u062f\u0631 \u0627\u0648\u0627\u062e\u0631 \u06f2\u06f0\u06f1\u06f6 \u0631\u0627\u0647\u200c\u0627\u0646\u062f\u0627\u0632\u06cc \u0634\u062f \u062a\u0648\u0646\u0633\u062a \u0686\u0646\u06cc\u0646 \u0628\u0633\u062a\u0631 \u0645\u0646\u0627\u0633\u0628\u06cc \u0631\u0648 \u0628\u0631\u0627\u0645 \u0641\u0631\u0627\u0647\u0645 \u06a9\u0646\u0647. \u0647\u0645\u06cc\u0646\u0637\u0648\u0631 \u062f\u0631 \u062d\u0627\u0644 \u062d\u0627\u0636\u0631 \u0645\u062f\u06cc\u0631\u06cc\u062a \u06cc\u06a9 \u062a\u06cc\u0645 \u06f1\u06f0 \u0646\u0641\u0631\u06cc \u0627\u0632 \u062c\u0648\u0627\u0646\u0627\u0646 \u0641\u0639\u0627\u0644 \u0648 \u067e\u0631\u0627\u0646\u06af\u06cc\u0632\u0647 \u0631\u0648 \u062f\u0631 \u0645\u06cc\u0632\u0641\u0627 \u0628\u0647 \u0639\u0647\u062f\u0647 \u062f\u0627\u0631\u0645. \u0646\u0642\u062f \u0648 \u0628\u0627\u0632\u062e\u0648\u0631\u062f\u0647\u0627\u06cc \u0633\u0627\u0632\u0646\u062f\u0647 \u0634\u0645\u0627\u060c \u062c\u0648\u0647\u0631 \u062a\u0644\u0627\u0634\u200c\u0647\u0627\u06cc \u0645\u0633\u062a\u0645\u0631 \u0645\u0627\u0633\u062a \u062a\u0627 \u06cc\u06a9 \u0642\u062f\u0645 \u062e\u0648\u062f\u0645\u0648\u0646 \u0628\u0647\u0628\u0648\u062f \u0628\u062f\u06cc\u0645. \u0645\u0646\u062a\u0638\u0631\u06cc\u0645 ...","sameAs":["https:\/\/ariafar.name\/?utm_source=mizfa-blog","https:\/\/www.linkedin.com\/in\/pouriaariafar\/"],"url":"https:\/\/mizfa.com\/blog\/writer\/pouriaariafar\/"}]}},"_links":{"self":[{"href":"https:\/\/mizfa.com\/blog\/wp-json\/wp\/v2\/posts\/2245","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/mizfa.com\/blog\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/mizfa.com\/blog\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/mizfa.com\/blog\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/mizfa.com\/blog\/wp-json\/wp\/v2\/comments?post=2245"}],"version-history":[{"count":18,"href":"https:\/\/mizfa.com\/blog\/wp-json\/wp\/v2\/posts\/2245\/revisions"}],"predecessor-version":[{"id":23007,"href":"https:\/\/mizfa.com\/blog\/wp-json\/wp\/v2\/posts\/2245\/revisions\/23007"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/mizfa.com\/blog\/wp-json\/wp\/v2\/media\/2352"}],"wp:attachment":[{"href":"https:\/\/mizfa.com\/blog\/wp-json\/wp\/v2\/media?parent=2245"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/mizfa.com\/blog\/wp-json\/wp\/v2\/categories?post=2245"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/mizfa.com\/blog\/wp-json\/wp\/v2\/tags?post=2245"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}