# Korean with Madie — koreanmadie.study # # Параметр ?go= НЕ закрываем: именно на /?go=lessons ведут кнопки с тематических # страниц. Дубли главной с параметром снимает canonical в index.html, а Disallow # запрещал бы краулеру и ассистенту пройти по нашей же основной ссылке. # # ВАЖНО про формат: краулер подчиняется ТОЛЬКО ОДНОЙ группе — самой конкретной, # где нашёл своё имя. Группа для GPTBot не наследует Disallow из группы «*». # Поэтому запреты продублированы в КАЖДОЙ группе: иначе именной бот получал бы # доступ к платным банкам TOPIK, экзаменационному аудио и рабочим материалам. User-agent: * Allow: / Disallow: /delete-account.html Disallow: /firebase-messaging-sw.js Disallow: /assets/topik/ Disallow: /assets/topik1/ Disallow: /assets/topik2/ Disallow: /assets/ref/ Disallow: /assets/materials/ Disallow: /assets/photos/ # ── AI-краулеры: сайт хочет быть найденным ассистентами, но платный контент закрыт ── User-agent: GPTBot Allow: / Disallow: /delete-account.html Disallow: /firebase-messaging-sw.js Disallow: /assets/topik/ Disallow: /assets/topik1/ Disallow: /assets/topik2/ Disallow: /assets/ref/ Disallow: /assets/materials/ Disallow: /assets/photos/ User-agent: OAI-SearchBot Allow: / Disallow: /delete-account.html Disallow: /firebase-messaging-sw.js Disallow: /assets/topik/ Disallow: /assets/topik1/ Disallow: /assets/topik2/ Disallow: /assets/ref/ Disallow: /assets/materials/ Disallow: /assets/photos/ User-agent: ClaudeBot Allow: / Disallow: /delete-account.html Disallow: /firebase-messaging-sw.js Disallow: /assets/topik/ Disallow: /assets/topik1/ Disallow: /assets/topik2/ Disallow: /assets/ref/ Disallow: /assets/materials/ Disallow: /assets/photos/ User-agent: Claude-SearchBot Allow: / Disallow: /delete-account.html Disallow: /firebase-messaging-sw.js Disallow: /assets/topik/ Disallow: /assets/topik1/ Disallow: /assets/topik2/ Disallow: /assets/ref/ Disallow: /assets/materials/ Disallow: /assets/photos/ User-agent: PerplexityBot Allow: / Disallow: /delete-account.html Disallow: /firebase-messaging-sw.js Disallow: /assets/topik/ Disallow: /assets/topik1/ Disallow: /assets/topik2/ Disallow: /assets/ref/ Disallow: /assets/materials/ Disallow: /assets/photos/ User-agent: Google-Extended Allow: / Disallow: /delete-account.html Disallow: /firebase-messaging-sw.js Disallow: /assets/topik/ Disallow: /assets/topik1/ Disallow: /assets/topik2/ Disallow: /assets/ref/ Disallow: /assets/materials/ Disallow: /assets/photos/ User-agent: Bingbot Allow: / Disallow: /delete-account.html Disallow: /firebase-messaging-sw.js Disallow: /assets/topik/ Disallow: /assets/topik1/ Disallow: /assets/topik2/ Disallow: /assets/ref/ Disallow: /assets/materials/ Disallow: /assets/photos/ Sitemap: https://koreanmadie.study/sitemap.xml