どんなときに読むか
- サイトスキャン:KnownFor の利用者が、自社のサイト、または持ち主の許可を得たサイトを点検するとき。利用者はこの決まりに同意しており、だれが・いつ・どのサイトを調べたかを KnownFor が記録しています。
- 市場の観測:業種ごとに、公開されているページ(料金・機能・事例など)の変化を記録するとき。同じページは1日1回までです。
何を読むか
- 読むもの:robots.txt、サイトマップ、ログインなしで誰でも見られるページ。
- 読まないもの:ログインの奥のページ。入力欄への送信もしません。JavaScript も実行しません。
- しないこと:攻撃・侵入・弱点を突く操作・大量のアクセス。
- 証明書の期限とメールの送り主の設定(SPF・DMARC)は、公開の記録(Certificate Transparency・公開の DNS)を見るだけで、サイトには何も送りません。
読み方の決まり
| 名乗り | Mozilla/5.0 (compatible; KnownFor-PageCheck/1.0; +https://www.knownfor.jp/bot) |
| robots.txt | 従います。KnownFor-PageCheck を名指しした決まりがあればそれに、無ければ * の決まりに従い、止められたページは読みません。 |
| 量 | 同時に4つまで。1ページ10秒・2MB で打ち切り。1回のスキャンで300ページまで(詳しい点検は500ページまで)。同じサイトを7日以内にもう一度頼まれたら、前の結果を使います。 |
| 送り元 | Cloudflare のネットワーク(Workers)から送ります。IP は Cloudflare のものです。Cloudflare の仕組みで、要求に CF-Worker: knownfor.jp が付きます。 |
このほか、KnownFor のお客様が自社のサイトの持ち主の確認やつながりの確認をするとき、KnownFor-SiteVerify・KnownFor-SiteCheck の名前で、決まったファイルやトップページを1回だけ読みます。
止めたいとき
サイトの robots.txt に、次の2行を書いてください。次の読み取りから止まります。
User-agent: KnownFor-PageCheck
Disallow: /
一部のページだけ止めることもできます(例:Disallow: /private/)。
お問い合わせ
読み取りについてのご質問・止めるご依頼は、info@knownfor.jp へ。どのサイトについてかを書いてください。記録を確認してお答えします。
運営:株式会社アーグマックス(会社情報)
About KnownFor-PageCheck
KnownFor-PageCheck is the name KnownFor (Argmax Co., Ltd.) uses when it reads public web pages. If you found it in your logs, this page explains what it does and how to stop it.
When it reads your site
- Site scans: when a KnownFor user checks their own site, or a site whose owner has given permission. Users agree to this rule, and KnownFor records who scanned which site, and when.
- Market observation: when we record changes to public pages (pricing, features, case studies, etc.) in an industry. Each page is read at most once a day.
What it reads
- Reads: robots.txt, sitemaps, and pages anyone can see without logging in.
- Does not read: pages behind a login. It does not submit forms and does not run JavaScript.
- Never does: attacks, intrusion, exploiting vulnerabilities, or heavy traffic.
- Certificate expiry and email sender settings (SPF, DMARC) are taken from public records (Certificate Transparency and public DNS). Nothing is sent to your site for these.
How it reads
| User-Agent | Mozilla/5.0 (compatible; KnownFor-PageCheck/1.0; +https://www.knownfor.jp/bot) |
| robots.txt | Respected. If a group names KnownFor-PageCheck, we follow it; otherwise we follow *. Disallowed pages are not read. |
| Volume | Up to 4 requests at a time. Each page stops at 10 seconds or 2 MB. Up to 300 pages per scan (500 for a detailed check). If the same site is requested again within 7 days, the previous result is reused. |
| Source | Requests come from Cloudflare's network (Workers), so the IP addresses are Cloudflare's. Cloudflare adds CF-Worker: knownfor.jp to these requests. |
In addition, when a KnownFor customer verifies ownership of, or the connection to, their own site, we read a specific file or the home page once, as KnownFor-SiteVerify or KnownFor-SiteCheck.
How to stop it
Add these two lines to your site's robots.txt. Reading stops from the next visit.
User-agent: KnownFor-PageCheck
Disallow: /
You can also block only part of your site (for example, Disallow: /private/).
Contact
For questions or to ask us to stop, email info@knownfor.jp and tell us which site it is about. We will check our records and reply.
Operated by Argmax Co., Ltd. (株式会社アーグマックス) — Company information
언제 읽나요
- 사이트 스캔: KnownFor 이용자가 자사 사이트 또는 소유자의 허가를 받은 사이트를 점검할 때. 이용자는 이 규칙에 동의했으며, 누가·언제·어느 사이트를 조사했는지 KnownFor가 기록해요.
- 시장 관측: 업종별로 공개된 페이지(요금·기능·사례 등)의 변화를 기록할 때. 같은 페이지는 하루 1번까지예요.
무엇을 읽나요
- 읽는 것: robots.txt, 사이트맵, 로그인 없이 누구나 볼 수 있는 페이지.
- 읽지 않는 것: 로그인 안쪽의 페이지. 입력란 전송과 JavaScript 실행도 하지 않아요.
- 하지 않는 것: 공격·침입·취약점을 이용한 조작·대량 접속.
- 인증서 기한과 메일 발신자 설정(SPF·DMARC)은 공개 기록(Certificate Transparency·공개 DNS)만 보며, 사이트에는 아무것도 보내지 않아요.
읽는 방식
| User-Agent | Mozilla/5.0 (compatible; KnownFor-PageCheck/1.0; +https://www.knownfor.jp/bot) |
| robots.txt | 따라요. KnownFor-PageCheck를 지정한 규칙이 있으면 그것을, 없으면 *의 규칙을 따르며, 막힌 페이지는 읽지 않아요. |
| 양 | 동시에 4개까지. 1페이지 10초·2MB에서 중단. 1회 스캔에 300페이지까지(자세한 점검은 500페이지까지). 같은 사이트를 7일 이내에 다시 요청하면 이전 결과를 써요. |
| 발신 위치 | Cloudflare 네트워크(Workers)에서 보내요. IP는 Cloudflare의 것이에요. Cloudflare의 구조상 요청에 CF-Worker: knownfor.jp가 붙어요. |
이 밖에 KnownFor 고객이 자사 사이트의 소유자 확인이나 연결 확인을 할 때, KnownFor-SiteVerify·KnownFor-SiteCheck라는 이름으로 정해진 파일이나 첫 페이지를 1번만 읽어요.
멈추고 싶을 때
사이트의 robots.txt에 다음 두 줄을 적어 주세요. 다음 읽기부터 멈춰요.
User-agent: KnownFor-PageCheck
Disallow: /
일부 페이지만 막을 수도 있어요(예: Disallow: /private/).
문의
읽기에 관한 질문이나 중지 요청은 info@knownfor.jp로 보내 주세요. 어느 사이트에 관한 것인지 적어 주시면, 기록을 확인해 답해 드려요.
운영: 株式会社アーグマックス (회사 정보)