私たちは、あなたに喜ばしいお知らせがあります。BuiltWithが今度はllms.txtを実装したウェブサイトを追跡することができるようになりました。これは、サイトのオーナーがAIやLLMsによって自分のコンテンツがどのように利用されるかを宣言できる新しい標準です。これは、robots.txtと同じものですが、大規模な言語モデルにとってのもので、llms.txtにより、ウェブサイトは自分のデータがどのようにアクセス・利用されるかをより多くコントロールできるようになります。今や、このファイルをルートディレクトリに追加したドメインのフルダウンロード可能なリストを探索できます。📥
AIの研究者であったり、データ倫理の提唱者であったり、ただ単にLLM領域での採用動向に興味がある方であれ、この新しいデータセットはまさに宝物です。🧠💡....