Недостаток открытых данных для обучения ИИ стал серьезной проблемой. Исследование MIT выявило, что значительная часть ценных веб-данных теперь скрыта за “кризисом согласия”. Около 5% всех данных и 25% наиболее ценных данных ограничены протоколом “исключения роботов” (Robots Exclusion Protocol), запрещающим автоматический сбор данных. Кроме того, почти половина данных из набора данных C4 теперь ограничена условиями обслуживания […]
