Добавить новость

Ученый Тихоцкий: внутреннее ядро Земли не остановится к 2040 году

Стало известно о подорожании проезда по М-4 «Дон»

На рынок выходит первый отечественный препарат для похудения «Тирзетта»

Маршрут настроен: на Каспийском форуме обсудили коридор «Север — Юг»



Новости сегодня

Новости от TheMoneytizer

Масштабирование парсера Yandex Sphere

Я ищу консультацию или кого-то, кто может помочь мне с этой проблемой. А именно, у меня есть парсер, который однопоточно загружает комментарии/посты из youtube api и других api(telegram, vk).

Я хотел бы расширить его возможности для загрузки миллионов постов в день в режиме реального времени. В качестве инфры я хочу использовать облако (Yandex Sphere). Я подозреваю, что вам понадобится ротация IP-адресов, прокси и т. д., чтобы обойти ограничения. Эти данные также нужно где-то хранить, так как потом они будут использоваться для обучения LLM. Итак: нужен кто-то, кто уже разрабатывал такие многопоточные парсеры и:

- даст мне несколько часов консультации, где посоветует, что и как настроить

В любом случае, я бы попросил назвать цену и сроки (бюджет корпоративный и довольно большой, так что о деньгах не беспокойтесь). И я прошу серьезных предложений (я потерял более 2 недель на людей, которые предложили мне решения из чата gpt или 1 страницы google).

Читайте на 123ru.net


Новости 24/7 DirectAdvert - доход для вашего сайта



Частные объявления в Вашем городе, в Вашем регионе и в России



Smi24.net — ежеминутные новости с ежедневным архивом. Только у нас — все главные новости дня без политической цензуры. "123 Новости" — абсолютно все точки зрения, трезвая аналитика, цивилизованные споры и обсуждения без взаимных обвинений и оскорблений. Помните, что не у всех точка зрения совпадает с Вашей. Уважайте мнение других, даже если Вы отстаиваете свой взгляд и свою позицию. Smi24.net — облегчённая версия старейшего обозревателя новостей 123ru.net. Мы не навязываем Вам своё видение, мы даём Вам срез событий дня без цензуры и без купюр. Новости, какие они есть —онлайн с поминутным архивом по всем городам и регионам России, Украины, Белоруссии и Абхазии. Smi24.net — живые новости в живом эфире! Быстрый поиск от Smi24.net — это не только возможность первым узнать, но и преимущество сообщить срочные новости мгновенно на любом языке мира и быть услышанным тут же. В любую минуту Вы можете добавить свою новость - здесь.




Новости от наших партнёров в Вашем городе

Ria.city

Маршрут настроен: на Каспийском форуме обсудили коридор «Север — Юг»

В Петербурге прошла премьера фильма "Северный полюс", рассказывающая о подвиге экипажа "К-3"

Итоги переговоров России и США в Эр-Рияде: главное

На рынок выходит первый отечественный препарат для похудения «Тирзетта»

Музыкальные новости

Личная охрана в Москве. Профессиональная личная охрана. Услуги личной охраны. 

В Екатеринбурге наградили юных звезд на благотворительном фестивале «Добрая волна»

AI Певица. Создание AI Певицы. AI Певец. AI Артист.

«Болливудское безумие» с русской душой: В Индии начались съемки фильма «Королек моей любви» с Демисом Карибидисом и Михаилом Галустяном

Новости России

Итоги переговоров России и США в Эр-Рияде: главное

Ученый Тихоцкий: внутреннее ядро Земли не остановится к 2040 году

Маршрут настроен: на Каспийском форуме обсудили коридор «Север — Юг»

МВД: мошенники переключились на карманные деньги школьников

Экология в России и мире

Коллекция Valentino весна-лето 2025 (SS-2025)

Концерт Лолиты Милявской отменили в Ульяновске

Была организована экскурсия для участников регионального центра “Сириус 26”

ТВОРЧЕСКАЯ МАСТЕРСКАЯ «УЛИТКА»

Спорт в России и мире

Сафиуллин заменит дисквалифицированного Синнера на турнире ATP в Дохе

“Курникова в инвалидном кресле больше не нужна?”, – поклонники Иглесиаса нашли ему новую пассию

Медведев обошел Джоковича в рейтинге ATP, став шестой ракеткой мира

Рыбакина узнала свое место в мировом рейтинге после разгрома

Moscow.media

В Севастополе офицеры посетили торжественное мероприятие, посвященное годовщине вывода советских войск из Афганистана

Свердловская область вновь не вошла в топ-10 регионов по качеству жизни

Heroje H288BW- портативный сканер штрих-кодов с интерфейсом Bluetooth

В Севастополе офицеры посетили торжественное мероприятие, посвященное годовщине вывода советских войск из Афганистана











Топ новостей на этот час

Rss.plus






«Мы не только слушали, но и слышали друг друга»: Лавров о переговорах в Эр-Рияде

Ушаков: пока сложно оценить сближение позиций РФ и США, но речь об этом шла

Экосистема «Мир LECAR» упрощает жизнь автовладельцев

МВД: мошенники переключились на карманные деньги школьников