Прокси с неограниченным трафиком для сбора данных обучения LLM

Оплата посуточно, без ограничений на использование IP и трафика. Параллелизм и пропускную способность можно гибко настраивать под задачи бизнеса, а на этой основе легко строить масштабируемый веб-скрапинг.

Неограниченный трафик, пропускная способность от 100 Гбит/с
Выделенные прокси для YouTube и GitHub
Закрывает задачи обучения мультимодальных LLM
Время отклика — миллисекунды

Как Blurpath помогает в обучении LLM и ML?

Независимо от того, создаете ли вы базовые модели, улучшаете ли многомодальные возможности или усиливаете вертикальные приложения, Blurpath предоставляет вам большой объем высококачественных структурированных данных для повышения производительности моделей.

Огромная потребность в данных

Обучение LLM требует огромных объёмов данных, а традиционные способы сбора не дают нужной скорости. Не нужно платить за дорогой трафик: он действительно неограничен, поэтому поставка данных не прервётся из-за лимитов.

Неограниченный трафик, ниже стоимость
Качественные IP из более чем 50 стран
Масштабирование под растущие задачи без потери качества

Обход блокировок по IP и капчи

Обходите блокировки по IP и капчу с помощью большой сети неограниченных прокси. Встраивайте такие прокси в процесс сбора данных для обучения LLM: система сама повторяет запросы и обходит капчу, поэтому сбор идёт без перерывов.

Больше не нужно проходить капчу
Высокая доля успешных запросов
Прокси больше не блокируются

Подробная документация API

Наши прокси совместимы с различными прокси-программными и популярными языками программирования, поэтому вы можете быстро собирать сетевые данные.

Аутентификация белого списка

Аутентификация пароля пользователя

	
    												
// demo.cpp : Define the entrance for the console application.
//

#include "stdafx.h"
#include "curl/curl.h"
#pragma comment(lib, "libcurl.lib")

//Under the CURLOPT_WRITEFUNCTION setting property, use the callback write_buff_data for processing
static size_t write_buff_data(char *buffer, size_t size, size_t nitems, void *outstream)
{
	memcpy(outstream, buffer, nitems*size);
	return nitems*size;
}

/*
Use http proxy
*/
int GetUrlHTTP(char *url, char *buff)
{
	CURL *curl;
	CURLcode res;
	curl = curl_easy_init();
	if (curl)
	{
		curl_easy_setopt(curl, CURLOPT_PROXY,"http://proxy host:port");//Set proxy
		curl_easy_setopt(curl, CURLOPT_WRITEDATA, (void*)buff);//void* buff will be passed to the fourth parameter of the callback function write_buff_data void* outstream
		curl_easy_setopt(curl, CURLOPT_WRITEFUNCTION, write_buff_data);//Under the CURLOPT_WRITEFUNCTION setting property, use the callback write_buff_data for processing
		curl_easy_setopt(curl, CURLOPT_URL, url);//Set domain to visit
		/* Abort if speed drops below 50 bytes/second for 10 seconds */
		curl_easy_setopt(curl, CURLOPT_LOW_SPEED_TIME, 10L);
		curl_easy_setopt(curl, CURLOPT_LOW_SPEED_LIMIT, 50L);
		curl_easy_setopt(curl, CURLOPT_MAX_RECV_SPEED_LARGE, 2000000L);/*Highest download speed*/
		res = curl_easy_perform(curl);
		curl_easy_cleanup(curl);
		if (res == CURLE_OK){
			return res;
		}else {
			printf("Error code:%d\n", res);
			MessageBox(NULL, TEXT("Error in getting IP"), TEXT("assistant"), MB_ICONINFORMATION | MB_YESNO);
		}
	}
	return res;
}
/*
Use socks5 proxy
*/
int GetUrlSocks5(char *url, char *buff)
{
	CURL *curl;
	CURLcode res;
	curl = curl_easy_init();
	if (curl)
	{
		curl_easy_setopt(curl, CURLOPT_PROXY, "socks5://Proxy host:port");//Set proxy
		curl_easy_setopt(curl, CURLOPT_WRITEDATA, (void*)buff);
		curl_easy_setopt(curl, CURLOPT_WRITEFUNCTION, write_buff_data);
		curl_easy_setopt(curl, CURLOPT_URL, url);
		curl_easy_setopt(curl, CURLOPT_LOW_SPEED_TIME, 10L);
		curl_easy_setopt(curl, CURLOPT_LOW_SPEED_LIMIT, 50L);
		curl_easy_setopt(curl, CURLOPT_MAX_RECV_SPEED_LARGE, 2000000L);/*Highest download speed*/
		res = curl_easy_perform(curl);
		curl_easy_cleanup(curl);
		if (res == CURLE_OK) {
			return res;
		}
		else {
			printf("Error code:%d\n", res);
			MessageBox(NULL, TEXT("Error in getting IP"), TEXT("assistant"), MB_ICONINFORMATION | MB_YESNO);
		}
	}
	return res;
}
/*
Not use proxy
*/
int GetUrl(char *url, char *buff)
{
	CURL *curl;
	CURLcode res;
	curl = curl_easy_init();
	if (curl)
	{
		curl_easy_setopt(curl, CURLOPT_WRITEDATA, (void*)buff);
		curl_easy_setopt(curl, CURLOPT_WRITEFUNCTION, write_buff_data);
		curl_easy_setopt(curl, CURLOPT_URL, url);
		curl_easy_setopt(curl, CURLOPT_LOW_SPEED_TIME, 10L);
		curl_easy_setopt(curl, CURLOPT_LOW_SPEED_LIMIT, 50L);
		curl_easy_setopt(curl, CURLOPT_MAX_RECV_SPEED_LARGE, 2000000L);/*Highest download speed*/
		res = curl_easy_perform(curl);
		curl_easy_cleanup(curl);
		if (res == CURLE_OK)
		{
			return res;
		}
		else {
			printf("Error code:%d\n", res);
				
			MessageBox(NULL, TEXT("Error in getting IP"), TEXT("assistant"), MB_ICONINFORMATION | MB_YESNO);
		}
	}
	return res;
}
int main()
{
	char *buff=(char*)malloc(1024*1024);
	memset(buff, 0, 1024 * 1024);

	GetUrl("http://baidu.com", buff);
	printf("Not use proxy：%s\n", buff);

	memset(buff, 0, 1024 * 1024);
	GetUrlHTTP("http://baidu.com", buff);
	printf("result of http：%s\n", buff);

	memset(buff, 0,1024 * 1024);
	GetUrlSocks5("http://baidu.com", buff);
	printf("result of socks5：%s\n", buff);

	free(buff);
	Sleep(10 * 1000);//Wait 10 seconds to exit
	
	return 0;
}

Примеры использования ИИ с использованием бесконечных прокси

Сбор данных

Эффективно собирайте масштабные обучающие данные, охватывающие такие области, как обработка естественного языка (NLP) и компьютерное зрение.

узнать больше

Защита бренда

Собирайте информацию о ценах, продуктах и т. д. из нескольких источников, чтобы обучить ИИ прогнозированию и анализу рынка.

узнать больше

Маркетинговые исследования

Постоянно собирайте данные о ценах с рынков электронной коммерции и из других источников, чтобы помочь ИИ генерировать точные прогнозы и аналитику цен.

узнать больше