API ЕГРЮЛ, ЕГРИП, доходы и расходы, налоги, количество сотрудников в XML, JSON и csv бесплатно

Надоело нам, что открытые данные по сути закрытые, и мы решили их открыть. Подробнее читайте в статье на Хабре. Вторую статью "ЕГРЮЛ, ЕГРИП в виде архивов ФНС, csv, xml, json (API) и анализ данных" с оригинальным введением выложил на Дзен.

Актуальность данных

Статистика по годам

Отличия от других

1. Самое простое и самое быстрое API, вам не нужна ни регистрация, ни токен.
2. Данные в оригинальном виде ФНС России. Вы видите, например, дату выписки и историю всех записей.
3. Все данные открыты.
4. Без рекламы.
5. Все данные можно получить бесплатно по API в формате JSON или XML по ИНН или ОГРН.
6. Поиск по названию.
7. За деньги можно получить доступ ко всем архивам за текущий и прошлый год.

Как пользоваться

• https://egrul.itsoft.ru/7730588444.json;
• https://egrul.itsoft.ru/7730588444.xml;
• https://egrul.itsoft.ru/7730588444.

• https://egrul.itsoft.ru/1087746982157.json;
• https://egrul.itsoft.ru/1087746982157.xml;
• https://egrul.itsoft.ru/1087746982157.

• https://egrul.itsoft.ru/770300584079.json;
• https://egrul.itsoft.ru/770300584079.xml;
• https://egrul.itsoft.ru/770300584079.

• https://egrul.itsoft.ru/308774631700332.json;
• https://egrul.itsoft.ru/308774631700332.xml;
• https://egrul.itsoft.ru/308774631700332.

Примеры кода

$content = gzdecode(file_get_contents('https://egrul.itsoft.ru/7730588444.json.gz'));
$json = json_decode($content,TRUE);
print_r($json);

$opts = [
    "http" => [
        "method" => "GET",
        "header" => "Accept-encoding: gzip\r\n"       
    ]
];

$context = stream_context_create($opts);
$content = gzdecode(file_get_contents('https://egrul.itsoft.ru/7730588444.xml', false, $context));
$xml = simplexml_load_string($content, 'SimpleXMLElement', LIBXML_NOBLANKS);
$xml = json_decode(json_encode($xml),TRUE);
print_r($xml);

$content = gzdecode(file_get_contents('https://egrul.itsoft.ru/7730588444.json', false, $context));
$json = json_decode($content,TRUE);
print_r($json);

$content = file_get_contents('https://egrul.itsoft.ru/7730588444.json');
$json = json_decode($content,TRUE);
print_r($json);

Данные для реквизитов договоров, счетов, актов, счетов-фактур

Источники данных

Оригинальные архивы ЕГРЮЛ, ЕГРИП

В папках _FULL все данные на начало года. Далее изменения.

Дополнительно можно приобрести архивы:

• новый формат ЕГРЮЛ (архивы с 2021 года);
• старый формат ЕГРЮЛ (архивы с 2018 года);
• новый формат ЕГРИП (архивы с 2021 года).

Мы хотели бы приобрести и архивы за 2002-2017 год.

Обработанные данные в форматах csv

• org: ОГРН, ИНН, max_num;
• org2: организации;
• person: физические лица и индивидуальные предприниматели;
• org_chief: руководители организаций;
• founder: учредители;
• mng: управляющие организации;
• income_outcome: доходы и расходы;
• taxes: налоги;
• tax_systems: налоговые системы;
• ssch: среднесписочная численность;
• msp: микропредприятия, малые, средние;
• support: господдержка;
• okved_ref: оквэд;
• opf: организационно-правовая форма;
• org_status_ref: справочник статусов организаций;
• org_status: статусы организаций;
• predecessor: предшественники;
• country: страны.

min_num, max_num, cdate_num, update_at_num — это сокращённая форма даты в виде двухбайтового целого. Дата в номер и обратно преобразуется по следующим правилам:
$d = date(‘Y-m-d’);
$d_num = (intval($d[2] . $d[3])<<9) + (intval($d[5] . $d[6])<<5) + intval($d[8] . $d[9]);
$d2 = '20' . sprintf("%'.02d", $d_num>>9) . '-' . sprintf("%'.02d", ($d_num>>5)&15) . '-' . sprintf("%'.02d", $d_num&31);

Эти поля нужны для реализации Медленно меняющихся измерений (от англ. Slowly Changing Dimensions, SCD) типа 2. min_num или cdate_num хранят дату начала действия этой строки, например, для руководителя — это дата когда человек стал руководителем организации. max_num, updated_at_num — дата последней выписки где данный факт был обнаружен. Если дата org_chief.max_num меньше org.max_num, то org_chief.max_num дата, когда человек пропал из руководителей в ЕГРЮЛ. Реально он мог перестать быть руководителем чуть раньше.

Актуальные данные надо соединять по ogrn и org.max_num. Записи в соединённых таблицах с max_num < org.max_num хранят историю по организации.

org2.crc32 — это уникальный ключ crc32(kpp, short_name, full_name, street, house, corpus, apartment). В org2 хранится история изменения юридического адреса и наименования организации.

По остальным таблицам полагаю должно быть всё понятно из названия полей и документации к данным (см. Приказ ФНС России от 18.01.2021 N ЕД-7-14/17@).

Отчёты и анализ данных ЕГРЮЛ, ЕГРИП

1. Все ИНН организаций и физических лиц из ЕГРЮЛ и ЕГРИП.
2. Все ОГРН и ОГРНИП из ЕГРЮЛ и ЕГРИП без ИНН.
3. Топ управляющих организаций по количеству организаций, которыми они управляют.
4. Топ руководителей организаций по количеству организаций, которыми они руководят.
5. Топ предпринимателей по количеству организаций, которые они учредили.
6. Топ организаций по количеству организаций, которые они учредили.
7. Организации, где учредитель РФ.
8. Организации, где есть учредитель иностранное лицо.
9. Организации с оборотом от миллиарда рублей за 2020 год.
10. % женщин и мужчин среди предпринимателей, обороты, прибыль и налоги по регионам, ОКВЭД и на сотрудника.

Сотрудничество и услуги

Вы можете получить репликацию базы данных. Для репликации БД вы можете разместить свой сервер в нашем дата-центре или у нас взять сервер в аренду.

1. 300 000р. на второй сервер с быстрыми дисками.
2. финансировать разработку расширения функциональных возможностей, добавление других реестров данных.
3. готовы принять в дар парсеры других реестров данных, архивы ЕГРЮЛ за 2002-2017 годы, ЕГРИП за 2002-2020 годы.

• дайте ссылку на нас знакомым, в соцсетях;
• пришлите идею для развития;
• становитесь спонсором или просто пожертвуйте сколько не жалко;
• закажите услуги по обработке данных или предоставлению вам выделенного сервера с базой данных.

Реквизиты

Авторы и исполнители

• идея, программирование, вёрстка — Игорь Тарасов;
• аренда сервера — Дата-центр ITSOFT;
• консультации — Александр Недзельский и Веб-студия ITSOFT;
• администрирование и поддержка сервера — отдел поддержки.