ФИАС - История изменений

Illarionov в 17:41, 24 декабря 2014

2014-12-24T17:41:30Z

← Предыдущая версия		Версия от 19:41, 24 декабря 2014
Строка 563:		Строка 563:

	Тем не менне, несмотря на удобство обновления через дельты, я рекомендую для обновления заменять БД ФИАС целиком (а после этого объединять её с таблицами технологически удалённых данных, при необходимости). Дело в том, что дельты могут содержать неполную информацию, проще говоря oldfias + delta != newfias. Например, я обновлял БД ФИАС от 2012.07.01 через дельты до состояния на 2012.09.24. Если в дельте была информация о переподчинении или об изменении адресного объекта, то предыдущая версия адресного объекта не обновлялась, т.е. не проставлялось (NEXTID = ид_нового, LIVESTATUS = 0, ACTSTATUS = 0). В результате в БД ФИАС были объекты с одинаковым AOGUID, но имеющие ACTSTATUS = 1. Некоторые новые данные просто отсутствовали в дельте. Возможно, что разработчики ФИАС уже исправили эти ошибки, и более свежие дельты следующие за 2012.09.24 содержат полную информацию, но это требует проверки.		Тем не менне, несмотря на удобство обновления через дельты, я рекомендую для обновления заменять БД ФИАС целиком (а после этого объединять её с таблицами технологически удалённых данных, при необходимости). Дело в том, что дельты могут содержать неполную информацию, проще говоря oldfias + delta != newfias. Например, я обновлял БД ФИАС от 2012.07.01 через дельты до состояния на 2012.09.24. Если в дельте была информация о переподчинении или об изменении адресного объекта, то предыдущая версия адресного объекта не обновлялась, т.е. не проставлялось (NEXTID = ид_нового, LIVESTATUS = 0, ACTSTATUS = 0). В результате в БД ФИАС были объекты с одинаковым AOGUID, но имеющие ACTSTATUS = 1. Некоторые новые данные просто отсутствовали в дельте. Возможно, что разработчики ФИАС уже исправили эти ошибки, и более свежие дельты следующие за 2012.09.24 содержат полную информацию, но это требует проверки.

			= Ошибки БД ФИАС =

			БД ФИАС может содержать ошибки в данных, а) связанные с нарушением целостности двунаправленных списков PREVID/NEXTID, б) ошибки, когда запись об адресном объекте имеет OPERSTATUS = 1, а в действительности произошла другая операция (переименование, переподчинение, слияние, или дробление), и в) ошибки, когда отсутствуют исторические сведения (вызванные тем, что администраторы БД ФИАС, видимо, выполняли прямое изменение данных с помощью SQL-запросов).

			Для иллюстрации можно открыть портал ФИАС и воспользоваться [http://fias.nalog.ru/Public/SearchPage.aspx?SearchState=2 расширенным поиском]. В поле "Регион" введите "Санкт-Петербург город", в поле "Уровень" выберите "Регион". Нажмите "Найти". Если просмотреть историю изменения города Санкт-Петербург, то можно обнаружить, что Санкт-Петербург раньше назывался "станция Володарская", а должно быть "Ленинград". Это иллюстрирует нарушение целостности двунаправленных списков.

			Для иллюстрации ситуации, когда отсутствуют исторические сведения можно рассмотреть адресный объект с AOGUID="df84b14c-6006-46d1-8ce3-3a6ddf8643bd". В БД ФИАС от 2012.08.06 этот объект имел КЛАДР код равный 24000001101000100. В какой-то момент произошло переподчинение родительского объекта, и в итоге у него изменился уровень AOLEVEL с 6 на 90. Соответственно, уровень AOLEVEL дочернего объекта изменился с 7 на 91. Если взять БД ФИАС от 2014.12.01, то в ней нельзя обнаружить исторической записи с КЛАДР кодом равным 24000001101000100. Нет этой записи и в таблицах DADDROBJ.

			Ошибки с неправильным OPERSTATUS слишком многочисленны, их классифицирование выходит за рамки данной статьи.

Illarionov в 17:18, 24 декабря 2014

2014-12-24T17:18:09Z

← Предыдущая версия		Версия от 19:18, 24 декабря 2014
Строка 524:		Строка 524:
	* <span style="color:green;">CENTSTATUS</span> - статус центра; ненулевое значение присвоено столицам, административным центрам и центральным районам регионов (подробнее см. табл. <span style="color:blue;">CENTERST</span>).		* <span style="color:green;">CENTSTATUS</span> - статус центра; ненулевое значение присвоено столицам, административным центрам и центральным районам регионов (подробнее см. табл. <span style="color:blue;">CENTERST</span>).
	* <span style="color:green;">NORMDOC</span> - нормативный документ (табл. <span style="color:blue;">NORMDOC</span>).		* <span style="color:green;">NORMDOC</span> - нормативный документ (табл. <span style="color:blue;">NORMDOC</span>).

			= Обновление БД ФИАС =

			Привожу текст из документа [http://fias.nalog.ru/Public/Docs/%D0%A1%D0%B2%D0%B5%D0%B4%D0%B5%D0%BD%D0%B8%D1%8F%20%D0%BE%20%D1%81%D0%BE%D1%81%D1%82%D0%B0%D0%B2%D0%B5%20%D0%B8%D0%BD%D1%84%D0%BE%D1%80%D0%BC%D0%B0%D1%86%D0%B8%D0%B8%20%D0%A4%D0%98%D0%90%D0%A1.doc СВЕДЕНИЯ О СОСТАВЕ ИНФОРМАЦИИ ФЕДЕРАЛЬНОЙ ИНФОРМАЦИОННОЙ АДРЕСНОЙ СИСТЕМЫ].

			:На портал ФИАС выгружаются актуальные и исторические сведения ФИАС, а так же технологически удалённые из БД ФИАС адресные сведения.

			:Актуальные и исторические сведения ФИАС выгружается в виде файлов (таблиц) DBF и файлов XML.

			:Вместе с полной базой ФИАС выгружаются дельта данные – новые, изменившиеся и удаленные данные с момента предыдущей выгрузки базы.

			:Дельта данные, т.е. новые, изменившиеся и удаленные данные появившиеся с момента предыдущей выгрузки базы ФИАС, загружаются по следующему алгоритму: по наличию или отсутствию ключа в пользовательской базе определяется тип операции – добавление или обновление записи. После проведения соответствующих операций необходимо удалить по ключу записи, присутствующие в таблицах технологически удаленных данных.

			Наличие таких "дельт" позволяет быстро обновить БД ФИАС, не скачивая полный архив (на 2014.12.01 его размер составляет 1.8 Гб). Алгоритм обнобления, действительно, довольно прост. Привожу текст процедуры обновления для MySQL на примере таблицы ADDROBJ:

			<syntaxhighlight lang="tsql">
			-- предположим, что дельту "залили" в схему "delta", а обновляемый ФИАС находится в схеме "fias"
			use delta;

			update
			fias.ADDROBJ f
			inner join ADDROBJ d on d.AOID = f.AOID
			set
			f.actstatus=d.actstatus,f.aoguid=d.aoguid,f.aoid=d.aoid,f.aolevel=d.aolevel,f.areacode=d.areacode,f.autocode=d.autocode,f.centstatus=d.centstatus,f.citycode=d.citycode,f.code=d.code,f.currstatus=d.currstatus,f.enddate=d.enddate,f.formalname=d.formalname,f.ifnsfl=d.ifnsfl,f.ifnsul=d.ifnsul,f.nextid=d.nextid,f.offname=d.offname,f.okato=d.okato,f.oktmo=d.oktmo,f.operstatus=d.operstatus,f.parentguid=d.parentguid,f.placecode=d.placecode,f.plaincode=d.plaincode,f.postalcode=d.postalcode,f.previd=d.previd,f.regioncode=d.regioncode,f.shortname=d.shortname,f.startdate=d.startdate,f.streetcode=d.streetcode,f.ctarcode=d.ctarcode,f.extrcode=d.extrcode,f.sextcode=d.sextcode,f.livestatus=d.livestatus,f.normdoc=d.normdoc,f.terrifnsfl=d.terrifnsfl,f.terrifnsul=d.terrifnsul,f.updatedate=d.updatedate;

			insert into fias.ADDROBJ (actstatus,aoguid,aoid,aolevel,areacode,autocode,centstatus,citycode,code,currstatus,enddate,formalname,ifnsfl,ifnsul,nextid,offname,okato,oktmo,operstatus,parentguid,placecode,plaincode,postalcode,previd,regioncode,shortname,startdate,streetcode,ctarcode,extrcode,sextcode,livestatus,normdoc,terrifnsfl,terrifnsul,updatedate)
			select
			d.actstatus,d.aoguid,d.aoid,d.aolevel,d.areacode,d.autocode,d.centstatus,d.citycode,d.code,d.currstatus,d.enddate,d.formalname,d.ifnsfl,d.ifnsul,d.nextid,d.offname,d.okato,d.oktmo,d.operstatus,d.parentguid,d.placecode,d.plaincode,d.postalcode,d.previd,d.regioncode,d.shortname,d.startdate,d.streetcode,d.ctarcode,d.extrcode,d.sextcode,d.livestatus,d.normdoc,d.terrifnsfl,d.terrifnsul,d.updatedate
			from
			ADDROBJ d
			left join fias.ADDROBJ f on d.AOID = f.AOID
			where f.AOID is null;

			delete from fias.ADDROBJ where aoid in (select aoid from DADDROBJ);
			</syntaxhighlight>

			Иногда может изменятся структура самих таблиц, что требует ручного контроля. Например, колонка "oktmo" сначала содержала 8 символов, а потом была расширена до 11 символов.

			Тем не менне, несмотря на удобство обновления через дельты, я рекомендую для обновления заменять БД ФИАС целиком (а после этого объединять её с таблицами технологически удалённых данных, при необходимости). Дело в том, что дельты могут содержать неполную информацию, проще говоря oldfias + delta != newfias. Например, я обновлял БД ФИАС от 2012.07.01 через дельты до состояния на 2012.09.24. Если в дельте была информация о переподчинении или об изменении адресного объекта, то предыдущая версия адресного объекта не обновлялась, т.е. не проставлялось (NEXTID = ид_нового, LIVESTATUS = 0, ACTSTATUS = 0). В результате в БД ФИАС были объекты с одинаковым AOGUID, но имеющие ACTSTATUS = 1. Некоторые новые данные просто отсутствовали в дельте. Возможно, что разработчики ФИАС уже исправили эти ошибки, и более свежие дельты следующие за 2012.09.24 содержат полную информацию, но это требует проверки.

Illarionov в 16:47, 24 декабря 2014

2014-12-24T16:47:49Z

← Предыдущая версия		Версия от 18:47, 24 декабря 2014
Строка 340:		Строка 340:
	=== Статус актуальности ===		=== Статус актуальности ===

	~~В базе~~ ФИАС никогда не удаляются элементы. Они могут быть только переведены в разряд "отключенных" (устаревшие, измененные и т.п.)~~. Поведение~~ аналогично работе КЛАДР. Рассмотрим поля, определяющие действительность объекта:		Из базы ФИАС почти никогда не удаляются элементы. Они могут быть только переведены в разряд "отключенных" (устаревшие, измененные и т.п.), что аналогично работе КЛАДР.

			:Примечание. Но информация о некоторых адресных объектах всё же может удаляться из БД ФИАС. См документ [http://fias.nalog.ru/Public/Docs/%D0%A1%D0%B2%D0%B5%D0%B4%D0%B5%D0%BD%D0%B8%D1%8F%20%D0%BE%20%D1%81%D0%BE%D1%81%D1%82%D0%B0%D0%B2%D0%B5%20%D0%B8%D0%BD%D1%84%D0%BE%D1%80%D0%BC%D0%B0%D1%86%D0%B8%D0%B8%20%D0%A4%D0%98%D0%90%D0%A1.doc СВЕДЕНИЯ О СОСТАВЕ ИНФОРМАЦИИ ФЕДЕРАЛЬНОЙ ИНФОРМАЦИОННОЙ АДРЕСНОЙ СИСТЕМЫ], цитирую:
			::"Технологически удалённые из БД ФИАС записи с адресными сведениями... включают удалённые администратором ФИАС по заявке операторов ФИАС (ошибочно введённые, дубли адресных сведений) адресные сведения".
			:Т.е. дубли и ошибочно введённые данные могут быть физически удалены. Большинство из них приобретают статус актуальности КЛАДР (CURRSTATUS) равный 99, т.е. "несуществующий", а после этого уже становятся "технологически удалёнными". Если их нужно найти, то надо скачать т.н. "дельты данных", которые используются для обновления БД ФИАС, это архивы fias_delta_dbf.rar на сайте [http://fias.nalog.ru/Public/DownloadPage.aspx ФИАС]. В некоторых из них имеются таблицы DADDROBJ, DHOUSE, и пр., содержащие технологически удалённые записи, попавшие в "дельту". На дату 15.12.2014 всего технологически удалено 793 записи, из них: 363 актуальных (т.е. ACTSTATUS = 1), 1 с CURRSTATUS != 99, и 1 с LIVESTATUS = 1.

			Рассмотрим поля, определяющие действительность объекта:

	Для выбора актуальных записей рекомендуется ориентироваться на поля <span style="color:green;">CURRSTATUS</span> и <span style="color:green;">LIVESTATUS</span>.		Для выбора актуальных записей рекомендуется ориентироваться на поля <span style="color:green;">CURRSTATUS</span> и <span style="color:green;">LIVESTATUS</span>.

Illarionov в 16:08, 24 декабря 2014

2014-12-24T16:08:46Z

@@ Строка 499: / Строка 499: @@
    ФИАС: 74 0 026 000 000 032 0021 0000 000
   КЛАДР: 74   026 000     032 0021
 Подробное описание см. в документе "Сведения о составе информации Федеральной информационной адресной системы".

Razum2um: из файла doc с описанием: 0 – недействующий адресный объект 1 - действующий

2013-09-08T16:36:00Z

из файла doc с описанием: 0 – недействующий адресный объект 1 - действующий

← Предыдущая версия		Версия от 18:36, 8 сентября 2013
Строка 345:		Строка 345:

	Рассмотрим подробнее:		Рассмотрим подробнее:
	* <span style="color:green;">LIVESTATUS</span> - Признак действующего адресного объекта. Принимает значения: 0 - действующий, 1 - не действующий (см. прим. 1).		* <span style="color:green;">LIVESTATUS</span> - Признак действующего адресного объекта. Принимает значения: 0 - не действующий, 1 - действующий (см. прим. 1).
	* <span style="color:green;">CURRSTATUS</span> - Статус актуальности КЛАДР 4. Принимает значения: 0 - актуальный, 1-50 - исторический, 51 - переподчиненный (см. табл. <span style="color:blue;">CURENTST</span> и гл. 1.2. "Коды адресных объектов" документации КЛАДР).		* <span style="color:green;">CURRSTATUS</span> - Статус актуальности КЛАДР 4. Принимает значения: 0 - актуальный, 1-50 - исторический, 51 - переподчиненный (см. табл. <span style="color:blue;">CURENTST</span> и гл. 1.2. "Коды адресных объектов" документации КЛАДР).
	* <span style="color:green;">OPERSTATUS</span> - Статус действия. Принимает значения: 1 - Инициация, 10 - Добавление, 20 - Изменение и др (см. табл. <span style="color:blue;">OPERSTAT</span>).		* <span style="color:green;">OPERSTATUS</span> - Статус действия. Принимает значения: 1 - Инициация, 10 - Добавление, 20 - Изменение и др (см. табл. <span style="color:blue;">OPERSTAT</span>).

Mavka: CURRSTATUS

2013-04-18T09:10:54Z

CURRSTATUS

← Предыдущая версия		Версия от 11:10, 18 апреля 2013
Строка 490:		Строка 490:
	* <span style="color:green;">OKTMO</span> - код муниципального образования (ОКТМО)		* <span style="color:green;">OKTMO</span> - код муниципального образования (ОКТМО)
	* <span style="color:green;">CODE</span> - код КЛАДР		* <span style="color:green;">CODE</span> - код КЛАДР
	* <span style="color:green;">PLAINCODE</span> - код КЛАДР без признака актуальности (~~без~~ последних двух цифр)		* <span style="color:green;">PLAINCODE</span> - код КЛАДР без признака актуальности (последних двух цифр), см. также <span style="color:green;">CURRSTATUS</span>

	ФИАС предлагает собственный "классификационный код", который хранится, разбитым на отдельные элементы: <span style="color:green;">REGIONCODE</span>, <span style="color:green;">AUTOCODE</span>, <span style="color:green;">AREACODE</span>, <span style="color:green;">CITYCODE</span>, <span style="color:green;">CTARCODE</span>, <span style="color:green;">PLACECODE</span>, <span style="color:green;">STREETCODE</span>, <span style="color:green;">EXTRCODE</span>, <span style="color:green;">SEXTCODE</span>.		ФИАС предлагает собственный "классификационный код", который хранится, разбитым на отдельные элементы: <span style="color:green;">REGIONCODE</span>, <span style="color:green;">AUTOCODE</span>, <span style="color:green;">AREACODE</span>, <span style="color:green;">CITYCODE</span>, <span style="color:green;">CTARCODE</span>, <span style="color:green;">PLACECODE</span>, <span style="color:green;">STREETCODE</span>, <span style="color:green;">EXTRCODE</span>, <span style="color:green;">SEXTCODE</span>.

Mavka: второй источник

2013-02-23T23:00:06Z

второй источник

← Предыдущая версия		Версия от 01:00, 24 февраля 2013
Строка 2:		Строка 2:

	= Введение =		= Введение =
	Вопросы/пожелания/замечания - http://gis-lab.info/forum/viewtopic.php?f=3&t=12568		<font size="6">Вопросы/пожелания/замечания - [http://gis-lab.info/forum/viewtopic.php?f=3&t=12568 форум]</font>

	[http://fias.nalog.ru/ Федеральная информационная адресная система (ФИАС)] создана Распоряжением Правительства Российской Федерации от 10.06.2011 №1011-р. С целью...		Адреса официальной публикации:
			# [http://fias.nalog.ru/ Федеральная информационная адресная система]
			# [http://www.nalog.ru/opendata/fias_bank/ Банк данных федеральной информационной адресной системы]
			Оба источника предлагают идентичные данные.

			Федеральная информационная адресная система (ФИАС) создана Распоряжением Правительства Российской Федерации от 10.06.2011 №1011-р. С целью...

	Статья "[http://кладр.рф/kladr.html КЛАДР: Настоящее, прошлое и будущее]" (примерно 2004 г.)		Статья "[http://кладр.рф/kladr.html КЛАДР: Настоящее, прошлое и будущее]" (примерно 2004 г.)

Mavka: centsatus

2013-02-23T21:27:07Z

centsatus

← Предыдущая версия		Версия от 23:27, 23 февраля 2013
Строка 500:		Строка 500:

	* Ведомственные классификаторы ФНС России: СОНО - <span style="color:green;">IFNSFL</span>, <span style="color:green;">IFNSUL</span>; СОУН - <span style="color:green;">TERRIFNSFL</span>, <span style="color:green;">TERRIFNSUL</span>.		* Ведомственные классификаторы ФНС России: СОНО - <span style="color:green;">IFNSFL</span>, <span style="color:green;">IFNSUL</span>; СОУН - <span style="color:green;">TERRIFNSFL</span>, <span style="color:green;">TERRIFNSUL</span>.
	* <span style="color:green;">CENTSTATUS</span> - статус центра (табл. <span style="color:blue;">CENTERST</span>).		* <span style="color:green;">CENTSTATUS</span> - статус центра; ненулевое значение присвоено столицам, административным центрам и центральным районам регионов (подробнее см. табл. <span style="color:blue;">CENTERST</span>).
	* <span style="color:green;">NORMDOC</span> - нормативный документ (табл. <span style="color:blue;">NORMDOC</span>).		* <span style="color:green;">NORMDOC</span> - нормативный документ (табл. <span style="color:blue;">NORMDOC</span>).

Mavka: remove todo

2013-02-23T21:15:32Z

remove todo

← Предыдущая версия		Версия от 23:15, 23 февраля 2013
Строка 215:		Строка 215:

	== ADDROBJ ==		== ADDROBJ ==

	~~//ToDo:~~
	* ссылки, классификаторы

	=== Текстовые элементы адреса ===		=== Текстовые элементы адреса ===

Mavka: sort

2013-02-23T21:15:10Z

sort

← Предыдущая версия		Версия от 23:15, 23 февраля 2013
Строка 203:		Строка 203:
	* <span style="color:blue;">NORMDOC</span> - Сведения по нормативному документу, являющемуся основанием присвоения адресному элементу наименования		* <span style="color:blue;">NORMDOC</span> - Сведения по нормативному документу, являющемуся основанием присвоения адресному элементу наименования
	Справочники		Справочники
	* <span style="color:blue;">SOCRBASE</span> - Типы адресных объектов (условные сокращения и уровни подчинения)
	* <span style="color:blue;">CURENTST</span> - Статус актуальности КЛАДР 4.0
	* <span style="color:blue;">ACTSTAT</span> - Статус актуальности ФИАС		* <span style="color:blue;">ACTSTAT</span> - Статус актуальности ФИАС
	* <span style="color:blue;">OPERSTAT</span> - Статус действия
	* <span style="color:blue;">CENTERST</span> - Статус центра		* <span style="color:blue;">CENTERST</span> - Статус центра
			* <span style="color:blue;">CURENTST</span> - Статус актуальности КЛАДР 4.0
			* <span style="color:blue;">ESTSTAT</span> - Признак владения
			* <span style="color:blue;">HSTSTAT</span> - Статус состояния объектов недвижимости
	* <span style="color:blue;">INTVSTAT</span> - Статус интервала домов		* <span style="color:blue;">INTVSTAT</span> - Статус интервала домов
	* <span style="color:blue;">~~HSTSTAT~~</span> - Статус ~~состояния объектов недвижимости~~		* <span style="color:blue;">NDOCTYPE</span> - Тип нормативного документа (закон, приказ, справка) // ''не упоминается в официальной документации''
	* <span style="color:blue;">~~ESTSTAT~~</span> - ~~Признак владения~~		* <span style="color:blue;">OPERSTAT</span> - Статус действия
			* <span style="color:blue;">SOCRBASE</span> - Типы адресных объектов (условные сокращения и уровни подчинения)
	* <span style="color:blue;">STRSTAT</span> - Признак строения		* <span style="color:blue;">STRSTAT</span> - Признак строения
	* <span style="color:blue;">NDOCTYPE</span> - Тип нормативного документа (закон, приказ, справка) // ''не упоминается в официальной документации''

	== ADDROBJ ==		== ADDROBJ ==