Как сделать инвентаризацию ГИС?

В моем офисе будут большие изменения в разделе ГИС. Этот раздел функционирует с 1980-х годов и содержит огромный набор данных ГИС (т. Е. Шейп-файлы, растровые файлы, данные и т. Д.), Но никогда не проходил никакой инвентаризации. Теперь это произойдет.

Существует ли какой-либо автоматизированный способ извлечения всей информации о данных ГИС (т. Е. Шейп-файл, покрытие дуговой информации, файл слоя, * .mxd, gdb, растровый файл и т. Д.) С ПК в файл Excel? Информация может включать дату создания, дату последнего редактирования, имя папки или контейнера и т. Д.

Это работает для меня, используя arcpy.da.Walkфункцию в ArcGIS 10.1 SP1:

import arcpy, csv, os

workspace = r"c:\GISData"
output = r"C:\temp\test.csv"

with open(output, 'wb') as csvfile:
    csvwriter = csv.writer(csvfile)
    for dirpath, dirnames, filenames in arcpy.da.Walk(workspace):
        for filename in filenames:
            desc = arcpy.Describe(os.path.join(dirpath, filename))
            csvwriter.writerow([desc.catalogPath, desc.name, desc.dataType])

csvМодуль также используется для упрощения записи выходного файла. Excel может открывать файлы CSV, чтобы вы могли просматривать их в виде электронных таблиц.

Смотрите arcpy.Describeфункцию для дополнительных свойств, которые вы можете включить в вывод.

Если вы специально хотите проанализировать информацию из фактических метаданных , посмотрите сценарий в этом ответе: Создание таблицы, содержащей все имена файлов (и, возможно, метаданные) в файловой базе геоданных

Когда вы используете Python, вы должны использовать правильные модули, чтобы делать то, что вы хотите. Например, чтобы найти все файлы в каталоге с расширением shp, есть гораздо более простые решения, которые были представлены без перерыва, что ужасно ... (как решение, представленное Натаном В., но есть много, много других, просто поиск в интернете)

Некоторые примеры с соответствующими модулями:

1) с модулем glob:

только шейп-файлы:

import glob
import os
os.chdir("mydir")
for files in glob.glob("*.shp"):
    print files

шейп-файлы и базы геоданных:

import glob
types = ('*.shp', '*.gbd') # the tuple of file types
files_grabbed = []
for files in types:
     files_grabbed.extend(glob.glob(files)) #files_grabbed = the list of shp and gbd files

если вы хотите искать также в подкаталогах:

import glob
for f in glob.iglob("/mydir/*/*.shp"): #search immediate subdirectories 
    print f

2) с os.listdir и пониманием списка (в две строки) -> список результатов

path = 'mydir'
shape_files = [f for f in os.listdir(path) if f.endswith('.shp')]
gdb_files = [f for f in os.listdir(path) if f.endswith('.gdb')]

3) с модулем fnmatch:

import fnmatch
for file in os.listdir('path'):
    if fnmatch.fnmatch(file, '*.shp'):
        print file

и многие другие решения, рекурсивные и т. д.

Спасибо artwork21 и Натану W за ваш ответ. И да, код Нэтена сотворил магию.

import os, arcpy

#create blank text file
with open("C:\\Temp\\GISlayers.txt", "w") as txt:
for root, dirs, files in os.walk("C:\\Temp\\temp"):
    for f in files:
        #look for shapefiles
        if f.endswith('.shp'):
            desc = arcpy.Describe(root + "\\" + f)
            #write info to text file
            txt.write(desc.name + "," + desc.catalogPath + "\n")

        #look for file geodatabases
        if f.endswith('.gdb'):
            desc = arcpy.Describe(root)
            for child in desc.children:
                #write info to text file
                txt.write(child.name + "," + child.path + "\n")

        #look for layer files
        if f.endswith('.lyr'):
            desc = arcpy.Describe(root + "\\" + f)
            #write info to text file
            txt.write(desc.name + "," + desc.catalogPath + "\n")

        #look for img file
        if f.endswith('.img'):
            desc = arcpy.Describe(root + "\\" + f)
            #write info to text file
            txt.write(desc.name + "," + desc.catalogPath + "\n")

Только имя файла и местоположение. На компьютере, с которым я буду работать, есть большой файл покрытия (файл arc-info), он тоже будет работать на них?

Если у вас есть ArcGIS Desktop 10.0 (или любой из его пакетов обновления), я думаю, что вам лучше всего написать скрипт на python, который использует os.walk для просмотра определенного каталога ГИС и поиска общих расширений файлов ГИС, таких как .shp,. gdb, .mdb и т.д ... и записывает результат в текстовый файл с разделителями-запятыми. Затем вы можете перевести текстовый файл в Excel, см. Пример кода ниже:

import os, arcpy

#create blank text file
txt = open("C:\\Temp\\GISlayers.txt", "w")

for root, dirs, files in os.walk("C:\\Temp\\temp"):
    for f in files:

        #look for shapefiles
        foundSHP = f.find(".shp")
        if foundSHP >0:
            checkEXT = f[-3:]
                if checkEXT <> "xml":
                    desc = arcpy.Describe(root + "\\" + f)
                    #write info to text file
                    txt.write(desc.name + "," + desc.catalogPath + "\n")

        #look for file geodatabases
        foundGDB = f.find(".gdb")
        if foundGDB >0:
            desc = arcpy.Describe(root)
            for child in desc.children:
            #write info to text file
            txt.write(child.name + "," + child.path + "\n")
        break
txt.close()

Если вы используете ArcGIS 10.1 (или более позднюю версию) для Desktop, то здесь есть другой ответ, использующий arcpy.da.Walk, который не был доступен в версии 10.0 или более ранней.

Если вы хотите избежать программирования, это может быть самый простой и быстрый способ.

Существует дополнение для Excel, которое называется ASAP Utilities . Существует 90-дневная бесплатная пробная версия, но после этого она составляет 49 долларов США для коммерческого использования. Это бесплатно для студентов или личного пользования. Дополнение добавляет много полезных функций. Одним из которых является создание списка файлов в структуре папок. Он также предоставляет свойства файла. Вы можете ограничить результаты по типу файла, если хотите.

Вот видео как это сделать.

Я использовал это дополнение раньше, и результаты очень быстрые.

Обратите внимание, я не связан с этой компанией-разработчиком программного обеспечения.

Я не мог заставить другие ответы работать полностью.

В первом примере, в каталоге с базами геоданных и шейп-файлами, я получил только список классов пространственных объектов в базе геоданных, но когда я закомментировал часть сценария баз геоданных, я получил список шейп-файлов.

Во втором примере часть базы геоданных вообще не работала, поэтому я скопировал часть базы геоданных первого примера. Я снова получил список только геоданных.

Затем меня поразило: базы геоданных читаются до шейп-файлов, и сценарий останавливается breakв части базы геоданных.

Будучи новичком в Python, я не знаю, зачем breakэто нужно, но без этого скрипт, кажется, идет бесконечным циклом, но, поскольку breakон мне нужен, мне пришло в голову, что помещение базы геоданных в отдельный цикл, после другого файла типы перечислены, решит проблему:

#create blank text file with open("C:\\Temp\\GISlayers.txt", "w") as txt: for root, dirs, files in os.walk("C:\\Temp\\temp"): for f in files: #look for shapefiles, etc. [code...] for f in files: #look for geodatabases [code...]

Когда я это сделал, я получил полный список.