Использование Python ConfigParser для чтения файла без имени раздела

Я использую ConfigParser для чтения конфигурации времени выполнения script.

Я хотел бы иметь гибкость, не предоставляя имя раздела (есть достаточно простые сценарии, им не нужен раздел). ConfigParser будет генерировать исключение NoSectionError и не будет принимать файл.

Как я могу заставить ConfigParser просто получить кортежи (key, value) конфигурационного файла без имен разделов? Например:

key1=val1
key2:val2

Я бы предпочел не писать в файл конфигурации.

Ответ 1

Alex Martelli предоставил решение для использования ConfigParser для синтаксического анализа файлов .properties (которые, по-видимому, не имеют конфигурационных файлов без разделов).

Его решение - это файловая оболочка, которая автоматически вставляет заголовок раздела в соответствии с требованиями ConfigParser.

Ответ 2

Просветленный этим ответом jterrace, я придумал это решение:

  1. Прочитать весь файл в строке
  2. Префикс с именем раздела по умолчанию
  3. Используйте StringIO для имитации файлового объекта
ini_str = '[root]\n' + open(ini_path, 'r').read()
ini_fp = StringIO.StringIO(ini_str)
config = ConfigParser.RawConfigParser()
config.readfp(ini_fp)


EDIT для будущих googlers: с Python 3. 4+ readfp устарел, а StringIO больше не нужен. Вместо этого мы можем напрямую использовать read_string:

with open('config_file') as f:
    file_content = '[dummy_section]\n' + f.read()

config_parser = RawConfigParser()
config_parser.read_string(file_content)

Ответ 3

Вы можете сделать это в одной строке кода.

В python 3, добавьте поддельный заголовок раздела к данным вашего файла конфигурации и передайте его read_string().

from configparser import ConfigParser

parser = ConfigParser()
with open("foo.conf") as stream:
    parser.read_string("[top]\n" + stream.read())  # This line does the trick.

Вы также можете использовать itertools.chain() для имитации заголовка раздела для read_file(). Это может быть более эффективным в использовании памяти, чем описанный выше подход, который может быть полезен, если у вас большие конфигурационные файлы в ограниченной среде выполнения.

from configparser import ConfigParser
from itertools import chain

parser = ConfigParser()
with open("foo.conf") as lines:
    lines = chain(("[top]",), lines)  # This line does the trick.
    parser.read_file(lines)

В python 2 добавьте поддельный заголовок раздела к данным вашего файла конфигурации, оберните результат в объект StringIO и передайте его в readfp().

from ConfigParser import ConfigParser
from StringIO import StringIO

parser = ConfigParser()
with open("foo.conf") as stream:
    stream = StringIO("[top]\n" + stream.read())  # This line does the trick.
    parser.readfp(stream)

При любом из этих подходов ваши настройки конфигурации будут доступны в parser.items('top').

Вы также можете использовать StringIO в python 3, возможно, для совместимости как со старыми, так и с новыми интерпретаторами python, но обратите внимание, что теперь он находится в пакете io, а readfp() теперь не рекомендуется.

В качестве альтернативы вы можете рассмотреть возможность использования парсера TOML вместо ConfigParser.

Ответ 4

Вы можете использовать библиотеку ConfigObj для этого: http://www.voidspace.org.uk/python/configobj.html

Обновлено: найдите последний код здесь.

Если вы находитесь в Debian/Ubuntu, вы можете установить этот модуль с помощью диспетчера пакетов:

apt-get install python-configobj

Пример использования:

from configobj import ConfigObj

config = ConfigObj('myConfigFile.ini')
config.get('key1') # You will get val1
config.get('key2') # You will get val2

Ответ 5

Сам столкнувшись с этой проблемой, я написал полную оболочку для ConfigParser (версия в Python 2), которая может читать и писать файлы без разделов прозрачно, основываясь на подходе Alex Martelli, связанном с принятым ответом. Это должно быть заменой на любое использование ConfigParser. Проводка его на случай, если кто-то, кто нуждается в этом, найдет эту страницу.

import ConfigParser
import StringIO

class SectionlessConfigParser(ConfigParser.RawConfigParser):
    """
    Extends ConfigParser to allow files without sections.

    This is done by wrapping read files and prepending them with a placeholder
    section, which defaults to '__config__'
    """

    def __init__(self, *args, **kwargs):
        default_section = kwargs.pop('default_section', None)
        ConfigParser.RawConfigParser.__init__(self, *args, **kwargs)

        self._default_section = None
        self.set_default_section(default_section or '__config__')

    def get_default_section(self):
        return self._default_section

    def set_default_section(self, section):
        self.add_section(section)

        # move all values from the previous default section to the new one
        try:
            default_section_items = self.items(self._default_section)
            self.remove_section(self._default_section)
        except ConfigParser.NoSectionError:
            pass
        else:
            for (key, value) in default_section_items:
                self.set(section, key, value)

        self._default_section = section

    def read(self, filenames):
        if isinstance(filenames, basestring):
            filenames = [filenames]

        read_ok = []
        for filename in filenames:
            try:
                with open(filename) as fp:
                    self.readfp(fp)
            except IOError:
                continue
            else:
                read_ok.append(filename)

        return read_ok

    def readfp(self, fp, *args, **kwargs):
        stream = StringIO()

        try:
            stream.name = fp.name
        except AttributeError:
            pass

        stream.write('[' + self._default_section + ']\n')
        stream.write(fp.read())
        stream.seek(0, 0)

        return ConfigParser.RawConfigParser.readfp(self, stream, *args,
                                                   **kwargs)

    def write(self, fp):
        # Write the items from the default section manually and then remove them
        # from the data. They'll be re-added later.
        try:
            default_section_items = self.items(self._default_section)
            self.remove_section(self._default_section)

            for (key, value) in default_section_items:
                fp.write("{0} = {1}\n".format(key, value))

            fp.write("\n")
        except ConfigParser.NoSectionError:
            pass

        ConfigParser.RawConfigParser.write(self, fp)

        self.add_section(self._default_section)
        for (key, value) in default_section_items:
            self.set(self._default_section, key, value)

Ответ 6

Самый простой способ сделать это - использовать парсер python CSV, на мой взгляд. Здесь используется функция чтения/записи, демонстрирующая этот подход, а также тестовый драйвер. Это должно работать, если значения не могут быть многострочными.:)

import csv
import operator

def read_properties(filename):
    """ Reads a given properties file with each line of the format key=value.  Returns a dictionary containing the pairs.

    Keyword arguments:
        filename -- the name of the file to be read
    """
    result={ }
    with open(filename, "rb") as csvfile:
        reader = csv.reader(csvfile, delimiter='=', escapechar='\\', quoting=csv.QUOTE_NONE)
        for row in reader:
            if len(row) != 2:
                raise csv.Error("Too many fields on row with contents: "+str(row))
            result[row[0]] = row[1] 
    return result

def write_properties(filename,dictionary):
    """ Writes the provided dictionary in key-sorted order to a properties file with each line of the format key=value

    Keyword arguments:
        filename -- the name of the file to be written
        dictionary -- a dictionary containing the key/value pairs.
    """
    with open(filename, "wb") as csvfile:
        writer = csv.writer(csvfile, delimiter='=', escapechar='\\', quoting=csv.QUOTE_NONE)
        for key, value in sorted(dictionary.items(), key=operator.itemgetter(0)):
                writer.writerow([ key, value])

def main():
    data={
        "Hello": "5+5=10",
        "World": "Snausage",
        "Awesome": "Possum"
    }

    filename="test.properties"
    write_properties(filename,data)
    newdata=read_properties(filename)

    print "Read in: "
    print newdata
    print

    contents=""
    with open(filename, 'rb') as propfile:
        contents=propfile.read()
    print "File contents:"
    print contents

    print ["Failure!", "Success!"][data == newdata]
    return

if __name__ == '__main__': 
     main() 

Ответ 7

Blueicefield ответ упомянул configobj, но исходный lib поддерживает только Python 2. Теперь он имеет порт, совместимый с Python 3+:

https://github.com/DiffSK/configobj

API не изменились, см. doc.

Ответ 8

configobj lib может помочь в случае KEY="value"

from configobj import ConfigObj
cfg = ConfigObj('/home/.aws/config')
access_key_id = cfg['aws_access_key_id']
secret_access_key = cfg['aws_secret_access_key']