Как расширить отображение вывода, чтобы увидеть больше столбцов DataFrame pandas?
https://stackoverflow.com//questions/11707586
-
13-12-2019 - |
italiano
english
français
española
中国
日本の
العربية
Deutsch
한국어
Português
RussianВопрос
Есть ли способ расширить отображение вывода в интерактивном режиме или режиме выполнения сценария?
В частности, я использую describe() функция на пандах DataFrame.Когда DataFrame имеет ширину 5 столбцов (меток), я получаю нужную описательную статистику.Однако, если DataFrame имеет больше столбцов, статистика подавляется и возвращается что-то вроде этого:
>> Index: 8 entries, count to max
>> Data columns:
>> x1 8 non-null values
>> x2 8 non-null values
>> x3 8 non-null values
>> x4 8 non-null values
>> x5 8 non-null values
>> x6 8 non-null values
>> x7 8 non-null values
Значение «8» присваивается независимо от того, имеется ли столбцов 6 или 7.Что означает цифра «8»?
Я уже пробовал перетаскивать окно IDLE больше, а также увеличивать параметры ширины «Настроить IDLE», но безрезультатно.
Моя цель в использовании панд и describe() заключается в том, чтобы избегать использования второй программы, такой как Stata, для выполнения базовых манипуляций с данными и их исследования.
Решение
Обновлять:Панды 0.23.4 и далее
В этом нет необходимости, pandas автоматически определяет размер окна терминала, если вы установите pd.options.display.width = 0.(Старые версии см. внизу.)
pandas.set_printoptions(...) не рекомендуется.Вместо этого используйте pandas.set_option(optname, val), или эквивалентно pd.options.<opt.hierarchical.name> = val.Нравиться:
import pandas as pd
pd.set_option('display.max_rows', 500)
pd.set_option('display.max_columns', 500)
pd.set_option('display.width', 1000)
Здесь помощь для set_option:
set_option(pat,value) - Sets the value of the specified option
Available options:
display.[chop_threshold, colheader_justify, column_space, date_dayfirst,
date_yearfirst, encoding, expand_frame_repr, float_format, height,
line_width, max_columns, max_colwidth, max_info_columns, max_info_rows,
max_rows, max_seq_items, mpl_style, multi_sparse, notebook_repr_html,
pprint_nest_depth, precision, width]
mode.[sim_interactive, use_inf_as_null]
Parameters
----------
pat - str/regexp which should match a single option.
Note: partial matches are supported for convenience, but unless you use the
full option name (e.g. x.y.z.option_name), your code may break in future
versions if new options with similar names are introduced.
value - new value of option.
Returns
-------
None
Raises
------
KeyError if no such option exists
display.chop_threshold: [default: None] [currently: None]
: float or None
if set to a float value, all float values smaller then the given threshold
will be displayed as exactly 0 by repr and friends.
display.colheader_justify: [default: right] [currently: right]
: 'left'/'right'
Controls the justification of column headers. used by DataFrameFormatter.
display.column_space: [default: 12] [currently: 12]No description available.
display.date_dayfirst: [default: False] [currently: False]
: boolean
When True, prints and parses dates with the day first, eg 20/01/2005
display.date_yearfirst: [default: False] [currently: False]
: boolean
When True, prints and parses dates with the year first, eg 2005/01/20
display.encoding: [default: UTF-8] [currently: UTF-8]
: str/unicode
Defaults to the detected encoding of the console.
Specifies the encoding to be used for strings returned by to_string,
these are generally strings meant to be displayed on the console.
display.expand_frame_repr: [default: True] [currently: True]
: boolean
Whether to print out the full DataFrame repr for wide DataFrames
across multiple lines, `max_columns` is still respected, but the output will
wrap-around across multiple "pages" if it's width exceeds `display.width`.
display.float_format: [default: None] [currently: None]
: callable
The callable should accept a floating point number and return
a string with the desired format of the number. This is used
in some places like SeriesFormatter.
See core.format.EngFormatter for an example.
display.height: [default: 60] [currently: 1000]
: int
Deprecated.
(Deprecated, use `display.height` instead.)
display.line_width: [default: 80] [currently: 1000]
: int
Deprecated.
(Deprecated, use `display.width` instead.)
display.max_columns: [default: 20] [currently: 500]
: int
max_rows and max_columns are used in __repr__() methods to decide if
to_string() or info() is used to render an object to a string. In case
python/IPython is running in a terminal this can be set to 0 and pandas
will correctly auto-detect the width the terminal and swap to a smaller
format in case all columns would not fit vertically. The IPython notebook,
IPython qtconsole, or IDLE do not run in a terminal and hence it is not
possible to do correct auto-detection.
'None' value means unlimited.
display.max_colwidth: [default: 50] [currently: 50]
: int
The maximum width in characters of a column in the repr of
a pandas data structure. When the column overflows, a "..."
placeholder is embedded in the output.
display.max_info_columns: [default: 100] [currently: 100]
: int
max_info_columns is used in DataFrame.info method to decide if
per column information will be printed.
display.max_info_rows: [default: 1690785] [currently: 1690785]
: int or None
max_info_rows is the maximum number of rows for which a frame will
perform a null check on its columns when repr'ing To a console.
The default is 1,000,000 rows. So, if a DataFrame has more
1,000,000 rows there will be no null check performed on the
columns and thus the representation will take much less time to
display in an interactive session. A value of None means always
perform a null check when repr'ing.
display.max_rows: [default: 60] [currently: 500]
: int
This sets the maximum number of rows pandas should output when printing
out various output. For example, this value determines whether the repr()
for a dataframe prints out fully or just a summary repr.
'None' value means unlimited.
display.max_seq_items: [default: None] [currently: None]
: int or None
when pretty-printing a long sequence, no more then `max_seq_items`
will be printed. If items are ommitted, they will be denoted by the addition
of "..." to the resulting string.
If set to None, the number of items to be printed is unlimited.
display.mpl_style: [default: None] [currently: None]
: bool
Setting this to 'default' will modify the rcParams used by matplotlib
to give plots a more pleasing visual style by default.
Setting this to None/False restores the values to their initial value.
display.multi_sparse: [default: True] [currently: True]
: boolean
"sparsify" MultiIndex display (don't display repeated
elements in outer levels within groups)
display.notebook_repr_html: [default: True] [currently: True]
: boolean
When True, IPython notebook will use html representation for
pandas objects (if it is available).
display.pprint_nest_depth: [default: 3] [currently: 3]
: int
Controls the number of nested levels to process when pretty-printing
display.precision: [default: 7] [currently: 7]
: int
Floating point output precision (number of significant digits). This is
only a suggestion
display.width: [default: 80] [currently: 1000]
: int
Width of the display in characters. In case python/IPython is running in
a terminal this can be set to None and pandas will correctly auto-detect the
width.
Note that the IPython notebook, IPython qtconsole, or IDLE do not run in a
terminal and hence it is not possible to correctly detect the width.
mode.sim_interactive: [default: False] [currently: False]
: boolean
Whether to simulate interactive mode for purposes of testing
mode.use_inf_as_null: [default: False] [currently: False]
: boolean
True means treat None, NaN, INF, -INF as null (old way),
False means None and NaN are null, but INF, -INF are not null
(new way).
Call def: pd.set_option(self, *args, **kwds)
РЕДАКТИРОВАТЬ:информация о более старой версии, большая часть которой устарела.
Как @bmu упомянул, pandas автоматически определяет (по умолчанию) размер области отображения, сводное представление будет использоваться, когда представление объекта не помещается на дисплее.Вы упомянули об изменении размера окна IDLE, но безрезультатно.Если ты это сделаешь print df.describe().to_string() подходит ли он к окну IDLE?
Размер терминала определяется pandas.util.terminal.get_terminal_size() (устарело и удалено), возвращается кортеж, содержащий (width, height) дисплея.Соответствует ли вывод размеру вашего окна IDLE?Возможно, возникла проблема (одна была раньше при запуске терминала в emacs).
Обратите внимание, что можно обойти автоопределение, pandas.set_printoptions(max_rows=200, max_columns=10) никогда не переключится в режим сводки, если количество строк и столбцов не превышает заданные пределы.
Опция «max_colwidth» помогает увидеть необрезанную форму каждого столбца.
Другие советы
Попробуй это:
pd.set_option('display.expand_frame_repr', False)
Из документации:
display.expand_frame_repr:логическое значение
Независимо от того, следует ли распечатывать полное представление DataFrame для широких DataFrame в нескольких строках, max_columns по-прежнему учитывается, но выходные данные будут охватывать несколько «страниц», если их ширина превышает display.width.[по умолчанию:Правда] [в настоящее время:Истинный]
Видеть: http://pandas.pydata.org/pandas-docs/stable/generated/pandas.set_option.html
Если вы хотите временно установить параметры для отображения одного большого DataFrame, вы можете использовать option_context:
with pd.option_context('display.max_rows', -1, 'display.max_columns', 5):
print df
Значения опций восстанавливаются автоматически при выходе из with блокировать.
Мне помогло только использование этих трех строк:
pd.set_option('display.max_columns', None)
pd.set_option('display.expand_frame_repr', False)
pd.set_option('max_colwidth', -1)
Анаконда/Питон 3.6.5/панды:0.23.0 / Код Visual Studio 1.26
Установите максимальную ширину столбца, используя:
pd.set_option('max_colwidth', 800)
Этот конкретный оператор устанавливает максимальную ширину 800 пикселей для каждого столбца.
Вы можете настроить параметры печати панд с помощью set_printoptions.
In [3]: df.describe()
Out[3]:
<class 'pandas.core.frame.DataFrame'>
Index: 8 entries, count to max
Data columns:
x1 8 non-null values
x2 8 non-null values
x3 8 non-null values
x4 8 non-null values
x5 8 non-null values
x6 8 non-null values
x7 8 non-null values
dtypes: float64(7)
In [4]: pd.set_printoptions(precision=2)
In [5]: df.describe()
Out[5]:
x1 x2 x3 x4 x5 x6 x7
count 8.0 8.0 8.0 8.0 8.0 8.0 8.0
mean 69024.5 69025.5 69026.5 69027.5 69028.5 69029.5 69030.5
std 17.1 17.1 17.1 17.1 17.1 17.1 17.1
min 69000.0 69001.0 69002.0 69003.0 69004.0 69005.0 69006.0
25% 69012.2 69013.2 69014.2 69015.2 69016.2 69017.2 69018.2
50% 69024.5 69025.5 69026.5 69027.5 69028.5 69029.5 69030.5
75% 69036.8 69037.8 69038.8 69039.8 69040.8 69041.8 69042.8
max 69049.0 69050.0 69051.0 69052.0 69053.0 69054.0 69055.0
Однако это будет работать не во всех случаях, поскольку pandas определяет ширину вашей консоли и будет использовать только to_string если вывод помещается в консоль (см. строку документации set_printoptions).В этом случае вы можете явно вызвать to_string как ответил БренБарн.
Обновлять
В версии 0.10 способ печати широких фреймов данных измененный:
In [3]: df.describe()
Out[3]:
x1 x2 x3 x4 x5 \
count 8.000000 8.000000 8.000000 8.000000 8.000000
mean 59832.361578 27356.711336 49317.281222 51214.837838 51254.839690
std 22600.723536 26867.192716 28071.737509 21012.422793 33831.515761
min 31906.695474 1648.359160 56.378115 16278.322271 43.745574
25% 45264.625201 12799.540572 41429.628749 40374.273582 29789.643875
50% 56340.214856 18666.456293 51995.661512 54894.562656 47667.684422
75% 75587.003417 31375.610322 61069.190523 67811.893435 76014.884048
max 98136.474782 84544.484627 91743.983895 75154.587156 99012.695717
x6 x7
count 8.000000 8.000000
mean 41863.000717 33950.235126
std 38709.468281 29075.745673
min 3590.990740 1833.464154
25% 15145.759625 6879.523949
50% 22139.243042 33706.029946
75% 72038.983496 51449.893980
max 98601.190488 83309.051963
Кроме того, изменился API для настройки параметров панд:
In [4]: pd.set_option('display.precision', 2)
In [5]: df.describe()
Out[5]:
x1 x2 x3 x4 x5 x6 x7
count 8.0 8.0 8.0 8.0 8.0 8.0 8.0
mean 59832.4 27356.7 49317.3 51214.8 51254.8 41863.0 33950.2
std 22600.7 26867.2 28071.7 21012.4 33831.5 38709.5 29075.7
min 31906.7 1648.4 56.4 16278.3 43.7 3591.0 1833.5
25% 45264.6 12799.5 41429.6 40374.3 29789.6 15145.8 6879.5
50% 56340.2 18666.5 51995.7 54894.6 47667.7 22139.2 33706.0
75% 75587.0 31375.6 61069.2 67811.9 76014.9 72039.0 51449.9
max 98136.5 84544.5 91744.0 75154.6 99012.7 98601.2 83309.1
Вы можете использовать print df.describe().to_string() чтобы заставить его показать всю таблицу.(Вы можете использовать to_string() вот так для любого DataFrame.Результат describe это просто DataFrame.)
8 — это количество строк в DataFrame, содержащих «описание» (потому что describe вычисляет 8 статистических данных: минимум, максимум, среднее и т. д.).
Вы можете настроить отображение вывода в соответствии с текущей шириной терминала:
pd.set_option('display.width', pd.util.terminal.get_terminal_size()[0])
Согласно документация для версии 0.18.0, если вы работаете на терминале (т. е. не на ноутбуке iPython, qtconsole или IDLE), это двухстрочный код, позволяющий Pandas автоматически определять ширину вашего экрана и оперативно адаптироваться к количеству отображаемых столбцов:
pd.set_option('display.large_repr', 'truncate')
pd.set_option('display.max_columns', 0)
Кажется, что все приведенные выше ответы решают проблему.Еще один момент:вместо pd.set_option('option_name'), вы можете использовать (возможность автозаполнения)
pd.options.display.width = None
Видеть Панды документ:Опции и настройки:
Опции имеют полное имя с пунктиром и без учета регистра (например,
display.max_rows).Вы можете получить/установить параметры непосредственно в качестве атрибутов верхнего уровняoptionsатрибут:In [1]: import pandas as pd In [2]: pd.options.display.max_rows Out[2]: 15 In [3]: pd.options.display.max_rows = 999 In [4]: pd.options.display.max_rows Out[4]: 999
[...]
для max_... параметры:
max_rowsиmax_columnsиспользуются в__repr__()методы, чтобы решить, является лиto_string()илиinfo()используется для преобразования объекта в строку.В случае, если Python/IPython работает в терминале, для него можно установить значение 0, и pandas будет правильно определять ширину терминала и переключаться на меньший формат, если все столбцы не помещаются по вертикали.Блокнот IPython, IPython qtconsole или IDLE не запускаются в терминале, и, следовательно, невозможно выполнить правильное автоматическое обнаружение. ‘NoneЗначение означает неограниченное. [выделено не в оригинале]
для width параметр:
Ширина дисплея в символах.Если python/IPython работает в терминале, для него можно установить значение
Noneи панды правильно автоматически определят ширину.Обратите внимание, что блокнот IPython, IPython qtconsole или IDLE не запускаются в терминале, и, следовательно, невозможно правильно определить ширину.
import pandas as pd
pd.set_option('display.max_columns', 100)
pd.set_option('display.width', 1000)
SentenceA = "William likes Piano and Piano likes William"
SentenceB = "Sara likes Guitar"
SentenceC = "Mamoosh likes Piano"
SentenceD = "William is a CS Student"
SentenceE = "Sara is kind"
SentenceF = "Mamoosh is kind"
bowA = SentenceA.split(" ")
bowB = SentenceB.split(" ")
bowC = SentenceC.split(" ")
bowD = SentenceD.split(" ")
bowE = SentenceE.split(" ")
bowF = SentenceF.split(" ")
# Creating a set consisted of all words
wordSet = set(bowA).union(set(bowB)).union(set(bowC)).union(set(bowD)).union(set(bowE)).union(set(bowF))
print("Set of all words is: ", wordSet)
# Initiating dictionary with 0 value for all BOWs
wordDictA = dict.fromkeys(wordSet, 0)
wordDictB = dict.fromkeys(wordSet, 0)
wordDictC = dict.fromkeys(wordSet, 0)
wordDictD = dict.fromkeys(wordSet, 0)
wordDictE = dict.fromkeys(wordSet, 0)
wordDictF = dict.fromkeys(wordSet, 0)
for word in bowA:
wordDictA[word] += 1
for word in bowB:
wordDictB[word] += 1
for word in bowC:
wordDictC[word] += 1
for word in bowD:
wordDictD[word] += 1
for word in bowE:
wordDictE[word] += 1
for word in bowF:
wordDictF[word] += 1
# Printing Term frequency
print("SentenceA TF: ", wordDictA)
print("SentenceB TF: ", wordDictB)
print("SentenceC TF: ", wordDictC)
print("SentenceD TF: ", wordDictD)
print("SentenceE TF: ", wordDictE)
print("SentenceF TF: ", wordDictF)
print(pd.DataFrame([wordDictA, wordDictB, wordDictB, wordDictC, wordDictD, wordDictE, wordDictF]))
Выход:
CS Guitar Mamoosh Piano Sara Student William a and is kind likes
0 0 0 0 2 0 0 2 0 1 0 0 2
1 0 1 0 0 1 0 0 0 0 0 0 1
2 0 1 0 0 1 0 0 0 0 0 0 1
3 0 0 1 1 0 0 0 0 0 0 0 1
4 1 0 0 0 0 1 1 1 0 1 0 0
5 0 0 0 0 1 0 0 0 0 1 1 0
6 0 0 1 0 0 0 0 0 0 1 1 0
Я использовал эти настройки, когда масштаб данных велик.
# environment settings:
pd.set_option('display.max_column',None)
pd.set_option('display.max_rows',None)
pd.set_option('display.max_seq_items',None)
pd.set_option('display.max_colwidth', 500)
pd.set_option('expand_frame_repr', True)
Вы можете обратиться к документацииздесь
Если вы не хотите возиться с параметрами отображения и просто хотите увидеть этот конкретный список столбцов, не раскрывая каждый просматриваемый вами фрейм данных, вы можете попробовать:
df.columns.values
Вы также можете попробовать в цикле:
for col in df.columns:
print(col)
Строки ниже достаточно для отображения всех столбцов из фрейма данных. pd.set_option('display.max_columns', None)
Вы можете просто выполнить следующие шаги:
Вы можете изменить параметры функции pandas max_columns следующим образом:
import pandas as pd pd.options.display.max_columns = 10(это позволяет отображать 10 столбцов, вы можете изменить это по своему усмотрению)
Таким образом, вы можете изменить количество строк, которые вам нужны для отображения, следующим образом (если вам также нужно изменить максимальное количество строк)
pd.options.display.max_rows = 999(это позволяет печатать 999 строк за раз)
Пожалуйста, обратитесь к док изменить различные параметры/настройки для панд
