内射老阿姨1区2区3区4区_久久精品人人做人人爽电影蜜月_久久国产精品亚洲77777_99精品又大又爽又粗少妇毛片

python如何讀取csv文件

python如何讀取csv文件?這個問題可能是我們?nèi)粘W習或工作經(jīng)常見到的。希望通過這個問題能讓你收獲頗深。下面是小編給大家?guī)淼膮⒖純?nèi)容,讓我們一起來看看吧!

創(chuàng)新互聯(lián)建站專注于企業(yè)成都全網(wǎng)營銷推廣、網(wǎng)站重做改版、龍城網(wǎng)站定制設(shè)計、自適應品牌網(wǎng)站建設(shè)、H5技術(shù)、商城網(wǎng)站制作、集團公司官網(wǎng)建設(shè)、外貿(mào)網(wǎng)站制作、高端網(wǎng)站制作、響應式網(wǎng)頁設(shè)計等建站業(yè)務,價格優(yōu)惠性價比高,為龍城等各大城市提供網(wǎng)站開發(fā)制作服務。

Python讀寫csv文件

前言

逗號分隔值(Comma-Separated Values,CSV,有時也稱為字符分隔值,因為分隔字符也可以不是逗號),其文件以純文本形式存儲表格數(shù)據(jù)(數(shù)字和文本)。純文本意味著該文件是一個字符序列,不含必須像二進制數(shù)字那樣被解讀的數(shù)據(jù)。CSV文件由任意數(shù)目的記錄組成,記錄間以某種換行符分隔;每條記錄由字段組成,字段間的分隔符是其它字符或字符串,最常見的是逗號或制表符。通常,所有記錄都有完全相同的字段序列.

特點

讀取出的數(shù)據(jù)一般為字符類型,如果是數(shù)字需要人為轉(zhuǎn)換為數(shù)字

以行為單位讀取數(shù)據(jù)

列之間以半角逗號或制表符為分隔,一般為半角逗號

一般為每行開頭不空格,第一行是屬性列,數(shù)據(jù)列之間以間隔符為間隔無空格,行之間無空行。

行之間無空行十分重要,如果有空行或者數(shù)據(jù)集中行末有空格,讀取數(shù)據(jù)時一般會出錯,引發(fā)[list index out of range]錯誤。PS:已經(jīng)被這個錯誤坑過很多次!

使用python I/O寫入和讀取CSV文件

使用PythonI/O寫入csv文件

以下是將"birthweight.dat"低出生體重的dat文件從作者源處下載下來,并且將其處理后保存到csv文件中的代碼。

import csv
import os
import numpy as np
import random
import requests
# name of data file
# 數(shù)據(jù)集名稱
birth_weight_file = 'birth_weight.csv'
# download data and create data file if file does not exist in current directory
# 如果當前文件夾下沒有birth_weight.csv數(shù)據(jù)集則下載dat文件并生成csv文件
if not os.path.exists(birth_weight_file):
    birthdata_url = 'https://github.com/nfmcclure/tensorflow_cookbook/raw/master/01_Introduction/07_Working_with_Data_Sources/birthweight_data/birthweight.dat'
    birth_file = requests.get(birthdata_url)
    birth_data = birth_file.text.split('\r\n')
    # split分割函數(shù),以一行作為分割函數(shù),windows中換行符號為'\r\n',每一行后面都有一個'\r\n'符號。
    birth_header = birth_data[0].split('\t')
    # 每一列的標題,標在第一行,即是birth_data的第一個數(shù)據(jù)。并使用制表符作為劃分。
    birth_data = [[float(x) for x in y.split('\t') if len(x) >= 1] for y in birth_data[1:] if len(y) >= 1]
    print(np.array(birth_data).shape)
    # (189, 9)
    # 此為list數(shù)據(jù)形式不是numpy數(shù)組不能使用np,shape函數(shù),但是我們可以使用np.array函數(shù)將list對象轉(zhuǎn)化為numpy數(shù)組后使用shape屬性進行查看。
    with open(birth_weight_file, "w", newline='') as f:
    # with open(birth_weight_file, "w") as f:
        writer = csv.writer(f)
        writer.writerows([birth_header])
        writer.writerows(birth_data)
        f.close()

python如何讀取csv文件

常見錯誤list index out of range

其中我們重點需要講的是 with open(birth_weight_file, "w", newline='') as f: 這個語句。表示寫入csv文件,如果不加上參數(shù) newline='' 表示以空格作為換行符,而是用 with open(birth_weight_file, "w") as f: 語句。則生成的表格中會出現(xiàn)空行。

python如何讀取csv文件

不僅僅是用python I/O進行csv數(shù)據(jù)的讀寫時,利用其余方法讀寫csv數(shù)據(jù),或者從網(wǎng)上下載好csv數(shù)據(jù)集后都需要查看其每行后有沒有空格,或者有沒有多余的空行。避免不必要的錯誤~影響數(shù)據(jù)分析時的判斷。

使用PythonI/O讀取csv文件

使用python I/O方法進行讀取時即是新建一個List 列表然后按照先行后列的順序(類似C語言中的二維數(shù)組)將數(shù)據(jù)存進空的List對象中,如果需要將其轉(zhuǎn)化為numpy 數(shù)組也可以使用np.array(List name)進行對象之間的轉(zhuǎn)化。

birth_data = []
with open(birth_weight_file) as csvfile:
    csv_reader = csv.reader(csvfile)  # 使用csv.reader讀取csvfile中的文件
    birth_header = next(csv_reader)  # 讀取第一行每一列的標題
    for row in csv_reader:  # 將csv 文件中的數(shù)據(jù)保存到birth_data中
        birth_data.append(row)
birth_data = [[float(x) for x in row] for row in birth_data]  # 將數(shù)據(jù)從string形式轉(zhuǎn)換為float形式
birth_data = np.array(birth_data)  # 將list數(shù)組轉(zhuǎn)化成array數(shù)組便于查看數(shù)據(jù)結(jié)構(gòu)
birth_header = np.array(birth_header)
print(birth_data.shape)  # 利用.shape查看結(jié)構(gòu)。
print(birth_header.shape)
#
# (189, 9)
# (9,)

使用Pandas讀取CSV文件

import pandas as pd
csv_data = pd.read_csv('birth_weight.csv')  # 讀取訓練數(shù)據(jù)
print(csv_data.shape)  # (189, 9)
N = 5
csv_batch_data = csv_data.tail(N)  # 取后5條數(shù)據(jù)
print(csv_batch_data.shape)  # (5, 9)
train_batch_data = csv_batch_data[list(range(3, 6))]  # 取這20條數(shù)據(jù)的3到5列值(索引從0開始)
print(train_batch_data)
#      RACE  SMOKE  PTL
# 184   0.0    0.0  0.0
# 185   0.0    0.0  1.0
# 186   0.0    1.0  0.0
# 187   0.0    0.0  0.0
# 188   0.0    0.0  1.0

使用Tensorflow讀取CSV文件

本人在平時一般都是使用Tensorflow處理各類數(shù)據(jù),所以對于使用Tensorflow讀取數(shù)據(jù)在此不過多的進行解釋,下面貼上一段代碼。

'''使用Tensorflow讀取csv數(shù)據(jù)'''
filename = 'birth_weight.csv'
file_queue = tf.train.string_input_producer([filename])  # 設(shè)置文件名隊列,這樣做能夠批量讀取文件夾中的文件
reader = tf.TextLineReader(skip_header_lines=1)  # 使用tensorflow文本行閱讀器,并且設(shè)置忽略第一行
key, value = reader.read(file_queue)
defaults = [[0.], [0.], [0.], [0.], [0.], [0.], [0.], [0.], [0.]]  # 設(shè)置列屬性的數(shù)據(jù)格式
LOW, AGE, LWT, RACE, SMOKE, PTL, HT, UI, BWT = tf.decode_csv(value, defaults)
# 將讀取的數(shù)據(jù)編碼為我們設(shè)置的默認格式
vertor_example = tf.stack([AGE, LWT, RACE, SMOKE, PTL, HT, UI])  # 讀取得到的中間7列屬性為訓練特征
vertor_label = tf.stack([BWT])  # 讀取得到的BWT值表示訓練標簽
# 用于給取出的數(shù)據(jù)添加上batch_size維度,以批處理的方式讀出數(shù)據(jù)??梢栽O(shè)置批處理數(shù)據(jù)大小,是否重復讀取數(shù)據(jù),容量大小,隊列末尾大小,讀取線程等屬性。
example_batch, label_batch = tf.train.shuffle_batch([vertor_example, vertor_label], batch_size=10, capacity=100, min_after_dequeue=10)
# 初始化Session
with tf.Session() as sess:
    coord = tf.train.Coordinator()  # 線程管理器
    threads = tf.train.start_queue_runners(coord=coord)
    print(sess.run(tf.shape(example_batch)))  # [10  7]
    print(sess.run(tf.shape(label_batch)))  # [10  1]
    print(sess.run(example_batch)[3])  # [ 19.  91.   0.   1.   1.   0.   1.]
    coord.request_stop()
    coord.join(threads)
'''
對于使用所有Tensorflow的I/O操作來說開啟和關(guān)閉線程管理器都是必要的操作
with tf.Session() as sess:
    coord = tf.train.Coordinator()  # 線程管理器
    threads = tf.train.start_queue_runners(coord=coord)
    #  Your code here~
    coord.request_stop()
    coord.join(threads)
'''

還有其他使用python讀取文件的各種方法,這里介紹三種,不定期進行補充。

感謝各位的閱讀!看完上述內(nèi)容,你們對python如何讀取csv文件大概了解了嗎?希望文章內(nèi)容對大家有所幫助。如果想了解更多相關(guān)文章內(nèi)容,歡迎關(guān)注創(chuàng)新互聯(lián)行業(yè)資訊頻道。

新聞標題:python如何讀取csv文件
當前URL:http://www.rwnh.cn/article12/jsdcdc.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供建站公司、ChatGPT、企業(yè)網(wǎng)站制作虛擬主機、做網(wǎng)站、App設(shè)計

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)

成都seo排名網(wǎng)站優(yōu)化
金阳县| 鄱阳县| 新龙县| 阳原县| 乐业县| 衡南县| 璧山县| 贞丰县| 苍溪县| 石阡县| 大石桥市| 潮州市| 巴青县| 青河县| 台安县| 老河口市| 武平县| 三门县| 竹北市| 盘锦市| 曲松县| 衡南县| 黄浦区| 湖口县| 韩城市| 云龙县| 余干县| 武胜县| 郧西县| 泰州市| 名山县| 延安市| 定边县| 临沭县| 新田县| 乡宁县| 永川市| 蓝山县| 龙南县| 英德市| 五华县|