2019-05-22 11:08:45 4265瀏覽
本篇文章扣丁學(xué)堂Python培訓(xùn)小編給讀者們分享一下如何在django里上傳csv文件并進(jìn)行入庫(kù)處理,對(duì)Python開(kāi)發(fā)技術(shù)感興趣的小伙伴就隨小編來(lái)了解誒一下吧。
運(yùn)維平臺(tái)導(dǎo)入數(shù)據(jù)這一功能實(shí)在是太重要了,在沒(méi)有建自己的cmdb平臺(tái)前,大多數(shù)公司管理服務(wù)器信息肯定是表格,用表格最麻煩的就是有點(diǎn)更新就得每個(gè)人發(fā)一份,這樣大家信息才能統(tǒng)一,很不方便,終于有一天受不了了,搞了一個(gè)服務(wù)器信息管理平臺(tái),那面臨的第一個(gè)問(wèn)題不是說(shuō)功能好或不不好,而是怎么才能把表里的數(shù)據(jù)導(dǎo)入到數(shù)據(jù)庫(kù)中,所以你說(shuō)重要不重要。
當(dāng)然如果你就喜歡自己手工錄入(找虐的感覺(jué)),這個(gè)咱也不能說(shuō)啥,各有所好嘛,那具體如何錄的最快,這個(gè)不在我們今天的討論范圍,我們只討論如何自動(dòng)導(dǎo)入。
提到導(dǎo)入,那一般有二個(gè)方法,一個(gè)是在前端上傳完后存儲(chǔ)在服務(wù)器上的某個(gè)目錄里,然后讀取文件進(jìn)行分析處理。
另一種是上傳文件后直接讀取文件內(nèi)容而不存儲(chǔ)在服務(wù)器上,這二種方法都可以實(shí)現(xiàn)我們得目的,這篇主要是討論的后面這種。
上傳文件,首先我們建一個(gè)html文件,內(nèi)容代碼如下:
<form action="{% url "myapp:upload_csv" %}" method="POST" enctype="multipart/form-data" class="form-horizontal"> {% csrf_token %} <div class="form-group"> <label for="name" class="col-md-3 col-sm-3 col-xs-12 control-label">File: </label> <div class="col-md-8"> <input type="file" name="csv_file" id="csv_file" required="True" class="form-control"> </div> </div> <div class="form-group"> <div class="col-md-3 col-sm-3 col-xs-12 col-md-offset-3" style="margin-bottom:10px;"> <button class="btn btn-primary"> <span class="glyphicon glyphicon-upload" style="margin-right:5px;"></span>Upload </button> </div> </div> </form>
這些都是基本的Html,只要主要enctype=”multipart/form-data”這個(gè)參數(shù)就可以,其它無(wú)特別說(shuō)明。
加入路由:
url(r'^upload/csv/$', views.upload_csv, name='upload_csv'),
那接下來(lái)就是處理上傳的文件并入庫(kù)了,這個(gè)代碼在views.py文件里,代碼如下:
def upload_csv(request): data = {} if "GET" == request.method: return render(request, "myapp/upload_csv.html", data) # if not GET, then proceed try: csv_file = request.FILES["csv_file"] if not csv_file.name.endswith('.csv'): messages.error(request,'File is not CSV type') return HttpResponseRedirect(reverse("myapp:upload_csv")) #if file is too large, return if csv_file.multiple_chunks(): messages.error(request,"Uploaded file is too big (%.2f MB)." % (csv_file.size/(1000*1000),)) return HttpResponseRedirect(reverse("myapp:upload_csv")) file_data = csv_file.read().decode("utf-8") lines = file_data.split("\n") #loop over the lines and save them in db. If error , store as string and then display for line in lines: fields = line.split(",") data_dict = {} data_dict["name"] = fields[0] data_dict["start_date_time"] = fields[1] data_dict["end_date_time"] = fields[2] data_dict["notes"] = fields[3] try: form = EventsForm(data_dict) if form.is_valid(): form.save() else: logging.getLogger("error_logger").error(form.errors.as_json()) except Exception as e: logging.getLogger("error_logger").error(repr(e)) pass except Exception as e: logging.getLogger("error_logger").error("Unable to upload file. "+repr(e)) messages.error(request,"Unable to upload file. "+repr(e)) return HttpResponseRedirect(reverse("myapp:upload_csv"))
代碼解釋:
最開(kāi)始判斷如果是get請(qǐng)求直接渲染upload_csv.html文件,如果是post請(qǐng)求那么進(jìn)行分析處理,首先是檢查文件名是否是以csv結(jié)尾的,如果是就處理,不是就提示錯(cuò)誤信息,再就是檢查下上傳文件的大小,其實(shí)這些檢查也還好,如果是自己整理的表導(dǎo)入基本也不用做這些檢查了,如果是有多人操作這些檢查就有必要了,然后開(kāi)始循環(huán)迭代文件行,內(nèi)容是以逗號(hào)分隔,這里假設(shè)就是4列,如果你的表格列很多可以做修改,最后保存入庫(kù),如果有錯(cuò)誤就記錄錯(cuò)誤信息到日志文件中。
至此我們需要的功能就完成了,雖然簡(jiǎn)單但非常實(shí)用。
以上就是扣丁學(xué)堂Python在線學(xué)習(xí)小編給大家分享的在django里上傳csv文件并進(jìn)行入庫(kù)處理的方法,希望對(duì)小伙伴們有所幫助,想要了解更多內(nèi)容的小伙伴可以登錄扣丁學(xué)堂官網(wǎng)咨詢。
想要學(xué)好Python開(kāi)發(fā)小編給大家推薦口碑良好的扣丁學(xué)堂,扣丁學(xué)堂有專業(yè)老師制定的Python學(xué)習(xí)路線圖輔助學(xué)員學(xué)習(xí),此外還有與時(shí)俱進(jìn)的Python課程體系和Python在線視頻供大家學(xué)習(xí),想要學(xué)好Python開(kāi)發(fā)技術(shù)的小伙伴快快行動(dòng)吧??鄱W(xué)堂Python技術(shù)交流群:279521237。
【關(guān)注微信公眾號(hào)獲取更多學(xué)習(xí)資料】 【掃碼進(jìn)入Python全棧開(kāi)發(fā)免費(fèi)公開(kāi)課】
查看更多關(guān)于"Python開(kāi)發(fā)資訊"的相關(guān)文章>