国产探花免费观看_亚洲丰满少妇自慰呻吟_97日韩有码在线_资源在线日韩欧美_一区二区精品毛片,辰东完美世界有声小说,欢乐颂第一季,yy玄幻小说排行榜完本

首頁 > 編程 > Python > 正文

Python讀寫Json涉及到中文的處理方法

2019-11-25 16:34:21
字體:
來源:轉載
供稿:網友

今天在幫前端準備數據的時候,需要把數據格式轉成json格式,說實話,涉及到中文有時候真的是很蛋疼,除非對Python的編碼規則比較了解,不然處理起來真的很蛋疼。

整個邏輯

我們需要處理的是把一些文章處理,生成多個html文件,然后用json來顯示文章的列表,圖片,摘要和標題。

思路

為了以后的數據擴展,那必須有一個數據庫,我的想法就是自己寫一個簡單的網頁做為提交輸入,然后post到后臺以后錄入到數據庫中,再寫一個展示文章的頁面,展示效果正確后,寫一個requests動態的把所有的數據都爬下來生成一個一個的html文檔。最后的json數據我只要從數據庫把數據抽出來生成就行了。

前端

其實前端的東西很簡單,最近一直在寫網頁,所以前端的東西分分鐘就搞定了。代碼如下:

urls.pyfrom django.conf.urls import url, includefrom . import viewsurlpatterns = {  url(r'^$', views.index, name='index'),  url(r'add_article/', views.add_article, name='add_article'),  url(r'^article/(?P<main_id>/S+)/$', views.article, name='article'),}views.py# coding=utf-8from django.shortcuts import renderfrom .models import Tzxy# Create your views here.def index(request):  return render(request, 'index.html')def add_article(request):  error = 'error'  if request.method == 'POST':    # 獲取前段request的內容    main_id = request.POST['main_id']    img_url = request.POST['img_url']    title = request.POST['title']    content = request.POST['content']    abstract = content[:50]    print main_id    indb = Tzxy(          main_id=main_id,          img_url=img_url,          title=title,          content=content,          abstract=abstract          )    indb.save()    error = 'success'    return render(request, 'index.html', {'error': error})  return render(request, 'index.html')def article(request, main_id):  article_detial = Tzxy.objects.get(main_id=main_id)  return render(request, 'views.html', {'content': article_detial})models.pyfrom __future__ import unicode_literalsfrom django.db import modelsfrom django.contrib import adminclass Tzxy(models.Model):  main_id = models.CharField(max_length=10)  img_url = models.CharField(max_length=50, null=True)  title = models.CharField(max_length=50)  content = models.TextField()  abstract = models.CharField(max_length=200)admin.site.register(Tzxy)

模板我就隨便寫了一個簡單的表單

index.html

<!DOCTYPE html><html lang="en"><head>  <meta charset="UTF-8">  <title>Title</title>  <link  rel="stylesheet">  <script src="http://libs.baidu.com/jquery/2.0.0/jquery.min.js"></script>  <script src="http://libs.baidu.com/bootstrap/3.0.3/js/bootstrap.min.js"></script></head><body><form method="post" action="/tzxy/add_article/">{% csrf_token %}main_id: <input type="text" name="main_id"><br>img_url: <input type="text" name="img_url"><br>title: <input type="text" name="title"><br>{% if error == 'success' %}  <div class="alert alert-success">{{ error }}</div>{% endif %}<textarea name="content" rows="25" style="width: 600px;"></textarea><br>  <input type="submit" name="Submit"></form></body></html>

展示的頁面

{% load custom_markdown %}<!DOCTYPE html><html lang="zh-cn"><head>  <meta charset="UTF-8">  <meta name="viewport" content="initial-scale=1.0,maximum-scale=1.0,minimum-scale=1.0,user-scalable=no" />  <meta name="apple-touch-fullscreen" content="yes" />  <meta name="apple-mobile-web-app-capable" content="yes" />  <meta name="format-detection" content="telephone=no">  <meta http-equiv="Cache-Control" content="no-store" />  <meta http-equiv="Pragma" content="no-cache" />  <meta http-equiv="Expires" content="0" />  <title>{{ content.title }}</title>  <link rel="stylesheet" href="../../css/cssreset.min.css">  <link rel="stylesheet" href="../../css/fx_tzxy_content.min.css"></head><body>  <div class="page">    <h1>{{ content.title }}</h1>    <div class="content">      {{ content.content | custom_markdown | linebreaksbr }}    </div>  </div></body></html>

當然,我里面使用了markdown來處理了一些數據。有關markdown的集成,可以移步《Django開發博客(六)――添加markdown支持》
爬數據的小腳本如下,需要使用到requests模塊

# coding=utf-8import sysimport requestsreload(sys)sys.setdefaultencoding('utf8')def tohtml(file_name, startpos, endpos):  """  請求網頁數據后把網頁源碼存儲為html格式,啟動腳本時要先啟動Django的Server  :param file_name:生成文件名的前綴,最后一位用傳入的數字來代替  :param startpos:開始的數字  :param endpos:結束的數字  :return:None  """  for x in range(startpos, endpos):    r = requests.get('http://127.0.0.1:8000/tzxy/article/' + file_name + str(x))    with open('/Users/SvenWeng/Desktop/test/' + file_name + str(x) + '.html', 'w') as f:      f.write(r.text)  print 'success'if __name__ == '__main__':  tzhtl_name = 'tzxy_tzhtl_h_'  djjyy_name = 'tzxy_djjyy_h_'  tohtml(djjyy_name, 1, 39)

里面的一些命名自己可以根據需要去修改。

生成json

說實話,json的使用方式很簡單,Python對json的支持也很好,不過涉及到中文就有點蛋疼了,我的代碼是這樣的:

# coding=utf-8import sqlite3import jsonimport sysreload(sys)sys.setdefaultencoding('utf8')list_json = []conn = sqlite3.connect('db.sqlite3')c = conn.cursor()sql = 'select * from Tzxy_tzxy'c.execute(sql)all_thing = c.fetchall()for x in all_thing:  dic_member = {'id': x[1].split('_')[3],         'img': x[2],         'title': x[3],         'abstract': ''}  list_json.append(dic_member)conn.close()final_json = json.dumps(list_json, sort_keys=True, indent=4)with open('test.json', 'w') as f:  f.write(final_json)

代碼邏輯是:定義一個空列表,用來裝生成的字典信息,然后從sqlite里面把之前存的數據全部抓出來。把數據循環生成自己想要的格式的字典,一個一個的插到列表中。再用Python提供的json.dumps方法把數據轉成json格式,再寫入文件就行了。
邏輯看上去是沒什么問題,實現起來也很完美,但是最后我打開json文件檢查的時候發現所有的中文都變成Unicode了。這簡直是坑爹啊。

大致查了一下,好像網絡上對這塊說的內容并不詳細,舉得例子也都是非常非常簡單的那種,直接給中文的,并不是我想要的,最后只能硬著頭皮去看官方的說明,最后找到了這么一個東西ensure_ascii=False,在Python轉Json的時候帶上這個方法,也就是

final_json = json.dumps(list_json, sort_keys=True, indent=4, ensure_ascii=False)

這樣處理之后,寫入文件就是正常的中文了。

以上這篇Python讀寫Json涉及到中文的處理方法就是小編分享給大家的全部內容了,希望能給大家一個參考,也希望大家多多支持武林網。

發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
主站蜘蛛池模板: 沙河市| 阿拉尔市| 榆中县| 池州市| 礼泉县| 靖远县| 贵阳市| 苍梧县| 西贡区| 淳化县| 缙云县| 濮阳市| 临澧县| 蓝山县| 彝良县| 青海省| 灵寿县| 四子王旗| 宝山区| 汉沽区| 石屏县| 子长县| 五华县| 时尚| 鹤岗市| 丹寨县| 长岭县| 油尖旺区| 霍州市| 卓尼县| 扎赉特旗| 藁城市| 临沧市| 临桂县| 娄底市| 马边| 阳城县| 昌乐县| 六枝特区| 牟定县| 上林县|