這篇文章將為大家詳細講解有關nodejs和C語言插入mysql數(shù)據庫亂碼怎么辦,小編覺得挺實用的,因此分享給大家做個參考,希望大家閱讀完這篇文章后可以有所收獲。
在這里記錄了nodejs過程中的一些亂碼情況,這里的亂碼主要是由于網頁的編碼方式與nodejs的默認解碼方式(utf8)不一致所造成的。這一次要說一下的是在C語言和nodejs與MySQL進行交互的時候出現(xiàn)的亂碼問題。
1,由于爬蟲程序在多個Docker中執(zhí)行,因此我需要定期的同步每一個docker中的mysql數(shù)據到一個全局的mysql數(shù)據表中。使用nodejs進行數(shù)據同步,出現(xiàn)中文亂碼。要知道在每一docker中的中文是不存在亂碼的。原因是nodejs默認處理字符是utf8,而mysql默認是latin1,畢竟是歐洲人開發(fā)的數(shù)據庫。分析如下
命令show variables like 'char%'
;得到的結果如下:
+--------------------------+----------------------------+ | Variable_name | Value | +--------------------------+----------------------------+ | character_set_client | latin1 | | character_set_connection | latin1 | | character_set_database | latin1 | | character_set_filesystem | binary | | character_set_results | latin1 | | character_set_server | latin1 | | character_set_system | latin1 | | character_sets_dir | /usr/share/mysql/charsets/ | +--------------------------+----------------------------+
即在建立數(shù)據庫的時候不特別指定,則數(shù)據庫,數(shù)據表的以及數(shù)據字段的編碼格式為默認值,而默認值在不更改配置文件的時候是latin1(默認安裝形式)。由于utf8是較為通用的編碼方式,因此我們將數(shù)據庫的所有編碼方式改為utf8。這里需要說明的是mysql的編碼分為好幾個層次,包括數(shù)據庫級別,數(shù)據表級別以及數(shù)據字段級別等,我這里沒有去深究這些方面,一個個去設置每個字段,每個表的編碼方式,而是把所有的編碼方式均設置為utf8。具體如下:
vi /etc/my.cnf修改my.cnf文件如下:
[mysqld] datadir=/var/lib/mysql socket=/var/lib/mysql/mysql.sock user=mysql default-character-set = utf8 character_set_server = utf8 [mysql] default-character-set = utf8 [mysql.server] default-character-set = utf8 # Disabling symbolic-links is recommended to prevent assorted security risks symbolic-links=0
[mysqld_safe] log-error=/var/log/mysqld.log pid-file=/var/run/mysqld/mysqld.pid default-character-set = utf8 [client] default-character-set = utf8
修改完之后,重起mysql服務service mysqld restart
命令show variables like 'char%'
;再次查看編碼格式,得到的結果如下:
+--------------------------+----------------------------+ | Variable_name | Value | +--------------------------+----------------------------+ | character_set_client | utf8 | | character_set_connection | utf8 | | character_set_database | utf8 | | character_set_filesystem | binary | | character_set_results | utf8 | | character_set_server | utf8 | | character_set_system | utf8 | | character_sets_dir | /usr/share/mysql/charsets/ | +--------------------------+----------------------------+
可以看到所有的編碼格式都會變成utf8,至此在建立數(shù)據庫和數(shù)據表,數(shù)據字段的時候如果不特別指定,那么則會采用默認的編碼方式,即現(xiàn)在的utf8。
2,雖然編碼格式從latin1變成了utf8,但是我這里還是遇到如下的問題。
Specified key was too long; max key length is 1000 bytes
意思是key值長度大于1000個字節(jié)了,這里面的key值長度指的是定義key值時候的長度和乘以編碼格式字節(jié)數(shù),而不指實際長度。同時由于取1utf8=3字節(jié)(這個我是看別人都是這么說的,具體取多少我這邊不確定),因此將其和乘以3之后就大于1000個字節(jié)了。原先latin1是沒問題的(取的是1)。
解決辦法即就是(1),縮減key值的定義長度。(2),不使用utf8編碼。(3),因為默認DB engine 是MyIsAm,把其換成innodb。我使用方式(3),然后錯誤得以消除。
3,這個時候又出現(xiàn)了如下問題:
ERROR: ER_TOO_LONG_KEY: Specified key was too long; max key length is 767 bytes
這個問題的原因還是utf8所導致的,在latin1編碼格式下,我設置了VARCHAR (512)類型為主鍵是沒有問題的,而utf8則不行,是由于utf8編碼取的是3字節(jié),也就說,只能容納256個utf8編碼格式的VARCHAR。因此定義的時候定義為VARCHAR (255)問題得以消除,或者換一種數(shù)據類型。
4,至此我使用nodejs進行數(shù)據庫的讀寫都是沒有問題的,但是我在使用C 語言的時候,發(fā)現(xiàn)插入utf8編碼的中文,仍然顯示的是亂碼。原因可能由多種,這里面我說一下我遇到的兩種情況。首先確認本地系統(tǒng)的默認編碼方式,使用locale命令進行查看(Linux),通常情況應該是utf8,為了保險期間,我在C語言中加入了如下的代碼顯示指定編碼方式
#include <locale.h> setlocale(LC_ALL, "en_US.UTF-8");
這個時候,C語言執(zhí)行mysql_query插入數(shù)據的時候,數(shù)據庫仍然顯示亂碼。解決方法如下:
mysql_query(g_pMyConn, "set character set utf8"); mysql_query(g_pMyConn, g_strSqlStatement)
即在執(zhí)行數(shù)據庫插入命令前,多加上一行顯示的說明使用utf8方式執(zhí)行。
由于nodejs插入的時候沒有C語言的問題,我就簡單構想了一下如下原因,純屬個人猜測:
由于C語言使用的是mysql官方提供的api接口,而且mysql是由于歐洲人開發(fā)的,開始的時候沒想到會應用那么廣泛,因此使用了latin1默認編碼,隨著mysql應用的人越來越多,因此在支持其他編碼的時候就需要在原來的接口上打補丁,因此就會出現(xiàn)上面顯示的指定編碼格式,并沒有做到接口和數(shù)據庫默認編碼能夠自動保持一致的情況。
對于nodejs來說,連接數(shù)據庫的行為會由nodejs進行封裝,考慮的就相對全面,因此沒有C 語言中的問題。
最后我發(fā)現(xiàn)DB engine 從MyIsAm換成innodb,讀取速度好變慢了,不知是啥原因,知道的麻煩告知一聲。
關于“nodejs和C語言插入mysql數(shù)據庫亂碼怎么辦”這篇文章就分享到這里了,希望以上內容可以對大家有一定的幫助,使各位可以學到更多知識,如果覺得文章不錯,請把它分享出去讓更多的人看到。
另外有需要云服務器可以了解下創(chuàng)新互聯(lián)建站www.chinadenli.net,海內外云服務器15元起步,三天無理由+7*72小時售后在線,公司持有idc許可證,提供“云服務器、裸金屬服務器、高防服務器、香港服務器、美國服務器、虛擬主機、免備案服務器”等云主機租用服務以及企業(yè)上云的綜合解決方案,具有“安全穩(wěn)定、簡單易用、服務可用性高、性價比高”等特點與優(yōu)勢,專為企業(yè)上云打造定制,能夠滿足用戶豐富、多元化的應用場景需求。
網站標題:nodejs和C語言插入mysql數(shù)據庫亂碼怎么辦-創(chuàng)新互聯(lián)
文章URL:http://www.chinadenli.net/article26/dppojg.html
成都網站建設公司_創(chuàng)新互聯(lián),為您提供外貿建站、營銷型網站建設、App開發(fā)、小程序開發(fā)、搜索引擎優(yōu)化、域名注冊
聲明:本網站發(fā)布的內容(圖片、視頻和文字)以用戶投稿、用戶轉載內容為主,如果涉及侵權請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內容未經允許不得轉載,或轉載時需注明來源: 創(chuàng)新互聯(lián)
猜你還喜歡下面的內容