GAE開發問題總結及心得一覽
從接觸GAE(Google App Engine)就可以想著在上面開發一個自己的程序進行試驗,恰好有兩個想法,一個是做一個公司部門使用的工作日志系統,可以由領導閱覽每個人的工作日志;一個是想做一個個人記賬網站,這主要是從我自己的需求出發的,父母老教育自己要有理財的意識,可惜就是沒有這個意識,自己到底有多少錢花了多少錢都從來沒有想過去整理和記錄。時間有限,就選擇了自己比較接近的記賬網。
由于平時工作都只是做一些后臺的設計工作,并沒有太多做web的實際經驗,制作過程中還是經歷了很多痛苦的階段,不過總算在摸索中磕磕絆絆完成了,下面就把制作過程遇見的問題進行一下匯總,和大家分享,希望大家遇見類似問題時有所幫助。
界面
Web程序最重要的是界面設計了,要有專門的美工才算專業。自己的小程序就沒有想要那么專業的美工了,看著不太難看就行了。制作中還是長進了不少,重新學習了CSS。因為這個小程序內容不會占太長的篇幅,就把整體的框架設計成有陰影的box,上面是標題,左邊命令欄,右邊內容的框架。然后按照自己的想法,在Photoshop里畫了出來,又請教了做美工的一個朋友,大體學了一下切圖,就基于table+css把界面畫出來了。把能做成重復的圖片用css設置背景,減少下載圖片的網絡流量。
框架的選擇
GAE本身提供web框架,但考慮到對django比較熟悉打算使用django,但經過測試怎么也不成功,就放棄了。對GAE提供的Web框架進行了學習,感覺和django的很類似,沒有什么門檻。不過YAML的設置還是要注意的,特別是static,找了半天才搞明白。
數據庫使用的問題
GAE提供BigTable的數據庫,面向對象的數據庫,不用再考慮ORM的問題了,使用起來還是蠻方便的。但使用過程中還是出現了一些誤解,值得總結一下。
1:多個對象的References。如果一個Model的屬性中要存放多個對象References怎么實現呢?如一個“支出項”有多個Tag。其實這可以看做是References的List。如下:
class VTag(db.Model): user = db.ReferenceProperty(VUser,required=True) name = db.StringProperty(required=True)class VInOut(db.Model): user = db.ReferenceProperty(VUser) tags = db.ListProperty(db.Key, "Tags")這樣當然就沒有自動調入的功能了,如果要訪問,可以通過下面的方法:
sql = db.GqlQuery("SELECT * FROM VInOut")inouts = sql.fetch(1000)for inout in inouts: rawtags = db.get(inout.tags) rawtags就是由inout.tags為Key的VTag的一個對象列表了。
2:日期型屬性的Bug。使用過程中發現了一個問題,就是如果Model的屬性是日期型Date,則在查詢或過濾條件中出現Bug,解決的方法是將Date型改為Datetime型。具體的可參加《 GAE Gqlquery Date屬性不能設置為過濾條件的Bug》。
3:中文的問題。缺省情況下,數據庫編碼是ASCII編碼,存入中文(UTF8編碼)時會出現Bug,尤其是對于不太注意編碼的朋友,可以參考《 Python中使用中文》。在編寫程序時最好將所有的文件(程序文件、靜態HTML模板等)都用統一編碼方式,推薦用UTF-8。
還有,當從HTML的Form中接收到字符串數據的時候,一定要將送來的數據顯式編碼為UTF-8,如self.request.get('memo').encode('utf-8'),否則也會出問題。
另外,為了解決中文寫入數據庫時出錯的問題,可以在寫入數據庫前做如下操作:
- import sys reload(sys) sys.setdefaultencoding('utf8')
或者
- code = sys.getdefaultencoding()
- if code != 'utf8':
- reload(sys)
- sys.setdefaultencoding('utf8')
其他的方法都試了,不太好使,只有這個非常管用!還有個奇怪的事情,GAE的開發環境不支持重復reload,會不能渲染網頁,也就是說第一種方法會不能正常工作。所以最好用第二種方法,這樣的話第一次刷新會出問題,后面刷新就不會有問題了。GAE的運行環境這兩種是相同的,但是較長時間沒有登陸網站的話偶爾還是會出現刷新白屏的Bug,這確實是由于重新載入sys造成的,所以首頁最好不要reload sys,需要存入數據庫的時候才重新載入sys并設置UTF-8為缺省編碼。
4:Index.yaml的問題。index.yaml會由系統自動生成和更新,但是如果是沒有這個文件就把系統直接上傳到GAE,GAE會花十幾個小時才能完全更新。在這段時間如果用到了,會出現need index的錯誤提示。解決的方法是,在本地完全測試,把生成的index.yaml直接上傳,就不會出現上面的問題了。
5:密碼md5保存問題。密碼保存采用了md5哈希算法,按道理md5出來后是string,可以用StringProperty保存,但發現存是可以存,取出來再和正確的重新md5計算結果比較,會不同。解決的方法就是不用StringProperty而用BlobProperty,取出來后強制str就可以了。
6:TextArea多行出錯的問題。這個問題是不小心造成的。當用StringProperty屬性存儲HTML的文本區(TextArea)內的字符串時,如果在TextArea中回車換行,存入數據庫時會出現BadValueError: Property memo is not multi-line的錯誤。解決很簡單,用TextProperty代替StringProperty,同時還要注意存入時也要明確編碼為UTF-8,否則會報錯,如:
- outthing.memo = db.Text(memo, 'utf-8')
session的問題
Web程序很大一部分會用到Sessions的,原先使用PHP、django時根本不用考慮Sessions是如何實現的,只要用就可以了。到了GAE,竟然沒有內置的Sessions支持。好不容易找到了utilities,做了簡單的測試可以使用就沒管其他的了。可是真正使用的時候發現,Sessions中竟然只能存放string對象。不至于把所有的對象都變為string,取回來再變成其他對象吧。呵呵,都在進步,最新的utilities已經支持存放其他類型的對象了。有興趣的可以看看它的代碼,用的pickle。
最新的utilities Sessions(V0.5.1)實現中還是有一定的Bug。實現中使用了GAE的memcache,Session類有個memcache成員用于存儲緩存的對象,但是由于會不定期的清除,造成訪問某些對象時出錯,主要的是__getitem__函數,我寫到下面大家可以看看區別。
原始的:
- def __getitem__(self, k):
- """
- __getitem__ is necessary for this object to emulate a container.
- """
- if k in self.cache:
- return pickle.loads(str(self.cache[k]))
- if k in self.memcache:
- return self.memcache[k]
- data = self.get(k)
- ......
我修改后:
- def __getitem__(self, k):
- """
- __getitem__ is necessary for this object to emulate a container.
- """
- if k in self.cache:
- return pickle.loads(str(self.cache[k]))
- #修改開始
- if self.memcache != None:
- if k in self.memcache:
- return self.memcache[k]
- else:
- self.memcache = memcache.get("sid-"+self.sid)
- if self.memcache == None:
- memcache.set("sid-"+self.sid, {'sid': self.sid}, self.session_expires)
- self.memcache = memcache.get("sid-"+self.sid)
- #修改結束
- data = self.get(k)
- ......
就是做了self.memcache是否存在的判斷,不存在重新添加。對于GAE的memcache的使用可以參考:《The Memcache API》。
發送email的問題
無異常發送不成功的問題。無明顯異常但是發送不成功最有可能是因為mail.send_mail函數的sender不是本應用注冊的那個EMAIL造成的,比如你用abc@gmail.com注冊的52jizhang.appspot.com,那么sender一定要用abc@gmail.com否則會不成功的。
發送內容中有中文的不能發送問題。即使經過了前面數據庫中中文問題的處理,發送EMAIL的中文依舊有問題,解決的方法是將發送的內容用str()包起來,:-)如下例:
- body = str("""親愛的%s:
- 您的密碼重設要求已經得到驗證。請點擊以下鏈接輸入您新的密碼:
- http://52jizhang.appspot.com/regetpassword?confirmation=%s
- 如果您的email程序不支持鏈接點擊,請將上面的地址拷貝至您的瀏覽器(例如IE)的地址欄進入我愛記賬網。
- 感謝對我愛記賬網的支持。
- 我愛記賬網 http://52jizhang.appspot.com/
- """ % (userid, confirmation_url))
總結
上面對在開發我愛記賬網中遇見的問題進行了一下小結,總體感覺GAE還是不錯的,但也出現了較多的小問題,希望對大家在使用GAE中有所幫助,讓我們一起進步吧o(∩_∩)o...。
【編輯推薦】