成人免费xxxxx在线视频软件_久久精品久久久_亚洲国产精品久久久_天天色天天色_亚洲人成一区_欧美一级欧美三级在线观看

第44期:談?wù)勁R時(shí)性計(jì)算

企業(yè)動(dòng)態(tài)
常用來對付臨時(shí)性計(jì)算的編程方案有三種:以Java為代表的高級語言、以SQL為代表的數(shù)據(jù)庫語言、以Python為代表的腳本語言。那么,我們怎么評估這些方法的優(yōu)劣和適應(yīng)性呢?

【數(shù)據(jù)蔣堂】第44期:談?wù)勁R時(shí)性計(jì)算

臨時(shí)性計(jì)算,顧名思義,是指臨時(shí)發(fā)生的一些計(jì)算需求。這種計(jì)算在日常數(shù)據(jù)處理中很常見,我們舉一些例子:

  • 應(yīng)對業(yè)務(wù)部門的取數(shù)需求:比如銷售部門想獲得進(jìn)行了某項(xiàng)促銷活動(dòng)前后的銷售情況變化信息;
  • 數(shù)據(jù)挖掘算法前的清理準(zhǔn)備:將來自各個(gè)業(yè)務(wù)系統(tǒng)的數(shù)據(jù)(甚至一些企業(yè)外部的數(shù)據(jù))整理成規(guī)則一致的二維表,這些動(dòng)作常常比挖掘本身耗時(shí)還長得多;
  • 有業(yè)務(wù)規(guī)則的測試數(shù)據(jù)生成:測試數(shù)據(jù)不能完全隨機(jī)生成,必須滿足一定的業(yè)務(wù)規(guī)則以及分布比例;
  • 大數(shù)據(jù)計(jì)算的優(yōu)化方案實(shí)驗(yàn):性能優(yōu)化是個(gè)迭代的過程,需要不斷嘗試各種計(jì)算方案;
  • 非日常(外部)數(shù)據(jù)的清洗和入庫:比如有些下級部門提供的Excel表格要寫入數(shù)據(jù)庫再進(jìn)行統(tǒng)計(jì)分析;

可以看出,臨時(shí)性計(jì)算具體相當(dāng)?shù)钠毡樾浴D敲矗覀兪怯檬裁捶椒▉硖幚磉@種具有普遍性的計(jì)算需求呢?

其實(shí)也就是編程序了,常用來對付臨時(shí)性計(jì)算的編程方案有三種:以Java為代表的高級語言、以SQL為代表的數(shù)據(jù)庫語言、以Python為代表的腳本語言。

然后,第二個(gè)問題,我們怎么評估這些方法的優(yōu)劣和適應(yīng)性呢?

為了回答這個(gè)問題,我們要先分析臨時(shí)性計(jì)算的需求特征:

  • 需求隨意,不可預(yù)測:這是臨時(shí)性計(jì)算的基本特征,計(jì)算需求時(shí)臨時(shí)產(chǎn)生的,不能事先預(yù)測到而做進(jìn)數(shù)據(jù)分析系統(tǒng)中,只能臨時(shí)面對;
  • 經(jīng)常只做一次,缺乏直接可復(fù)用性:這也是臨時(shí)性的特征,做完就完了,沒有必要刻意地反復(fù)優(yōu)化,也沒必要也不可能事先為計(jì)算做準(zhǔn)備工作;
  • 大量涉及多樣性的原始外部數(shù)據(jù):很多計(jì)算的涉及數(shù)據(jù)并不在數(shù)據(jù)庫中,比如收集上來的Excel表格,從網(wǎng)上爬下來的文本等,這些數(shù)據(jù)還常常以原始形式出現(xiàn);
  • 常常涉及多步驟的過程計(jì)算:本來分析處理類的運(yùn)算就會步驟比較多,而數(shù)據(jù)源的雜亂更會加劇這一現(xiàn)象;
  • 必要時(shí)可能轉(zhuǎn)變成日常計(jì)算:也有些臨時(shí)性計(jì)算可能重復(fù)發(fā)生,這時(shí)就有必要轉(zhuǎn)化成日常計(jì)算放進(jìn)數(shù)據(jù)分析系統(tǒng)中;
  • 以結(jié)構(gòu)化數(shù)據(jù)計(jì)算為主:這一點(diǎn)并非臨時(shí)性計(jì)算特有的,其實(shí)數(shù)據(jù)分析和處理類的計(jì)算都是主要面對結(jié)構(gòu)化或即將被結(jié)構(gòu)化的數(shù)據(jù)。

從需求的特征出發(fā),我們就可以提出應(yīng)對臨時(shí)性計(jì)算的方案的技術(shù)要求了:

  • 開發(fā)快捷:臨時(shí)性計(jì)算隨時(shí)發(fā)生,需要快速解決,所以要注重開發(fā)效率,相對來講,對于運(yùn)算性能要求會低一些;
  • 人員要求低:臨時(shí)性計(jì)算發(fā)生場景很普遍,那么應(yīng)當(dāng)盡量降低實(shí)施開發(fā)人員的要求,而不是總是需要專業(yè)的程序員才能做;
  • 環(huán)境簡單:經(jīng)常只做一次的事情,要讓環(huán)境搭建足夠簡單,如果準(zhǔn)備計(jì)算環(huán)境花費(fèi)時(shí)間超過實(shí)施計(jì)算本身了,那就得不償失了;
  • 數(shù)據(jù)適應(yīng)面廣:計(jì)算方案要能方便地面對各種各樣的數(shù)據(jù)源,不要總是需要專門的接口和技術(shù)體系,特別地要能處理較大的數(shù)據(jù)量;
  • 易于集成:要轉(zhuǎn)變成日常計(jì)算時(shí),臨時(shí)寫出來的代碼***能夠只要簡單修改甚至不加修改就能集成到數(shù)據(jù)分析系統(tǒng)中去。

現(xiàn)在我們按這套技術(shù)要求來考查前面提到的三種技術(shù)方案,并給評個(gè)分(前四項(xiàng)滿分10,第五項(xiàng)重要程度低滿分5)

1. 以Java為代表的高級語言

總分:13分

2. 以SQL為代表的數(shù)據(jù)庫語言

總分:24分

3. 以Python為代表的腳本語言

總分:30分

算下來還是腳本語言相對***。

責(zé)任編輯:趙寧寧 來源: 51CTO專欄
相關(guān)推薦

2017-09-06 20:42:03

集算器臨時(shí)性計(jì)算

2009-02-23 20:34:34

軟考英語項(xiàng)目臨時(shí)性

2017-08-29 21:06:55

集算器臨時(shí)性計(jì)算

2017-07-12 07:27:11

數(shù)據(jù)庫中間表存儲

2017-06-14 23:08:29

報(bào)表數(shù)據(jù)計(jì)算層

2017-08-22 21:55:18

SQL語法離散性

2018-12-06 14:03:19

微軟AKS云原生

2010-11-23 15:21:11

IT技術(shù)周刊

2020-06-02 09:56:40

阿里要性

2018-03-14 07:47:41

大數(shù)據(jù)語法SQL

2017-08-09 16:13:48

SQL大數(shù)據(jù)語法

2019-07-02 16:14:05

架構(gòu)技術(shù)棧微信半月刊

2017-09-18 15:14:43

2020-01-18 08:49:17

目錄安全.ssh木馬

2020-07-24 11:48:13

云計(jì)算

2011-09-14 16:01:05

APT高持續(xù)性威脅網(wǎng)絡(luò)·安全

2013-01-21 13:41:59

IBMdW

2017-10-09 22:33:56

SQL等值分組有序分組

2015-12-28 11:07:11

云計(jì)算51CTO IT技術(shù)周刊

2012-02-08 16:39:54

網(wǎng)絡(luò)安全技術(shù)周刊
點(diǎn)贊
收藏

51CTO技術(shù)棧公眾號

主站蜘蛛池模板: 成人在线免费av | 一区二区三区四区电影视频在线观看 | 日韩av在线免费 | 国产一区二区三区久久久久久久久 | 精品视频999 | 欧美日韩在线精品 | 成人在线视频观看 | 超碰在线亚洲 | 国产视频久 | 久青草影院 | 欧美成人a∨高清免费观看 91伊人 | 精产国产伦理一二三区 | 久久久久久久久久一区 | 日韩福利在线 | 国产成人免费一区二区60岁 | 国产精品视频一区二区三 | 日韩免费一区二区 | 成年网站在线观看 | 久热久 | 亚洲精品区 | 91视频久久 | 久久精品一区二区三区四区 | 精品在线一区二区 | 夜夜草 | 精精国产xxxx视频在线播放7 | 国产精品美女久久久 | 久久亚洲欧美日韩精品专区 | 久久久噜噜噜久久中文字幕色伊伊 | www精品美女久久久tv | 真人一级毛片 | 夜夜骑综合| 国产精品精品视频一区二区三区 | 中文字幕在线一区二区三区 | 欧美成人一级视频 | 黄色一级毛片 | 一区二区三区免费观看 | 91综合网| 91视频进入 | 1区2区3区视频 | 国产日韩在线观看一区 | 午夜国产 |