 | Free Online Class Reveals How To Grow a Small Stock Trading Account of $5,000 or Less. Click Here To Sign Up, It's Free! From our sponsors  |
| ?????? Soft_Job ? |
| // via fulltextrssfeed.com |
Re: [請益] 請問Python在業界都用來寫什麼居多?
10/10/2014 11:28:27 PM
※ 引述《yauhh (喲)》之銘言： : ※ 引述《Lordaeron (Terry)》之銘言： : : Script language 適合作驗證, 不適合作產品, 撐不起量. : : 正如作image processing 的,很多人愛用matlab, 但該不會有人拿它作產品吧? : : 更別說OpenCV拿來當底的(大陸就幹過了)一樣慢. : : 而處理大量(GB以上)資料以python 要快, 還望你來一篇教學一下. : 我不認同你的這樣談論語言的方式。「scrip language適合做驗證，不適合做產品，」 : 這話一出，結果呢，有人可能會想，反正我公司沒時間做研究，所以就不用 python : 了，連試都不試。連看都不看，才是最終這個語言沒有被拿來做產品的原因。 : 還有，什麼叫做「產品」。所謂的產品是程式碼，還是編譯好的版本？ : 我用 python 很快寫好程式，然後耐心找個優化的執行環境，然後發佈了， : 跟你用 C 或者什麼，你覺得它的執行環境比較漂亮，編譯一個可執行檔，發佈了。 : 二者有什麼不同？難道生意不能談嗎？ : 至於以下的，轉來的一篇文章，我看了覺得，他不是在批評一個語言，而是在把 : python 當作一個產品、當做一個機器來批判。 : 那我就納悶了：你沒事把一個 VM 當作是一個語言來談論，是真相嗎？ : 難道 VM 不能改進嗎？ : 我覺得那些評估什麼語言快，什麼語言慢的文章，自己做調查評估的時候看看就算了， : 但是別人的意見不是你的意見，要忙著幫忙宣傳嗎？ : 一味地講「快」、「效率」這種經濟政治觀點，忽略了其他的創作本意， : 那是一種讓人變傻的迷思。也許會有學生，連學個 python 都還沒學， : 卻為了「自我審查」，先期地符合他們自己根本還沒有進去的那些公司的期待， : 而只說哪個語言好，哪個語言不好。 : 一個菜，你自己都沒吃就想著要賣；一個語言，你自己還沒拿來寫自己要用的東西， : 就忙著評估這語言拿到產業界好不好賣。 原PO 問的是慢,不是政治問題, 這有政治版, 有政治問題, 可以去討論. 而產品, 等你賣一個PYTHON 寫的再說囉. 而我在等的是你口中的, 讓PYTHON 快的文章, 而我轉來的, 也是說明了 PYTHON 要如何快, 跟優缺點而已. 等你的PYTHON PERFORMANCE IMPROVEMENT 的文章囉. -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 61.230.120.230 ※ 文章網址: http://www.ptt.cc/bbs/Soft_Job/M.1412996332.A.C45.html
Re: [請益] 請問Python在業界都用來寫什麼居多?
10/10/2014 11:28:27 PM
※ 引述《Lordaeron (Terry)》之銘言： : Script language 適合作驗證, 不適合作產品, 撐不起量. : 正如作image processing 的,很多人愛用matlab, 但該不會有人拿它作產品吧? : 更別說OpenCV拿來當底的(大陸就幹過了)一樣慢. : 而處理大量(GB以上)資料以python 要快, 還望你來一篇教學一下. 我不認同你的這樣談論語言的方式。「scrip language適合做驗證，不適合做產品，」 這話一出，結果呢，有人可能會想，反正我公司沒時間做研究，所以就不用 python 了，連試都不試。連看都不看，才是最終這個語言沒有被拿來做產品的原因。 還有，什麼叫做「產品」。所謂的產品是程式碼，還是編譯好的版本？ 我用 python 很快寫好程式，然後耐心找個優化的執行環境，然後發佈了， 跟你用 C 或者什麼，你覺得它的執行環境比較漂亮，編譯一個可執行檔，發佈了。 二者有什麼不同？難道生意不能談嗎？ 至於以下的，轉來的一篇文章，我看了覺得，他不是在批評一個語言，而是在把 python 當作一個產品、當做一個機器來批判。 那我就納悶了：你沒事把一個 VM 當作是一個語言來談論，是真相嗎？ 難道 VM 不能改進嗎？ 我覺得那些評估什麼語言快，什麼語言慢的文章，自己做調查評估的時候看看就算了， 但是別人的意見不是你的意見，要忙著幫忙宣傳嗎？ 一味地講「快」、「效率」這種經濟政治觀點，忽略了其他的創作本意， 那是一種讓人變傻的迷思。也許會有學生，連學個 python 都還沒學， 卻為了「自我審查」，先期地符合他們自己根本還沒有進去的那些公司的期待， 而只說哪個語言好，哪個語言不好。 一個菜，你自己都沒吃就想著要賣；一個語言，你自己還沒拿來寫自己要用的東西， 就忙著評估這語言拿到產業界好不好賣。 : 以下轉來的(加了點修改) : 我很喜歡用python，用python處理數據是家常便飯，從事的工作涉及nlp， : 算法，推薦，數據挖掘，數據清洗，數據量級從幾十k到幾T不等，我來說說吧 : 百萬級別數據是小數據，python處理起來不成問題，python處理數據還是有些問題的 : Python處理大數據的劣勢： : 1. python線程有gil，通俗說就是多線程的時候只能在一個核上跑， : 浪費了多核服務器。在一種常見的場景下是要命的：並發單元之 : 間有巨大的數據共享或者共用（例如大dict），多進程會導致內存吃緊 : ，多線程則解決不了數據共享的問題，單獨的寫一個進程之間負責維護 -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 118.160.159.130 ※ 文章網址: http://www.ptt.cc/bbs/Soft_Job/M.1412994656.A.450.html
Re: [請益] 請問Python在業界都用來寫什麼居多?
10/10/2014 11:28:27 PM
※ 引述《yauhh (喲)》之銘言： : ※ 引述《OoShiunoO (機機勳)》之銘言： : : 小弟剛接觸Python一個月，主要是用它的機器學習套件來作資料分析 : : 用了之後感覺是很好用的一種語言 : : 但是似乎有一種感覺，它不算是一種用來寫大型程式的語言 : : 感覺它好像是用來做小工作 小事情的一種語言 : : 所以小弟好奇，在業界，大家都是用Python來幹嘛比較多呢..? : 想延伸這個問題。你覺得什麼樣的語言才叫做「用來寫大型程式的語言」？ : 以前只有 Fortran 的年代，只有 Algol60 的年代，小的，大的都用那個寫。 : 我想問這個問題，想法是，語言要呈現什麼樣的特徵，你會覺得它是個大器的東西。 : 至於執行的速度，應該要排除在語言的選擇之外。 : 看到前面的討論，都說 Python 寫很快但是有效能的狀況。 : 但是，我覺得這樣想是很偏的。 : 你來嘗試 Python ，不是因為考慮 C 的效能，但卻 : 可能是考慮到 C 語言本身是不是很好寫。 : 但是， Python 寫出來的東西 OK 了， : 後來在大量使用的時候遇到效能爆炸的情況時， : 為什麼卻沒有想想，在同樣要觸發效能爆炸的情況下，也許是大量資料或大量使用， : C 有多少比較好？ : 也許只是你不知道如何去調整好 Python 的效能啊，是吧。 Script language 適合作驗證, 不適合作產品, 撐不起量. 正如作image processing 的,很多人愛用matlab, 但該不會有人拿它作產品吧? 更別說OpenCV拿來當底的(大陸就幹過了)一樣慢. 而處理大量(GB以上)資料以python 要快, 還望你來一篇教學一下. 以下轉來的(加了點修改) 我很喜歡用python，用python處理數據是家常便飯，從事的工作涉及nlp， 算法，推薦，數據挖掘，數據清洗，數據量級從幾十k到幾T不等，我來說說吧 百萬級別數據是小數據，python處理起來不成問題，python處理數據還是有些問題的 Python處理大數據的劣勢： 1. python線程有gil，通俗說就是多線程的時候只能在一個核上跑， 浪費了多核服務器。在一種常見的場景下是要命的：並發單元之 間有巨大的數據共享或者共用（例如大dict），多進程會導致內存吃緊 ，多線程則解決不了數據共享的問題，單獨的寫一個進程之間負責維護 讀寫這個數據不僅效率不高而且麻煩 2. python執行效率不高，在處理大數據的時候，效率不高，這是真的， pypy（一個jit的python解釋器，可以理解成腳本語言加速執行的東西）能 夠提高很大的速度(可以快10倍)，但是pypy不支持很多python經典的包， 例如numpy 3. 絕大部分的大公司，用java處理大數據不管是環境也好，積累也好， 都會好很多 Python處理數據的優勢（不是處理大數據）： 1. 異常快捷的開發速度，代碼量巨少 2. 豐富的數據處理包，不管正則也好，html解析啦，xml解析啦，用起來非常方便 3. 內部類型使用成本巨低，不需要額外怎麼操作（java，c++用個map都很費勁） 4. 公司中，很大量的數據處理工作工作是不需要面對非常大的數據的 5. 巨大的數據不是語言所能解決的，需要處理數據的框 架（hadoop， mpi。。。。）雖然小眾，但是python還是有 處理大數據的框架的，或者一些框架也支持python 6. 編碼問題處理起來太太太方便了 綜上所述： 1. python可以處理大數據 2. python處理大數據不一定是最優的選擇 3. python和其他語言（公司主推的方式）並行使用是非常不錯的選擇 4. 因為開發速度，你如果經常處理數據，而且喜歡linux終端，而且 經常處理不大的數據（100m一下），最好還是學一下python python數據處理的包： 1. 自帶正則包， 文本處理足夠了 2. cElementTree, lxml 默認的xml速度在數據量過大的情況下不足 3. beautifulsoup 處理html 4. hadoop(可以用python) 並行處理，支持python寫的map reduce，足夠了， 順便說一下阿里巴巴的odps，和hadoop一樣的東西，支持python寫的udf， 嵌入到sql語句中 5. numpy, scipy, scikit-learn 數值計算，數據挖掘 6. dpark(搬樓上的答案）類似hadoop一樣的東西 1，2，3，5是處理文本數據的利器（python不就處理文本數據方便嘛）， 4，6是並行計算的框架（大數據處理的效率在於良好的分佈計算邏輯，而不是什麼語言） 暫時就這些，最好說一個方向，否則不知道處理什麼樣的數據也不好推薦包， 所以沒有頭緒從哪裡開始介紹這些包 -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 61.230.120.230 ※ 文章網址: http://www.ptt.cc/bbs/Soft_Job/M.1412979844.A.A8D.html
Re: [請益] 請問Python在業界都用來寫什麼居多?
10/10/2014 6:14:52 PM
※ 引述《OoShiunoO (機機勳)》之銘言： : 小弟剛接觸Python一個月，主要是用它的機器學習套件來作資料分析 : 用了之後感覺是很好用的一種語言 : 但是似乎有一種感覺，它不算是一種用來寫大型程式的語言 : 感覺它好像是用來做小工作 小事情的一種語言 : 所以小弟好奇，在業界，大家都是用Python來幹嘛比較多呢..? 想延伸這個問題。你覺得什麼樣的語言才叫做「用來寫大型程式的語言」？ 以前只有 Fortran 的年代，只有 Algol60 的年代，小的，大的都用那個寫。 我想問這個問題，想法是，語言要呈現什麼樣的特徵，你會覺得它是個大器的東西。 至於執行的速度，應該要排除在語言的選擇之外。 看到前面的討論，都說 Python 寫很快但是有效能的狀況。 但是，我覺得這樣想是很偏的。 你來嘗試 Python ，不是因為考慮 C 的效能，但卻 可能是考慮到 C 語言本身是不是很好寫。 但是， Python 寫出來的東西 OK 了， 後來在大量使用的時候遇到效能爆炸的情況時， 為什麼卻沒有想想，在同樣要觸發效能爆炸的情況下，也許是大量資料或大量使用， C 有多少比較好？ 也許只是你不知道如何去調整好 Python 的效能啊，是吧。 -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 118.160.159.130 ※ 文章網址: http://www.ptt.cc/bbs/Soft_Job/M.1412954092.A.576.html ※ 編輯: yauhh (118.160.159.130), 10/10/2014 23:18:36 ※ 編輯: yauhh (118.160.159.130), 10/10/2014 23:26:28
→ PoorLoser: 先求好寫再求效能~~ 10/10 23:28
→ yauhh: 二邊都是一樣的，C 程式要跑得好還不都一樣調效能。 10/10 23:46
[請益] 請問立法院ivod的影片該如何下載
10/10/2014 2:49:15 PM
不知道可不可以發在這裡，但小弟還是斗膽來向各位請教 小弟最近試了很多套裝軟體想嘗試下載立法院ivod立委質詢影片好做成竹字稿 但是了一些可以下載youtube的套裝軟體都無法成功搞定ivod的影片 找了很久好像只有這兩篇有討論到下載的方法 https://hackpad.com/ep/pad/static/44XSLS6BQU0 https://github.com/billy3321/ivod-download-client 可是小弟程度太差，裡面的軟體該如何使用看不太懂 (我只能看出大概是以python寫的？下載下來的檔案是要放到瀏覽器中執行嗎？) 請問有沒有已經做好類似現成視窗軟體可以使用？ 不然的話得要看ivod的操作介面來做立委質詢的逐字稿還真是件苦差事 還請板上資訊專業的前輩不吝指教，感謝。 -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 36.225.32.4 ※ 文章網址: http://www.ptt.cc/bbs/Soft_Job/M.1412941755.A.B6B.html
[請益] Excel資料整合
10/10/2014 5:39:05 AM
請求板上神人協助，因為小弟目前在大陸工作時遇到ㄧ些機器生產數據問題，主要是很多 生產機台產生出來的CSV檔案需要標籤機列印出來，所以需要先把這些數據利用一個 轉檔程式，同樣轉成CSV檔案，我的標籤機再從轉好的檔案去抓取數據資料，標籤機才 可以自動列印資料，不然現在需要一個一個抓取數據，請求板上高手協助，若完成小弟 會給予ㄧ些獎勵(送一個全新的小米移動電源，因為大陸這邊移動電源不缺貨)，如果可 以麻煩寄聯絡資料給我，EMAIL：1584870125@qq.com，謝謝！ -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 183.12.244.94 ※ 文章網址: http://www.ptt.cc/bbs/Soft_Job/M.1412908745.A.89B.html
You are receiving this email because you subscribed to this feed at feedmyinbox.com
If you no longer wish to receive these emails, you can unsubscribe from this feed, or manage all your subscriptions
訂閱：
張貼留言 (Atom)
沒有留言:
張貼留言