[請益] 資料工程轉後端

看板Soft_Job作者 (Candy)時間11月前 (2023/05/30 11:20), 11月前編輯推噓19(19推 0噓 46→)
留言65則, 22人參與, 11月前最新討論串1/1
小弟目前為大約5-6年資歷資料工程師 技能一直學的很雜, 也不是很深, 如下 分散運算Hadoop, MR, Spark, Hive, Presto 框架 Spring Boot, Flask DB類 RDB, MongoDB, Elasticsearch MQ類 Kafka, RabbitMQ, Redis 排程工具Airflow, NiFi 容器化Docker, K8S 資料工程或相關應用因為都為公司內部使用居多，通常沒有特別要求也不會太深入，資料 正確有到位即可，有異常也是人工補補資料… 近期職業倦怠，感覺自身技能跟後端比較接近，想轉職後端，但有沒有太多純後端的經歷 想請教版上轉職過的前輩有沒有建議呢？ 個人目前在台北百萬薪 有人說找SI轉最快，但個人想盡量不降薪轉 也不太喜歡SI的工作生態 目前只想到幾個方向： 1.自學加強技能，做side project 補足 2.反正都有到一點沾邊，刷題就對了 3.找Data Backend 或 R&D 類的缺 4.繼續深耕Data Engineer就好 或是前輩們有其他建議也請不吝賜教～感謝 -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 42.79.155.123 (臺灣) ※ 文章網址: https://www.ptt.cc/bbs/Soft_Job/M.1685416839.A.90E.html
推
05/30 11:58, 11月前 , 1F
應該可以吧 你資安方面的知識量補一下 應該能找到百萬
05/30 11:58, 1F
→
05/30 12:01, 11月前 , 2F
請問資安部分是指OWASP相關的嗎？
05/30 12:01, 2F
推
05/30 12:07, 11月前 , 3F
,你的經驗，早就包含後端工程師的工作，而且超越一般後端
05/30 12:07, 3F
→
05/30 12:07, 11月前 , 4F
工程師的能力了。直接找就好
05/30 12:07, 4F
→
05/30 12:09, 11月前 , 5F
差不多這種基本知識,然後身份驗證 OAuth session/cookie
05/30 12:09, 5F
→
05/30 12:09, 11月前 , 6F
不知職業倦怠的原因，要注意的是：選產業，或選ToC，還是T
05/30 12:09, 6F
→
05/30 12:09, 11月前 , 7F
oB。To B通常很容易又職業倦怠了。
05/30 12:09, 7F
不知道內部需求算toB嗎？
→
05/30 12:12, 11月前 , 8F
脫離junior後端,可能db讀寫分離ACID這類的情境處理過
05/30 12:12, 8F
→
05/30 12:15, 11月前 , 9F
不過你會的這些工具類 也算日常後端在處理工作會用到的
05/30 12:15, 9F
→
05/30 12:16, 11月前 , 10F
所以我是覺得 你要找一個 medium 的後端應該不會太難
05/30 12:16, 10F
但感覺差了點什麼就是了，就像a大說的要補security的部分
推
05/30 12:27, 11月前 , 11F
我後端想去資料, 不給去. 明明覺得後端和資料大同小異
05/30 12:27, 11F
可能Hadoop那塊比較需要補一下？
→
05/30 12:30, 11月前 , 12F
去當web仔也會職業倦怠啊
05/30 12:30, 12F
也會～但至少對我來說是新一點的東西 ※ 編輯: candydog (42.79.155.123 臺灣), 05/30/2023 12:40:01
推
05/30 12:55, 11月前 , 13F
不需要降級笑死
05/30 12:55, 13F
我也不想QQ ※ 編輯: candydog (42.79.155.123 臺灣), 05/30/2023 13:07:07
→
05/30 14:46, 11月前 , 14F
資料跟後端差蠻多的吧，
05/30 14:46, 14F
→
05/30 14:46, 11月前 , 15F
資料怎麼切分 入庫，怎麼弄pipeline 。一大堆知識要學
05/30 14:46, 15F
→
05/30 14:47, 11月前 , 16F
聚合語法跟純sql 是差不多。畢竟都有相似的。單看要弄
05/30 14:47, 16F
→
05/30 14:47, 11月前 , 17F
什麼
05/30 14:47, 17F
→
05/30 15:00, 11月前 , 18F
看上述能力轉web後端很輕鬆吧 。
05/30 15:00, 18F
→
05/30 15:00, 11月前 , 19F
web後端轉資料才比較難
05/30 15:00, 19F
推
05/30 15:25, 11月前 , 20F
後端想碰你分散式運算那塊只能靠機遇
05/30 15:25, 20F
推
05/30 15:39, 11月前 , 21F
珍惜生命 遠離SI
05/30 15:39, 21F
感謝大大們的建議，這樣我感覺對自己比較有信心一點，應該多去面試缺什麼補什麼就好 了？ ※ 編輯: candydog (42.79.155.123 臺灣), 05/30/2023 15:55:45
→
05/30 15:56, 11月前 , 22F
分散式運算，現在也沒幾個人真的有寫道吧 。
05/30 15:56, 22F
→
05/30 15:56, 11月前 , 23F
博弈有機會，問題哪些都是核心人員
05/30 15:56, 23F
推
05/30 16:19, 11月前 , 24F
你會的技能很好找吧，直接去面試
05/30 16:19, 24F
推
05/30 16:58, 11月前 , 25F
原po已經算後端了吧，只是某些主題目前沒碰過而已
05/30 16:58, 25F
→
05/30 16:58, 11月前 , 26F
刷題直接投後端就好
05/30 16:58, 26F
好唷，感謝大大建議！
推
05/30 17:18, 11月前 , 27F
問gpt然後叫gpt幫你補知識點
05/30 17:18, 27F
GPT真的蠻好用的 雖然偶爾會唬爛～ ※ 編輯: candydog (42.79.155.123 臺灣), 05/30/2023 17:22:07
推
05/30 17:43, 11月前 , 28F
後端一定會碰分散式CAP,碰不到只是服務的rps/qps太小了
05/30 17:43, 28F
推
05/30 19:02, 11月前 , 29F
找不用分散式運算就能賺很多產業，不要自找麻煩
05/30 19:02, 29F
推
05/30 19:10, 11月前 , 30F
看這個技能樹你不說我還以為你後端勒
05/30 19:10, 30F
是唷，還是其實我技能樹點歪了XD 其實還有其他一些 DE的週邊技能 但想說不主流就沒有特別寫了
推
05/30 19:28, 11月前 , 31F
我後端技能樹跟你差不多,差在排程工具沒用過
05/30 19:28, 31F
※ 編輯: candydog (118.167.132.169 臺灣), 05/30/2023 19:56:08
→
05/30 20:21, 11月前 , 32F
所謂的分散式不是只有把服務分開..，如果只是拆解服務
05/30 20:21, 32F
→
05/30 20:21, 11月前 , 33F
這種那真的扯不上分散式運算
05/30 20:21, 33F
→
05/30 20:21, 11月前 , 34F
加上目前很多現行工具跟硬體都很成熟
05/30 20:21, 34F
→
05/30 20:22, 11月前 , 35F
所以才說現在真的有寫道的人不多
05/30 20:22, 35F
推
05/30 21:17, 11月前 , 36F
跟你差不多，現在算是一半資料一半後端
05/30 21:17, 36F
→
05/31 00:05, 11月前 , 37F
分散式有很難嗎…，從後端非同步，主從分離，資料庫各種分
05/31 00:05, 37F
→
05/31 00:05, 11月前 , 38F
片，分離，各種queue，再加上 K8s … 工具都那麼多了。沒
05/31 00:05, 38F
→
05/31 00:05, 11月前 , 39F
到幾千萬用戶同時上線，根本一堆現成solution。
05/31 00:05, 39F
→
05/31 00:10, 11月前 , 40F
資料量大的後端業務，後端與原PO的技能根本是重疊的。後端
05/31 00:10, 40F
→
05/31 00:10, 11月前 , 41F
工程師也要做Kafka，ES，NoSQL，airflow，k8s等工作。看了
05/31 00:10, 41F
→
05/31 00:10, 11月前 , 42F
技能樹，不說還以為原PO就是在搞後端工程師。
05/31 00:10, 42F
本來覺得想像的後端可能跟我想到還有段落差，原來相去不遠，感謝D大與大家的分享～ ※ 編輯: candydog (118.167.132.169 臺灣), 05/31/2023 00:45:21
→
05/31 08:33, 11月前 , 43F
已經是後端了呀，幾乎都涵蓋到了
05/31 08:33, 43F
→
05/31 08:38, 11月前 , 44F
其實跟用戶數沒關係…，那個只是單純分散服務處理。
05/31 08:38, 44F
→
05/31 08:38, 11月前 , 45F
另外提那麼多工具也只是會用，而不是理解吧
05/31 08:38, 45F
推
05/31 08:55, 11月前 , 46F
平常有維護，除一些運行上的問題,多少都會知道一些機制
05/31 08:55, 46F
推
05/31 09:16, 11月前 , 47F
原po會MQ一定有碰過分散式架構啊，怎麼好多回覆看起來怪
05/31 09:16, 47F
→
05/31 09:16, 11月前 , 48F
怪的
05/31 09:16, 48F
→
05/31 09:17, 11月前 , 49F
這技能樹可以挑戰加薪轉職
05/31 09:17, 49F
→
05/31 09:28, 11月前 , 50F
MQ不一定用在分散式架構
05/31 09:28, 50F
推
05/31 09:30, 11月前 , 51F
要理解 每個東西都是一門學問QQ
05/31 09:30, 51F
→
05/31 09:31, 11月前 , 52F
一般來說 大部分都要會用就好吧? 少數幾個可以專研
05/31 09:31, 52F
推
05/31 13:45, 11月前 , 53F
資料結構跟演算法補好, 應該轉後端 => 刷題吧!!
05/31 13:45, 53F
→
05/31 15:59, 11月前 , 54F
為什麼不去海外找，哥這種技能在陸資拿過400萬up薪資
05/31 15:59, 54F
→
05/31 16:00, 11月前 , 55F
其實是台灣市場水太淺很少公司用得上這些大數據的技術
05/31 16:00, 55F
→
05/31 16:00, 11月前 , 56F
你要把自己放到對的市場，趕快離開台灣吧
05/31 16:00, 56F
→
05/31 16:00, 11月前 , 57F
一堆海外remote這種DE的缺也都200+，隨便找都有，加油
05/31 16:00, 57F
→
05/31 16:01, 11月前 , 58F
轉後端反而降價，要往企業高端走就是要網數據價值挖掘走
05/31 16:01, 58F
→
05/31 16:02, 11月前 , 59F
越偏向決策分析薪資才可能越高，後端甚至前端都遠離決策了
05/31 16:02, 59F
→
05/31 16:02, 11月前 , 60F
建議往海外看
05/31 16:02, 60F
推
05/31 17:37, 11月前 , 61F
就是叫你英文先補
05/31 17:37, 61F
真的～看p大的說法就是要惡補英文了 ※ 編輯: candydog (111.71.70.167 臺灣), 05/31/2023 18:12:13
→
05/31 18:35, 11月前 , 62F
越往決策、分析的性質走走才有機會成為公司決策層
05/31 18:35, 62F
→
05/31 18:36, 11月前 , 63F
這種決策層的薪資或福利往往不輸一流軟體公司中高階崗位
05/31 18:36, 63F
→
05/31 18:36, 11月前 , 64F
這才是比較明確的晉升之路，往後端甚至前端走就遠離這路了
05/31 18:36, 64F
→
05/31 18:37, 11月前 , 65F
除非你未來有機會自己創業才有必要去點那些前後端
05/31 18:37, 65F
‣ 更多 candydog 的文章
文章代碼(AID): #1aTMk7aE (Soft_Job)