日韩av黄I国产麻豆传媒I国产91av视频在线观看I日韩一区二区三区在线看I美女国产在线I麻豆视频国产在线观看I成人黄色短片

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

《成为一名机器学习工程师》_如何在2020年成为机器学习工程师

發(fā)布時間:2023/12/15 编程问答 38 豆豆
生活随笔 收集整理的這篇文章主要介紹了 《成为一名机器学习工程师》_如何在2020年成为机器学习工程师 小編覺得挺不錯的,現(xiàn)在分享給大家,幫大家做個參考.

《成為一名機器學習工程師》

機器學習工程 (Machine Learning Engineering)

The title of “Machine Learning Engineer” is quickly becoming more popular and with that, there is significant interest from people trying to enter the Data Science field. What kind of career path is this and what skill set does a Machine Learning Engineer need to have? Is it possible to define steps to take in order to become a ML Engineer? Can you follow online training and get certified? I figured I’d write up my ideas on the state of the field and how viable it is for those looking to pursue a career in it.

“機器學習工程師”的稱號Swift變得越來越流行,因此,試圖進入數(shù)據(jù)科學領域的人們引起了極大的興趣。 這是什么樣的職業(yè)道路 ,機器學習工程師需要具備哪些技能 ? 可以定義要成為ML工程師要采取的步驟嗎? 您可以接受在線培訓并獲得認證嗎? 我想我會就該領域的現(xiàn)狀寫出自己的想法,以及對于那些尋求在該領域謀求職業(yè)的人們來說是多么可行。

機器學習工程師 (The Machine Learning Engineer)

Let’s get one point out of the way first. Some might look at the job title and expect it to be a Data Scientist who purely focuses on model building — and that’s it. This is a big no no; if only because most ML Engineering work starts after the initial model is built. While it’s often part of the job, a Machine Learning Engineer does not purely build models. And honestly, that part will only take up 5 to 10% of the job.

首先讓我們指出一點。 有些人可能會看這個職位,并期望它成為純粹專注于模型構(gòu)建的數(shù)據(jù)科學家,僅此而已。 這是一個很大的不,不是。 僅僅是因為大多數(shù)ML Engineering的工作都是在構(gòu)建初始模型之后開始的。 雖然這通常是工作的一部分,但是機器學習工程師并不能純粹建立模型。 老實說,這部分僅占工作的5%到10%。

Look at this image of all the components that are involved in the model ecosystem. The black square at the center? That’s the actual ML code.

查看此模型生態(tài)系統(tǒng)中涉及的所有組件的圖像。 中間的黑色方塊? 那就是實際的ML代碼。

here.這里 。

So what kind of creature is the Machine Learning Engineer then and where does it fit into the grand scheme of things? I prefer to fall back on a part of Tomasz Dudek’s definition from 2018:

那么,機器學習工程師是什么樣的生物?它在什么宏偉的事物中適合? 我更喜歡從2018年開始引用Tomasz Dudek的定義:

…A person called a machine learning engineer asserts that all production tasks are working properly in terms of actual execution and scheduling, abuses machine learning libraries to their extremes, often adding new functionalities. (They) ensure that data science code is maintainable, scalable and debuggable, automating and abstracting away different repeatable routines that are present in most machine learning tasks. They bring the best software development practices to the data science team and help them speed up their work…

…一個叫機器學習工程師的人斷言,所有生產(chǎn)任務在實際執(zhí)行和調(diào)度方面都正常工作,濫用了機器學習庫的極限,經(jīng)常添加新功能。 (他們)確保數(shù)據(jù)科學代碼是可維護的,可伸縮的和可調(diào)試的,以自動化和抽象化大多數(shù)機器學習任務中存在的不同可重復例程。 他們?yōu)閿?shù)據(jù)科學團隊帶來了最佳的軟件開發(fā)實踐,并幫助他們加快了工作速度……

— Tomasz Dudek in “But what is this “machine learning engineer” actually doing?”

-Tomasz Dudek在 “但是,這個“機器學習工程師”實際上在做什么? ”

Essentially a ML Engineer is then some kind of wizard that brings models to production in a sensible way, is able to improve the Data Scientist’s models and is also partly an architect who lays the road for the Data Science team. This sounds incredibly like some kind of senior engineering role, and yet it doesn’t have to be.

從本質(zhì)上來說,ML工程師是一種將明智地將模型投入生產(chǎn),能夠改進Data Scientist的模型的向?qū)?#xff0c;并且在某種程度上也是為Data Science團隊鋪路的建筑師。 這聽起來像是某種高級工程角色,但并非必須如此。

常見的ML工程背景。 (Common ML Engineering backgrounds.)

Most of the other ML Engineers I’ve met fall into one of two categories. The first group is highly educated, with most having a master’s or even a PhD in Computer Science, Artificial Intelligence, Data Science or Software Engineering. Surprisingly many are relatively new grads, with 1–3 years of experience under their belt when they became ML Engineers. There’s also a second group that consists of more experienced developers that transitioned into this role from neighboring fields such as Software Engineering or Data Engineering, and of course Data Science.

我遇到的其他大多數(shù)ML工程師都屬于以下兩類之一。 第一組受過高等教育,大多數(shù)人擁有計算機科學,人工智能,數(shù)據(jù)科學或軟件工程的碩士學位,甚至博士學位。 令人驚訝的是,許多是相對較新的應屆畢業(yè)生,當他們成為ML工程師時擁有1-3年的經(jīng)驗。 還有另一個小組,由經(jīng)驗豐富的開發(fā)人員組成,他們從軟件工程或數(shù)據(jù)工程,當然還有數(shù)據(jù)科學等鄰近領域過渡到這一角色。

This indicates that there is a level of proficiency needed to be a ML Engineer that could come from either of the two directions that make up the role. You could be a great software engineer, or a fantastic machine learning virtuoso. Maybe both! If you are one already, this might be the field for you. If you are not, it might be a viable direction to develop yourself towards.

這表明,要成為ML工程師,需要具備一定的熟練水平,而該水平可能來自于組成該角色的兩個方向中的任何一個。 您可能是一名出色的軟件工程師,或者是出色的機器學習專家。 也許兩者! 如果您已經(jīng)是一個人,那么這可能是適合您的領域。 如果您不是,這可能是朝著自己發(fā)展的可行方向。

But do not make the mistake that Software Engineers or Data Scientists automatically make good ML Engineers. I come from a software background myself and I can vouch that most ML concepts and APIs are absolutely alien to Software Engineers. I remember the intense struggles I had getting to know TensorFlow and Theano years ago. Even though I started coding in my teens I had never seen anything like it. The experience was humbling.

但是請不要誤以為軟件工程師或數(shù)據(jù)科學家會自動成為優(yōu)秀的ML工程師。 我本人來自軟件背景,我可以保證大多數(shù)ML概念和API絕對與軟件工程師無關。 我記得幾年前我開始了解TensorFlow和Theano時所進行的艱苦奮斗。 即使我從十幾歲開始編碼,也從未見過類似的東西。 經(jīng)驗令人謙卑。

A beginner-level ML Engineer is not a beginner programmer. This is a journey that is always at least traveled with experience. Is it then impossible to land a ML Engineering job without experience or training?

初學者級ML工程師不是初學者。 這是一個至少總是有經(jīng)驗的旅程。 那么,沒有經(jīng)驗或沒有培訓就不可能找到ML Engineering的工作嗎?

Of course not. However, the odds are against you. It is far easier to get into this niche when you have a similar background. There is some light on the horizon, however.

當然不是。 但是,賠率對您不利。 當您具有相似的背景時,進入這個利基市場要容易得多。 但是,地平線上有一些亮點。

Remember that back when Data Science started becoming popular we said the same thing about Data Scientists because the people doing Data Science at that time were some of the brightest and most highly-educated people in the world. Since then Data Science has become more accessible and in truth, nowadays you can be a great Data Scientist without needing a PhD. Whether the same will fully apply for ML Engineering I am not sure, but I hope that as our field matures the barriers to entry will become lower.

請記住,當數(shù)據(jù)科學開始流行時,我們對數(shù)據(jù)科學家也說了同樣的話,因為當時從事數(shù)據(jù)科學的人是世界上最聰明,最受過高等教育的人。 從那時起,數(shù)據(jù)科學變得越來越容易訪問,實際上,如今,您可以成為一名出色的數(shù)據(jù)科學家而無需博士學位。 我不確定這是否會完全適用于ML Engineering,但我希望隨著我們領域的成熟,準入門檻將會降低。

Data Science. Software Engineering. Probably some linear algebra too. These were the ingredients chosen to create the perfect ML Engineer. Whiteboard creation by author.數(shù)據(jù)科學。 軟件工程。 也可能是一些線性代數(shù)。 這些都是創(chuàng)建完美的ML工程師所選擇的要素。 由作者創(chuàng)建白板。

The toolbelt of the ML Engineer is not simply the lovechild of an intense affair between a Software Engineer’s IDE and a Data Scientist Jupyter Lab. It has many tools and techniques that are intrinsic to the field. Which brings me the next section…

ML工程師的工具帶不僅僅是軟件工程師的IDE與數(shù)據(jù)科學家Jupyter實驗室之間激烈關系的摯愛。 它具有該領域固有的許多工具和技術。 這帶給我下一部分...

機器學習工程師的技能 (The Machine Learning Engineer’s Skills)

Skills lists become outdated soon after being written, and often take on a life of their own. And yet I am here to draft up a non-exhaustive list of skills and topics to study! The tool landscape is so broad that it’s unlikely any ML Engineer will have proficiency with every language, tool and concept out there. Please don’t look upon this as some kind of list of items you need to cross off on your ML Engineering journey like so many online resources will instruct you to. Rather, take note and look at these as themes within the ML Engineering field.

技能列表在編寫后很快就過時了,并且往往會過著自己的生活。 但是,我在這里起草了一份不完整的技能和主題列表,以供學習! 工具范圍如此之廣,以至于任何ML工程師都不可能精通其中的每種語言,工具和概念。 請不要將此視為您在ML Engineering之旅中需要克服的某些項目清單,就像許多在線資源將指導您這樣做一樣。 相反,請注意并在ML Engineering領域中將它們視為主題。

I’ll try to discuss concepts more than specific tools. That way most of this will remain relevant in a couple of months or years.

我將嘗試討論概念而不是特定工具。 這樣,大多數(shù)情況將在幾個月或幾年后保持相關性。

數(shù)據(jù)科學 (Data Science)

  • Python. Look into coding standards and some of the cool stuff in the recent versions of Python. Having a basic understanding of R is also useful and your Data Scientists will thank you for it.

    Python。 查看編碼標準和最新版本的Python中的一些很棒的東西。 對R有一個基本的了解也很有用,您的數(shù)據(jù)科學家將感謝您。

  • Statistics.

    統(tǒng)計。

  • Model optimization.

    模型優(yōu)化。

  • Model validation.

    模型驗證。

  • ML frameworks such as sci-kit learn

    ML框架,例如sci-kit學習

  • Deep learning frameworks such as TensorFlow and PyTorch

    深度學習框架,例如TensorFlow和PyTorch

  • ML applications such as NLP, computer vision and time series analysis.

    ML應用程序,例如NLP,計算機視覺和時間序列分析。

  • Mathematics. Implicitly, you’ll use a lot of linear algebra and calculus.

    數(shù)學 。 隱式地,您將使用很多線性代數(shù)和微積分。

The reason why I would take Python over R or any other language is mainly because of the production aspect. While you can do a lot with R it is often not supported as well as Python is. There’s also the time aspect that plays here: often it is far faster to productionalize code in Python than R.

之所以選擇Python而不是R或其他任何語言,主要是由于生產(chǎn)方面的原因。 盡管您可以使用R做很多事情,但它通常不像Python那樣受支持。 這里還有時間方面的問題:在Python中進行生產(chǎn)化代碼通常比R要快得多。

軟件工程 (Software engineering)

  • Experience outside of python in a second programming language, such as Java, C++, or JavaScript.

    使用第二種編程語言 (例如Java,C ++或JavaScript)在python之外體驗。

  • Cloud offerings. More on that later.

    云產(chǎn)品 。 以后再說。

  • Distributed computing

    分布式計算

  • System design and software architecture

    系統(tǒng)設計和軟件架構(gòu)

  • Data Structures and Algorithms.

    數(shù)據(jù)結(jié)構(gòu)和算法。

  • Databases and the query languages that come with it.

    數(shù)據(jù)庫及其附帶的查詢語言。

  • Containerization (e.g. Docker, KubeFlow)

    容器化 (例如Docker,KubeFlow)

  • Functional programming concepts

    函數(shù)式程序設計概念

  • Design patterns

    設計模式

  • Big O

    大O

  • API development

    API開發(fā)

  • Version control: git

    版本控制: git

  • Testing

    測試中

  • Project management. Probably the most underrated element in any SE curriculum.

    項目管理 。 可能是所有SE課程中被低估的元素。

  • CI/CD

    CI / CD

  • MLOps

    多播

So how do you learn about all of these if not on the job? Courses and online training can be great but they won’t teach you how to do apply it in a real-life setting. For things like statistics it doesn’t matter, but for technical subjects knowing “about” it is only half of the mastery. It doesn’t take more than a quick glance at Reddit’s r/learnprogramming to see that there are many people struggling to make the jump from coding in the protected IDE in an online course to coding their own projects on their own machine.

那么,如果不在工作中,您如何了解所有這些信息呢? 課程和在線培訓可能很棒,但是它們不會教您如何在現(xiàn)實生活中應用它。 對于諸如統(tǒng)計之類的事情來說,這并不重要,但是對于了解“大約”的技術人員來說,這僅僅是精通的一半。 只需一眼就可以看到Reddit的r / learnprogramming ,很多人都在努力從在線課程中的受保護IDE編碼過渡到在自己的機器上編碼自己的項目。

My experience is that it might be better to get started on a project on your own to learn a new skill, and supplement your knowledge with online training when you already have some applied knowledge. Instead of all-in-one training programs there are many tutorials online to help you with that, from building your own clock or calculator to a complete web app. Be aware of any course that promises you can go from zero to hero in a couple of weeks or months.

我的經(jīng)驗是,最好是自己開始一個項目以學習新技能,并在已經(jīng)掌握一些應用知識的情況下,通過在線培訓補充知識。 從構(gòu)建自己的時鐘或計算器到完整的Web應用程序,在線上有許多教程可以為您提供幫助,而不是一站式培訓計劃。 請注意任何可以保證您在幾周或幾個月內(nèi)從零變到英雄的過程。

Certifications are a similar beast. A certification can be particularly valuable if you’re in consulting and want to signal to clients that your skills meet certain standards. Having a certification that corresponds to a client’s tech stack immediately puts you at the front of the pack. However, a certification is worthless without the skills to back this up in the first place. Consider now that you can obtain many certifications without having to code for them and you’ll see where I’m headed. Often, the time spent getting a certification would be better spent just building applications.

認證是類似的野獸。 如果您正在咨詢并且想向客戶表明您的技能符合某些標準,那么證書特別有價值。 擁有與客戶的技術堆棧相對應的認證,將使您立于不敗之地。 但是,如果沒有足夠的技能來首先進行認證,那么認證就一文不值。 現(xiàn)在考慮一下,您可以獲得許多認證,而無需為其編寫代碼,您將看到我的去向。 通常,花費時間來獲得認證會更好地花費在構(gòu)建應用程序上。

That said, there are some certifications that do carry some merit for ML Engineers, particularly for cloud vendors. Often these require a couple of years of experience deploying applications on their respective platforms, but anyone can pay $100–300 and register for a certification examination. As of 2020, there are three cloud vendors worth mentioning: Azure (Microsoft), GCP (Google), and AWS (Amazon). Here’s a list of certifications they offer that are in the sphere of interest of the ML Engineer.

也就是說,有些認證確實對ML工程師(尤其是云供應商)具有一定的價值。 通常,這些程序需要在其各自平臺上部署應用程序的經(jīng)驗 ,但是任何人都可以支付100-300美元并注冊認證考試。 截至2020年,值得一提的有三家云供應商:Azure(Microsoft),GCP(Google)和AWS(Amazon)。 這是他們提供的與ML工程師有關的認證列表。

Source資源

Microsoft Azure: (Microsoft Azure:)

Microsoft offers associate-level certification for both Data Scientists and AI Engineers, as well as about a dozen other certifications. Some certifications actually require multiple exams, but this is not (yet?) the case for both the Data Scientist and the AI Engineer cert. The certification topics are a little bit superficial, but the exam should not be underestimated.

微軟為數(shù)據(jù)科學家和AI工程師提供助理級別的認證,以及大約十二種其他認證。 某些認證實際上需要多次考試,但數(shù)據(jù)科學家和AI工程師證書都還不是(現(xiàn)在呢)。 認證主題有些膚淺,但是考試不應被低估。

  • Microsoft Certified: Azure AI Fundamentals

    微軟認證:Azure AI基礎知識

  • Azure Data Scientist Associate

    Azure數(shù)據(jù)科學家助理

  • Azure AI Engineer Associate

    Azure AI工程師助理

here.在這里 。

Google云端平臺: (Google Cloud Platform:)

Google is the challenger when it comes to cloud services and the state of their certification reflects that. At the moment the ML Engineer exam is in beta and no certifications have been awarded yet. The exam takes four (!) hours but is an incredibly comprehensive list of what a ML Engineer’s job is all about. Prior to this certification being introduced, some ML topics fell under the Data Engineer certification, so many ML Engineers, myself included, actually took the Data Engineering certification track.

Google在云服務方面是挑戰(zhàn)者,其認證狀態(tài)反映了這一點。 目前,ML工程師考試尚處于測試階段,尚未獲得任何認證。 考試需要四(!)小時,但它是ML工程師的工作內(nèi)容的綜合列表,令人難以置信。 在引入此認證之前,某些ML主題屬于Data Engineer認證 ,因此包括我在內(nèi)的許多ML Engineer實際上都參加了Data Engineering認證。

You could also look at the Google Cloud Architect, Developer or DevOps certification, but these barely touch upon it and might add a little bit of noise on your resume that lines you up for different gigs. I say that as a certified Cloud Architect myself who learned this from experience. On the other hand, it could make your profile a little bit more appealing.

您也可以查看Google Cloud Architect , Developer或DevOps認證,但是這些認證幾乎沒有涉及到,并且可能會在履歷表中增加一點噪音,使您準備參加不同的演出。 我說自己是一名通過認證的Cloud Architect,他是從經(jīng)驗中學到的。 另一方面,它可以使您的個人資料更具吸引力。

  • Google Cloud Certified Professional Data Engineer

    Google Cloud認證的專業(yè)數(shù)據(jù)工程師

  • Google Cloud Certified Professional Machine Learning Engineer (currently in beta)

    Google Cloud認證的專業(yè)機器學習工程師 (當前處于測試版)

here.這里 。

AWS(AWS:)

Amazon has specific paths for both analytic roles and ML roles. Given that the data analytics certification is almost entirely focused on data processing and reporting, I would propose that only the ML Specialty is of interest to the ML Engineers. Their Machine Learning Specialty’s syllabus covers a lot of ML Engineering topics, though it is not as exhaustive as the Google certification.

Amazon具有分析角色和ML角色的特定路徑。 鑒于數(shù)據(jù)分析認證幾乎完全集中在數(shù)據(jù)處理和報告上,我建議ML工程師只對ML專業(yè)感興趣。 他們的機器學習專業(yè)課程提綱涵蓋了許多ML工程主題,盡管它不如Google認證那么詳盡。

  • AWS Certified Machine Learning — Specialty

    AWS認證的機器學習-專業(yè)

  • AWS Certified Developer Associate

    AWS認證開發(fā)人員助理

那你應該選哪一個呢? (So which ones should you get?)

At the moment Amazon is the market leader, with around 60% market share. Azure sits at 30% and GCP at 10%. While the overall market is growing a lot, AWS is slowly losing market share to Google and Microsoft. Google might look like an underdog, but they have a pretty strong track record with AI innovations and their ownership of TensorFlow. Speaking of which, there’s also a certificate for TF. If you’re not forced to use one cloud vendor over the other by an employer I would advice to test out all three with trial accounts and deploying a pet project. Figure out which one you like and also look at what kind of companies use these cloud vendors.

目前,亞馬遜是市場領導者,擁有約60%的市場份額。 Azure占30%,GCP占10%。 盡管整個市場增長Swift,但AWS逐漸失去了Google和Microsoft的市場份額。 Google可能看起來像個失敗者,但他們在AI創(chuàng)新和TensorFlow所有權(quán)方面擁有相當不錯的業(yè)績。 說到這, 還有TF的證書。 如果您沒有被雇主強迫使用一個云供應商而不是另一個,那么我建議您使用試用帳戶測試這三個云供應商并部署一個寵物項目。 找出您喜歡的公司,然后查看哪種公司使用這些云供應商。

Why do you need cloud tech at all? Well, eventually Data Science work makes it to production and most of the time it is deployed on a cloud platform. You don’t need to rival the skills of a Cloud Engineer but you should know how to implement ML projects in your chosen platform. They don’t often teach how to navigate {vendor} cloud consoles at a formal place like an university.

為什么根本需要云技術? 好吧,最終Data Science的工作可以投入生產(chǎn),并且大部分時間都部署在云平臺上。 您不需要與云工程師的技能相抗衡,但是您應該知道如何在所選平臺上實施ML項目。 他們通常不會教如何在像大學這樣的正式場所瀏覽{vendor}云控制臺。

There is a downside to learning a cloud platform: literally not a week goes by without a new cloud product being announced on one of these giants. Keeping up to date with cloud offerings is hard. Having a wide range of certifications also brings into question whether you’re actually up to snuff with all of them.

學習云平臺有一個弊端: 從字面上看,沒有一個星期能在這些巨頭之一中宣布新的云產(chǎn)品 。 與云產(chǎn)品保持同步是很難的。 擁有廣泛的認證也使您懷疑您是否真的要對所有這些都them之以鼻。

You might have noticed that, so far, I did not link any courses or tutorials. There are already many resources already out there for that. Furthermore, my main point is that the road to becoming a ML Engineer is traveled by doing projects and getting experience in the field, as it is not an entry-level job.

您可能已經(jīng)注意到,到目前為止,我還沒有鏈接任何課程或教程。 為此已經(jīng)有很多資源。 此外,我的主要觀點是,成為ML工程師的道路是通過做項目和獲得現(xiàn)場經(jīng)驗來進行的,因為這不是入門級的工作。

構(gòu)成ML工作的差異 (Variation In What Constitutes ML Work)

When you’ve done all that you should know that there is a world of difference between working at a small company and doing ML than working at FAANG and doing ML. Likewise, there is a lot of variation between working on ‘product’ companies or at consultancies. Similarly, a bank and a start-up are worlds apart in terms of technology adaption.

當您完成所有工作后,您應該知道在小公司工作和執(zhí)行ML與在FAANG工作和執(zhí)行ML之間存在很大的差異。 同樣,在“產(chǎn)品”公司或咨詢公司之間工作也存在很大差異。 同樣,在技術適應性方面,一家銀行與一家初創(chuàng)企業(yè)是天壤之別。

You’re much more likely to be a jack of all trades at small companies , e.g. being asked to do data engineering, visualization and data science-y work as part of your day to day activities. Larger companies are more likely to hire specific staff that focuses on specific parts of the ML chain, and might even have different types of ML Engineers running around. If you’re at a company that does many different projects you might never go deep into any framework, but get to experience many kinds of tools and domains. These are specific considerations to keep in mind when you’re going to look for your first ML job.

您更有可能成為小公司所有交易的負責人,例如被要求在日常活動中進行數(shù)據(jù)工程,可視化和數(shù)據(jù)科學工作。 較大的公司更有可能雇用專門負責ML鏈特定部分的特定人員,甚至可能四處奔波的不同類型的ML工程師。 如果您所在的公司從事許多不同的項目,那么您可能永遠都不會深入研究任何框架,而是會體驗多種工具和領域。 這些是您要尋找第一個ML工作時要記住的特定注意事項。

準備失敗 (Be Prepared To Fail)

There’s a slightly toxic notion in computer science that good developers hardly ever make mistakes and good code is without bugs. This is complete nonsense and it has led to an epidemic of imposter syndrome. Code is almost never written correct the first time and it is a process that highly depends on the time and money thrown at it. You grow a lot as a engineer in this field, but at the same time the field will grow faster than you. Being a ML Engineer is continuously having to learn new things on the job, and you give up some proficiency in coding by virtue of being in an interdisciplinary field.

在計算機科學中,有一個略帶毒害的概念,即好的開發(fā)人員幾乎不會犯錯誤,而好的代碼沒有錯誤。 這完全是胡說八道,并導致了冒名頂替綜合癥的流行。 第一次代碼幾乎永遠不會寫對,這是一個高度依賴于時間和金錢的過程。 作為該領域的工程師,您成長很多,但與此同時,該領域的成長速度將比您快。 作為一名ML工程師,不斷需要在工作中學習新事物,并且由于處于跨學科領域,您放棄了一些編碼方面的專業(yè)知識。

I regularly look back at code written a while ago and find that I made mistakes. Sometimes I rewrite it with the knowledge I have right now, or see if I can update an old model to a new version of an API. Some developers swear by completely tossing out dense code and rewriting it from scratch. Over time you develop a feeling to retroactively detect code smells and this is what engineering is about.

我經(jīng)常回顧一下前一段時間編寫的代碼,發(fā)現(xiàn)自己犯了錯誤。 有時,我會以現(xiàn)在的知識重寫它,或者看看是否可以將舊模型更新為API的新版本。 一些開發(fā)人員發(fā)誓要完全扔掉密集的代碼并從頭開始重寫它。 隨著時間的流逝,您會產(chǎn)生一種可以追溯地檢測代碼氣味的感覺,這就是工程的意義所在。

Don’t be afraid to make mistakes. Failing is natural, particularly with something as new as ML.

不要害怕犯錯誤。 失敗是很自然的,尤其是像ML這樣的新事物。

機器學習工程師的閱讀清單 (A Reading List for the Machine Learning Engineer)

A Machine Learning Engineer’s bookcase. Notice the worn-down copy of Linear Algebra and its applications. Photo by author.機器學習工程師的書架。 請注意線性代數(shù)及其應用的舊版本。 圖片由作者提供。

Although this is by no means meant as a complete list, here are some resources that I feel would benefit those who want to break into this field.

盡管這絕不是完整列表,但我認為有些資源對那些希望涉足這一領域的人有利。

Books:

圖書:

  • Clean code by Robert C. Martin

    Robert C. Martin的干凈代碼

  • Machine learning yearning by Andrew Ng

    對機器學習的渴望

  • Deep Learning by Ian Goodfellow, Yoshua Bengio and Aaron Courville

    Ian Goodfellow,Yoshua Bengio和Aaron Courville的深度學習

  • The Pragmatic Programmer by David Thomas and Andrew Hunt

    大衛(wèi)·托馬斯和安德魯·亨特的實用程序員

  • Designing Data-Intensive Applications: The Big Ideas Behind Reliable, Scalable, and Maintainable Systems by Martin Kleppman

    設計數(shù)據(jù)密集型應用程序:可靠,可擴展和可維護的系統(tǒng)背后的大構(gòu)想 by Martin Kleppman

Posts / blogs:

帖子/博客:

  • How to read scientific papers by Christoph Schmidl

    如何閱讀 Christoph Schmidl的科學論文

  • Everything you need to know about becoming a self-taught ML Engineer by Jason Benn has some excellent motives.

    賈森·本恩(Jason Benn) 成為自學成才的機器學習工程師所需的一切知識,都有一些出色的動機。

  • Become a Data Scientist in 2020 with these 10 resources by Rahul Agarwan will appeal to those looking for lists of online resources.

    Rahul Agarwan撰寫的這10篇資源將成為2020年的數(shù)據(jù)科學家,這將吸引那些尋求在線資源列表的人們。

  • Openai’s blog

    Openai的博客

Papers:

文件:

  • Hidden Technical Debt in Machine Learning Systems

    機器學習系統(tǒng)中的隱藏技術債務

  • Software Engineering for Machine Learning: A Case Study

    機器學習的軟件工程:案例研究

會議,聚會和ML工程現(xiàn)場 (Conferences, meetups and the ML Engineering Scene)

Some people hate them, others love them. Some use them as a way to self-promote themselves to the max while other people share absolutely brilliant ideas. I like meetups for the simple reason they’ll allow you to cherry pick what kind of topics you want to learn about. Do you like Scala? AI in Healthcare? Meetups. More of a fan of Bayesian optimization? There’s probably a meetup for that. Most of the meetups have gone fully online due to Corona and I expect this to continue through to the first half of 2021 at least.

有些人討厭他們,另一些人愛他們。 有些人用它們作為自我提升的一種方式,而另一些人則分享絕對的絕妙想法。 我喜歡聚會 ,原因很簡單,因為它們使您可以挑選想要學習的主題。 你喜歡Scala嗎? 醫(yī)療保健中的AI? 聚會。 更喜歡貝葉斯優(yōu)化嗎? 可能有一個聚會。 由于有電暈,大多數(shù)聚會都已經(jīng)完全在線,我希望至少到2021年上半年為止。

Protip: They’re great for networking if you’re looking to get an internship, job, or a mentor.

Protip :如果您想找實習,工作或?qū)?#xff0c;它們非常適合建立人脈。

其他職業(yè) (Other Careers)

There are a couple of other careers that should be mentioned to those considering moving into this field.

考慮進入該領域的人還應該提到其他一些職業(yè)。

  • Data Engineering: Anything that touches data needs to be able to handle scale and complex transforms. You’re the one specialized in connecting various elements of the data pipeline. There is often a significantly higher demand for your services than there is for those of the Machine Learning Engineer.

    數(shù)據(jù)工程 :涉及數(shù)據(jù)的任何事物都必須能夠處理規(guī)模和復雜的轉(zhuǎn)換。 您是專門研究連接數(shù)據(jù)管道各個元素的人。 對您的服務的需求通常比對機器學習工程師的需求要高得多。

  • Data Scientist: Analysis, Storytelling, Statistics, Machine Learning and presenting it to the CEO. You got it all. Usually this job is more diverse and involves less programming, but it really depends where you end up — there are so many flavors of data science it is hard to define it as a single role and some data scientists run a complete Data & Analytics department by themselves.

    數(shù)據(jù)科學家:分析,講故事,統(tǒng)計,機器學習并將其呈現(xiàn)給CEO。 知道了 通常,這項工作的種類更多,涉及的編程更少,但實際上取決于您的最終目標-數(shù)據(jù)科學的種類繁多,很難將其定義為單一角色,并且一些數(shù)據(jù)科學家會通過一個完整的數(shù)據(jù)與分析部門他們自己。

  • Cloud Engineering: Specialized in integrating different applications and moving workflows to the cloud, you’re pretty good friends with the Data and ML Engineers.

    云工程:專門集成不同的應用程序并將工作流移動到云中,您是數(shù)據(jù)和ML工程師的好朋友。

結(jié)論 (Conclusion)

A Machine Learning Engineer has a broad range of topics to understand from both Machine Learning and Software Development. Courses and certifications don’t bring you there as of 2020. A formal training or experience in the field is still desirable, but I expect that it will become more accessible over time, similar to how Data Science became more open to newcomers. With that in mind, I feel that the best path for those looking to become ML Engineers without formal training would then be to enter Data Science or Software Engineering, and transfer from there while picking up the elements that make up ML Engineering.

機器學習工程師有很多主題可以從機器學習和軟件開發(fā)中了解。 到2020年,課程和認證并不會帶您到那里。仍然需要在該領域進行正式培訓或經(jīng)驗,但是我希望隨著時間的流逝,它將變得更加容易獲得,類似于Data Science對新移民更加開放。 考慮到這一點,我認為對于那些沒有經(jīng)過正式培訓而想要成為ML工程師的人來說,最好的途徑就是進入數(shù)據(jù)科學或軟件工程,然后從那里轉(zhuǎn)移,同時挑選組成ML Engineering的要素。

結(jié)束語 (Closing words)

As the field moves fast I would like to focus on the ML Engineering skillset and tool landscape in a future post by data scraping job postings and doing some magic on that in order to come up with a more statistically sound analysis of what a ML Engineer could know. Wondering whether you should learn TensorFlow over PyTorch? Stay tuned for that :)

隨著領域的快速發(fā)展,我想在以后的文章中重點介紹ML工程技能和工具領域,方法是抓取數(shù)據(jù)并對其進行一些魔術處理,以便對ML工程師的工作進行更合理的統(tǒng)計分析。知道。 想知道您是否應該通過PyTorch學習TensorFlow? 敬請期待:)

With this post, I added to the growing body of Data Science articles. I hope you found it useful. I wanted to write something accessible to those not currently in the field and I hope my two cents will help you in figuring out whether this niche of ML and Engineering is for you.

通過這篇文章,我添加了越來越多的數(shù)據(jù)科學文章。 希望你覺得它有用。 我想寫一些東西,讓那些目前不在該領域的人可以使用,我希望我的兩分錢能幫助您確定ML和Engineering的利基市場是否適合您。

翻譯自: https://towardsdatascience.com/how-to-become-a-machine-learning-engineer-in-2020-1161aa29261e

《成為一名機器學習工程師》

總結(jié)

以上是生活随笔為你收集整理的《成为一名机器学习工程师》_如何在2020年成为机器学习工程师的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯,歡迎將生活随笔推薦給好友。

国产免费成人av | 黄色美女免费网站 | 亚洲黄色在线免费观看 | 久久久久久高潮国产精品视 | 81精品国产乱码久久久久久 | 日韩在线播放视频 | 好看av在线 | aaa毛片视频 | 婷婷综合 | 国产一区二区三区黄 | 最新色站 | 在线观看日本韩国电影 | 99热99re6国产在线播放 | 国产成人综合在线观看 | 九九综合久久 | 久草91视频 | 欧美一区二区三区特黄 | 草在线视频 | 在线观看黄网站 | 日日天天av | 国产美女无遮挡永久免费 | 国产香蕉视频在线播放 | 欧美一区二区精美视频 | 婷婷色中文字幕 | a级一a一级在线观看 | 久久久www成人免费毛片 | 在线观看国产区 | 欧美在线观看小视频 | 免费黄色小网站 | 久久99精品久久久久婷婷 | 国产裸体bbb视频 | 伊人狠狠干 | 综合色中文 | 国产成人免费在线 | 91伊人久久大香线蕉蜜芽人口 | 天堂av在线免费观看 | 国产一区福利在线 | 亚洲综合成人专区片 | 国产91精品看黄网站 | 精品色999| 国产五十路毛片 | 国产成人av网站 | 男女拍拍免费视频 | 四虎成人精品在永久免费 | 亚洲天堂va | 中文字幕高清在线播放 | 欧美国产不卡 | 国产精品欧美日韩 | www.狠狠操 | 色综合人人 | 天天色视频 | 在线最新av | 国产日产精品一区二区三区四区 | 免费看的国产视频网站 | 五月天亚洲激情 | a在线观看国产 | 高清av免费看 | 中文字幕免费不卡视频 | 丁香5月婷婷 | 欧美有色 | 国产精品破处视频 | 在线观看的av网站 | 国产精品 国产精品 | avove黑丝| 日韩欧美亚州 | 黄色大片网 | 看黄色91 | 果冻av在线 | 国产一区二区网址 | 日韩理论在线播放 | 91精品黄色 | 一区二区三区四区精品视频 | 右手影院亚洲欧美 | 久久爱992xxoo | 国产在线观看h | 日本精品一区二区三区在线播放视频 | 欧美精品亚洲二区 | 五月开心激情网 | 久久久首页 | www色com| 国产一级片观看 | 欧美最猛性xxx | 中文字幕在线观看网站 | 天天干天天想 | 91久久精品一区二区二区 | 成年人在线观看免费视频 | 午夜影视av | 中文在线免费观看 | 最近的中文字幕大全免费版 | av网站免费看 | 最新成人在线 | 狠狠操狠狠| 国产黄色片免费 | 91高清视频在线 | 亚洲视频久久久 | 日韩精品一区二区免费 | www操操操| 天天草av | 天天曰夜夜操 | 韩日电影在线免费看 | 精品国产免费看 | 国产精品国产三级国产aⅴ入口 | 亚洲国内精品视频 | 色综合久久88色综合天天免费 | 成人av在线直播 | 日日操日日插 | 高潮久久久 | 91精品婷婷国产综合久久蝌蚪 | 99热这里精品 | 少妇搡bbbb搡bbb搡忠贞 | 最新av在线网站 | 美女视频免费一区二区 | 一区二区高清在线 | 国产精品女人网站 | 久久久 精品 | 日本中文在线观看 | 国产一级性生活 | 成人久久18免费网站图片 | av一级在线观看 | 国产精品毛片久久蜜 | 婷婷综合| 亚洲午夜激情网 | 久草精品视频 | 玖草在线观看 | 一区二区 不卡 | 国内精品久久久久久久影视简单 | 激情综合六月 | 天天躁天天躁天天躁婷 | 操操操日日日干干干 | 国产成人91 | 一区二区三区四区五区在线视频 | 麻豆视频国产在线观看 | 久久视频这里只有精品 | 久久久久久久久毛片 | 色就色,综合激情 | 亚洲国产成人在线观看 | 成人a视频| 91亚色在线观看 | 成人免费看电影 | 国产福利a| 国产爽视频 | 中文字幕av在线不卡 | 色偷偷88888欧美精品久久久 | 日韩av资源站 | 中文字幕一区二区三区在线视频 | 久久激五月天综合精品 | 欧美一级免费在线 | 国产一区黄色 | 免费在线播放av电影 | 日韩特黄av | 国产原创在线 | 伊人狠狠操 | 九九国产精品视频 | 国产在线最新 | 亚洲精品66 | 成人天堂网 | 免费观看丰满少妇做爰 | 色婷婷综合久久久久 | 69国产精品视频免费观看 | 日韩中文字幕在线观看 | 国产精品一区二区久久 | 欧洲在线免费视频 | 黄色的网站免费看 | 精品在线99| 亚洲成人av免费 | 91在线观看视频网站 | 精品国产99国产精品 | 日本成人黄色片 | 久久婷婷影视 | 精品国产aⅴ麻豆 | 免费久久精品视频 | 人人爽人人爱 | 亚洲免费在线视频 | 色综合久久久久综合体桃花网 | 欧美一级视频一区 | 8x成人在线 | 国产精品免费久久久久影院仙踪林 | 正在播放五月婷婷狠狠干 | 超碰在线色 | 日韩一区精品 | av中文国产| 狠狠亚洲| 精品国偷自产国产一区 | 9999在线视频| 伊人狠狠干 | 免费福利在线视频 | 国产伦精品一区二区三区无广告 | 看国产黄色大片 | 色黄www小说 | 日韩在线观看中文字幕 | 色婷婷狠 | 91中文字幕在线视频 | 又黄又爽又色无遮挡免费 | 日韩中文字幕视频在线 | 中文字幕影片免费在线观看 | 91高清在线看 | 黄色在线观看免费网站 | 天天操综合 | 黄色免费观看网址 | a在线一区 | www日韩| 精品国产福利在线 | 九九热在线视频免费观看 | 国产精品久久一区二区无卡 | 精品国产一区二区三区久久久蜜月 | 国产欧美精品在线观看 | 欧美日韩一区二区三区不卡 | 国产一区久久 | 黄色一级大片在线观看 | 国内精品免费久久影院 | 日女人免费视频 | 免费在线观看91 | 国产视频九色蝌蚪 | 日韩亚洲在线观看 | 成人一级免费视频 | 国产va精品免费观看 | 日韩精品大片 | 日韩精品一区二区在线观看 | 婷婷伊人五月天 | 国产精品热视频 | 国产精品手机视频 | 精品国产视频在线观看 | av黄色影院 | 91在线免费观看网站 | 成人h视频在线 | 高潮毛片无遮挡高清免费 | 欧美日韩国产高清视频 | 天天操人人要 | 欧美热久久 | 一级黄色片在线播放 | 欧美日韩网址 | 国产精品自在线 | 国产精品永久免费观看 | 日韩一区二区免费播放 | 99婷婷狠狠成为人免费视频 | 福利一区视频 | 日韩激情视频在线观看 | 视频在线播放国产 | 国产一级一片免费播放放 | 亚洲综合色视频 | 又污又黄的网站 | 亚洲h在线播放在线观看h | 亚洲精品无 | 狠狠操狠狠 | 五月天电影免费在线观看一区 | 国产精品成人自产拍在线观看 | 狠狠色丁香婷婷综合久小说久 | 操碰av | 九九精品毛片 | 欧美aaa视频 | 国产精品久久久久毛片大屁完整版 | 欧美巨大荫蒂茸毛毛人妖 | 国产精品门事件 | www.午夜色.com | 中文字幕乱偷在线 | 免费黄在线看 | 日b视频在线观看网址 | 欧美成人中文字幕 | 国产一区二区三区 在线 | 成年人在线| 久久久久久久久爱 | 天天综合色 | 丁香午夜 | 波多野结衣一区二区 | 亚洲天堂视频在线 | 婷婷亚洲激情 | 国产香蕉视频在线播放 | 欧美福利网站 | 日韩网页| 免费av在线播放 | 国产 日韩 欧美 中文 在线播放 | 最近中文字幕第一页 | 欧美日韩成人一区 | 奇米网444 | www久久久久 | 久久精品毛片 | 韩日成人av | 深爱五月网 | 91免费版在线 | 国产精品6 | 狠狠做六月爱婷婷综合aⅴ 日本高清免费中文字幕 | 日韩小视频网站 | 91传媒视频在线观看 | 99久免费精品视频在线观看 | 久久精品国产成人 | 超碰国产在线 | 国产视频日韩视频欧美视频 | 成年性视频 | 天天操夜夜操天天射 | 婷婷中文字幕在线观看 | 国产精品成人一区二区三区吃奶 | 亚洲精品在线免费观看视频 | 最新黄色av网址 | av天天在线观看 | 国产成人精品999 | 久久九九精品 | 亚洲国产精品第一区二区 | 在线视频免费观看 | 狂野欧美激情性xxxx欧美 | 黄色av一区 | 国产精品免费一区二区 | 久久视频国产精品免费视频在线 | 91在线免费视频 | 在线观看视频免费播放 | 91大神电影| 成人午夜电影久久影院 | 综合久久2023 | 精品久久久久久综合日本 | 日韩高清免费在线观看 | av网站大全免费 | 色成人亚洲 | 日韩色综合网 | 久久久在线观看 | 9999在线| 黄色小说在线免费观看 | 国产亚洲精品久久久久久久久久久久 | 欧美日韩性 | 黄av免费在线观看 | 亚洲伦理电影在线 | 日韩一区二区在线免费观看 | 久久久精品在线观看 | 欧美日韩国产欧美 | 天天插天天操天天干 | 久久精品视频5 | 日本久久片 | 亚洲精品国产精品国自产 | 色视频网站在线观看一=区 a视频免费在线观看 | 国产精品毛片一区视频 | 97色婷婷成人综合在线观看 | 99亚洲视频| 久久亚洲区| 人九九精品| 一区二区三区在线电影 | 亚洲免费国产视频 | 在线日本看片免费人成视久网 | 亚洲精品乱码久久久久久蜜桃91 | 天天操天天艹 | 免费日韩一区 | 亚洲天堂精品视频 | 中文字幕你懂的 | 激情视频在线高清看 | 中文字幕成人一区 | 久久免费美女视频 | 中文字幕在线视频免费播放 | 国产免费一区二区三区网站免费 | 久久久99精品免费观看app | 久久国产美女视频 | 激情综合五月天 | 九九九热精品免费视频观看 | 蜜臀久久99精品久久久久久网站 | 97色婷婷成人综合在线观看 | 精品v亚洲v欧美v高清v | 四虎在线免费观看 | 国产精品一区二区久久久久 | 国产免费三级在线观看 | 精品国内自产拍在线观看视频 | 国产一区网址 | a级国产乱理伦片在线观看 亚洲3级 | 日韩精品一区二区在线观看 | 欧美日韩中文在线观看 | 91九色在线观看 | 久草视频手机在线 | 在线亚洲午夜片av大片 | av888.com| 91av视频免费在线观看 | 中午字幕在线 | 黄色影院在线免费观看 | 欧美日韩91 | 日韩在线精品 | 婷婷.com| 久草视频网 | 国产亚洲欧洲 | 成人久久久精品国产乱码一区二区 | 九九免费视频 | 国产玖玖视频 | 夜夜躁日日躁狠狠久久88av | 天天爽夜夜爽人人爽一区二区 | 最新av观看 | 国产最新视频在线观看 | avlulu久久精品 | 手机成人免费视频 | 成人免费在线视频观看 | 国产亚洲午夜高清国产拍精品 | 国产手机视频在线播放 | 国产精品短视频 | 91av小视频| 色婷婷国产精品一区在线观看 | 精品久久久久久久久久久久久久久久久久 | 久久视频在线观看免费 | 中文永久免费观看 | 五月综合色 | 黄www在线观看 | 亚洲激情精品 | 丁香综合激情 | 久久精品美女视频网站 | 国产高清av| 在线看国产精品 | 欧美激情视频在线免费观看 | 日本韩国在线不卡 | 国产精品久久视频 | 日韩色高清 | 欧洲亚洲女同hd | 最近最新最好看中文视频 | 日韩城人在线 | 久久99久国产精品黄毛片入口 | 99视频在线观看一区三区 | 国产视频2区| 久久九九国产视频 | 97电院网手机版 | 日本三级全黄少妇三2023 | 黄色在线成人 | 久久这里 | 人人爽人人爽 | 人人讲 | 亚洲二区精品 | 久久久精品 一区二区三区 国产99视频在线观看 | 国产综合视频在线观看 | www.99在线观看 | 美女黄久久 | 国内外激情视频 | 日韩精品一区二区久久 | 在线观看你懂的网站 | 国产精品永久免费 | 日韩不卡高清 | 99精品偷拍视频一区二区三区 | 婷婷国产视频 | 天天操天天舔天天干 | 日韩精品免费一区二区三区 | 久久久久久久久久久黄色 | 高潮久久久 | 国产精品爽爽久久久久久蜜臀 | 丁香激情婷婷 | 五月激情丁香图片 | 97碰在线 | 亚洲3级| free,性欧美| 国产人在线成免费视频 | 97国产大学生情侣白嫩酒店 | 成年免费在线视频 | 亚洲精品网页 | 91久久丝袜国产露脸动漫 | 国产成人精品亚洲精品 | 久久久毛片| 亚洲午夜精品在线观看 | 人人爽人人爽人人爽学生一级 | 免费高清av在线看 | 三级av免费 | 亚洲午夜久久久综合37日本 | 99视频精品全国免费 | 激情网综合 | 久久综合色婷婷 | 综合久久久久久久 | 亚洲一级免费电影 | 99精品在线视频播放 | 91av网址 | 激情小说网站亚洲综合网 | 精品久久美女 | 免费看黄色91 | 久久久免费毛片 | 青青河边草免费直播 | 9在线观看免费高清完整版在线观看明 | 天海翼一区二区三区免费 | 樱空桃av | 亚洲精品成人免费 | 波多野结衣在线播放视频 | 999视频网| 丁香九月激情综合 | 日韩精品高清视频 | 九九av| 涩涩资源网 | 亚洲精品福利视频 | 亚洲精品国产第一综合99久久 | 天堂av网站 | 91观看视频| 免费国产在线精品 | 亚洲成人资源网 | 在线观看韩日电影免费 | 日韩xxxxxxxxx| 麻豆久久久久久久 | 国精产品满18岁在线 | 中文字幕在线观看视频一区二区三区 | 成人a级网站 | 九九爱免费视频 | 在线一区二区三区 | 亚洲精品在线网站 | 一区二区三区四区久久 | av永久网址 | 激情综合站 | 天天干人人 | 色婷婷欧美 | 婷婷色av| 黄色aaaaa| 天天操狠狠操 | 日韩国产在线观看 | 日日夜夜亚洲 | 午夜视频在线观看一区二区三区 | 综合网五月天 | 色婷婷福利 | 国产成人精品一区二区三区在线观看 | 久久只精品99品免费久23小说 | 91久久一区二区 | 婷婷视频在线播放 | 一区二区三区在线免费观看视频 | 在线视频 影院 | 国产小视频福利在线 | 国产精品久久久久久久久软件 | 美女网站视频免费都是黄 | 国产高清中文字幕 | 91av九色| 中文字幕日韩av | 人人揉人人揉人人揉人人揉97 | 青青河边草观看完整版高清 | 国产 亚洲 欧美 在线 | 91黄站| 久章草在线观看 | 国产在线久草 | 国产综合在线观看视频 | 国内成人综合 | 婷婷国产在线观看 | 91九色视频国产 | 久久精品网 | 日韩网站在线看片你懂的 | 久久999久久 | 亚洲午夜久久久久久久久 | 99精彩视频在线观看免费 | 国产精品日韩久久久久 | 不卡国产在线 | 极品久久久 | 午夜三级毛片 | 四虎小视频 | 日本一区二区免费在线观看 | 亚洲视频在线观看网站 | 欧美激情一区不卡 | 中文字幕黄色 | av播放在线| 久久综合一本 | 丁香久久激情 | h网站免费在线观看 | 三级av片 | 久草在在线视频 | 国产一级在线看 | 精品中文字幕在线播放 | 韩国av电影在线观看 | 婷香五月 | 国产精品观看在线亚洲人成网 | 91高清免费 | 欧美精品在线观看免费 | 不卡av电影在线 | 成人精品一区二区三区中文字幕 | 精品在线亚洲视频 | 日韩av资源站 | 欧美激情亚洲综合 | 91视频国产免费 | 精品视频99| 亚洲黄色一级电影 | 不卡视频在线 | 97超碰超碰久久福利超碰 | av在线免费观看不卡 | 国产午夜精品理论片在线 | 日韩欧美在线播放 | 日韩免费一区 | 免费在线观看污 | 亚洲欧洲日韩在线观看 | 婷婷丁香自拍 | 日韩有码第一页 | 久草视频在线免费播放 | 精品视频一区在线观看 | 欧美一区二区免费在线观看 | 中文字幕精品www乱入免费视频 | av免费网| 黄色片网站av | 91麻豆精品国产91久久久使用方法 | 久久99国产视频 | 韩国一区二区在线观看 | 久久久精品日本 | 91看片麻豆 | 91一区二区三区在线观看 | 九九视频免费观看视频精品 | 久久精品国亚洲 | 久久国产精品区 | 在线免费性生活片 | 在线中文视频 | 日夜夜精品视频 | 夜夜爽夜夜操 | 亚洲春色成人 | 97天堂网 | 久久久久福利视频 | 2019天天干天天色 | 日韩高清免费在线 | 有码视频在线观看 | 麻豆久久久久久久 | 伊人久久婷婷 | 日韩欧美视频免费在线观看 | 亚洲精品高清一区二区三区四区 | 国产精品一区二区美女视频免费看 | 五月婷婷视频在线 | 久久久久美女 | 国产一区欧美在线 | 国产精品美乳一区二区免费 | 中文字幕在线有码 | 亚洲精品videossex少妇 | 国产一区二区在线免费观看 | 日韩在线观看小视频 | 精品 一区 在线 | 国产一线二线三线性视频 | 久久久久久蜜桃一区二区 | 午夜美女视频 | 欧美日韩高清一区二区 | 国产精品久久久精品 | 欧美一级视频一区 | 日韩免费大片 | 久久不射电影院 | 国产精品久久久久国产精品日日 | 免费在线黄色av | www.亚洲视频.com| 久久国产精品视频 | 国偷自产视频一区二区久 | 人人看人人草 | 久久91久久久久麻豆精品 | 久久精品99国产精品日本 | 国产一区国产二区在线观看 | 亚洲视频资源在线 | 国产精品久久久久免费观看 | 久久激情小说 | 最近更新好看的中文字幕 | 97人人澡人人添人人爽超碰 | 亚洲精品自在在线观看 | 久热超碰| 久久精品人 | 激情五月五月婷婷 | 日韩黄色av网站 | 区一区二区三区中文字幕 | 久久免费精品国产 | 久久精品国产精品亚洲 | 中文字幕婷婷 | 国产97免费 | 国产精品高清免费在线观看 | 精品美女在线观看 | 日韩一二区在线 | 在线中文字母电影观看 | 久久理论影院 | 国产精品久久久久久久久久ktv | 成人av av在线 | 最近中文字幕完整视频高清1 | 国产一区二区影院 | 久久不射网站 | 色噜噜在线观看 | 国产精品丝袜久久久久久久不卡 | 久久久久久久久国产 | 欧美日韩国产在线 | 伊人va | 亚洲h视频在线 | 51久久成人国产精品麻豆 | 日本丰满少妇免费一区 | 国产人成在线视频 | 国产综合精品一区二区三区 | 狠狠色丁香久久婷婷综 | 国产看片网站 | 天天色欧美| 黄色aaaaa| 欧美a级片免费看 | 国产精品色婷婷 | 99视频在线看| 四虎在线视频 | 999久久久久| 久久蜜臀一区二区三区av | 久久久久久久久久久久av | 国产黄色高清 | 91麻豆网站| 91禁在线观看 | 国产高清一区二区 | 中文字幕激情 | 免费看一级特黄a大片 | 国产香蕉av | 黄色大片免费网站 | 三级a视频 | 国产精品a久久 | 人人爱人人舔 | 国产乱对白刺激视频不卡 | 久久99久久99免费视频 | 精品一区二区免费视频 | 国产玖玖在线 | 狠狠色丁香婷婷综合视频 | 色插综合 | 97成人资源 | 中文字幕在线免费观看视频 | 日韩精品欧美一区 | 精品一区二区三区久久 | 一区免费视频 | 久久黄色影院 | 国产精品嫩草在线 | 91av官网| 亚洲 欧美 综合 在线 精品 | 三级免费黄色 | 欧洲成人av| 91av蜜桃 | 色就是色综合 | av免费观看网站 | 91色在线观看视频 | 中文字幕日韩国产 | 99综合久久 | 日韩中文字幕网站 | 00av视频| 国产福利在线免费 | 夜夜躁狠狠躁日日躁 | 国产原创在线视频 | 日韩大片在线播放 | 狠狠狠色丁香综合久久天下网 | 亚洲片在线资源 | a√资源在线| a在线观看视频 | 在线免费黄 | 天天摸天天舔 | 蜜臀av免费一区二区三区 | 国产免费大片 | 午夜在线观看 | 亚洲少妇久久 | 精品国偷自产在线 | 成人午夜精品久久久久久久3d | 色婷婷综合视频在线观看 | 国产专区日韩专区 | 黄色一级在线视频 | 在线观看亚洲国产精品 | 99精品一级欧美片免费播放 | 日韩精品久久久久久中文字幕8 | 久久精品一区二区三区国产主播 | 视频在线观看国产 | 成人精品一区二区三区中文字幕 | а天堂中文最新一区二区三区 | 四虎视频 | 国产99久久九九精品 | 欧美精品久久99 | 国产精品美女久久久久久 | 久久精品资源 | 久久久久免费网站 | 国产免费一区二区三区网站免费 | 亚洲精品中文在线资源 | 国产精品成人久久久久 | 久久久久国产精品免费 | 亚洲欧洲xxxx | 91字幕 | 免费在线黄网 | 91高清视频在线 | 人人看黄色 | 日韩com | 欧美一级片在线 | 日韩在线免费电影 | 久久视频在线观看中文字幕 | 99热亚洲精品 | 96精品高清视频在线观看软件特色 | 亚洲我射av | 午夜av在线电影 | 日韩城人在线 | 久久久久高清毛片一级 | 中文字幕电影在线 | 天天亚洲 | 久久久久久久国产精品视频 | 国产 在线 高清 精品 | aaa亚洲精品一二三区 | 一级大片在线观看 | 久久精品视频在线观看 | 欧美精品久久久久久久久久丰满 | 精品国产一区二区三区久久久久久 | 欧美成人一二区 | 久久成人亚洲欧美电影 | 在线国产91 | 国产精品九九九九九 | 亚洲成人免费 | 亚洲欧美日韩一二三区 | 久草在线视频免费资源观看 | 伊人婷婷色 | 一级黄色片在线 | 国产99精品 | 亚洲精品影视在线观看 | 手机看片中文字幕 | 久久精品系列 | 成在人线av | 免费三及片 | 在线视频日韩精品 | 国产亚洲精品久久久久久 | 91传媒视频在线观看 | 久久色中文字幕 | 最新三级在线 | 久久精品亚洲一区二区三区观看模式 | 久久精品视频在线免费观看 | 国产香蕉久久 | av福利在线 | 欧美成人基地 | 精品国产一区二区三区在线观看 | 亚洲欧洲在线视频 | 国产精品成人一区二区三区吃奶 | 中文电影网 | 欧美日韩一级在线 | 日韩四虎 | 亚洲精品视频网址 | 欧美一区二区三区在线 | 成人av电影免费在线播放 | 婷婷综合导航 | 少妇bbb搡bbbb搡bbbb | 国产久草在线观看 | 久久99在线观看 | 最近免费中文字幕大全高清10 | 久久亚洲电影 | 久久久免费观看 | 91色亚洲| 亚洲老妇xxxxxx| 精品久久久久亚洲 | 欧美日韩国产精品一区二区三区 | 欧美一级日韩免费不卡 | 国产精品网在线观看 | 在线观看视频免费大全 | 日韩午夜三级 | 九九免费在线看完整版 | 国产成人精品在线观看 | 日韩成人在线一区二区 | 在线视频中文字幕一区 | 久久久精品二区 | 久久久美女 | 国产手机视频精品 | 欧美久草视频 | 国产成人av电影在线 | 一区二精品 | 99r在线| 亚洲精品久久久久久中文传媒 | av福利在线免费观看 | 久久亚洲综合国产精品99麻豆的功能介绍 | 亚洲三级网站 | 欧美黄色成人 | 久久综合久久伊人 | 国产精品久久久久免费观看 | 亚洲精品乱码久久久久v最新版 | 91色吧 | 毛片一二区 | 天天操天天舔天天爽 | 欧美精品久久久久久久亚洲调教 | 国产精品刺激对白麻豆99 | 又黄又爽又刺激视频 | 亚洲精品视频网站在线观看 | 国产乱码精品一区二区三区介绍 | 亚洲成人资源网 | 四虎精品成人免费网站 | 欧美一区二区三区特黄 | 最新不卡av | 久久综合中文字幕 | 在线观看视频在线观看 | 日韩av成人在线 | 国产精品18久久久久白浆 | 国产黄在线免费观看 | 蜜臀久久99精品久久久无需会员 | 亚洲欧美国产视频 | 国产一区视频在线观看免费 | 亚洲最快最全在线视频 | 久99久在线| 亚洲精品在线视频播放 | 久久精品波多野结衣 | 天堂久久电影网 | 天天做日日做天天爽视频免费 | 欧美黄色软件 | 国产一区国产二区在线观看 | 欧美一级电影在线观看 | 一级α片免费看 | 免费视频久久久久 | 国产精品国产三级在线专区 | 久草爱| 91电影福利 | 亚洲精品综合一区二区 | 狠狠狠色 | 免费在线看成人av | 一 级 黄 色 片免费看的 | 国产成人一区在线 | a在线免费| 成人在线观看你懂的 | 中文字幕在线观看一区二区 | 国产精品99久久久久的智能播放 | 欧美最新大片在线看 | 成人免费观看在线视频 | 五月天狠狠操 | 天天操天天干天天操天天干 | 99久久这里有精品 | 黄色在线观看污 | 久久婷婷网 | 国产亚洲一级高清 | 久久久久国产精品厨房 | 久久都是精品 | 91亚洲在线 | 国产自在线 | 521色香蕉网站在线观看 | 国产精品免费观看久久 | 99re8这里有精品热视频免费 | 久久久999| 91资源在线视频 | 免费看国产精品 | 欧美精品久久久久a | 92精品国产成人观看免费 | 欧美国产91 | 天天曰天天爽 | 最新国产精品久久精品 | 亚洲精品成人av在线 | 伊人久久在线观看 | 精品成人久久 | 国产五月婷婷 | 精品视频久久 | 欧美成a人片在线观看久 | 国产人免费人成免费视频 | 日韩在线观看一区二区三区 | 亚洲美女视频在线观看 | 麻豆精品视频在线 | 香蕉在线观看视频 | 超碰在线网 | 精品国产一区二区三区久久久 | av网站播放| 丁香久久激情 | 午夜精品99久久免费 | 又黄又刺激的网站 | 久久久久久久久久网 | 亚州精品在线视频 | 免费成人av在线看 | 人人干天天干 | 日本爱爱免费 | 91精品在线麻豆 | 玖玖爱国产在线 | 亚洲成人频道 | 蜜臀aⅴ国产精品久久久国产 | 中文字幕欧美日韩va免费视频 | 欧美日韩激情视频8区 | 午夜精品久久久久久久久久久 | 国产区精品在线观看 | 国产二级视频 | 99视频精品全国免费 | 日韩欧美网址 | 999视频精品 | 亚洲综合精品在线 | 亚洲国产成人久久 | 精品国产电影 | av免费看看| 8x成人在线 | 永久免费的av电影 | 中文字幕在线中文 | 2019久久精品| 日韩理论电影网 | 国产精品一区二区免费看 | 日韩专区在线 | 色婷av | 美女网站视频免费黄 | 丁香婷婷色 | 精品不卡视频 | 激情文学丁香 | 久99久精品视频免费观看 | 亚洲精品黄网站 | 久久你懂得 | 久久精品观看 | 韩国一区视频 | a级片韩国 | 九九激情视频 | www色网站| 久草网站| 久久精品视频中文字幕 | 国产综合在线观看视频 | 黄网站www | 黄色影院在线免费观看 | 欧美大荫蒂xxx | 18久久久 | 天天操导航 | 成人黄色大片在线免费观看 | 欧美日韩午夜爽爽 | 亚洲精品国产精品国产 | 久久影视一区二区 | 亚洲人成在线电影 | 精品综合久久久 | 2022久久国产露脸精品国产 | 5月丁香婷婷综合 | 能在线观看的日韩av | 日韩免费高清在线观看 | 国产成人久久精品一区二区三区 | 日韩精品免费在线播放 | 热久久免费国产视频 | 九九有精品 | 波多野结衣视频一区 | 在线观看 国产 | 亚洲视频中文 | 亚洲天堂网在线播放 | 丁香网婷婷 | 中文字幕日本在线观看 | 国产黄色a | 国产精品国产亚洲精品看不卡15 | 99精品国产免费久久 | 久久久久久久久免费 | www.午夜视频 | 欧美 亚洲 另类 激情 另类 | 久久精品视频观看 | 久久99国产精品 | 午夜久久久久久久久 | 久久99电影 | 国产精品激情在线观看 | 久久9999久久免费精品国产 | 国产精品久久久久免费 | 六月色婷婷 | 国产成人a亚洲精品v |