稍微谈谈SQL

小V老师.

做数据做了很多年，跟大家聊聊SQL，一个简单又不简单的技术。
说到SQL， 很多CS专业的笑了，觉得这个好简单，记得大二的时候我们学数据库，先从范式讲起，讲到数据库调优，其中的课程作业就是SQL练习题，以至于后来面试，问SQL我都很自信，不过知道的越多，发现SQL说简单也简单，说难也难。
简单是因为其语法，事实上，你只要掌握SELECT,JOIN等基本语法，基本80%的SQL任务都能完成了，说它不简单其实是因为现在的IT变化太多，数据库也很多，语言的背后是各种IT产品和服务，因此需要你有比较宽阔的知识面，很多面试的时候表面上是考SQL，实际上是看你对各种数据库产品的掌握程度，以及一些细节
最初级的关于SQL，一般就是关系型数据库，你有能力可以建立跟关系型数据库的SQL连接，然后执行SQL语句取得数据，这个是属于初阶的，但很实用，很多银行工作的人，如果你已经烦透了数据都是从EXCEL准备好的，或者是别人给你准备好的，但自己的工作进度经常被人牵制着，你可以学学SQL，自己从数据库取数据，你要学会的无非是如何连接数据库，以及执行基本的数据查询。很简单，但很实用。难点可能在于不同的数据库产品会有些不同，比如你用EXCEL连ORACLE还是微软的SQL SERVER，比如你是用ODBC连还是JDBC连等等，里面会有些细节的难点
上面的SQL，更多是简单的应用，稍微复杂点的SQL，就涉及到ETL过程(数据整理和清理）了，ETL也是取决于你公司的IT架构的，有些公司的ETL是基于大数据，基于hadoop的，一般这样的公司相对比较大，类似国内的阿里巴巴等都是这类技术，大量的数据人员本质上在底层维持海量的数据，写不同的SQL，包括python脚本来维持自动化的ETL工作（数据清理工作）。这里面的难点也是因为我们有太多的可实现产品，比如SQL SERVER也有自己的ETL 流程，ORACLE也有，有些ETL甚至不用你写SQL，但即使你不用写，你也要懂里面的逻辑，这个层次的SQL，往往会和大量的脚本语言结合起来，完成自动化的过程
另外个稍微复杂的SQL就是需要加入商业逻辑了，这部分往往是分析师写SQL，甚至建模，都是需要将原始数据准备成我们需要的数据，而且SQL也可以写一些简单的数据模型，比如亚马逊的推荐主要基于ITEM BASED协同过滤，事实上，这样的算法是可以用SQL来实现的。另外，在做分析的时候，我们很多时候需要理解商业规则，并把这些部分都体现在SQL语句中，这时候，往往一个SQL语句是不行的，我们往往会建立大量的临时表，最后那张表才是我们真正需要的，建立模型往往是两者结合的，用SQL产生所需要的数据，然后部署的时候再用某些算法。
其实SQL本质上是一个取数的标准化工具，这个工具是通往关系型数据库的唯一选择，也因此非常重要，因为我们的数据大多数是基于关系型数据库的，可随着IT的发展，我们越来越多出现一些其他可选择的数据库，类似现在比较火的NoSQL数据库就是一个例子，事实上，虽然它并不支持标准的SQL语句，名字也叫做NoSQL来撇清和SQL的关系，可与我看来，本质都是访问数据库的工具，很多概念也有相应的对应，比如NoSQL里面叫做collection，对应到SQL就是table。 学习SQL，再深入就要了解其他数据库的种类，以及最近的热点。

小V老师.

对了，顺便说下，有兴趣讨论数据包括数据分析的，请加我们的QQ群：296434596

FOR.

正有兴趣学习呢，如果是个新手，有什么简单而实用的教材可以参考呢？

Janet.

握手，我也用了很多年了，现在主要用在Teradata 和SAS里面。

shareddesk.

写得不错 思路很清楚啊 学习了

小V老师.

FOR 发表于 2014-6-13 23:12

正有兴趣学习呢，如果是个新手，有什么简单而实用的教材可以参考呢？
其实教材因为太多了，每个领域其实都有可以深挖的东西，比如你做TERADATA，你可以看这家公司写的文档，肯定是最佳文档，因为这家公司对自家产品肯定最熟悉，如果你做SQL SERVER，微软也有很多书籍，每本书都几百页
但有没有一本书深入浅出把各种都介绍一遍的，我看来没有，因为这种大而全的书很难卖，定位不清楚，因此从个人角度，只能各种技术都自己去接触下，去学习下，所谓的没有书本的学习，因此，公司有时考察一个人，不仅仅是你学会了什么，更多是你的学习能力，学习力在IT行业非常重要。

FOR.

小V老师 发表于 2014-6-14 20:59

其实教材因为太多了，每个领域其实都有可以深挖的东西，比如你做TERADATA，你可以看这家公司写的文档， ...
谢谢啦，我不是做IT的，是会计。想学习一下SQL来提高自己的市场价值。

zheng8001.

越来越多人现在对数据分析感兴趣啦

dellachen.

小V老师 发表于 2014-6-13 22:21

对了，顺便说下，有兴趣讨论数据包括数据分析的，请加我们的QQ群：296434596 ...
会计专业背景，现在做系统funtional/business analyst，学了一点sql的皮毛，考了oracle sql expert，对工作已经有很大的帮助了。想探讨一下进阶的话应该注重哪个方向

小V老师.

"

进阶有很多方向，做ba本质是通过数据给商业决策，因此商业逻辑的培养非常重要，有机会可以去看看mba课程，从技术上，底层的数据依然有很多可以发挥的空间，你可以学些脚本语言，比如python,举个例子，你在公司是做seo的，主要分析ga数据，通常都是通过客户端直接看ga reports，有时把数据download下来，但如果你掌握了脚本语言，每天定时下载到数据库，你会有更多有趣的数据，灵活性和功能性大大提高
另外，有空学学r，往统计分析上走走，也有不少收获