Linux 黑话解释
|
以无任何开发经验的HR举例，他只需要进行数据准备、创建模型、模型训练和应用部署四个操作步骤，即可以完成AI模型的训练和部署，帮助公司解决人力不及的各种问题。 简单操作的背后则是百度先进AI技术的支持。例如，在高精度的模型效果方面，EasyDL预置了百度独家超大规模数据训练的预训练模型，在视觉任务中，图像分类训练任务内置百度基于海量互联网数据，包括10万+分类、6500万图片训练的超大规模预训练模型，平均精度可提升3.24%-7.73%;物体检测训练任务内置百度基于800+标签、170万图片，1000万+检测框训练的超大规模物体检测预训练模型，平均精度可提升1.78%-4.53%。 在智能数据服务方面，EasyData是业界首个专注AI开发场景推出的一站式数据处理服务，目前已经提供数据采集、清洗、标注、增强等完善的数据服务，可以助力开发者高效获取AI开发所需的高质量数据。 在部署方案的丰富性上，EasyDL目前提供了公有云API、设备端SDK、本地服务器部署、软硬一体部署四种方案，充分满足不同行业在部署上的需求，其中公有云API可以支持弹性扩缩容，并使用在线数据闭环手动挖掘识别有错误的数据，有效持续迭代提升模型效果;本地服务器部署支持一键打包、终身设备授权，提供全面安全保障;设备端SDK目前EasyDL提供了最为广泛的端模型适配服务，支持了15+芯片类型，4大常用操作系统。在软硬一体方案部署上，EasyDL提供了6款软硬一体方案，支持专项适配与加速，覆盖高中低全矩阵，模型识别速度可提升10倍。 扩展场景应用，全力推进AI落地
市场需求千变万化，企业应用各不相同! 【建议】（1）避免在更新比较频繁、区分度不高的列上单独建立索引 解读：区分度不高的列单独创建索引的优化效果很小，但是较为频繁的更新则会让索引的维护成本更高。 【强制】（2） JOIN的表不允许超过五个。需要JOIN的字段，数据类型必须绝对一致; 多表关联查询时，保证被关联的字段需要有索引 解读：太多表的JOIN会让Mysql的优化器更难权衡出一个“最佳”的执行计划（可能性为表数量的阶乘），同时要注意关联字段的类型、长度、字符编码等等是否一致。 【强制】（3）在一个联合索引中，若第一列索引区分度等于1，那么则不需要建立联合索引 解读：索引通过第一列就能够完全定位的数据，所以联合索引的后边部分是不需要的。 【强制】（4）建立联合索引时，必须将区分度更高的字段放在左边 解读：区分度更高的列放在左边，能够在一开始就有效的过滤掉无用数据。提高索引的效率，相应我们在Mapper中编写SQL的WHERE条件中有多个条件时，需要先看看当前表是否有现成的联合索引直接使用，注意各个条件的顺序尽量和索引的顺序一致。 【建议】（5）利用覆盖索引来进行查询操作，避免回表 解读：覆盖查询即是查询只需要通过索引即可拿到所需DATA，而不再需要再次回表查询，所以效率相对很高。我们在使用EXPLAIN的结果，extra列会出现："using index"。这里也要强调一下不要使用“SELECT * ”，否则几乎不可能使用到覆盖索引。 【建议】（6）在较长VARCHAR字段,例如VARCHAR(100)上建立索引时，应指定索引长度，没必要对全字段建立索引，根据实际文本区分度决定索引长度即可 解读：索引的长度与区分度是一对矛盾体，一般对字符串类型数据，若长度为20的索引，区分度会高达90%以上，则可以考虑创建长度例为20的索引，而非全字段索引。例如可以使用SELECT COUNT(DISTINCT LEFT(lesson_code, 20)) / COUNT(*) FROM lesson;来确定lesson_code字段字符长度为20时文本区分度。 【建议】（7）如果有ORDER BY的场景，请注意利用索引的有序性。ORDER BY最后的字段是联合索引的一部分，并且放在索引组合顺序的最后，避免出现file_sort的情况，影响查询性能。 解读：
【建议】（8）在where中索引的列不能某个表达式的一部分，也不能是函数的参数 解读：即是某列上已经添加了索引，但是若此列成为表达式的一部分、或者是函数的参数，Mysql无法将此列单独解析出来，索引也不会生效。 【建议】 （9）我们在where条件中使用范围查询时，索引最多用于一个范围条件，超过一个则后边的不走索引 解读：Mysql能够使用多个范围条件里边的最左边的第一个范围查询，但是后边的范围查询则无法使用。 【建议】 （10）在多个表进行外连接时，表之间的关联字段类型必须完全一致
解读：当两个表进行Join时，字段类型若没有完全一致，则加索引也不会生效，这里的完全一致包括但不限于字段类型、字段长度、字符集、collection等等。 （编辑：甘孜站长网） 【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容! |
