web开发框架,Python主要知识点总括

在做接口自动化测试的时候,总会境遇,因三番五次超时等错误导致,接口脚本退步。

  1. __new__.__init__有别于,如何兑现单例格局,有如何亮点
    __new__是2个静态方法,__init__是1个实例方法
    __new__归来贰个创办的实例,__init__怎么着都不回来
    __new__再次来到八个cls的实例时前边的__init__才能被调用
    当创制二个新实例时调用__new__,初阶化1个实例时调用__init__
  2. 浓度拷贝
    浅拷贝只是增添了一个指南针指向多个存在的地方,而深拷贝是扩大1个指针并且开发了新的内部存款和储蓄器,那一个扩展的指针指向这几个新的内部存款和储蓄器,
    行使浅拷贝的景况,释放内部存款和储蓄器,会自由同一内部存款和储蓄器,深拷贝就不会出现释放同1内部存款和储蓄器的错误

Decorator是叁个经文的结构式设计形式,有着丰富常见的选取。在经典的Design
Patterns:Elements of Reusable Object-Oriented
Software
中,它的企图被描述为:动态地为二个对象添加额外的义务与作用。对于扩大作用,装饰器提供了比子类化越来越灵活的代表方案。
在广大编制程序语言中,比如Python,在语法上就提供了装饰器的支撑,能够透明地利用装饰器。而Java则相比较繁琐一些,通过Decorator接口的各项完成,针对被decorate的零部件接口的实现来点缀。本文介绍壹种基于annotation的decorator达成,就算不能够达成如python1般的透明使用装饰器,在好几场景下,也是1种灵活的落到实处形式。

  后台权限和后面部分框架的改造终于形成了,小白也终于能够放下紧悬着的心,能够轻松一下了。那不他为了多谢老菜,又找老菜聊了肆起。

官方给出的点子:

通过decorator实现refactor_test

我们想要通过装饰器完成如此的1个测试工具:大家重新完成了1个函数A,原函数是B。在调用函数A时,能够活动运维函数B,对双边的结果作比较,假使不对等,将方今的条件音讯输出到日志中,以便追查。同时,不应现对函数的平常化使用。
那里的函数,大家渴求是幂等的无副效率的
下列全体的代码在这里。

  小白:谢谢老大的支援,系统终于改造完结了,可以出色放松一下了。

max_retries=5 出错重试5次
注意的是,这个只对DNS,连接错误进行重试。

    from requests.adapters import HTTPAdapter
    s = requests.Session()
    s.mount('http://',HTTPAdapter(max_retries=5))
    s.mount('https://',HTTPAdapter(max_retries=5))
    s.get('https://www.baidu.com')
注意赋值和浅拷贝的区别
如l1 = ['a','b','c'] # 这段代码是是对l1 的初始化操作,开辟一个内存空间存储列表,l1 这个变量指向这个列表
l2 = l1 # 这属于赋值操作
# 如果更改l1,l2也会一起改变,因为两个变量指向的是同一个位置
import copy
浅拷贝:不管多么复杂的数据结构,浅拷贝都只会copy一层
copy.copy(...),在多层嵌套时可能会一个数据可改变可能会影响其他的数据.
深拷贝:深拷贝会完全复制原变量相关的所有数据,在内存中生成一套完全一样的内容,在这个过程中我们对这两个变量中的一个进行任意修改都不会影响其他变量.
深拷贝就是在内存中重新开辟一块空间,不管数据结构多么复杂,只要遇到可能发生改变的数据类型,就重新开辟一块内存空间把内容复制下来,直到最后一层,不再有复杂的数据类型,就保持其原引用。这样,不管数据结构多么的复杂,数据之间的修改都不会相互影响
copy.deepcopy(...)

Python的decorator

运用python能够万分自由地完结装饰器@refactor_test。代码如下(GitHub):

import functools
import logging

LOGGER = logging.getLogger('refactor_test')

def refactor_test(comp_func):
    def decorator(func):
        @functools.wraps(func)
        def wrapper(*args, **kws):
            comp_res = comp_func(*args, **kws)
            res = func(*args, **kws)
            if res != comp_res:
                message = "not equals for function:{} from {} 
                        with arguments:{}-{}".format(func.__name__, 
                                comp_func.__name__, args, kws)
                LOGGER.debug(message)
                print(message)
            return res
        return wrapper
    return decorator

def refactor_from(message):
    return message

@refactor_test(refactor_from)
def refactor_to0(message):
    return message

@refactor_test(refactor_from)
def refactor_to1(message):
    return "!" + message

if __name__ == '__main__':
    refactor_to0('Hello python!')
    refactor_to1('Hello python!')

那是丰盛经典的python
decorator完结,是全然透明的,调用者无需关怀到大家在调用时候实施了3个refacor_test的过程。refactor_to0是一个符合须要的重构完成,而refactor_to1不是。

  老菜:web开发框架,Python主要知识点总括。呵呵,对于后台管理体系机能,你以为已经告竣了吧?未有何样遗漏的吧?

 

  1. HTTP/IP相关磋商,分别位居哪层
    http协议是超文本传输协议,http协议是基于TCP/IP通讯协议来传递数据
    http协议工作与c/s架构上,浏览器作为http的客户端通过URL向http服务端即web服务器发送所用请求。web服务器收到全部请求后,向客户端发送响应音信,
    http特点是短连接,无状态
    地址栏键输入U猎豹CS六L,按下回车之后经历了何等?
    一.浏览器向DNS服务器请求解析该U中华VL中的域名所对应的IP地址
    二.解析出IP地址后,依据IP地址和暗许端口80,和服务器建立TCP连接
    叁.浏览器发出读取文件的http请求,该请求报文作为TCP一次握手的第四个报文的数量发送给服务器
    四.服务器对浏览器请求做出响应,并把相应的html文件发送给浏览器
    5.释放TCP连接
    陆.浏览器将该HMTL渲染并出示内容

  2. web开发框架,Python主要知识点总括。TCP/UDP区别
    TCP协议是面向连接,保险高可信赖性(数据无遗失,数据无失序,数据无不当,数据无重复达到)传输层协议
    UDP:数据丢失,无秩序的传输层协议(qq基于udp协议)

  3. webscoket
    websocket是依照http协议的,可持续化连接
    轮询:浏览器每隔几秒就发送三回呼吁,询问服务器是还是不是有新音讯
    长轮询:客户端发起连接后,要是未有音信,就径直不回来response给客户端,直到有新闻重临,重回完事后,客户端再一次发起连接

  4. RabbitMQ:
    劳动器端有Erlang语言来编排,辅助各样客户端,只会ajax,用于分布式系统中储存转载信息,在易用性、扩张性、高可用性的地方不俗。
    connection是RabbitMQ的socket连接,它包裹了socket部分连锁磋商逻辑
    connectionFactroy为connection的炮制工厂
    channel是我们与RabbitMQ打交道的最重大的三个接口,超过2/肆的业务操作是在chaanel那么些接口中做到,蕴涵定义Queue、定义Exchange、
    绑定Queue与Exchange,发表音信等

  5. 装饰器
    调用装饰器其实是一个闭包函数,为其余函数添加附加功效,不改动被改动的源代码和不改动被修饰的主意,装饰器的再次来到值也是三个函数对象。
    例如:插入日志、品质测试、事物处理、缓存、权限验证等,有了装饰器,就能够抽离出多量与函数功用自身无关的一模壹样代码并继承起用。

  6. 闭包
    一.亟须有一个内嵌函数
    贰.内嵌函数必须引用外部函数的变量(该函数包含对外成效域而不是大局功效域名字的引用)
    叁.外部函数的重返值必须是内嵌函数

  7. 迭代器与生成器
    迭代可迭代对象对应iter(方法)和迭代器对应next(方法)的多少个历程
    生成器:包含含有yield这几个根本字,生成器也是迭代器,调动next把函数变成迭代器。

  8. classmethod,staticmethod,property
    类格局:将类的函数转换来类方法,函数上装修@classmethod会将函数的自发性传值参数改成cls
    静态方法:此方式也就是给类扩大1个效益,将类内的函数实例化,给类或对象使用,此时类内的函数正是日常函数,不管是类依旧实例化的对象都得以接纳
    实例化:类的实例化就会生出一个实例(对象),能够知道为类()把虚拟的事物实例化,获得切实存在的值

  9. 常用的状态码
    www.5929.com,200–服务器成功重返网页
    20四–请求收到,但回来新闻为空
    30四–客户端已经施行了GET,但文件未变动
    400–错误请求,如语法错误
    403–无权力访问
    40四–请求的页面不存在
    500–服务器发生内部错误

  10. 多进程,多线程,协程,GIL
    GIL:全局解释器锁,是锁在cpython解释器上,导致同临时刻,同一进度只好有三个线程被实践
    多进度:多进度模块multiprocessing来达成,cpu密集型,IO总计型能够用多进程
    二十八线程:三十二线程模块threading来落到实处,IO密集型,102线程能够进步作用
    协程:依赖于geenlet,对于10二线程应用。cpu通过切片的措施来切换线程间的履行,蒙受IO操作自动切换,线程切换时需求耗费时间,
    而协成好处未有切换的开支,未有锁定概念。
    进度:是能源管理单位,实行是互相独立的,实现产出和产出
    线程:是小小的的实践单位,线程的面世为了降低上下文切换的损耗,提供系统的并发性

  11. IO多路复用/异步非阻塞
    IO多路复用:通过1种机制,能够监听四个描述符 select/poll/epoll
    select:连接数受限,查找配对速度慢,数据由基础拷贝到用户态
    poll:革新了连接数,然而依然查找配对速度慢,数据由基础拷贝到用户态
    epoll:epoll是linux下多路复用IO接口,是select/poll的增强版,它能肯定狠抓程序在多量面世连接中唯有少量活跃的图景下的类别CPU利用率
    异步非阻塞:异步映未来回调上,回调就是有音讯重返时告诉一声儿进度展开处理。非阻塞就是不等待,不须求进程等待下去,
    继续执行别的操作,不管别的进度的地方。

  12. PEP8规范,规范的便宜是什么样?
    一.缩进:伍个空实现缩进,尽量不行使Tab
    二.行:没行最大尺寸不超越7九,换行能够利用反斜杠
    3.命名专业:
    四.注脚规范:

  13. range-and-xrange
    都在循环时应用,xrange内部存款和储蓄器品质越来越好,xrange用法与range完全相同,range1个生成list对象,xrange是生成器

  14. with上下文机制原理
    enterexit,上下文物管理理协议,即with语句,为了让1个对象包容with语句,必须在那个指标类中声称enterexit方法,
    运用with语句的目标就是把代码块放入with中履行,with结束后,自动完毕清理工科作,无须收到干预

  15. 经典类、新式类
    经典类服从:深度优先,python第22中学
    新式类遵循:广度优先,Python三中

  16. 有未有一个工具得以扶持查找Python的bug和拓展静态的代码分析?
    PyChecker是1个Python代码的静态分析工具,它能够扶持寻找Python代码的bug,会对代码的复杂度和格式提出警示,
    Pylint是此外一个工具得以举行codingstandard检查

  17. Python是怎么着进展内存管理的

    • 对象引用计数:
      引用计数增添的意况:
      来维系追踪内部存款和储蓄器中的靶子,全部指标都用引用计数,叁个目的分配2个新名称将其放入1个器皿中(列表,字典,元祖)引用计数收缩的图景:
      使用del语句对指标外号展现的绝迹
      引用超出成效域或被重新赋值
      sys.getrefcount()函数能够获取对象的日前援引计数
    • 标志-清除机制
    • 分代技术

Java实现

是因为java语法的限制,不恐怕像动态语言python一样晶莹地为给定方法添加decorator。当然能够依据经典的规划达成,如下图所示。
[图片上传战败…(image-伍dfcd陆-15拾413037玖23)]

对于大家想要消除的题材,在python中,通过装饰器语法,在编码时,就钦命了由重构后措施到重构前方法的炫耀。而只要根据守旧的不二秘诀达成,大家首先,供给有限支持3个重构后的格局到重构在此以前方法的映射表,此外,大家不可能为每一个重构的法子都编写制定贰个装饰器方法,不够灵活,过于繁琐。所以,大家要求选用java的反光机制,动态调用方法。第3点也是很麻烦的,恐怕写到配置文件,或然hard
code到代码里,都是极糟糕的。我们通过java的annotation申明功能来兑现。Oracle的官方tutorial中,有对java
annotations相比密切的验证。大家来看看哪些贯彻。

RefactorUtil.java
(GitHub):

import org.slf4j.Logger;

import java.lang.annotation.ElementType;
import java.lang.annotation.Retention;
import java.lang.annotation.RetentionPolicy;
import java.lang.annotation.Target;
import java.lang.reflect.InvocationTargetException;
import java.lang.reflect.Method;
import java.util.AbstractMap;
import java.util.Map;

public class RefactorTestUtil {
    private static Logger LOGGER = null;

    public interface Equality <T, S> {
        public boolean isEqual(T obj0, S obj1);
    }

    public static void setLogger(Logger logger) {
        LOGGER = logger;
    }

    @Target( ElementType.METHOD )
    @Retention( RetentionPolicy.RUNTIME )
    public @interface RefactorTest {
        String classRef();
        String methodName();
        int[] paramClassIndex2ThisParams() default {};
    }

    private static void testFailLog(String message, Map.Entry<Class<?>, String> migTo, Map.Entry<Class<?>, String>
            migFrom, Object ... params) {
        String argsStr = null;
        if (params != null && params.length > 0) {
            StringBuilder args = new StringBuilder();
            for (Object param : params) {
                args.append(param).append(":").append(param.getClass().getSimpleName());
                args.append(",");
            }
            if (args.length() > 0) {
                argsStr = args.substring(0, args.length() - 1);
            }
            else {
                argsStr = args.toString();
            }
        }
        String logStr = String.format("[MigrationTest]%s-TO(%s)-FROM-(%s)-ARGS(%s)", message, migTo.toString(),
                migFrom.toString(), argsStr);

        if (LOGGER != null) {
            LOGGER.error(logStr);
        }
        else {
            System.err.println(logStr);
        }
    }

    public static <T> T decorateFunctionWithRefactorTest(Class<?> cls, String method, Object ... params) throws
            NoSuchMethodException, InvocationTargetException, IllegalAccessException {
        return decorateFunctionWithRefactorTest(cls, method, new Equality<T, Object>() {
            public boolean isEqual(T obj0, Object obj1) {
                return obj0.equals(obj1);
            }
        }, params);
    }

    public static <T, S> T decorateFunctionWithRefactorTest(Class<?> cls, String method, 
            Equality<T, S> equals, Object... params) throws NoSuchMethodException,   
            InvocationTargetException, IllegalAccessException {
        Method refactorTo = TypeUtil.getClassMethodWithNotAccurateTypedParams(cls, method,
                 params);
        if (refactorTo == null) {
            throw new NoSuchMethodException(String.format("There is no method %s in class 
                    %s", method, cls
                    .getSimpleName()));
        }

        T toResult = (T) refactorTo.invoke(null, params);

        RefactorTest refactorAnno = refactorTo.getAnnotation(RefactorTest.class);
        String refactorFromCls =  refactorAnno.classRef();
        String refactorFromMethod = refactorAnno.methodName();
        int[] paramClassesIndex = refactorAnno.paramClassIndex2ThisParams();

        try {
            Class<?> refactorFromClass = ClassLoader.getSystemClassLoader()
                    .loadClass(refactorFromCls);


            Object[] fromParams = null;
            if (paramClassesIndex != null && paramClassesIndex.length > 0) {
                fromParams = new Object[paramClassesIndex.length];
                for (int i = 0; i < paramClassesIndex.length; i ++) {
                    fromParams[i] = params[paramClassesIndex[i]];
                }
            }
            else {
                fromParams = params;
            }

            Method refactorFrom = TypeUtil.getClassMethodWithNotAccurateTypedParams
                    (refactorFromClass, refactorFromMethod,
                    fromParams);
            if (refactorFrom == null) {
                testFailLog("No refactor-from method found", new AbstractMap.
                        SimpleEntry<Class<?>, String>(cls, method)
                        , new AbstractMap.SimpleEntry<Class<?>,String>
                        (refactorFromClass, refactorFromMethod), params);
                return toResult;
            }

            S fromResult = (S) refactorFrom.invoke(null, fromParams);

            if (! equals.isEqual(toResult, fromResult)) {
                testFailLog("Not equal after refactoring", new AbstractMap.SimpleEntry
                        <Class<?>, String>(cls, method)
                        , new AbstractMap.SimpleEntry<Class<?>, String>
                        (refactorFromClass, refactorFromMethod), params);
            }


        } catch (ClassNotFoundException e) {
            testFailLog("No refactor-from Class found", new AbstractMap.SimpleEntry
                    <Class<?>, String>(cls, method), new AbstractMap.SimpleEntry<Class<?>,  
                    String>(null, refactorFromMethod), params);

        } finally {
            return toResult;
        }
    }
}

RefactorTestUtil.decorateFunctionWithRefactorTest()方法通过传播对应类与办法名,还有参数列表,通过RefactorTest评释获取该方法对应重构前方法,动态相比三遍调用的结果是不是一律,决定是或不是计入日志。
@interface
RefactorTest是2个表明的宣示,再待申明的主意前添加@RefactorTest(…),通过八个属性classRef,methodName,paramClassIndex二ThisParams来给定重构前方法及调用参数的不对齐难点。
通过注明和反光大家兑现了这么些效果,而鉴于java反射的限制,对于参数列表的档次不是办法签名中参数列表的连串完全相称无法找到鲜明的秘诀,笔者完成了TypeUtil,提供了简短的动态机制,找到呼应措施。比如size(Collection)方法,再盛传一个Set时,仅仅经过java的反射API,不能找到size(Collection)方法。

TypeUtil.java(GitHub):

import java.lang.reflect.Method;
import java.util.ArrayList;
import java.util.LinkedList;
import java.util.List;

public class TypeUtil {
    public static boolean isMatchedBoxingType(Class<?> cls0, Class<?> cls1) {
        if (cls0 == null || cls1 == null) {
            return false;
        }
        if (! cls0.isPrimitive() && ! cls1.isPrimitive()) {
            return cls0.equals(cls1);
        }
        if (cls0.isPrimitive() && cls1.isPrimitive()) {
            return cls0.equals(cls1);
        }

        Class<?> primitive = cls0.isPrimitive() ? cls0 : cls1, boxing = cls1.isPrimitive() ? cls0 : cls1;

        if (primitive.equals(int.class)) {
            return boxing.equals(Integer.class);
        }
        if (primitive.equals(short.class)) {
            return boxing.equals(Short.class);
        }
        if (primitive.equals(float.class)) {
            return boxing.equals(Float.class);
        }
        if (primitive.equals(double.class)) {
            return boxing.equals(Double.class);
        }
        if (primitive.equals(boolean.class)) {
            return boxing.equals(Boolean.class);
        }
        if (primitive.equals(long.class)) {
            return boxing.equals(Long.class);
        }
        if (primitive.equals(char.class)) {
            return boxing.equals(Character.class);
        }
        if (primitive.equals(byte.class)) {
            return boxing.equals(Byte.class);
        }
        return false;
    }

    private static boolean isSubClassOf(Class<?> subCls, Class<?> superCls) {
        if (subCls == null || superCls == null) {
            return false;
        }
        if (superCls.equals(Object.class)) {
            return true;
        }
        if (superCls.isInterface() && ! subCls.isInterface()) {
            for (Class<?> interf : subCls.getInterfaces()) {
                if (interf.equals(superCls)) {
                    return true;
                }
            }
            return false;
        }
        Class<?> cls = subCls;
        for (; cls != null && ! cls.equals(superCls); cls = cls.getSuperclass());
        return cls != null;
    }

    public static Method getClassMethodWithNotAccurateTypedParams(Class<?> cls, String methodName, Object ...
            params) {
        if (cls == null || methodName == null) {
            return null;
        }

        Class<?>[] paramClasses = new Class<?>[params.length];
        int i = 0;
        for (Object param : params) {
            paramClasses[i++] = param.getClass();
        }

        Method method = null;
        try {
            method = cls.getMethod(methodName, paramClasses);
        } catch (NoSuchMethodException e) {
            Method[] methods = cls.getMethods();

            List<Method> capableMethods = new ArrayList<Method>();
            for (Method candidateMethod : methods) {
                if (! candidateMethod.getName().equals(methodName)) {
                    continue;
                }
                if (! candidateMethod.isVarArgs() && candidateMethod.getParameterTypes().length != params.length) {
                    continue;
                }

                Class<?>[] methodParamClasses = candidateMethod.getParameterTypes();
                boolean found = true;
                for (int j = 0; j < methodParamClasses.length; j ++) {
                    Class<?> methodParamClass = methodParamClasses[j];
                    if(! TypeUtil.isInstanceOf(methodParamClass, params[j])) {
                        found = false;
                        break;
                    }
                }

                if (found) {
                    capableMethods.add(candidateMethod);
                }
            }

            if (capableMethods.size() == 1) {
                method = capableMethods.get(0);
            }
            else if (capableMethods.size() > 1) {
                for (int pi = 0; pi < params.length; pi ++) {
                    Class<?> bottom = Object.class;
                    int mindex = 0;
                    int bottomCount = 0;
                    for (int mi = 0; mi < capableMethods.size(); mi ++) {
                        Method m = capableMethods.get(mi);
                        Class<?> pclass = m.getParameterTypes()[pi];
                        if (pclass.equals(bottom) || isMatchedBoxingType(pclass, bottom)) {
                            bottomCount ++;
                            continue;
                        }
                        if (isSubClassOf(pclass, bottom)) {
                            bottom = pclass;
                            mindex = mi;
                            bottomCount = 1;
                        }
                    }
                    if (bottomCount < capableMethods.size() && bottomCount > 0) {
                        method = capableMethods.get(mindex);
                        break;
                    }
                }
            }
        }
        return method;
    }

    public static boolean isInstanceOf(Class<?> cls, Object instance) {
        if (cls == null) {
            return false;
        }

        if (instance == null) {
            return true;
        }

        if (cls.isPrimitive()) {
            Class<?> insType = instance.getClass();
            return isMatchedBoxingType(cls, insType);
        }
        else if (cls.isArray()) {
            Class<?> insType = instance.getClass();
            if (! insType.isArray()) {
                return false;
            }
            Class<?> cls0 = cls.getComponentType(), cls1 = insType.getComponentType();
            if (isMatchedBoxingType(cls0, cls1)) {
                return true;
            }
        }
        return cls.isInstance(instance);
    }
}

例如大家有伍个方法:

public class Util {
    public static String refactorFrom(String message, int time) {
        return message + "(" + time + ")";
    }

    @RefactorTestUtil.RefactorTest(
        classRef = "Util",
        methodName = "refactorFrom"
    )
    public static String refactorTo0(String message, int time) {
        return message + "(" + time + ")";
    }

    @RefactorTestUtil.RefactorTest(
        classRef = "Util",
        methodName = "refactorFrom",
        paramClassIndex2ThisParams = {1, 0}
    )
    public static String refactorTo1(int time, String message) {
        return message + "(" + time + ")";
    }

    @RefactorTestUtil.RefactorTest(
        classRef = "Util",
        methodName = "refactorFrom"
    )
    public static String refactorTo2(String message, int time) {
        return message + "[" + time + "]";
    }

refactorTo0, refactorTo1,
refactorTo2都以重构自refactorFrom。个中refactorTo1更换了参数类型的次第,使用了paramClassIndex2ThisParams参数。而refactorTo贰是3个会被告知错误的重构函数。大家做如下的测试:

public RefactorTestUtilTest {
    @Test
    public void testDecorateFunctionWithRefactorTest() {
        String message = "OK";
        int time = 3;

        assertEquals(message + "(" + time + ")", RefactorUtil.
                decorateFunctionWithRefactorTest(Util.class, "refactorTo0", message, time);
        assertEquals(message + "(" + time + ")", RefactorUtil.
                decorateFunctionWithRefactorTest(Util.class, "refactorTo1", time, message);
        assertEquals(message + "[" + time + "]", RefactorUtil.
                decorateFunctionWithRefactorTest(Util.class, "refactorTo2", message, time);
    }
}

那般,通过java的annotations,大家达成了1种特定需要的decorator设计形式,可是出于语言特色与语法,不能够兑现python壹样的透明使用。

  小白:啊……权限管理形成后不就完了吧?还有意义要弄的吧?

 

20、什么是python?使用python有如何好处?
python是一种编制程序语言,它有目的、模块、线程、至极处理和电动内部存款和储蓄器管理。它简洁,简单、方便、简单扩张、有成千成万自带的数目结果,而且它开源

  老菜:假定光从使用角度来说,也只怕说成功了,但还有1对细节还索要处理的,比如说日志和非凡。

自编写装饰器壹

  1. 什么是pickling和unpickling?
    Pickle模块读入任何python对象,将它们转换来字符串,然后利用dump函数将其转储到3个文本中——那么些历程叫做pickling
    反之从存款和储蓄的字符串文件中领取原始python对象的进度,叫做unpickling

  2. python是怎么着被解释的?
    Python是壹种解释性语言,它的源代码能够一贯运营,Python解释器会将源代码转换来人中学间语言,之后再翻译成机器码再履行

  3. 数组和元祖之间的界别是怎样?
    数组和元祖之间的界别:数组内容能够被涂改,而元祖内容是只读的,不可被修改的,其它元祖能够被哈希,比如作为字典的key

  4. 参数按值传递和引用传递是怎么落到实处的?
    python中的一切都以类,全数的变量都以二个指标的引用。引用的值是由函数明确的,由此不可能被改动,可是若是三个指标是可以被修改的,你能够转移对象
    python中对3个函数能够传递参数,不过怎么识别是值传递照旧引用传递,不是程序员手动控制的,而是python依据你传入的多少对象,自动识其他。
    假如你传入的参数对象是可变对象:列表,字典,那一年便是引用传递,假若参数在函数体内被修改,那么源对象也会被改动。
    若果您传入的参数对象是不可变的靶子:数字,元组,字符串,这年就是值传递。那么源对象是不会变动的,

  5. Python都有怎么样自带的数据结构?
    Python自带的数据结构分为可变和不可变的:可变的有:数组、集合、字典,不可变的是:字符串、元祖、整数

  6. 如何是python的命名空间?
    在python中,全数的名字都留存于3个空间中,它们在改空间中设有和被操作——那正是命名空间,它就如三个盒子,在各类变量名字都对应装着二个对象,当查问变量的时候,会从该盒子里面寻找对应的对象

  7. python中的unittest是什么?
    在python中,unittest是python中的单元测试框架,它具备帮助共享搭建、自动测试、在测试中间断代码、将区别测试迭代成壹组

  8. args与*kwargs
    *args代表职分参数,它会接收任意四个参数并把这几个参数作为元祖传递给函数。
    **kwargs代表的首要字参数,重回的是字典,地点参数一定要放在首要字前边

  9. 在Python中怎么样是slicing?切片
    slicing是壹种在1如既往的指标类型中(数组、元祖、字符串)节选某壹段的语法

  10. python中的docstring是什么?
    Python汉语档字符串被号称docstring
    简易的话,正是出新在模块、函数、类、方法里首先个语句的,正是docstring。会自动成为属性__doc__

  11. os与sys区别:
    os是模块负责程序与操作系统的交互,提供了拜访操作系统底层的接口
    sys模块是承受程序与python解释器的并行,提供了一名目繁多的函数和变量,用于操控Python时运转的条件
    3二、达成八个单例情势
    __new__()__init__()事先被调用,用于转移实例对象。利用那一个点子和类的性质的特征能够完结设计情势的单例格局。
    单例格局是指成立唯一目的,单例方式设计的类只可以实例,实例化二个指标

  小白:前方不是做过日志处理了,将有所的要命都自动写到日志中,方便开发人士分析查看,仍是能够自行发送非常布告邮件,其它对于客户端提交的富有数据,在bottle勾子那里也做了处理,都写入到日志中了,还有哪些要处理的?

from requests.exceptions import ConnectionError
import requests
def retry(**kw):
    def war(func):
        def w(*args,**kwargs):
            try:
                ret = func(*args,**kwargs)
            except ConnectionError:
                kw['reNum'] = int(kw['reNum']) - 1
                if kw['reNum'] >=0:
                    print kw['reNum']
                    ret = w(*args,**kwargs)
                else:
                    ret = ConnectionError
            return ret
        return w
    return war

  老菜:对于日记来说能够分成两块:

 

  一是管理员的操作日志,因为后台管理操作涉及到数码安全,管理员的富有操作都亟需记录下来,以便产生难点时能够找到关系人,同时某些工作种类提交相关人口利用之后,BOSS却不通晓他们终究有未有记名使用,每一天在系统做什么;

自编写装饰器二

  2是系统的尤其和关键数据的笔录,这几个属于系统底层的日志,将兼具特别和与钱财有关的操作消息全体记录下来,有故障时开发人士能够依据日志飞速稳定,及时修复难点。这上面大家前边早已做1些了,在前边底层很多地点都做了try…except…处理,那是很要求的,但您有未有发现,大家的代码在该地经常运转的佳绩的,而将代码更新上服务器后即常常爆500错误却不领悟,想要排查万分时也很不便于,但翻看uwsgi等三个系统日志才行,某些非凡你查来查去都查不出去,至极浪费时间,你知道那么些尤其首假设由什么引起的吧?有未有想过用什么样措施也可以达成实时通过推送通告精晓那些错误呢?当然对于这个的发出是很难幸免的,可是大家能够透过1些手腕,让那一个十分发生后即时通过邮件或微信等格局,将10分详情通告大家,然后快速修复难点。要是你对系统格外纯熟的话,有十分的大可能用户还没影响过来,十几秒你就将故障修复了,做到人不知鬼不觉,哈哈。

from requests.exceptions import ConnectionError

def retry(**kw):
    def wrapper(func):
        def _wrapper(*args,**kwargs):
            raise_ex = None
            for _ in range(kw['reNum']):
                print _
                try:
                    return func(*args,**kwargs)
                except ConnectionError as ex:
                    raise_ex = ex
            #raise raise_ex
        return _wrapper
    return wrapper

  小白:是呀,至极难点是自家最大痛的作业,很多时候明显本地调节和测试的佳绩的,一到服务就挂了,找到找去也找不出难题所在,浪费了大批量的时刻。那么大家要怎么来进展改建呢?

 

  老菜:接下去你看本身教学就掌握了,重假如对已有代码进行改动。

动用办法:reNum = 五代表,出现ConnectionError时最多可重试四回。

  在前方的数据结构划设想计时,大家有1个大班操作日志表,接下去的改建主若是对那一个表进行连锁的操作。

@retry(reNum=5)
def demo():
    raise ConnectionError

  首先大家要求成立这么些日志表的逻辑类,由于我们的O奇骏M是用字典来拓展增改操作的,所以须求先组合字段字典,然后再履行相应的主意,为了让操作简化,大家供给在日记表逻辑类中添加一个措施,通过传参的章程来展开日志的增加操作,那样就足避防去大家构成字典的操作了。

 

 1 #!/usr/bin/env python 2 # coding=utf-8 3  4 from logic import _logic_base 5 from common.string_helper import string 6 from config import db_config 7  8  9 class ManagerOperationLogLogic(_logic_base.LogicBase):10     """管理员操作日志管理表逻辑类"""11 12     def __init__:13         # 表名称14         self.__table_name = 'manager_operation_log'15         # 初始化16         _logic_base.LogicBase.__init__(self, db_config.DB, db_config.IS_OUTPUT_SQL, self.__table_name)17 18 19     def add_operation_log(self, manager_id, manager_name, ip, remark):20         """记录用户登录日志"""21         # 组合要更新的字段内容22         fields = {'manager_id':manager_id, 'manager_name':string(manager_name), 'ip':string, 'remark':string}23         # 新增记录24         self.add_model

总结:

  从代码中得以见到,add_operation_log()方法,它实在正是快要更新到数据库的参数传进来,在艺术里组合成字典,然后调用add_model()举行更新操作,调用时用上面代码就足以了

1.编辑装饰器,其实并未那么难,只要通晓方法。
那么些能够参考,小编事先写的关于装饰器的小说

_manager_operation_log_logic.add_operation_log(manager_id, manager_name, ip, '登陆成功')

贰.装饰器的通熟解释,正是在函数此前后之后做点什么。通过这几个大家得以做过多。

  达成这些操作日志逻辑类和日志添加措施之后,要改造登录接口就回顾多了,只须求在阴差阳错和成功时实行调用,记录到数据表就能够了,具体看代码。

三.关于请求连接错误,重试,装饰器;原理就是做二个循环,只要捕获到有ConnectionError
错误,就进来下3遍巡回

  登录接口除了供给添加日志记录以外,还亟需处理八个康宁难题,大家从不对屡次输出密码错误进行拍卖,假使有人想要登录系列写个密码劳举器,恐怕很简单后台就给人攻克了,所以我们必要对这一个做三个范围,比如说同1ip在钦赐时间内只可以出错多少次,每趟出错开上下班时间都记录一下弄错次数,当出错次数超出限制时,则不容用户登录。具体活动查看代码,那里本人就不再详细表明了。

调用;只要有不易的时候,间接重回函数。

www.5929.com 1www.5929.com 2

 

  1 #!/usr/bin/env python  2 # coding=utf-8  3   4 from bottle import put  5 from common import web_helper, encrypt_helper, security_helper  6 from common.string_helper import string  7 from logic import manager_logic, manager_operation_log_logic  8   9  10 @put('/api/login/') 11 def post_login(): 12     """用户登陆验证""" 13     ############################################################## 14     # 获取并验证客户端提交的参数 15     ############################################################## 16     username = web_helper.get_form('username', '帐号') 17     password = web_helper.get_form('password', '密码') 18     verify = web_helper.get_form('verify', '验证码') 19     ip = web_helper.get_ip() 20  21     ############################################################## 22     # 从session中读取验证码信息 23     ############################################################## 24     s = web_helper.get_session() 25     verify_code = s.get('verify_code') 26     # 删除session中的验证码(验证码每提交一次就失效) 27     if 'verify_code' in s: 28         del s['verify_code'] 29         s.save() 30     # 判断用户提交的验证码和存储在session中的验证码是否相同 31     if verify.upper() != verify_code: 32         return web_helper.return_msg(-1, '验证码错误') 33  34     ############################################################## 35     ### 判断用户登录失败次数,超出次做登录限制 ### 36     # 获取管理员登录密码错误限制次数,0=无限制,x次/小时 37     limit_login_count = 10 38     # 获取操作出错限制值 39     is_ok, msg, operation_times_key, error_count = security_helper.check_operation_times('login_error_count', limit_login_count, False) 40     # 判断操作的出错次数是否已超出了限制 41     if not is_ok: 42         return web_helper.return_msg(-1, msg) 43  44     ############################################################## 45     ### 获取登录用户记录,并进行登录验证 ### 46     ############################################################## 47     # 初始化操作日志记录类 48     _manager_operation_log_logic = manager_operation_log_logic.ManagerOperationLogLogic() 49     # 初始化管理员逻辑类 50     _manager_logic = manager_logic.ManagerLogic() 51     # 从数据库中读取用户信息 52     manager_result = _manager_logic.get_model_for_cache_of_where('login_name=' + string) 53     # 判断用户记录是否存在 54     if not manager_result: 55         return web_helper.return_msg(-1, '账户不存在') 56  57     # 获取管理员id 58     manager_id =  manager_result.get('id', 0) 59     # 获取管理员姓名 60     manager_name = manager_result.get('name', '') 61  62     ############################################################## 63     ### 验证用户登录密码与状态 ### 64     ############################################################## 65     # 对客户端提交上来的验证进行md5加密将转为大写(为了密码的保密性,这里进行双重md5加密,加密时从第一次加密后的密串中提取一段字符串出来进行再次加密,提取的串大家可以自由设定) 66     # pwd = encrypt_helper.md5(encrypt_helper.md5[1:30]).upper() 67     # 对客户端提交上来的验证进行md5加密将转为大写 68     pwd = encrypt_helper.md5.upper() 69     # 检查登录密码输入是否正确 70     if pwd != manager_result.get('login_password').upper(): 71         # 记录出错次数 72         security_helper.add_operation_times(operation_times_key) 73         # 记录日志 74         _manager_operation_log_logic.add_operation_log(manager_id, manager_name, ip, '【' + manager_name + '】输入的登录密码错误') 75         return web_helper.return_msg(-1, '密码错误') 76     # 检查该账号虽否禁用了 77     if not manager_result.get('is_enabled'): 78         # 记录出错次数 79         security_helper.add_operation_times(operation_times_key) 80         # 记录日志 81         _manager_operation_log_logic.add_operation_log(manager_id, manager_name, ip, '【' + manager_name + '】账号已被禁用,不能登录系统') 82         return web_helper.return_msg(-1, '账号已被禁用') 83  84     # 登录成功,清除登录错误记录 85     security_helper.del_operation_times(operation_times_key) 86  87     ############################################################## 88     ### 把用户信息保存到session中 ### 89     ############################################################## 90     manager_id = manager_result.get('id') 91     s['id'] = manager_id 92     s['login_name'] = username 93     s['name'] = manager_result.get('name') 94     s['positions_id'] = manager_result.get('positions_id') 95     s.save() 96  97     ############################################################## 98     ### 更新用户信息到数据库 ### 99     ##############################################################100     # 更新当前管理员最后登录时间、Ip与登录次数(字段说明,请看数据字典)101     fields = {102         'last_login_time': 'now()',103         'last_login_ip': string,104         'login_count': 'login_count+1',105     }106     # 写入数据库107     _manager_logic.edit_model(manager_id, fields)108     # 记录日志109     _manager_operation_log_logic.add_operation_log(manager_id, manager_name, ip, '【' + manager_name + '】登陆成功')110 111     return web_helper.return_msg(0, '登录成功')

qq技术交换群,期待你的进入:

View Code

python|测试|技术沟通群:5632278九4

  security_helper.py代码

python|测试|技术交换群:5632278玖四

www.5929.com 3www.5929.com 4

python|测试|技术调换群:5632278玖4

 1 #!/usr/bin/env python 2 # coding=utf-8 3  4 from common import cache_helper, convert_helper, encrypt_helper 5  6  7 def check_operation_times(operation_name, limiting_frequency, ip, is_add=True): 8     """ 9     检查操作次数10     参数:11     operation_name      操作名称12     limiting_frequency  限制次数13     is_add              是否累加14     返回参数:15     True    不限制16     False   限制操作17     """18     if not operation_name or limiting_frequency is None:19         return False, '参数错误,错误码:-400-001,请与管理员联系', '', 020 21     # 如果限制次数为0时,默认不限制操作22     if limiting_frequency <= 0:23         return True, '', '', 024 25     ##############################################################26     ### 判断用户操作次数,超出次数限制执行 ###27     # 获取当前用户已记录操作次数28     operation_times_key = operation_name + '_' + encrypt_helper.md5(operation_name + ip)29     operation_times = convert_helper.to_int0(cache_helper.get(operation_times_key))30 31     # 如果系统限制了出错次数,且当前用户已超出限制,则返回错误32     if limiting_frequency and operation_times >= limiting_frequency:33         return False, '您在10分钟内连续操作次数达到' + str(limiting_frequency) + '次,已超出限制,请稍候再试', operation_times_key, operation_times34 35     if is_add:36         # 记录操作次数,默认在缓存中存储10分钟37         cache_helper.set(operation_times_key, operation_times + 1, 600)38 39     return True, '', operation_times_key, operation_times40 41 42 def add_operation_times(operation_times_key):43     """44     累加操作次数45     参数:46     operation_times_key 缓存key47     """48     # 获取当前用户已记录操作次数49     get_operation_times = convert_helper.to_int0(cache_helper.get(operation_times_key))50     # 记录获取次数51     cache_helper.set(operation_times_key, get_operation_times + 1, 600)52 53 54 def del_operation_times(operation_times_key):55     """56     清除操作次数57     参数:58     operation_times_key 缓存key59     """60     # 记录获取次数61     cache_helper.delete(operation_times_key)62 63 64 def check_login_power(id, k, t, sessionid):65     """66     检查拨号小信接口,验证用户是否有权限访问67     :param id: 用户id68     :param k:  32位长度的密钥串69     :param t:  时间戳70     :param sessionid: 当前用户的密钥71     :return: False=验证失败,True=验证成功72     """73     if not sessionid:74         return False75 76     return encrypt_helper.md5 + sessionid + str + sessionid + str == k

 

View Code

  想要记录用户的每一个操作记录,有二种艺术,壹是在每一个接口这里丰富日志记录,那样能够更详细的编辑自定义日志表达,不过那样做的话工作量会比较大,也便于在复制粘贴中失误;还有正是,每多少个后台接口都会调用权限判断方法,我们也得以在这一个主意中平昔抬高日志记录,缺点正是各样访问操作想要表达的很密切很难做到,那里我们因而各样判断与组合措施,来写入对应的接口日志访问记录,难免会出现记录重复或记录声明不得法的情形。

  下边是后台权限检查办法(_common_logic.py)

 1 #!/usr/bin/env python 2 # coding=utf-8 3  4 from bottle import request 5 from common import web_helper, string_helper 6 from logic import menu_info_logic, positions_logic, manager_operation_log_logic 7  8 def check_user_power(): 9     """检查当前用户是否有访问当前接口的权限"""10     # 读取session11     session = web_helper.get_session()12     # session不存在则表示登录失效了13     if not session:14         web_helper.return_raise(web_helper.return_msg(-404, "您的登录已失效,请重新登录"))15 16     # 获取当前页面原始路由17     rule = request.route.rule18     # 获取当前访问接口方式(get/post/put/delete)19     method = request.method.lower()20     # 获取当前访问的url地址21     url = string_helper.filter_str(request.url, '<|>|%|\'')22 23     # 初始化日志相关变量24     _manager_operation_log_logic = manager_operation_log_logic.ManagerOperationLogLogic()25     ip = web_helper.get_ip()26     manager_id = session.get('id')27     manager_name = session.get('name')28     # 设置访问日志信息29     if method == 'get':30         method_name = '访问'31     else:32         method_name = '进行'33 34     # 获取来路url35     http_referer = request.environ.get('HTTP_REFERER')36     if http_referer:37         # 提取页面url地址38         index = http_referer.find('?')39         if index == -1:40             web_name = http_referer[http_referer.find('/', 8) + 1:]41         else:42             web_name = http_referer[http_referer.find('/', 8) + 1: index]43     else:44         web_name = ''45 46     # 组合当前接口访问的缓存key值47     key = web_name + method + '(' + rule + ')'48     # 从菜单权限缓存中读取对应的菜单实体49     _menu_info_logic = menu_info_logic.MenuInfoLogic()50     model = _menu_info_logic.get_model_for_url51     if not model:52         # 添加访问失败日志53         _manager_operation_log_logic.add_operation_log(manager_id, manager_name, ip, '用户访问[%s]接口地址时,检测没有操作权限' % 54         web_helper.return_raise(web_helper.return_msg(-1, "您没有访问权限1" + key))55 56     # 初始化菜单名称57     menu_name = model.get('name')58     if model.get('parent_id') > 0:59         # 读取父级菜单实体60         parent_model = _menu_info_logic.get_model_for_cache(model.get('parent_id'))61         if parent_model:62             menu_name = parent_model.get('name').replace('列表', '').replace('管理', '') + menu_name63 64     # 从session中获取当前用户登录时所存储的职位id65     positions = positions_logic.PositionsLogic()66     page_power = positions.get_page_power(session.get('positions_id'))67     # 从菜单实体中提取菜单id,与职位权限进行比较,判断当前用户是否拥有访问该接口的权限68     if page_power.find(',' + str(model.get('id', -1)) + ',') == -1:69         # 添加访问失败日志70         _manager_operation_log_logic.add_operation_log(manager_id, manager_name, ip, '用户%s[%s]操作检测没有权限' % (method_name, menu_name))71         web_helper.return_raise(web_helper.return_msg(-1, "您没有访问权限2"))72 73     if not (method == 'get' and model.get('name') in ('添加', '编辑')):74         # 添加访问日志75         _manager_operation_log_logic.add_operation_log(manager_id, manager_name, ip, '用户%s[%s]操作' % (method_name, menu_name))

  那里记录的日记与菜单管理记录相关,倘若菜单项的命名或树列表不标准,则记录的日记只怕就会偏向比较大。当然固然您有性障碍追求完善的话,可自行对它实行改建。比如说在菜单管理中添加八个字段,用来编排日志表明的,访问这几个页面时直接将注脚更新到操作日志表中就足以了,不难方便。而只要对操作内容想要更仔细的,也能够在日志表中添加一个字段,将客户端提交的参数全体写入到字段里记录,那样对用户的操作就会更明显了,当然倘诺用户更新音讯或作品类内容时,字段值也会比较大。我们能够依照须要来进展相应改造。

  下图为操作日志表记录内容

www.5929.com 5

  后台管理还亟需做个日志查看的页面,接口代码很简单,具体直接看源码,那里也不详细表明了

www.5929.com 6

  对于丰硕处理,我们实在都精通使用try…except…进行捕捉,然后记录分外新闻或作对应处理。

  而在接口发生500荒唐时,由于程序在劳务器端执行,服务器环境与本土的开发环境有所分化,就很难直观的判定是哪些来头引起的,可能是少上传了有些调用文件,也大概是新引用的包未有设置,又或然是代码中写错了代码,也有非常大希望是变量为空引起的不胜,反正或许情形尤其之多,当接口相当多时,这一个极度通过很隐蔽,只有等到该接口被调用时才能觉察,如若拍卖不好,开发人士大概会费用不少岁月在那上边。

  当然也有点子是,全体的接口代码都位居try…except…里面实践,那样爆发500的事态会大大收缩,但代码看起来层级多了也不美观。对于那种简单重复统一的代码,python有3个不行好用的工具,那正是装饰器,大家能够编写贰个装饰器方法给接口使用,从而完结大家想要的目标。

  装饰器完成的原理就是,通过在函数尾部引用装饰器,从而使程序执行代码时,先实行李装运饰器里面包车型客车代码,然后再调用引用装饰器的函数,最后再回去装饰器执行剩下的代码。简单的知道正是,原有A函数和装饰器B函数,当A函数引用装饰器B函数今后,A函数实际就变成B函数中被调用的二个格局,即B函数在实行进度中会调用A函数,执行到位A函数后归来想要的结果再继续执行后边的代码

  先上代码,大家在特别操作包中(except_helper.py),添加下边方法:

 1 def exception_handling: 2     """接口异常处理装饰器""" 3     def wrapper(*args, **kwargs): 4         try: 5             # 执行接口方法 6             return func(*args, **kwargs) 7         except Exception as e: 8             # 捕捉异常,如果是中断无返回类型操作,则再执行一次 9             if isinstance(e, HTTPResponse):10                 func(*args, **kwargs)11             # 否则写入异常日志,并返回错误提示12             else:13                 log_helper.error(str14                 return web_helper.return_msg(-1, "操作失败")15     return wrapper

  func正是流入到装饰器方法中的别的方法,由于大家的装饰器是给接口使用,所以实行进程中平素回到结果,由于大家的代码在进行进度,有时会调用raise来刹车代码执行,那样的话接口方法是未曾再次来到值的,假若利用return来调用方法就会出现非常,所以在第拾到10行,会调用方法重复履行一次接口方法,所以在付出时要小心,只有对那些出错开上下班时间索要及时暂停的地点,才使用raise那样保险再也执行接口方法不会造成数据失实。

  当接口方法执行现身万分要抛出500时,这么些装饰器就会捕捉到,然后通过调用log_helper.error()方法,将格外写入日志,并发送相当公告邮件文告开发职员。对于特别布告,要是您注册了微信公司号,你能够编写对应的代码与集团号实行联网,让您和血脉相通职员在微信上可以实时收到到十三分推送新闻,方便即时发现难点然后处理难点。

  上面是调用方法:

 1 @get('/api/system/department/<id:int>/') 2 @exception_handling 3 def callback: 4     """ 5     获取指定记录 6     """ 7     # 检查用户权限 8     _common_logic.check_user_power() 9 10     _department_logic = department_logic.DepartmentLogic()11     # 读取记录12     result = _department_logic.get_model_for_cache13     if result:14         return web_helper.return_msg(0, '成功', result)15     else:16         return web_helper.return_msg(-1, "查询失败")

  只供给在接口路由和接口方法之间,添加@exception_handling就足以兑现接口500时,接收很是邮件推送了。至极有益好用。

  本文对应的源码下载

版权注解:本文原创公布于天涯论坛,作者为AllEmpty本文欢迎转发,但未经我同意必须保留此段申明,且在作品页面鲜明地方给出原来的作品连接,不然视为侵权。

python开发QQ群:66905847伍、7334663二壹小编博客:

Leave a Comment.