威尼斯人线上娱乐

编排装饰器达成python请求错误重试功用,Python主要知识点计算

26 3月 , 2019  

在做接口自动化测试的时候,总会蒙受,因连日超时等颠倒是非造成,接口脚本退步。

  1. __new__.__init__分别,怎么样贯彻单例方式,有哪些亮点
    __new__是贰个静态方法,__init__是3个实例方法
    __new__回去三个开立的实例,__init__如何都不回去
    __new__回来三个cls的实例时后边的__init__才能被调用
    当创建一个新实例时调用__new__,伊始化三个实例时调用__init__
  2. 编排装饰器达成python请求错误重试功用,Python主要知识点计算。浓度拷贝
    浅拷贝只是扩展了三个指南针指向二个留存的地点,而深拷贝是充实2个指针并且开发了新的内存,那么些扩大的指针指向那几个新的内部存款和储蓄器,
    行使浅拷贝的情形,释放内存,会放出同一内部存款和储蓄器,深拷贝就不会现出释放同一内部存储器的不当

Decorator是八个经文的结构式设计格局,有着不行普遍的利用。在经典的Design
Patterns:Elements of Reusable Object-Oriented
Software
中,它的用意被描述为:动态地为2个目的添加额外的义务与功能。对于扩展功用,装饰器提供了比子类化尤其灵敏的替代方案。
在诸多编制程序语言中,比如Python,在语法上就提供了装饰器的援救,能够透明地应用装饰器。而Java则相比繁琐一些,通过Decorator接口的种种完毕,针对被decorate的组件接口的落实来点缀。本文介绍一种基于annotation的decorator达成,纵然不能完结如python一般的透明使用装饰器,在一些场景下,也是一种灵活的贯彻格局。

  后台权限和底部框架的改建终于完结了,小白也毕竟能够放下紧悬着的心,能够轻松一下了。那不他为了感激老菜,又找老菜聊了四起。

法定给出的不二法门:

通过decorator实现refactor_test

小编们想要通过装饰器落成那样的三个测试工具:大家再次完毕了四个函数A,原函数是B。在调用函数A时,能够自行运营函数B,对两岸的结果作比较,假使不对等,将近年来的环境音信输出到日志中,以便追查。同时,不应现对函数的符合规律使用。
此处的函数,我们供给是幂等的无副功用的
下列整体的代码在这里。

  小白:多谢老大的帮衬,系统终于改造成功了,能够可以放松一下了。

max_retries=5 出错重试5次
注意的是,这个只对DNS,连接错误进行重试。

    from requests.adapters import HTTPAdapter
    s = requests.Session()
    s.mount('http://',HTTPAdapter(max_retries=5))
    s.mount('https://',HTTPAdapter(max_retries=5))
    s.get('https://www.baidu.com')
注意赋值和浅拷贝的区别
如l1 = ['a','b','c'] # 这段代码是是对l1 的初始化操作,开辟一个内存空间存储列表,l1 这个变量指向这个列表
l2 = l1 # 这属于赋值操作
# 如果更改l1,l2也会一起改变,因为两个变量指向的是同一个位置
import copy
浅拷贝:不管多么复杂的数据结构,浅拷贝都只会copy一层
copy.copy(...),在多层嵌套时可能会一个数据可改变可能会影响其他的数据.
深拷贝:深拷贝会完全复制原变量相关的所有数据,在内存中生成一套完全一样的内容,在这个过程中我们对这两个变量中的一个进行任意修改都不会影响其他变量.
深拷贝就是在内存中重新开辟一块空间,不管数据结构多么复杂,只要遇到可能发生改变的数据类型,就重新开辟一块内存空间把内容复制下来,直到最后一层,不再有复杂的数据类型,就保持其原引用。这样,不管数据结构多么的复杂,数据之间的修改都不会相互影响
copy.deepcopy(...)

Python的decorator

应用python可以丰硕自由地落到实处装饰器@refactor_test。代码如下(GitHub):

import functools
import logging

LOGGER = logging.getLogger('refactor_test')

def refactor_test(comp_func):
    def decorator(func):
        @functools.wraps(func)
        def wrapper(*args, **kws):
            comp_res = comp_func(*args, **kws)
            res = func(*args, **kws)
            if res != comp_res:
                message = "not equals for function:{} from {} 
                        with arguments:{}-{}".format(func.__name__, 
                                comp_func.__name__, args, kws)
                LOGGER.debug(message)
                print(message)
            return res
        return wrapper
    return decorator

def refactor_from(message):
    return message

@refactor_test(refactor_from)
def refactor_to0(message):
    return message

@refactor_test(refactor_from)
def refactor_to1(message):
    return "!" + message

if __name__ == '__main__':
    refactor_to0('Hello python!')
    refactor_to1('Hello python!')

那是十二分经典的python
decorator实现,是完全透明的,调用者无需关怀到我们在调用时候实施了1个refacor_test的过程。refactor_to0是3个符合须求的重构达成,而refactor_to1不是。

  老菜:呵呵,对于后台管理种类功用,你觉得已经竣事了啊?没有怎么遗漏的啊?

 

  1. HTTP/IP相关心下一代组织议,分别位于哪层
    http协议是超文本传输协议,http协议是遵照TCP/IP通讯协议来传递数据
    http协议工作与c/s架构上,浏览器作为http的客户端通过U中华VL向http服务端即web服务器发送所用请求。web服务器收到全部请求后,向客户端发送响应消息,
    http特点是短连接,无状态
    地点栏键输入UENCOREL,按下回车之后经历了怎么?
    1.浏览器向DNS服务器请求解析该U瑞虎L中的域名所对应的IP地址
    2.解析出IP地址后,依据IP地址和暗许端口80,和服务器建立TCP连接
    3.浏览器发出读取文件的http请求,该请求报文作为TCP2回握手的第⑤个报文的多寡发送给服务器
    4.服务器对浏览器请求做出响应,并把相应的html文件发送给浏览器
    5.释放TCP连接
    6.浏览器将该HMTL渲染并出示内容

  2. TCP/UDP区别
    TCP协议是面向连接,保险高可信性(数据无遗失,数据无失序,数据无不当,数据无重复达到)传输层协议
    UDP:数据丢失,无秩序的传输层协议(qq基于udp协议)

  3. webscoket
    websocket是依照http协议的,可持续化连接
    轮询:浏览器每隔几秒就发送3遍呼吁,询问服务器是或不是有新信息
    长轮询:客户端发起连接后,假如没有音信,就直接不回去response给客户端,直到有新闻重回,重回完之后,客户端再度发起连接

  4. RabbitMQ:
    劳务器端有Erlang语言来编排,辅助八种客户端,只会ajax,用于分布式系统中蕴藏转载新闻,在易用性、扩张性、高可用性的上面不俗。
    connection是RabbitMQ的socket连接,它包裹了socket部分连锁协议逻辑
    connectionFactroy为connection的创设工厂
    channel是大家与RabbitMQ打交道的最关键的三个接口,大多数的事体操作是在chaanel这一个接口中成就,包括定义Queue、定义Exchange、
    绑定Queue与Exchange,公布新闻等

  5. 装饰器
    调用装饰器其实是1个闭包函数,为其余函数添加附加功用,不修改被涂改的源代码和不改动被修饰的章程,装饰器的再次回到值也是二个函数对象。
    诸如:插入日志、质量测试、事物处理、缓存、权限验证等,有了装饰器,就足以抽离出大气与函数作用自己无关的等同代码并一连起用。

  6. 闭包
    1.无法不有二个内嵌函数
    2.内嵌函数必须引用外部函数的变量(该函数包罗对外功能域而不是大局效用域名字的引用)
    3.表面函数的重回值必须是内嵌函数

  7. 迭代器与生成器
    迭代可迭代对象对应iter(方法)和迭代器对应next(方法)的一个历程
    生成器:包包括有yield这么些重中之重字,生成器也是迭代器,调动next把函数变成迭代器。

  8. classmethod,staticmethod,property
    类格局:将类的函数转换到类方法,函数上装饰@classmethod会将函数的自发性传值参数改成cls
    静态方法:此格局相当于给类扩张三个效益,将类内的函数实例化,给类或对象使用,此时类内的函数就是一般函数,不管是类还是实例化的靶子都足以动用
    实例化:类的实例化就会发生三个实例(对象),能够知道为类()把虚拟的东西实例化,获得具体存在的值

  9. 常用的状态码
    200–服务器成功重返网页
    204–请求收到,但回到消息为空
    304–客户端已经执行了GET,但文件未变动
    400–错误请求,如语法错误
    403–无权力访问
    404–请求的页面不存在
    500–服务器发生内部错误

  10. 多进程,多线程,协程,GIL
    GIL:全局解释器锁,是锁在cpython解释器上,导致同暂时刻,同一进度只好有3个线程被实施
    多进度:多进度模块multiprocessing来落到实处,cpu密集型,IO计算型能够用多进度
    二十多线程:二十多线程模块threading来落到实处,IO密集型,多线程能够升高功效
    协程:正视于geenlet,对于多线程应用。cpu通过切片的法门来切换线程间的推行,遭逢IO操作自动切换,线程切换时索要耗费时间,
    而协成好处没有切换的损耗,没有锁定概念。
    进度:是资源管理单位,实行是并行独立的,达成产出和产出
    线程:是很小的实施单位,线程的出现为了降低上下文切换的消耗,提供系统的并发性

  11. IO多路复用/异步非阻塞
    IO多路复用:通过一种机制,能够监听三个描述符 select/poll/epoll
    select:连接数受限,查找配对进程慢,数据由基础拷贝到用户态
    poll:改进了连接数,不过照旧查找配对速度慢,数据由基础拷贝到用户态
    epoll:epoll是linux下多路复用IO接口,是select/poll的增强版,它能一目通晓增进程序在大方产出连接中唯有少量活跃的景况下的种类CPU利用率
    异步非阻塞:异步展现在回调上,回调正是有音讯重返时告知一声儿经过展开处理。非阻塞便是不等待,不需求经过等待下去,
    继续执行别的操作,不管其余进度的景况。

  12. PEP8规范,规范的裨益是什么?
    1.缩进:5个空完毕缩进,尽量不利用Tab
    2.行:没行最大尺寸不当先79,换行能够选用反斜杠
    3.命名标准:
    4.诠释规范:

  13. range-and-xrange
    都在循环时选用,xrange内部存款和储蓄器质量更好,xrange用法与range完全相同,range贰个生成list对象,xrange是生成器

  14. with上下文机制原理
    enterexit,上下文物管理理协议,即with语句,为了让三个目的兼容with语句,必须在那么些目的类中宣示enterexit方法,
    采纳with语句的指标便是把代码块放入with中实施,with停止后,自动达成清理工科作,无须收到干预

  15. 经典类、新式类
    经文类遵守:深度优先,python第22中学
    新式类遵从:广度优先,Python3中

  16. 有没有四个工具得以协寻Python的bug和进展静态的代码分析?
    PyChecker是三个Python代码的静态分析工具,它能够襄协助调查找Python代码的bug,会对代码的复杂度和格式提出警告,
    Pylint是此外1个工具得以拓展codingstandard检查

  17. Python是何许进展内部存款和储蓄器管理的

    • 指标引用计数:
      引用计数扩张的场地:
      来保持追踪内部存款和储蓄器中的靶子,全体目标都用引用计数,2个目的分配3个新名称将其放入八个器皿中(列表,字典,元祖)引用计数收缩的情状:
      动用del语句对指标别称展现的绝迹
      引用超出功用域或被重复赋值
      sys.getrefcount()函数能够博得对象的最近援引计数
    • 标志-清除机制
    • 分代技术

Java实现

鉴于java语法的限定,不恐怕像动态语言python一样晶莹地为给定方法添加decorator。当然能够依据经典的设计完毕,如下图所示。
[图片上传退步…(image-5dfcd6-1510413037923)]

对于大家想要化解的题材,在python中,通过装饰器语法,在编码时,就钦命了由重构后措施到重构前方法的炫耀。而只要依据守旧的方式完毕,我们第二,须求保险1个重构后的方法到重构在此之前方法的映射表,其余,大家不能够为每四个重构的办法都编写制定3个装饰器方法,不够利索,过于繁琐。所以,大家需求动用java的反光机制,动态调用方法。第②点也是很麻烦的,或然写到配置文件,也许hard
code到代码里,都以极倒霉的。大家经过java的annotation证明作用来兑现。Oracle的官方tutorial中,有对java
annotations比较缜密的评释。我们来探望怎么样贯彻。

RefactorUtil.java
(GitHub):

import org.slf4j.Logger;

import java.lang.annotation.ElementType;
import java.lang.annotation.Retention;
import java.lang.annotation.RetentionPolicy;
import java.lang.annotation.Target;
import java.lang.reflect.InvocationTargetException;
import java.lang.reflect.Method;
import java.util.AbstractMap;
import java.util.Map;

public class RefactorTestUtil {
    private static Logger LOGGER = null;

    public interface Equality <T, S> {
        public boolean isEqual(T obj0, S obj1);
    }

    public static void setLogger(Logger logger) {
        LOGGER = logger;
    }

    @Target( ElementType.METHOD )
    @Retention( RetentionPolicy.RUNTIME )
    public @interface RefactorTest {
        String classRef();
        String methodName();
        int[] paramClassIndex2ThisParams() default {};
    }

    private static void testFailLog(String message, Map.Entry<Class<?>, String> migTo, Map.Entry<Class<?>, String>
            migFrom, Object ... params) {
        String argsStr = null;
        if (params != null && params.length > 0) {
            StringBuilder args = new StringBuilder();
            for (Object param : params) {
                args.append(param).append(":").append(param.getClass().getSimpleName());
                args.append(",");
            }
            if (args.length() > 0) {
                argsStr = args.substring(0, args.length() - 1);
            }
            else {
                argsStr = args.toString();
            }
        }
        String logStr = String.format("[MigrationTest]%s-TO(%s)-FROM-(%s)-ARGS(%s)", message, migTo.toString(),
                migFrom.toString(), argsStr);

        if (LOGGER != null) {
            LOGGER.error(logStr);
        }
        else {
            System.err.println(logStr);
        }
    }

    public static <T> T decorateFunctionWithRefactorTest(Class<?> cls, String method, Object ... params) throws
            NoSuchMethodException, InvocationTargetException, IllegalAccessException {
        return decorateFunctionWithRefactorTest(cls, method, new Equality<T, Object>() {
            public boolean isEqual(T obj0, Object obj1) {
                return obj0.equals(obj1);
            }
        }, params);
    }

    public static <T, S> T decorateFunctionWithRefactorTest(Class<?> cls, String method, 
            Equality<T, S> equals, Object... params) throws NoSuchMethodException,   
            InvocationTargetException, IllegalAccessException {
        Method refactorTo = TypeUtil.getClassMethodWithNotAccurateTypedParams(cls, method,
                 params);
        if (refactorTo == null) {
            throw new NoSuchMethodException(String.format("There is no method %s in class 
                    %s", method, cls
                    .getSimpleName()));
        }

        T toResult = (T) refactorTo.invoke(null, params);

        RefactorTest refactorAnno = refactorTo.getAnnotation(RefactorTest.class);
        String refactorFromCls =  refactorAnno.classRef();
        String refactorFromMethod = refactorAnno.methodName();
        int[] paramClassesIndex = refactorAnno.paramClassIndex2ThisParams();

        try {
            Class<?> refactorFromClass = ClassLoader.getSystemClassLoader()
                    .loadClass(refactorFromCls);


            Object[] fromParams = null;
            if (paramClassesIndex != null && paramClassesIndex.length > 0) {
                fromParams = new Object[paramClassesIndex.length];
                for (int i = 0; i < paramClassesIndex.length; i ++) {
                    fromParams[i] = params[paramClassesIndex[i]];
                }
            }
            else {
                fromParams = params;
            }

            Method refactorFrom = TypeUtil.getClassMethodWithNotAccurateTypedParams
                    (refactorFromClass, refactorFromMethod,
                    fromParams);
            if (refactorFrom == null) {
                testFailLog("No refactor-from method found", new AbstractMap.
                        SimpleEntry<Class<?>, String>(cls, method)
                        , new AbstractMap.SimpleEntry<Class<?>,String>
                        (refactorFromClass, refactorFromMethod), params);
                return toResult;
            }

            S fromResult = (S) refactorFrom.invoke(null, fromParams);

            if (! equals.isEqual(toResult, fromResult)) {
                testFailLog("Not equal after refactoring", new AbstractMap.SimpleEntry
                        <Class<?>, String>(cls, method)
                        , new AbstractMap.SimpleEntry<Class<?>, String>
                        (refactorFromClass, refactorFromMethod), params);
            }


        } catch (ClassNotFoundException e) {
            testFailLog("No refactor-from Class found", new AbstractMap.SimpleEntry
                    <Class<?>, String>(cls, method), new AbstractMap.SimpleEntry<Class<?>,  
                    String>(null, refactorFromMethod), params);

        } finally {
            return toResult;
        }
    }
}

RefactorTestUtil.decorateFunctionWithRefactorTest()方法通过传播对应类与措施名,还有参数列表,通过RefactorTest注明获取该措施对应重构前方法,动态相比较四回调用的结果是不是一致,决定是不是计入日志。
@interface
RefactorTest是一个诠释的注脚,再待证明的主意前添加@RefactorTest(…),通过七个性子classRef,methodName,paramClassIndex2ThisParams来给定重构前方法及调用参数的不对齐难题。
经过评释和反光大家兑现了这一个效应,而由于java反射的界定,对于参数列表的种类不是方法签名中参数列表的品类完全匹配不大概找到分明的法门,作者达成了TypeUtil,提供了简易的动态机制,找到呼应措施。比如size(Collection)方法,再盛传1个Set时,仅仅经过java的反射API,无法找到size(Collection)方法。

TypeUtil.java(GitHub):

import java.lang.reflect.Method;
import java.util.ArrayList;
import java.util.LinkedList;
import java.util.List;

public class TypeUtil {
    public static boolean isMatchedBoxingType(Class<?> cls0, Class<?> cls1) {
        if (cls0 == null || cls1 == null) {
            return false;
        }
        if (! cls0.isPrimitive() && ! cls1.isPrimitive()) {
            return cls0.equals(cls1);
        }
        if (cls0.isPrimitive() && cls1.isPrimitive()) {
            return cls0.equals(cls1);
        }

        Class<?> primitive = cls0.isPrimitive() ? cls0 : cls1, boxing = cls1.isPrimitive() ? cls0 : cls1;

        if (primitive.equals(int.class)) {
            return boxing.equals(Integer.class);
        }
        if (primitive.equals(short.class)) {
            return boxing.equals(Short.class);
        }
        if (primitive.equals(float.class)) {
            return boxing.equals(Float.class);
        }
        if (primitive.equals(double.class)) {
            return boxing.equals(Double.class);
        }
        if (primitive.equals(boolean.class)) {
            return boxing.equals(Boolean.class);
        }
        if (primitive.equals(long.class)) {
            return boxing.equals(Long.class);
        }
        if (primitive.equals(char.class)) {
            return boxing.equals(Character.class);
        }
        if (primitive.equals(byte.class)) {
            return boxing.equals(Byte.class);
        }
        return false;
    }

    private static boolean isSubClassOf(Class<?> subCls, Class<?> superCls) {
        if (subCls == null || superCls == null) {
            return false;
        }
        if (superCls.equals(Object.class)) {
            return true;
        }
        if (superCls.isInterface() && ! subCls.isInterface()) {
            for (Class<?> interf : subCls.getInterfaces()) {
                if (interf.equals(superCls)) {
                    return true;
                }
            }
            return false;
        }
        Class<?> cls = subCls;
        for (; cls != null && ! cls.equals(superCls); cls = cls.getSuperclass());
        return cls != null;
    }

    public static Method getClassMethodWithNotAccurateTypedParams(Class<?> cls, String methodName, Object ...
            params) {
        if (cls == null || methodName == null) {
            return null;
        }

        Class<?>[] paramClasses = new Class<?>[params.length];
        int i = 0;
        for (Object param : params) {
            paramClasses[i++] = param.getClass();
        }

        Method method = null;
        try {
            method = cls.getMethod(methodName, paramClasses);
        } catch (NoSuchMethodException e) {
            Method[] methods = cls.getMethods();

            List<Method> capableMethods = new ArrayList<Method>();
            for (Method candidateMethod : methods) {
                if (! candidateMethod.getName().equals(methodName)) {
                    continue;
                }
                if (! candidateMethod.isVarArgs() && candidateMethod.getParameterTypes().length != params.length) {
                    continue;
                }

                Class<?>[] methodParamClasses = candidateMethod.getParameterTypes();
                boolean found = true;
                for (int j = 0; j < methodParamClasses.length; j ++) {
                    Class<?> methodParamClass = methodParamClasses[j];
                    if(! TypeUtil.isInstanceOf(methodParamClass, params[j])) {
                        found = false;
                        break;
                    }
                }

                if (found) {
                    capableMethods.add(candidateMethod);
                }
            }

            if (capableMethods.size() == 1) {
                method = capableMethods.get(0);
            }
            else if (capableMethods.size() > 1) {
                for (int pi = 0; pi < params.length; pi ++) {
                    Class<?> bottom = Object.class;
                    int mindex = 0;
                    int bottomCount = 0;
                    for (int mi = 0; mi < capableMethods.size(); mi ++) {
                        Method m = capableMethods.get(mi);
                        Class<?> pclass = m.getParameterTypes()[pi];
                        if (pclass.equals(bottom) || isMatchedBoxingType(pclass, bottom)) {
                            bottomCount ++;
                            continue;
                        }
                        if (isSubClassOf(pclass, bottom)) {
                            bottom = pclass;
                            mindex = mi;
                            bottomCount = 1;
                        }
                    }
                    if (bottomCount < capableMethods.size() && bottomCount > 0) {
                        method = capableMethods.get(mindex);
                        break;
                    }
                }
            }
        }
        return method;
    }

    public static boolean isInstanceOf(Class<?> cls, Object instance) {
        if (cls == null) {
            return false;
        }

        if (instance == null) {
            return true;
        }

        if (cls.isPrimitive()) {
            Class<?> insType = instance.getClass();
            return isMatchedBoxingType(cls, insType);
        }
        else if (cls.isArray()) {
            Class<?> insType = instance.getClass();
            if (! insType.isArray()) {
                return false;
            }
            Class<?> cls0 = cls.getComponentType(), cls1 = insType.getComponentType();
            if (isMatchedBoxingType(cls0, cls1)) {
                return true;
            }
        }
        return cls.isInstance(instance);
    }
}

诸如我们有陆个法子:

public class Util {
    public static String refactorFrom(String message, int time) {
        return message + "(" + time + ")";
    }

    @RefactorTestUtil.RefactorTest(
        classRef = "Util",
        methodName = "refactorFrom"
    )
    public static String refactorTo0(String message, int time) {
        return message + "(" + time + ")";
    }

    @RefactorTestUtil.RefactorTest(
        classRef = "Util",
        methodName = "refactorFrom",
        paramClassIndex2ThisParams = {1, 0}
    )
    public static String refactorTo1(int time, String message) {
        return message + "(" + time + ")";
    }

    @RefactorTestUtil.RefactorTest(
        classRef = "Util",
        methodName = "refactorFrom"
    )
    public static String refactorTo2(String message, int time) {
        return message + "[" + time + "]";
    }

refactorTo0, refactorTo1,
refactorTo2都以重构自refactorFrom。当中refactorTo1更换了参数类型的一一,使用了paramClassIndex2ThisParams参数。而refactorTo2是叁个会被告知错误的重构函数。大家做如下的测试:

public RefactorTestUtilTest {
    @Test
    public void testDecorateFunctionWithRefactorTest() {
        String message = "OK";
        int time = 3;

        assertEquals(message + "(" + time + ")", RefactorUtil.
                decorateFunctionWithRefactorTest(Util.class, "refactorTo0", message, time);
        assertEquals(message + "(" + time + ")", RefactorUtil.
                decorateFunctionWithRefactorTest(Util.class, "refactorTo1", time, message);
        assertEquals(message + "[" + time + "]", RefactorUtil.
                decorateFunctionWithRefactorTest(Util.class, "refactorTo2", message, time);
    }
}

如此,通过java的annotations,我们落实了一种特定须求的decorator设计形式,不过由于语言特征与语法,不恐怕落实python一样的晶莹使用。

  小白:啊……权限管理到位后不就完了呢?还有意义要弄的呢?

 

20、什么是python?使用python有啥样好处?
python是一种编程语言,它有对象、模块、线程、卓殊处理和自行内部存款和储蓄器管理。它简洁,简单、方便、简单扩充、有过多自带的数量结果,而且它开源

  老菜:若果光从利用角度来说,也说不定说成功了,但还有局部细节还必要处理的,比如说日志和尤其。

自编写装饰器一

  1. 什么是pickling和unpickling?
    Pickle模块读入任何python对象,将它们转换到字符串,然后使用dump函数将其转储到三个文书中——这几个进度叫做pickling
    反之从存款和储蓄的字符串文件中领到原始python对象的经过,叫做unpickling

  2. python是怎么样被分解的?
    Python是一种解释性语言,它的源代码能够直接运营,Python解释器会将源代码转换成人中学间语言,之后再翻译成机器码再实践

  3. 数组和元祖之间的分别是怎么?
    数组和元祖之间的分别:数组内容能够被涂改,而元祖内容是只读的,不可被修改的,别的元祖可以被哈希,比如作为字典的key

  4. 参数按值传递和引用传递是怎么落到实处的?
    python中的一切都是类,全部的变量都以一个指标的引用。引用的值是由函数鲜明的,由此不能被改成,可是一旦3个指标是足以被改动的,你可以更改对象
    python中对三个函数能够传递参数,不过什么鉴定分别是值传递还是引用传递,不是程序员手动控制的,而是python依照你传入的数目对象,自动识别的。
    若果您传入的参数对象是可变对象:列表,字典,这一个时候正是援引传递,假如参数在函数体内被改动,那么源对象也会被改动。
    如果你传入的参数对象是不可变的靶子:数字,元组,字符串,这么些时候正是值传递。那么源对象是不会变动的,

  5. Python都有怎样自带的数据结构?
    Python自带的数据结构分为可变和不可变的:可变的有:数组、集合、字典,不可变的是:字符串、元祖、整数

  6. 什么是python的命名空间?
    在python中,所有的名字都存在于多少个空间中,它们在改空间中留存和被操作——那便是命名空间,它就类似贰个盒子,在每一种变量名字都对应装着3个指标,当查问变量的时候,会从该盒子里面寻找对应的靶子

  7. python中的unittest是什么?
    在python中,unittest是python中的单元测试框架,它具有匡助共享搭建、自动测试、在测试中间断代码、将差别测试迭代成一组

  8. args与*kwargs
    *args代表任务参数,它会收下任意三个参数并把那几个参数作为元祖传递给函数。
    **kwargs代表的要害字参数,再次回到的是字典,地方参数一定要放在重点字后边

  9. 在Python中怎么着是slicing?切片
    slicing是一种在逐步的靶子类型中(数组、元祖、字符串)节选某一段的语法

  10. python中的docstring是什么?
    Python汉语档字符串被喻为docstring
    简单的话,正是出现在模块、函数、类、方法里第三个语句的,正是docstring。会活动成为属性__doc__

  11. os与sys区别:
    os是模块负责程序与操作系统的交互,提供了拜访操作系统底层的接口
    sys模块是肩负程序与python解释器的并行,提供了一多元的函数和变量,用于操控Python时运转的环境
    3贰 、完结四个单例形式
    __new__()__init__()前边被调用,用于转移实例对象。利用这些方法和类的性情的特征能够兑现设计方式的单例格局。
    单例方式是指创立唯一指标,单例格局设计的类只好实例,实例化1个对象

  小白:眼前不是做过日志处理了,将兼具的11分都自动写到日志中,方便开发职员分析查看,还是能半自动发送很是布告邮件,别的对于客户端提交的全体数据,在bottle勾子那里也做了处理,都写入到日志中了,还有何要拍卖的?

from requests.exceptions import ConnectionError
import requests
def retry(**kw):
    def war(func):
        def w(*args,**kwargs):
            try:
                ret = func(*args,**kwargs)
            except ConnectionError:
                kw['reNum'] = int(kw['reNum']) - 1
                if kw['reNum'] >=0:
                    print kw['reNum']
                    ret = w(*args,**kwargs)
                else:
                    ret = ConnectionError
            return ret
        return w
    return war

  老菜:对此日记来说能够分为两块:

 

  一是组织者的操作日志,因为后台管理操作涉及到数码安全,管理员的保有操作都亟需记录下来,以便发生难点时方可找到关系人,同时有些工作系列提交相关人口动用今后,BOSS却不明了他们毕竟有没有记名使用,每日在系统做哪些;

自编写装饰器二

  二是系统的老大和重要数据的笔录,这一个属于系统底层的日志,将全部特别和与金钱有关的操作音信全体记录下来,有故障时开发人员能够根据日志快捷稳定,及时修复难点。这上头大家如今已经做一些了,在前面底层很多地方都做了try…except…处理,那是很须要的,但你有没有察觉,我们的代码在该地平时运转的不错的,而将代码更新上服务器后即常常爆500错误却不知情,想要排查十分时也很不便利,但翻看uwsgi等三个系统日志才行,有些特别你查来查去都查不出去,分外浪费时间,你通晓那一个非凡主即使由哪些引起的啊?有没有想过用什么样方法也能够实现实时通过推送布告明白那个不当呢?当然对于丰富的发出是很难制止的,可是大家得以由此一些招数,让这么些卓殊爆发后即时通过邮件或微信等方法,将相当详情通告大家,然后相当慢修复难题。如若你对系统非凡熟谙的话,有或然用户还没影响过来,十几秒你就将故障修复了,做到人不知鬼不觉,哈哈。

from requests.exceptions import ConnectionError

def retry(**kw):
    def wrapper(func):
        def _wrapper(*args,**kwargs):
            raise_ex = None
            for _ in range(kw['reNum']):
                print _
                try:
                    return func(*args,**kwargs)
                except ConnectionError as ex:
                    raise_ex = ex
            #raise raise_ex
        return _wrapper
    return wrapper

  小白:是啊,卓殊难点是本人最大痛的政工,很多时候肯定本地调节和测试的地道的,一到劳动就挂了,找到找去也找不出难点所在,浪费了大气的时刻。那么大家要怎么来进展改建呢?

 

  老菜:接下去你看本身讲课就驾驭了,首要是对已有代码实行改动。

使用办法:reNum = 5
代表,出现ConnectionError时最多可重试七次。

  在前边的数据结构划设想计时,大家有2个组织者操作日志表,接下去的改建主假使对这么些表举行连锁的操作。

@retry(reNum=5)
def demo():
    raise ConnectionError

  首先大家需求创造这么些日志表的逻辑类,由于我们的OGL450M是用字典来展开增改操作的,所以必要先组合字段字典,然后再实践相应的点子,为了让操作简化,大家供给在日记表逻辑类中添加多少个措施,通过传参的法门来进展日志的增加操作,那样就可避防去我们构成字典的操作了。

 

 1 #!/usr/bin/env python 2 # coding=utf-8 3  4 from logic import _logic_base 5 from common.string_helper import string 6 from config import db_config 7  8  9 class ManagerOperationLogLogic(_logic_base.LogicBase):10     """管理员操作日志管理表逻辑类"""11 12     def __init__:13         # 表名称14         self.__table_name = 'manager_operation_log'15         # 初始化16         _logic_base.LogicBase.__init__(self, db_config.DB, db_config.IS_OUTPUT_SQL, self.__table_name)17 18 19     def add_operation_log(self, manager_id, manager_name, ip, remark):20         """记录用户登录日志"""21         # 组合要更新的字段内容22         fields = {'manager_id':manager_id, 'manager_name':string(manager_name), 'ip':string, 'remark':string}23         # 新增记录24         self.add_model

总结:

  从代码中能够看来,add_operation_log()方法,它事实上正是即将更新到数据库的参数字传送进来,在点子里组合成字典,然后调用add_model()进行翻新操作,调用时用上边代码就可以了

1.编纂装饰器,其实远非那么难,只要领悟方法。
那些能够参照,小编事先写的关于装饰器的篇章

_manager_operation_log_logic.add_operation_log(manager_id, manager_name, ip, '登陆成功')

2.装饰器的通熟解释,正是在函数在此之前后之后做点什么。通过这几个我们得以做过多。

  实现这一个操作日志逻辑类和日志添加措施之后,要改造登录接口就大概多了,只须求在阴差阳错和成功时进行调用,记录到数据表就能够了,具体看代码。

3.有关请求连接错误,重试,装饰器;原理正是做二个循环,只要捕获到有ConnectionError
错误,就进入下三回巡回

  登录接口除了供给加上日志记录以外,还亟需处理三个有惊无险题材,大家从未对屡次输出密码错误举办处理,假若有人想要登录种类写个密码劳举器,恐怕很不难后台就给人攻克了,所以大家要求对那个做四个限量,比如说同一ip在钦赐时间内只能出错多少次,每一遍出错时都记录一下弄错次数,当出错次数超出限制时,则不容用户登录。具体活动查看代码,那里本人就不再详细表达了。

调用;只要有不利的时候,直接回到函数。

威尼斯人线上娱乐 1威尼斯人线上娱乐 2

 

  1 #!/usr/bin/env python  2 # coding=utf-8  3   4 from bottle import put  5 from common import web_helper, encrypt_helper, security_helper  6 from common.string_helper import string  7 from logic import manager_logic, manager_operation_log_logic  8   9  10 @put('/api/login/') 11 def post_login(): 12     """用户登陆验证""" 13     ############################################################## 14     # 获取并验证客户端提交的参数 15     ############################################################## 16     username = web_helper.get_form('username', '帐号') 17     password = web_helper.get_form('password', '密码') 18     verify = web_helper.get_form('verify', '验证码') 19     ip = web_helper.get_ip() 20  21     ############################################################## 22     # 从session中读取验证码信息 23     ############################################################## 24     s = web_helper.get_session() 25     verify_code = s.get('verify_code') 26     # 删除session中的验证码(验证码每提交一次就失效) 27     if 'verify_code' in s: 28         del s['verify_code'] 29         s.save() 30     # 判断用户提交的验证码和存储在session中的验证码是否相同 31     if verify.upper() != verify_code: 32         return web_helper.return_msg(-1, '验证码错误') 33  34     ############################################################## 35     ### 判断用户登录失败次数,超出次做登录限制 ### 36     # 获取管理员登录密码错误限制次数,0=无限制,x次/小时 37     limit_login_count = 10 38     # 获取操作出错限制值 39     is_ok, msg, operation_times_key, error_count = security_helper.check_operation_times('login_error_count', limit_login_count, False) 40     # 判断操作的出错次数是否已超出了限制 41     if not is_ok: 42         return web_helper.return_msg(-1, msg) 43  44     ############################################################## 45     ### 获取登录用户记录,并进行登录验证 ### 46     ############################################################## 47     # 初始化操作日志记录类 48     _manager_operation_log_logic = manager_operation_log_logic.ManagerOperationLogLogic() 49     # 初始化管理员逻辑类 50     _manager_logic = manager_logic.ManagerLogic() 51     # 从数据库中读取用户信息 52     manager_result = _manager_logic.get_model_for_cache_of_where('login_name=' + string) 53     # 判断用户记录是否存在 54     if not manager_result: 55         return web_helper.return_msg(-1, '账户不存在') 56  57     # 获取管理员id 58     manager_id =  manager_result.get('id', 0) 59     # 获取管理员姓名 60     manager_name = manager_result.get('name', '') 61  62     ############################################################## 63     ### 验证用户登录密码与状态 ### 64     ############################################################## 65     # 对客户端提交上来的验证进行md5加密将转为大写(为了密码的保密性,这里进行双重md5加密,加密时从第一次加密后的密串中提取一段字符串出来进行再次加密,提取的串大家可以自由设定) 66     # pwd = encrypt_helper.md5(encrypt_helper.md5[1:30]).upper() 67     # 对客户端提交上来的验证进行md5加密将转为大写 68     pwd = encrypt_helper.md5.upper() 69     # 检查登录密码输入是否正确 70     if pwd != manager_result.get('login_password').upper(): 71         # 记录出错次数 72         security_helper.add_operation_times(operation_times_key) 73         # 记录日志 74         _manager_operation_log_logic.add_operation_log(manager_id, manager_name, ip, '【' + manager_name + '】输入的登录密码错误') 75         return web_helper.return_msg(-1, '密码错误') 76     # 检查该账号虽否禁用了 77     if not manager_result.get('is_enabled'): 78         # 记录出错次数 79         security_helper.add_operation_times(operation_times_key) 80         # 记录日志 81         _manager_operation_log_logic.add_operation_log(manager_id, manager_name, ip, '【' + manager_name + '】账号已被禁用,不能登录系统') 82         return web_helper.return_msg(-1, '账号已被禁用') 83  84     # 登录成功,清除登录错误记录 85     security_helper.del_operation_times(operation_times_key) 86  87     ############################################################## 88     ### 把用户信息保存到session中 ### 89     ############################################################## 90     manager_id = manager_result.get('id') 91     s['id'] = manager_id 92     s['login_name'] = username 93     s['name'] = manager_result.get('name') 94     s['positions_id'] = manager_result.get('positions_id') 95     s.save() 96  97     ############################################################## 98     ### 更新用户信息到数据库 ### 99     ##############################################################100     # 更新当前管理员最后登录时间、Ip与登录次数(字段说明,请看数据字典)101     fields = {102         'last_login_time': 'now()',103         'last_login_ip': string,104         'login_count': 'login_count+1',105     }106     # 写入数据库107     _manager_logic.edit_model(manager_id, fields)108     # 记录日志109     _manager_operation_log_logic.add_operation_log(manager_id, manager_name, ip, '【' + manager_name + '】登陆成功')110 111     return web_helper.return_msg(0, '登录成功')

qq技术调换群,期待您的加入:

View Code

python|测试|技术调换群:563227894

  security_helper.py代码

威尼斯人线上娱乐 ,python|测试|技术沟通群:563227894

威尼斯人线上娱乐 3威尼斯人线上娱乐 4

python|测试|技术调换群:563227894

 1 #!/usr/bin/env python 2 # coding=utf-8 3  4 from common import cache_helper, convert_helper, encrypt_helper 5  6  7 def check_operation_times(operation_name, limiting_frequency, ip, is_add=True): 8     """ 9     检查操作次数10     参数:11     operation_name      操作名称12     limiting_frequency  限制次数13     is_add              是否累加14     返回参数:15     True    不限制16     False   限制操作17     """18     if not operation_name or limiting_frequency is None:19         return False, '参数错误,错误码:-400-001,请与管理员联系', '', 020 21     # 如果限制次数为0时,默认不限制操作22     if limiting_frequency <= 0:23         return True, '', '', 024 25     ##############################################################26     ### 判断用户操作次数,超出次数限制执行 ###27     # 获取当前用户已记录操作次数28     operation_times_key = operation_name + '_' + encrypt_helper.md5(operation_name + ip)29     operation_times = convert_helper.to_int0(cache_helper.get(operation_times_key))30 31     # 如果系统限制了出错次数,且当前用户已超出限制,则返回错误32     if limiting_frequency and operation_times >= limiting_frequency:33         return False, '您在10分钟内连续操作次数达到' + str(limiting_frequency) + '次,已超出限制,请稍候再试', operation_times_key, operation_times34 35     if is_add:36         # 记录操作次数,默认在缓存中存储10分钟37         cache_helper.set(operation_times_key, operation_times + 1, 600)38 39     return True, '', operation_times_key, operation_times40 41 42 def add_operation_times(operation_times_key):43     """44     累加操作次数45     参数:46     operation_times_key 缓存key47     """48     # 获取当前用户已记录操作次数49     get_operation_times = convert_helper.to_int0(cache_helper.get(operation_times_key))50     # 记录获取次数51     cache_helper.set(operation_times_key, get_operation_times + 1, 600)52 53 54 def del_operation_times(operation_times_key):55     """56     清除操作次数57     参数:58     operation_times_key 缓存key59     """60     # 记录获取次数61     cache_helper.delete(operation_times_key)62 63 64 def check_login_power(id, k, t, sessionid):65     """66     检查拨号小信接口,验证用户是否有权限访问67     :param id: 用户id68     :param k:  32位长度的密钥串69     :param t:  时间戳70     :param sessionid: 当前用户的密钥71     :return: False=验证失败,True=验证成功72     """73     if not sessionid:74         return False75 76     return encrypt_helper.md5 + sessionid + str + sessionid + str == k

 

View Code

  想要记录用户的每一个操作记录,有三种情势,一是在每个接口那里丰硕日志记录,那样能够更详尽的编纂自定义日志表达,不过如此做的话工作量会比较大,也便于在复制粘贴中出错;还有就是,每一个后台接口都会调用权限判断方法,大家也得以在那些法子中一贯抬高日志记录,缺点就是各种访问操作想要表达的很密切很难做到,那里我们因而各类判断与组合措施,来写入对应的接口日志访问记录,难免会出现记录重复或记录注明不得法的意况。

  下边是后台权限检查办法(_common_logic.py)

 1 #!/usr/bin/env python 2 # coding=utf-8 3  4 from bottle import request 5 from common import web_helper, string_helper 6 from logic import menu_info_logic, positions_logic, manager_operation_log_logic 7  8 def check_user_power(): 9     """检查当前用户是否有访问当前接口的权限"""10     # 读取session11     session = web_helper.get_session()12     # session不存在则表示登录失效了13     if not session:14         web_helper.return_raise(web_helper.return_msg(-404, "您的登录已失效,请重新登录"))15 16     # 获取当前页面原始路由17     rule = request.route.rule18     # 获取当前访问接口方式(get/post/put/delete)19     method = request.method.lower()20     # 获取当前访问的url地址21     url = string_helper.filter_str(request.url, '<|>|%|\'')22 23     # 初始化日志相关变量24     _manager_operation_log_logic = manager_operation_log_logic.ManagerOperationLogLogic()25     ip = web_helper.get_ip()26     manager_id = session.get('id')27     manager_name = session.get('name')28     # 设置访问日志信息29     if method == 'get':30         method_name = '访问'31     else:32         method_name = '进行'33 34     # 获取来路url35     http_referer = request.environ.get('HTTP_REFERER')36     if http_referer:37         # 提取页面url地址38         index = http_referer.find('?')39         if index == -1:40             web_name = http_referer[http_referer.find('/', 8) + 1:]41         else:42             web_name = http_referer[http_referer.find('/', 8) + 1: index]43     else:44         web_name = ''45 46     # 组合当前接口访问的缓存key值47     key = web_name + method + '(' + rule + ')'48     # 从菜单权限缓存中读取对应的菜单实体49     _menu_info_logic = menu_info_logic.MenuInfoLogic()50     model = _menu_info_logic.get_model_for_url51     if not model:52         # 添加访问失败日志53         _manager_operation_log_logic.add_operation_log(manager_id, manager_name, ip, '用户访问[%s]接口地址时,检测没有操作权限' % 54         web_helper.return_raise(web_helper.return_msg(-1, "您没有访问权限1" + key))55 56     # 初始化菜单名称57     menu_name = model.get('name')58     if model.get('parent_id') > 0:59         # 读取父级菜单实体60         parent_model = _menu_info_logic.get_model_for_cache(model.get('parent_id'))61         if parent_model:62             menu_name = parent_model.get('name').replace('列表', '').replace('管理', '') + menu_name63 64     # 从session中获取当前用户登录时所存储的职位id65     positions = positions_logic.PositionsLogic()66     page_power = positions.get_page_power(session.get('positions_id'))67     # 从菜单实体中提取菜单id,与职位权限进行比较,判断当前用户是否拥有访问该接口的权限68     if page_power.find(',' + str(model.get('id', -1)) + ',') == -1:69         # 添加访问失败日志70         _manager_operation_log_logic.add_operation_log(manager_id, manager_name, ip, '用户%s[%s]操作检测没有权限' % (method_name, menu_name))71         web_helper.return_raise(web_helper.return_msg(-1, "您没有访问权限2"))72 73     if not (method == 'get' and model.get('name') in ('添加', '编辑')):74         # 添加访问日志75         _manager_operation_log_logic.add_operation_log(manager_id, manager_name, ip, '用户%s[%s]操作' % (method_name, menu_name))

  那里记录的日志与菜单管理记录相关,假诺菜单项的命名或树列表不规范,则记录的日志大概就会偏向比较大。当然假设您有恐怖症追求完美的话,可自动对它实行改造。比如说在菜单管理中添加多少个字段,用来编排日志表明的,访问那一个页面时平素将表明更新到操作日志表中就能够了,不难方便。而只要对操作内容想要更细致的,也能够在日志表中添加二个字段,将客户端提交的参数全体写入到字段里记录,那样对用户的操作就会更清晰了,当然假如用户更新新闻或文章类内容时,字段值也会比较大。大家能够依据要求来举办对应改造。

  下图为操作日志表记录内容

威尼斯人线上娱乐 5

  后台管理还亟需做个日志查看的页面,接口代码很简单,具体间接看源码,那里也不详细表明了

威尼斯人线上娱乐 6

  对于足够处理,大家实在都知晓使用try…except…实行捕捉,然后记录相当新闻或作对应处理。

  而在接口产生500荒唐时,由于程序在劳务器端执行,服务器环境与地面包车型大巴开发条件有所分化,就很难直观的判定是怎么来头引起的,或然是少上传了某些调用文件,也恐怕是新引用的包没有设置,又或然是代码中写错了代码,也有大概是变量为空引起的尤其,反正恐怕景况万分之多,当接口非凡多时,那几个格外通过很隐蔽,唯有等到该接口被调用时才能窥见,假若拍卖倒霉,开发职员大概会开销不少时刻在那上边。

  当然也有方法是,全数的接口代码都坐落try…except…里面实践,这样发生500的意况会大大收缩,但代码看起来层级多了也倒霉看。对于那种回顾重复统一的代码,python有叁个可怜好用的工具,那便是装饰器,我们能够编写制定二个装饰器方法给接口使用,从而完毕大家想要的指标。

  装饰器完结的规律便是,通过在函数头部引用装饰器,从而使程序执行代码时,先实施装饰器里面包车型大巴代码,然后再调用引用装饰器的函数,最终再回来装饰器执行剩下的代码。简单的精晓便是,原有A函数和装饰器B函数,当A函数引用装饰器B函数以后,A函数实际就改为B函数中被调用的一个艺术,即B函数在实施进程中会调用A函数,执行到位A函数后回到想要的结果再继续执行前面包车型大巴代码

  先上代码,大家在老大操作包中(except_helper.py),添加上边方法:

 1 def exception_handling: 2     """接口异常处理装饰器""" 3     def wrapper(*args, **kwargs): 4         try: 5             # 执行接口方法 6             return func(*args, **kwargs) 7         except Exception as e: 8             # 捕捉异常,如果是中断无返回类型操作,则再执行一次 9             if isinstance(e, HTTPResponse):10                 func(*args, **kwargs)11             # 否则写入异常日志,并返回错误提示12             else:13                 log_helper.error(str14                 return web_helper.return_msg(-1, "操作失败")15     return wrapper

  func正是流入到装饰器方法中的其余办法,由于大家的装饰器是给接口使用,所以进行进度中一贯回到结果,由于大家的代码在实施进度,有时会调用raise来刹车代码执行,那样的话接口方法是从未重临值的,假设选择return来调用方法就会出现至极,所以在第八到10行,会调用方法重复履行贰回接口方法,所以在开发时要留心,唯有对那么些出错开上下班时间索要霎时中断的地点,才使用raise那样保障再也执行接口方法不会招致数据失实。

  当接口方法执行出现万分要抛出500时,这些装饰器就会捕捉到,然后经过调用log_helper.error()方法,将11分写入日志,并发送卓殊通告邮件文告开发职员。对于那么些文告,若是你注册了微信公司号,你能够编写制定对应的代码与信用合作社号实行交接,让你和相关人士在微信上能够实时收到到那多少个推送音信,方便即时发现题目然后处理难点。

  下边是调用方法:

 1 @get('/api/system/department/<id:int>/') 2 @exception_handling 3 def callback: 4     """ 5     获取指定记录 6     """ 7     # 检查用户权限 8     _common_logic.check_user_power() 9 10     _department_logic = department_logic.DepartmentLogic()11     # 读取记录12     result = _department_logic.get_model_for_cache13     if result:14         return web_helper.return_msg(0, '成功', result)15     else:16         return web_helper.return_msg(-1, "查询失败")

  只要求在接口路由和接口方法之间,添加@exception_handling就能够达成接口500时,接收极度邮件推送了。十一分有益好用。

  正文对应的源码下载

版权申明:本文原创公布于新浪,笔者为AllEmpty正文欢迎转发,但未经小编同意必须保留此段注明,且在作品页面显明地点给出原作连接,不然视为侵权。

python开发QQ群:669058475、733466321
作者博客:


相关文章

发表评论

电子邮件地址不会被公开。 必填项已用*标注

网站地图xml地图