是否可以阻止 Google App Engine 上的 DoSing？

Question

我正在考虑为 Google App Engine 开发一个应用程序，它不应该获得太多流量。我真的不想为超出免费配额而付费。然而，似乎很容易通过应用程序过载和超出配额来导致拒绝服务攻击。是否有任何方法可以防止或增加超过免费配额的难度？例如，我知道我可以限制来自 IP 的请求数量（使其更难超出 CPU 配额），但是有什么方法可以使其更难超出请求或带宽配额吗？

Answer 1

没有内置工具可以防止 DoS。如果您使用 java 编写 Google Apps，那么您可以使用 service.FloodFilter 筛选。下面的代码将在您的任何 Servlet 之前执行。

package service;

import java.io.IOException;
import java.util.HashMap;
import java.util.Map;

import javax.servlet.Filter;
import javax.servlet.FilterChain;
import javax.servlet.FilterConfig;
import javax.servlet.ServletContext;
import javax.servlet.ServletException;
import javax.servlet.ServletRequest;
import javax.servlet.ServletResponse;
import javax.servlet.http.HttpServletRequest;


/**
 * 
 * This filter can protect web server from simple DoS attacks
 * via request flooding.
 * 
 * It can limit a number of simultaneously processing requests
 * from one ip and requests to one page.
 *
 * To use filter add this lines to your web.xml file in a <web-app> section.
 * 
    <filter>
        <filter-name>FloodFilter</filter-name>
        <filter-class>service.FloodFilter</filter-class>
        <init-param>
            <param-name>maxPageRequests</param-name>
            <param-value>50</param-value>
        </init-param>
        <init-param>
            <param-name>maxClientRequests</param-name>
            <param-value>5</param-value>
        </init-param>
        <init-param>
            <param-name>busyPage</param-name>
            <param-value>/busy.html</param-value>
        </init-param>
    </filter>

    <filter-mapping>
        <filter-name>JSP flood filter</filter-name>
        <url-pattern>*.jsp</url-pattern>
    </filter-mapping>
 *  
 *  PARAMETERS
 *  
 *  maxPageRequests:    limits simultaneous requests to every page
 *  maxClientRequests:  limits simultaneous requests from one client (ip)
 *  busyPage:           busy page to send to client if the limit is exceeded
 *                      this page MUST NOT be intercepted by this filter
 *  
 */
public class FloodFilter implements Filter
{
    private Map <String, Integer> pageRequests;
    private Map <String, Integer> clientRequests;

    private ServletContext context;
    private int maxPageRequests = 50;
    private int maxClientRequests = 10;
    private String busyPage = "/busy.html";


    public void doFilter( ServletRequest request, ServletResponse response, FilterChain chain ) throws IOException, ServletException
    {
        String page = null;
        String ip = null;

        try {
            if ( request instanceof HttpServletRequest ) {
                // obtaining client ip and page URI without parameters & jsessionid
                HttpServletRequest req = (HttpServletRequest) request;
                page = req.getRequestURI();

                if ( page.indexOf( ';' ) >= 0 )
                    page = page.substring( 0, page.indexOf( ';' ) );

                ip = req.getRemoteAddr();

                // trying & registering request
                if ( !tryRequest( page, ip ) ) {
                    // too many requests in process (from one client or for this page) 
                    context.log( "Flood denied from "+ip+" on page "+page );
                    page = null;
                    // forwarding to busy page
                    context.getRequestDispatcher( busyPage ).forward( request, response );
                    return;
                }
            }

            // requesting next filter or servlet
            chain.doFilter( request, response );
        } finally {
            if ( page != null )
                // unregistering the request
                releaseRequest( page, ip );
        }
    }


    private synchronized boolean tryRequest( String page, String ip )
    {
        // checking page requests
        Integer pNum = pageRequests.get( page );

        if ( pNum == null )
            pNum = 1;
        else {
            if ( pNum > maxPageRequests )
                return false;

            pNum = pNum + 1;
        }

        // checking client requests
        Integer cNum = clientRequests.get( ip );

        if ( cNum == null )
            cNum = 1;
        else {
            if ( cNum > maxClientRequests )
                return false;

            cNum = cNum + 1;
        }

        pageRequests.put( page, pNum );
        clientRequests.put( ip, cNum );

        return true;
    }


    private synchronized void releaseRequest( String page, String ip )
    {
        // removing page request
        Integer pNum = pageRequests.get( page );

        if ( pNum == null ) return;

        if ( pNum <= 1 )
            pageRequests.remove( page );
        else
            pageRequests.put( page, pNum-1 );

        // removing client request
        Integer cNum = clientRequests.get( ip );

        if ( cNum == null ) return;

        if ( cNum <= 1 )
            clientRequests.remove( ip );
        else
            clientRequests.put( ip, cNum-1 );
    }


    public synchronized void init( FilterConfig config ) throws ServletException
    {
        // configuring filter
        this.context = config.getServletContext();
        pageRequests = new HashMap <String,Integer> ();
        clientRequests = new HashMap <String,Integer> ();
        String s = config.getInitParameter( "maxPageRequests" );

        if ( s != null ) 
            maxPageRequests = Integer.parseInt( s );

        s = config.getInitParameter( "maxClientRequests" );

        if ( s != null ) 
            maxClientRequests = Integer.parseInt( s );

        s = config.getInitParameter( "busyPage" );

        if ( s != null ) 
            busyPage = s;
    }


    public synchronized void destroy()
    {
        pageRequests.clear();
        clientRequests.clear();
    }
}

• 从： http://forums.sun.com/thread.jspa?threadID=5125779&tstart=13545

如果您使用的是 python，那么您可能必须推出自己的过滤器。

Answer 2

我不确定是否可行，但 App Engine常见问题解答表示如果你能证明它是DOS攻击，那么他们将退还与攻击相关的任何费用。

Answer 3

看起来他们现在有一个基于IP地址的过滤器可用于Python和Java（我知道这是一个旧线程，但它在Google搜索中仍然很高）。

https://developers.google.com/appengine/docs/python/配置/ DOS

Answer 4

始终可以使用在App Engine应用程序前提供拒绝服务保护功能的服务。例如，Cloudflare提供了备受尊敬的服务 https://www.cloudflare.com/waf/ ，还有其他人。这是我的理解（免责声明：我没有亲自使用过该服务）这些功能可以在免费计划中找到。

在应用程序本身中构建基于memcache的速率限制实现也相当容易。这是我从谷歌搜索此方法获得的第一个打击： http://blog.simonwillison.net /后/ 57956846132 / ratelimitcache 。这种机制是合理的，并且可以节省成本，因为共享内存缓存使用可能就足够并且是免费的。此外，走这条路线可以控制旋钮。缺点是应用程序本身必须处理HTTP请求并决定允许或拒绝它，因此可能需要花费成本（或[免费]配额耗尽）。

完全披露：我在Google App上工作，与Cloudflare或Simon Willison没有关联。

Answer 5

最近发布了 GAE防火墙，旨在取代以前相当有限的 DoS保护服务 。

它支持通过（REST）Admin API对防火墙规则进行编程更新： apps.firewall.ingressRules ，可以与其他答案中描述的DoS检测的应用程序内部逻辑组合。不同之处在于，一旦规则被部署，违规请求将不再产生费用，因为它们不再到达应用程序，因此不需要应用程序内过滤。