More flexelinting.

No bugs so far.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@465 d4fa192b-c00b-0410-8231-f00ffab90ce4

Flexelint harder.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@464 d4fa192b-c00b-0410-8231-f00ffab90ce4

Give this file a flexelinting

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@463 d4fa192b-c00b-0410-8231-f00ffab90ce4

Improve the INCOMPL() macro.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@462 d4fa192b-c00b-0410-8231-f00ffab90ce4

More polishing.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@461 d4fa192b-c00b-0410-8231-f00ffab90ce4

Move sessmtx to cache_vcl.c and call it vcl_mtx.

Clean up naming for consistency while here.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@460 d4fa192b-c00b-0410-8231-f00ffab90ce4

Implement "insert_pass" mode where we cache that an entity must be passed.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@459 d4fa192b-c00b-0410-8231-f00ffab90ce4

Make Pass possible from vcl_hit()

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@458 d4fa192b-c00b-0410-8231-f00ffab90ce4

Enable Id keyword

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@457 d4fa192b-c00b-0410-8231-f00ffab90ce4

First stab at implementing pass in vcl_miss()

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@456 d4fa192b-c00b-0410-8231-f00ffab90ce4

Add explanation for locking, some minor polishing.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@455 d4fa192b-c00b-0410-8231-f00ffab90ce4

Hash on both URL and Host header.  If no host header, hash on URL twice.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@454 d4fa192b-c00b-0410-8231-f00ffab90ce4

Make Pass work again

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@453 d4fa192b-c00b-0410-8231-f00ffab90ce4

Make pipe work again

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@452 d4fa192b-c00b-0410-8231-f00ffab90ce4

Fix CLI "config.load"

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@451 d4fa192b-c00b-0410-8231-f00ffab90ce4

Always insert a backend when vcl is compiled.

Respect '#' comments in script file.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@450 d4fa192b-c00b-0410-8231-f00ffab90ce4

Teach the VCL compiler about default functions, so that users will
not have to copy&paste the default methods if they have no special
requirements for a particular method.

No such facility exists for backends, so a backend description is
now the minumum VCL program.

When we initialize the VCL compiler we hand it a piece of source code
with the "default code", this must include definitions of all methods
named with a "default_" prefix (ie: "default_vcl_recv" etc).

During compilation we always compile this piece of source code in (after
the user supplied VCL source).

If the user did not provide a particular method, the default method is
used instead.  The user can also call the default method directly,
for instance by:

sub vcl_recv {
if (req.http.Expect) {
error;
}
call default_vcl_recv;
}

Later on, this could be expanded to allow other subroutines to be
included in the default VCL for the users calling convenience.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@449 d4fa192b-c00b-0410-8231-f00ffab90ce4

Pause after 'vcl' command

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@448 d4fa192b-c00b-0410-8231-f00ffab90ce4

EOF detection in libevent is buggy ??  Add exit cmd.

Pause after cli until we see "OK"

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@447 d4fa192b-c00b-0410-8231-f00ffab90ce4

add a req command, various adjustments

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@446 d4fa192b-c00b-0410-8231-f00ffab90ce4

Add Pause() and Resume() to pace script execution

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@445 d4fa192b-c00b-0410-8231-f00ffab90ce4

Add a printf when cached is ready for the benefit of varnishtester

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@444 d4fa192b-c00b-0410-8231-f00ffab90ce4

open and close commands

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@443 d4fa192b-c00b-0410-8231-f00ffab90ce4

A vcl keyword for loading a new config

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@442 d4fa192b-c00b-0410-8231-f00ffab90ce4

Add "cli" to tell varnishd things

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@441 d4fa192b-c00b-0410-8231-f00ffab90ce4

If the first char of the serve string is '!', close connection after
sending string.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@440 d4fa192b-c00b-0410-8231-f00ffab90ce4

Add a server facility to act as backend for varnish

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@439 d4fa192b-c00b-0410-8231-f00ffab90ce4

Minimal ability to start and stop a varnishd

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@438 d4fa192b-c00b-0410-8231-f00ffab90ce4

Give 'exit' CLI command some bite.  we may want to be more careful
later on.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@437 d4fa192b-c00b-0410-8231-f00ffab90ce4

Unbuffer stdout/stderr

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@436 d4fa192b-c00b-0410-8231-f00ffab90ce4

Add stub varnishtester program

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@435 d4fa192b-c00b-0410-8231-f00ffab90ce4

Start the cache process automatically, I've gotten tired of typing "start" :-)

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@434 d4fa192b-c00b-0410-8231-f00ffab90ce4

Allow backend to be specified as "host:port" to -b

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@433 d4fa192b-c00b-0410-8231-f00ffab90ce4

add short descriptive comments to each state

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@432 d4fa192b-c00b-0410-8231-f00ffab90ce4

Distribute code from FetchSession almost correctly

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@431 d4fa192b-c00b-0410-8231-f00ffab90ce4

Add "insert_pass" action in VCL

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@430 d4fa192b-c00b-0410-8231-f00ffab90ce4

Make things work again by stuffing the old functions into the new
state engine.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@429 d4fa192b-c00b-0410-8231-f00ffab90ce4

This commit breaks warnish temporarily:

Insert the new master state engine.

A dot(1) graph is embedded in the source code and can be extracted
with:

sed -n '/^DOT/s///p' cache_center.c | dot -Tps > /tmp/_.ps

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@428 d4fa192b-c00b-0410-8231-f00ffab90ce4

Add enum for major procesing steps

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@427 d4fa192b-c00b-0410-8231-f00ffab90ce4

Start centralizing the flow of requests through varnish so we get
one source file with the highest level of policy.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@426 d4fa192b-c00b-0410-8231-f00ffab90ce4

Make -b and -c less nonsensical when not specified

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@425 d4fa192b-c00b-0410-8231-f00ffab90ce4

Pipe requests which come with an Expect header.

XXX: document that
error 417 "expectation failed"
might be a more sensible policy.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@424 d4fa192b-c00b-0410-8231-f00ffab90ce4

Document -b and -c, and bump date.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@423 d4fa192b-c00b-0410-8231-f00ffab90ce4

Add -b[ackend] and -c[lient] generic options to logtailers

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@422 d4fa192b-c00b-0410-8231-f00ffab90ce4

Add 500 messages.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@421 d4fa192b-c00b-0410-8231-f00ffab90ce4

Split http_Dissect() into http_DissectRequest() and http_DissectResponse()

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@420 d4fa192b-c00b-0410-8231-f00ffab90ce4

Add cross-references and a commented-out STANDARDS section.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@419 d4fa192b-c00b-0410-8231-f00ffab90ce4

Add a note to update varnishlog(1) whenever this list changes.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@418 d4fa192b-c00b-0410-8231-f00ffab90ce4

Add cross-references.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@417 d4fa192b-c00b-0410-8231-f00ffab90ce4

Document the -C, -I, -X, -i, -x options.
Add a list of log entry tags.
Add cross-references to varnishd(1) and varnishstat(1).

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@416 d4fa192b-c00b-0410-8231-f00ffab90ce4

Add varnishtop log-tailer.

Try these:

varnishtop -i url

varhishtop -i header -C -I '^user-agent:'

varhishtop -i header -C -I '^user-agent:' -X MSIE

varhishtop -i header -C -I '^user-agent:.*MSIE'

varhishtop -i header -C -I '^user-agent:.*java'

You can also run them on the logfiles from the live test:

zcat _vlog21.gz | varnishtop -r - -i header ...

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@415 d4fa192b-c00b-0410-8231-f00ffab90ce4

Fix so that both -I and -X can be specified

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@414 d4fa192b-c00b-0410-8231-f00ffab90ce4

Implement -C, -I <regex> and -X <regex> generic options

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@413 d4fa192b-c00b-0410-8231-f00ffab90ce4

Add tag names array to libvarnishapi, everybody is going to need it.

Implement -i tag[,tag ...] and -x tag[,tag ...] generic arguments.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@412 d4fa192b-c00b-0410-8231-f00ffab90ce4

Improve libvarnishapi interface to shared memory:

Add function VSL_OpenStats() which directly returns a pointer
to the varnish_stats structure.

Add opaque VSL_data structure as handle to the log-tailer functions.

Add generic argument parsing function for all log-tailers.

Add support for generic "-r <file>" option.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@411 d4fa192b-c00b-0410-8231-f00ffab90ce4

More statistics about worker threads.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@410 d4fa192b-c00b-0410-8231-f00ffab90ce4

Rewrite the worker thread pool code.

Assign prefix WRK to the worker pool.

Introduce a struct workreq since the prefetcher (when it happens) will
not have a session to pass in.

The worker threads get a cond_var each and are hung from a list in
most recently used order.

When a request is queued and the worker thread list is not empty,
tickle the cond_var of the first one.

If no threads were availble the max number of threads is not reached,
try to start another worker thread.

If the max was reached or the start filed (likely due to out of memory)
indicate overflow and let the existing pool deal with it.

Create only the minimum requested number of threads initially.

Allow specification of the timeout before a dynamic worker thread commits
suicide to be specified with -w.

Default parameters are -w1,UINT_MAX,10 {min, max, timeout}

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@409 d4fa192b-c00b-0410-8231-f00ffab90ce4

use explicit eventbase.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@408 d4fa192b-c00b-0410-8231-f00ffab90ce4

Don't ever set current_base in our version of libevent in order to flush
out any bugs it might cause.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@407 d4fa192b-c00b-0410-8231-f00ffab90ce4

Dump errno and strerror in assert

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@406 d4fa192b-c00b-0410-8231-f00ffab90ce4

Rework the "connect to backend logic".

Avoid calling getaddrinfo() for every connect by catching the result
in the backend structure.

Minimize number of socket/connect calls by caching the last good
address in the backend structure.

If all addresses in the cached getaddrinfo() result fails, call
getaddrinfo() again (to catch DNS changes) and try the list again.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@405 d4fa192b-c00b-0410-8231-f00ffab90ce4

Move sockaddr->ascii conversion to tcp.c

shmlog both ends of backend connections.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@404 d4fa192b-c00b-0410-8231-f00ffab90ce4

Be more consistent.

cache_shmlog.c contains stuff for both cache and mgt, so remove the
cache_ prefix.

Rename cache_shmlog.h to common.h and put joint stuff there.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@403 d4fa192b-c00b-0410-8231-f00ffab90ce4

put backend session linkage in shmemlog for pipe and pass

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@402 d4fa192b-c00b-0410-8231-f00ffab90ce4

Polish HTTP reception a little bit

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@401 d4fa192b-c00b-0410-8231-f00ffab90ce4

Drop the max length of first line, it's too expensive to enforce.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@400 d4fa192b-c00b-0410-8231-f00ffab90ce4

Fix cosmetic warning

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@399 d4fa192b-c00b-0410-8231-f00ffab90ce4

Silence cosmetic warning.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@398 d4fa192b-c00b-0410-8231-f00ffab90ce4

Fix cosmetic warnings

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@397 d4fa192b-c00b-0410-8231-f00ffab90ce4

Fix a bunch warnings, all cosmetic.

I'm using __unused for now, if we need to use something different
we can do a find/replace.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@396 d4fa192b-c00b-0410-8231-f00ffab90ce4

Silence some warnings

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@395 d4fa192b-c00b-0410-8231-f00ffab90ce4

Allocate struct http as part of the session allocation.

Remove http_New() and http_Delete()

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@394 d4fa192b-c00b-0410-8231-f00ffab90ce4

Add heritage.mem_http_headers which is the maximum number of headers
we recognize.

Add http_Init() which initializes struct http given sufficient space.

Respect heritage mem_* values in http_New() (while we still have it)

Allocate backend connections (vbe_conn) with super allocation with
space for http and workspace.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@393 d4fa192b-c00b-0410-8231-f00ffab90ce4

Put three memory allocation hints into heritage:

mem_http_1_line (512)
Maximum length of the reqeust/response line of a HTTP message
There is no point in filling the entire buffer with junk if
we get a preposterously long first line.
mem_http_header (4096)
Maximum length of entire HTTP header.  If we overflow this
we return 400.
mem_workspace (currently 0)
In the future this will be the space we use for constructing
headers to send and edits done from VCL.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@392 d4fa192b-c00b-0410-8231-f00ffab90ce4

Take the vbe_conn (backend connection) structure out of the closet.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@391 d4fa192b-c00b-0410-8231-f00ffab90ce4

Turn a comment into english

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@390 d4fa192b-c00b-0410-8231-f00ffab90ce4

More sensible order of pointers

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@389 d4fa192b-c00b-0410-8231-f00ffab90ce4

Don't pass cache-control through.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@388 d4fa192b-c00b-0410-8231-f00ffab90ce4

Add a -h opt which modifies -o to remove "trivial" entries.

Trivial are
{GET,HEAD} which gets a hit and returns 200
{GET,HEAD} which gets a miss, fetches, inserts and returns 200

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@387 d4fa192b-c00b-0410-8231-f00ffab90ce4

Don't use braces where they aren't needed.
Let automake know about config.h.
Bump version number to mark that we have passed the first live test.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@386 d4fa192b-c00b-0410-8231-f00ffab90ce4

List header files so they are included in the distribution tarball.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@385 d4fa192b-c00b-0410-8231-f00ffab90ce4

Use the modern version of AM_INIT_AUTOMAKE, allowing automake to deduce the
correct distribution name.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@384 d4fa192b-c00b-0410-8231-f00ffab90ce4

A few edits for FlexeLint

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@383 d4fa192b-c00b-0410-8231-f00ffab90ce4

Sanitize #includes a bit in the cache process by moving fundamental
#includes to cache.h

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@382 d4fa192b-c00b-0410-8231-f00ffab90ce4

Silence a bogus warning

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@381 d4fa192b-c00b-0410-8231-f00ffab90ce4

Move struct http into cache.h

The original reasoning for having it private to cache_http.c was
to avoid pollution with event.h related structures but since that
pollution is happening other ways anyway, the cost is too high.

Include pthread.h, sys/time.h, and event.h from cache.h

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@380 d4fa192b-c00b-0410-8231-f00ffab90ce4

Add --enable-debugging-symbols which enables debugging sysmbols and disables
inlining and builtins.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@379 d4fa192b-c00b-0410-8231-f00ffab90ce4

Fix "set backend.port".

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@378 d4fa192b-c00b-0410-8231-f00ffab90ce4

My version.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@377 d4fa192b-c00b-0410-8231-f00ffab90ce4

Expand keywords.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@376 d4fa192b-c00b-0410-8231-f00ffab90ce4

Close gracefully in pipe mode

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@374 d4fa192b-c00b-0410-8231-f00ffab90ce4

Set SO_LINGER to zero

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@373 d4fa192b-c00b-0410-8231-f00ffab90ce4

Tell why bind(2) fails

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@372 d4fa192b-c00b-0410-8231-f00ffab90ce4

Pipe anything different from HEAD & GET

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@371 d4fa192b-c00b-0410-8231-f00ffab90ce4

Don't filter headers in Pipe mode

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@370 d4fa192b-c00b-0410-8231-f00ffab90ce4

Fix pipe mode

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@369 d4fa192b-c00b-0410-8231-f00ffab90ce4

Remove debugging printf

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@368 d4fa192b-c00b-0410-8231-f00ffab90ce4

Time idle TCP connections out after 30 seconds

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@367 d4fa192b-c00b-0410-8231-f00ffab90ce4

Dump our buffer as Debug if we have HTTP header trouble.

Issue 400 for HTTP header buffer overflow.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@366 d4fa192b-c00b-0410-8231-f00ffab90ce4

Strvis(3) debug data.

git-svn-id: svn+ssh://projects.linpro.no/svn/varnish/trunk@365 d4fa192b-c00b-0410-8231-f00ffab90ce4